Aktivieren von Computer Vision für die mobile Automatisierung

Mit Computer Vision können Sie das neuronale Netzwerk von UiPath verwenden, um UI-Elemente zu identifizieren und mit ihnen über Roboter zu interagieren, wobei eine menschliche Interaktion simuliert wird. Im Kontext von Mobile Automation erhöht die Computer Vision-Funktion die Anzahl der Zielelemente, die Sie identifizieren können, sodass Sie UI-Elemente automatisieren können, die ansonsten schwieriger zu identifizieren und zu automatisieren sind.

Die folgende Tabelle zeigt die Aktivitäten, die Computer Vision verwenden können:

Aktivität	Beschreibung
Text erhalten (Get Text)	Extrahiert den Text aus einem angegebenen UI-Element.
Text einstellen (Set Text)	Gibt den angegebenen Text in ein Ziel-UI-Element ein.
Tap	Gibt eine boolesche Variable zurück, die angibt, ob ein bestimmtes UI-Element vorhanden ist.
Wischen	Der Bildschirm wird in eine bestimmte Richtung und für eine bestimmte Anzahl von Malen gewischt.
Element vorhanden (Element Exists)	Gibt eine boolesche Variable zurück, die angibt, ob ein bestimmtes UI-Element vorhanden ist.

Um mobile UI-Elemente mit Computer Vision zu erkennen, müssen Sie Ihren Computer Vision-Server entweder für Cloud- oder lokale Server einrichten. Sie können den Computer Vision-Server im Menü Projekteinstellungen des Projekts einrichten, in dem Sie arbeiten.

Der Konfigurationsabschnitt von Computer Vision ist in drei weitere Unterabschnitte unterteilt:

• Server – Die URL für den Typ des Computer Vision-Servers, mit dem Sie eine Verbindung herstellen möchten: Cloud oder lokal. Der Standardwert für die Serverfelder Ausführungswert und Debug-Wert ist die Cloud-Instanz von Computer Vision: https://cv.uipath.com.
• API-Schlüssel – der API-Schlüssel von Computer Vision, spezifisch für Ihre Organisation.
• Use Local Server - use a local Computer Vision server.

Bekannte Einschränkung

Computer Vision für die mobile Automatisierung unterstützt die CJK-Sprachen (Chinesisch, Japanisch, Koreanisch) nicht.