Computer Vision-Aktivitäten

Dieser Abschnitt enthält mit Computer Vision verwandte Aktivitäten im Paket UiPath.UIAutomation.Activities.

• CV Screen Scope
• CV Click
• CV Element Exists
• CV Get Text
• CV Highlight
• CV Hover
• CV Type Into
• CV aktualisieren
• CV Dropdown Select
• CV Check
• CV Extract Table

Wichtig: Aufgrund der Tatsache, dass die Computer Vision-Aktivitäten in 19.10 in das UI-Automatisierungspaket verschoben wurden, wird beim Installieren des UI-Automatisierungspakets v19.10.1 in einem Projekt, das bereits eine Version des Computer Vision-Pakets enthält, ein Fehler ausgegeben.

Hinweis: Die Computer Vision-Aktivitäten sind nicht mit Windows 7 kompatibel.

Die Computer Vision-Aktivitäten enthalten veränderte grundlegende UIAutomation-Aktivitäten wie Click, Type Intooder Get Text. Der Hauptunterschied zwischen den Computer Vision-Aktivitäten und ihren klassischen Pendants besteht in der Verwendung des neuronalen Netzwerks für Computer Vision, das von unserer hauseigenen Abteilung für Machine Learning entwickelt wurde. Das neuronale Netzwerk kann UI-Elemente wie Schaltflächen, Texteingabefelder oder Kontrollkästchen identifizieren, ohne Selektoren zu verwenden.

Diese Aktivitäten werden hauptsächlich für die Automatisierung in virtuellen Desktopumgebungen wie Citrix-Maschinen entwickelt. Sie umgehen das Problem von nicht vorhandenen oder unzuverlässigen Selektoren, da sie Bilder des Fensters, das Sie automatisieren, an das Neuralnetzwerk senden, wo es analysiert wird und alle UI-Elemente identifiziert und beschriftet werden. Intelligente Anker werden verwendet, um die genaue Position des UI-Elements zu bestimmen, mit dem Sie interagieren, um sicherzustellen, dass die Aktion, die Sie ausführen möchten, erfolgreich ist.