activities
latest
false
- Überblick
- UI-Automatisierung (UI Automation)
- Mit UI-Automatisierung automatisierte Anwendungen und Technologien
- Projektkompatibilität
- UI-ANA-016 – URL zum Öffnen eines Browsers abrufen
- UI-ANA-017 – ContinueOnError True
- UI-ANA-018 – OCR-/Bildaktivitäten auflisten
- UI-DBP-006 – Containernutzung
- UI-DBP-013 – Falscher Gebrauch von Excel-Automatisierung
- UI-DBP-030 – Verwendung unzulässiger Variablen in Selektoren
- UI-PRR-001 – Klick simulieren
- UI-PRR-002 – Typ simulieren
- UI-PRR-003 – Offener Anwendungsmissbrauch
- UI-PRR-004 – Hartcodierte Verzögerungen
- UI-REL-001 – Große IDX in Selektoren
- UI-SEC-004 – Selektor-E-Mail-Daten
- UI-SEC-010 – App-/URL-Einschränkungen
- UI-USG-011 – Nicht zulässige Attribute
- UX-SEC-010 – App-/URL-Einschränkungen
- UX-DBP-029 – Unsichere Kennwortnutzung
- UI-PST-001 – Prüfungsprotokollebene in Projekteinstellungen
- UiPath-Browsermigrationstool
- Clippingbereich
- Computer Vision Recorder
- Aktivitätenindex
- Aktivieren (Activate)
- Ankerbasis (Anchor Base)
- Browser anhängen (Attach Browser)
- Fenster anhängen (Attach Window)
- Benutzeingabe blockieren (Block User Input)
- Textfeld (Callout)
- Prüfen (Check)
- Klicken (Click)
- Bild anklicken (Click Image)
- Bild-Trigger anklicken (Click Image Trigger)
- OCR-Text anklicken (Click OCR Text)
- Text anklicken (Click Text)
- Trigger anklicken (Click Trigger)
- Anwendung schließen (Close Application)
- Registerkarte schließen (Close Tab)
- Fenster schließen (Close Window)
- Kontextbewusster Anker
- Ausgewählten Text kopieren (Copy Selected Text)
- Element Attribute Change Trigger
- Element vorhanden (Element Exists)
- Elementumfang (Element Scope)
- Element State Change Trigger
- Export UI Tree
- Strukturierte Daten extrahieren (Extract Structured Data)
- Untergeordnete Elemente finden (Find Children)
- Element finden (Find Element)
- Bild finden (Find Image)
- Bildübereinstimmung finden (Find Image Matches)
- OCR-Textposition finden (Find OCR Text Position)
- Relatives Element finden (Find Relative Element)
- Textposition finden (Find Text Position)
- Aktives Fenster abrufen (Get Active Window)
- Vorgänger-Element erhalten (Get Ancestor)
- Attribut erhalten (Get Attribute)
- Ereignisinfo erhalten (Get Event Info)
- Aus Zwischenablage erhalten (Get From Clipboard)
- Volltext erhalten (Get Full Text)
- OCR-Text erhalten (Get OCR Text)
- Passwort erhalten (Get Password)
- Position erhalten (Get Position)
- Quellelement erhalten (Get Source Element)
- Text erhalten (Get Text)
- Sichtbaren Text erhalten (Get Visible Text)
- Zurück (Go Back)
- Weiter (Go Forward)
- Zur Startseite (Go Home)
- Google Cloud Vision OCR
- Fenster ausblenden (Hide Window)
- Markieren (Highlight)
- Hotkey-Trigger (Hotkey Trigger)
- Darauf zeigen (Hover)
- Auf Bild zeigen (Hover Image)
- Auf OCR-Text zeigen (Hover OCR Text)
- Text beim Darauf zeigen (Hover Text)
- Bild vorhanden (Image Exists)
- Auf Bildschirm anzeigen (Indicate On Screen)
- .NET-Code einfügen
- Inject Js Script
- ActiveX-Methode aufrufen
- Tastendruck-Trigger (Key Press Trigger)
- Bild laden (Load Image)
- Fenster maximieren (Maximize Window)
- Microsoft Azure ComputerVision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- Fenster minimieren (Minimize Window)
- Ereignisse überwachen (Monitor Events)
- Maus-Trigger (Mouse Trigger)
- Fenster verschieben (Move Window)
- Navigieren zu (Navigate To)
- OCR-Text vorhanden (OCR Text Exists)
- Auf Element erscheinen (On Element Appear)
- Auf Element verschwinden (On Element Vanish)
- Auf Bild erscheinen (On Image Appear)
- Auf Bild verschwinden (On Image Vanish)
- Anwendung öffnen (Open Application)
- Browser öffnen (Open Browser)
- Browser aktualisieren (Refresh Browser)
- Benutzerereignis wiedergeben (Replay User Event)
- Fenster wiederherstellen (Restore Window)
- Bild speichern (Save Image)
- Objekt auswählen (Select Item)
- Mehrere Objekte auswählen (Select Multiple Items)
- Hotkey senden (Send Hotkey)
- Ausschneidebereich einstellen (Set Clipping Region)
- Fokus legen auf (Set Focus)
- Text einstellen (Set Text)
- Auf Zwischenablage setzen (Set To Clipboard)
- Web-Attribut setzen (Set Web Attribute)
- Fenster anzeigen (Show Window)
- Prozess starten (Start Process)
- System-Trigger (System Trigger)
- Screenshot anfertigen (Take Screenshot)
- Tesseract OCR
- Text vorhanden (Text Exists)
- Tooltip
- Eingeben in (Type Into)
- Sicheren Text eingeben (Type Secure Text)
- Vordergrund verwenden
- Attribut abwarten (Wait Attribute)
- Warten, bis Element verschwindet (Wait Element Vanish)
- Warten, bis Bild verschwindet (Wait Image Vanish)
- Application event trigger
- Check/Uncheck
- Check App State
- Check Element
- Klicken (Click)
- Click Event Trigger
- Ziehen und Ablegen
- Extract Table Data
- For Each UI Element
- Attribut erhalten (Get Attribute)
- Attribut abrufen (generisch)
- Get Browser Data
- Text erhalten (Get Text)
- Get URL
- Zu URL wechseln
- Markieren (Highlight)
- Darauf zeigen (Hover)
- Inject Js Script
- Tastenkombinationen
- Keypress Event Trigger
- Mouse Scroll
- Navigate Browser
- Objekt auswählen (Select Item)
- Set Browser Data
- Set Runtime Browser
- Text einstellen (Set Text)
- Screenshot anfertigen (Take Screenshot)
- Eingeben in (Type Into)
- Use Application/Browser
- Anhängen
- Prüfen (Check)
- Klicken (Click)
- Ziehen und Ablegen
- Daten extrahieren
- Attribut erhalten (Get Attribute)
- GetChildren
- GetRuntimeTarget
- GetText
- Get URL
- GoToUrl
- Markieren (Highlight)
- Darauf zeigen (Hover)
- IsEnabled
- Tastaturkürzel (Keyboard Shortcut)
- Mouse Scroll
- Offen
- Objekt auswählen (Select Item)
- Screenshot anfertigen (Take Screenshot)
- Eingeben in (Type Into)
- Wartestatus
- Führen Sie eine Browsersuche durch und rufen Sie Ergebnisse mithilfe von UIAutomation-APIs ab
- Web-Browsing
- Finden von Bildern
- Klicken auf Bilder
- Auslösen und Überwachen von Ereignissen
- Erstellen und Überschreiben von Dateien
- HTML-Seiten: Extrahieren und Bearbeiten von Informationen
- Bearbeiten von Fenstern
- Automatisierte Listenauswahl
- Finden und Bearbeiten von Fensterelementen
- Verwalten der Textautomatisierung
- Laden und Verarbeiten von Bildern
- Verwalten von mausaktivierten Aktionen
- Automatisieren der Anwendungslaufzeit
- Automatisierte Ausführung einer lokalen Anwendung
- Browsernavigation
- Web-Automatisierung
- Beispiel für Trigger Scope
- Aktivieren der Unterstützung für die UI-Automatisierung in DevExpress
- Computer Vision Local Server
- Mobile Automation
- Über die Architektur der Automatisierung von Mobilgeräten
- Aktivieren von Computer Vision für die mobile Automatisierung
- Projektkompatibilität
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Install App
- Manage Current App
- Manage Other App
- DeepLink öffnen
- Open URL
- Mobile Device Connection
- Richtungswechsel
- Muster zeichnen
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Screenshot anfertigen (Take Screenshot)
- Take Screenshot Part
- Element vorhanden (Element Exists)
- Execute Command
- Attribut erhalten (Get Attribute)
- Get Selected Item
- Text erhalten (Get Text)
- Set Selected Item
- Text einstellen (Set Text)
- Wischen
- Tap
- Type Text
- Terminal
- Versionshinweise
- Über das Terminal-Aktivitätspaket
- Projektkompatibilität
- Best Practices
- Find Text
- Get Color At Position
- Get Cursor Position
- Feld erhalten (Get Field)
- Feld an Position erhalten (Get Field at Position)
- Bildschirmbereich erhalten (Get Screen Area)
- Text erhalten (Get Text)
- Text an Position erhalten (Get Text at Position)
- Cursor bewegen (Move Cursor)
- Move Cursor to Text
- Strg-Taste senden (Send Control Key)
- Tasten senden (Send Keys)
- Sichere Tasten senden (Send Keys Secure)
- Feld setzen (Set Field)
- Feld an Position setzen (Set Field at Position)
- Terminalsitzung (Terminal Session)
- Warte auf Feldtext (Wait Field Text)
- Warte auf Bildschirmtext (Wait Screen Text)
- Warte auf Text an Position (Wait Text at Position)
Wichtig :
Bitte beachten Sie, dass dieser Inhalt teilweise mithilfe von maschineller Übersetzung lokalisiert wurde.
Es kann 1–2 Wochen dauern, bis die Lokalisierung neu veröffentlichter Inhalte verfügbar ist.
UIAutomation-Aktivitäten
Letzte Aktualisierung 25. März 2025
Aktivieren von Computer Vision für die mobile Automatisierung
Mit Computer Vision können Sie das neuronale Netzwerk von UiPath verwenden, um UI-Elemente zu identifizieren und mit ihnen über Roboter zu interagieren, wobei eine menschliche Interaktion simuliert wird. Im Kontext von Mobile Automation erhöht die Computer Vision-Funktion die Anzahl der Zielelemente, die Sie identifizieren können, sodass Sie UI-Elemente automatisieren können, die ansonsten schwieriger zu identifizieren und zu automatisieren sind.
Die folgende Tabelle zeigt die Aktivitäten, die Computer Vision verwenden können:
| Aktivität | Beschreibung |
|---|---|
| Text erhalten (Get Text) | Extrahiert den Text aus einem angegebenen UI-Element. |
| Text einstellen (Set Text) | Gibt den angegebenen Text in ein Ziel-UI-Element ein. |
| Tap | Gibt eine boolesche Variable zurück, die angibt, ob ein bestimmtes UI-Element vorhanden ist. |
| Wischen | Der Bildschirm wird in eine bestimmte Richtung und für eine bestimmte Anzahl von Malen gewischt. |
| Element vorhanden (Element Exists) | Gibt eine boolesche Variable zurück, die angibt, ob ein bestimmtes UI-Element vorhanden ist. |
Um mobile UI-Elemente mit Computer Vision zu erkennen, müssen Sie Ihren Computer Vision-Server entweder für Cloud- oder lokale Server einrichten. Sie können den Computer Vision-Server im Menü Projekteinstellungen des Projekts einrichten, in dem Sie arbeiten.
Der Konfigurationsabschnitt von Computer Vision ist in drei weitere Unterabschnitte unterteilt:
- Server – Die URL für den Typ des Computer Vision-Servers, mit dem Sie eine Verbindung herstellen möchten: Cloud oder lokal. Der Standardwert für die Serverfelder Ausführungswert und Debug-Wert ist die Cloud-Instanz von Computer Vision:
https://cv.uipath.com. - API-Schlüssel – der API-Schlüssel von Computer Vision, spezifisch für Ihre Organisation.
- Lokalen Server verwenden – Verwenden Sie einen lokalen Computer Vision-Server.
Um eine Verbindung mit einem Computer Vision-Cloud-Server herzustellen, können Sie sich mit einem API-Schlüssel oder einem Benutzertoken authentifizieren.
- Wechseln Sie im Projekt -Panel zu Projekteinstellungen, Mobile Automation, und fokussieren Sie dann auf den Abschnitt Computer Vision .
- Geben Sie unter Server in den Feldern Ausführungswert und Debug-Wert die URL eines Computer Vision-Cloudservers ein.
https://cv.uipath.comist der Standardwert.Informationen zum Ändern des Endpunkts finden Sie unter Öffentliche Endpunkte.
- Geben Sie den Computer Vision API-Schlüssel Ihrer Organisation ein. Unter API-Schlüssel erfahren Sie, wie Sie Ihren Computer Vision-API-Schlüssel erhalten.
Unter Authentifizierung erfahren Sie, wie Sie sich beim Computer Vision-Server authentifizieren, damit Sie die entsprechenden Funktionen in Ihrem Projekt verwenden können.
Informationen zum Konfigurieren Ihres Computer Vision-Cloud-Servers finden Sie in den folgenden Ressourcen:
Führen Sie die folgenden Schritte aus, um einen Computer Vision Local Server zu verwenden:
- Install the
UiPath.ComputerVision.LocalServerpackage. - Wechseln Sie im Projekt -Panel zu Projekteinstellungen, Mobile Automation, und fokussieren Sie dann auf den Abschnitt Computer Vision .
- Im Feld Server:
- Wenn Sie eine MobileAutomation.Activities-Version bis einschließlich 24.12-preview verwenden: Geben Sie eine Computer Vision-Server-URL in die Felder Ausführungswert und Debugwert ein.
Warnung: Normalerweise ist dieser Schritt für einen Computer Vision Local Server nicht erforderlich, doch aufgrund eines aktuellen bekannten Problems wird eine Computer Vision-Server-URL benötigt, damit der Computer Vision Local Server für die mobile Automatisierung wie erwartet funktioniert.Der Standardwert des Computer Vision-Servers ist
https://cv.uipath.com.Weitere Informationen zu den verfügbaren öffentlichen Computer Vision-Endpunkten, die Sie verwenden können, finden Sie unter Öffentliche Endpunkte.
- Wenn Sie die MobileAutomation.Activities-Version 25.2.0-preview oder höher verwenden: Sie können diesen Schritt überspringen.
- Wenn Sie eine MobileAutomation.Activities-Version bis einschließlich 24.12-preview verwenden: Geben Sie eine Computer Vision-Server-URL in die Felder Ausführungswert und Debugwert ein.
- Legen Sie unter Lokalen Server verwenden die Ausführungs- und Debug-Werte auf
Truefest.
