- Vue d'ensemble (Overview)
- Automatisation de l'interface utilisateur
- Applications et technologies automatisées avec UI Automation
- UI-ANA-016 - Extraire l'URL ouverte du navigateur
- UI-ANA-017 - ContinuerSurErreur (ContinueOnError) True
- UI-ANA-018 - Répertorier les activités d'OCR/d'image
- UI-DBP-006 - Utilisation du conteneur
- UI-DBP-013 - Utilisation abusive de l’automatisation Excel
- UI-DBP-030 - Utilisation de variables interdites dans les sélecteurs
- ST-DBP-021 - Délai d'expiration codé en dur
- UI-PRR-001 - Simuler un clic
- UI-PRR-002 - Type de simulation
- UI-PRR-003 - Ouverture d'une utilisation abusive de l'application
- UI-PRR-004 - Délais codés en dur
- UI-REL-001 - Idx volumineux dans les sélecteurs
- UI-SEC-004 - Données d’e-mail du sélecteur
- UI-SEC-010 - Restrictions d'applications/d'URL
- UI-USG-011 - Attributs non autorisés
- SY-USG-013 - Invocation de fichier privé
- SY-USG-014 - Espaces réservés de modèle d'exécution incorrects
- Outil de migration de navigateur UiPath
- Enregistreur de Computer Vision
- Activer (Activate)
- Base d'ancrage (Anchor Base)
- Lier à un navigateur (Attach Browser)
- Lier à une fenêtre (Attach Window)
- Block User Input
- Call Transaction
- Légende (Callout)
- Vérifier (Check)
- Cliquer (Click)
- Cliquer sur l'image (Click Image)
- Déclencheur de clic image (Click Image Trigger)
- Cliquer sur le texte OCR (Click OCR Text)
- Click Picture on Screen
- Cliquer sur le texte (Click Text)
- Click Toolbar Button
- Déclencheur de clic (Click Trigger)
- Fermer l'application (Close Application)
- Fermer l'onglet (Close Tab)
- Fermer la fenêtre (Close Window)
- Context Aware Anchor
- Copier le texte sélectionné (Copy Selected Text)
- Element Attribute Change Trigger
- Élément existant (Element Exists)
- Étendue de l'élément (Element Scope)
- Element State Change Trigger
- Expand ALV Hierarchical Table
- Expand ALV Tree
- Expand Tree
- Export UI Tree
- Extraire les données structurées (Extract Structured Data)
- Rechercher les enfants (Find Children)
- Rechercher l'élément (Find Element)
- Rechercher l'image (Find Image)
- Rechercher les correspondances de l'image (Find Image Matches)
- Rechercher une position de texte OCR (Find OCR Text Position)
- Rechercher l'élément relatif (Find Relative Element)
- Rechercher la position du texte (Find Text Position)
- Obtenir la fenêtre active (Get Active Window)
- Obtenir l'ancêtre (Get Ancestor)
- Obtenir l'attribut (Get Attribute)
- Obtenir les infos de l'événement (Get Event Info)
- Récupérer du presse-papiers (Get From Clipboard)
- Obtenir le texte complet (Get Full Text)
- Obtenir le texte OCR (Get OCR Text)
- Récupérer le mot de passe (Get Password)
- Obtenir la position (Get Position)
- Obtenir l'élément source (Get Source Element)
- Obtenir le texte (Get Text)
- Obtenir le texte visible (Get Visible Text)
- Revenir en arrière (Go Back)
- Avancer (Go Forward)
- Accéder à l'accueil (Go Home)
- Google Cloud Vision OCR
- Masquer la fenêtre (Hide Window)
- Mettre en surbrillance (Highlight)
- Déclencheur de raccourci (Hotkey Trigger)
- Pointer (Hover)
- Pointer sur l'image (Hover Image)
- Pointer sur le texte OCR (Hover OCR Text)
- Pointer sur le texte (Hover Text)
- Image existante (Image Exists)
- Indiquer sur l'écran (Indicate On Screen)
- Injecter du code .NET
- Injecter JavaScript (Inject JS Script)
- Invoquer la méthode ActiveX
- Déclencheur de pression de touche (Key Press Trigger)
- Charger l'image (Load Image)
- Agrandir la fenêtre (Maximize Window)
- Microsoft Azure ComputerVision OCR
- Reconnaissance optique des caractères Microsoft (Microsoft OCR)
- Microsoft Project Oxford Online OCR
- Réduire la fenêtre (Minimize Window)
- Surveiller les événements (Monitor Events)
- Déclencheur de souris (Mouse Trigger)
- Déplacer la fenêtre (Move Window)
- Accéder à (Navigate To)
- Texte OCR existant (OCR Text Exists)
- Sur affichage de l'élément (On Element Appear)
- Sur disparition de l'élément (On Element Vanish)
- Sur apparition de l'image (On Image Appear)
- Sur disparition de l'image (On Image Vanish)
- Ouvrir l'application (Open Application)
- Ouvrir le navigateur (Open Browser)
- Read Statusbar
- Actualiser le navigateur (Refresh Browser)
- Relire l'événement utilisateur (Replay User Event)
- Restaurer la fenêtre (Restore Window)
- SAP Login
- SAP Logon
- SAP Session Attributes Change Trigger
- Enregistrer l'image (Save Image)
- Select Dates In Calendar
- Sélectionner l'élément (Select Item)
- Select Menu Item
- Sélectionner plusieurs éléments (Select Multiple Items)
- Envoyer le raccourci (Send Hotkey)
- Définir la zone de détourage (Set Clipping Region)
- Définir le focus (Set Focus)
- Définir le texte (Set Text)
- Placer dans le presse-papiers (Set To Clipboard)
- Définir l'attribut Web (Set Web Attribute)
- Afficher la fenêtre (Show Window)
- Déclencher le processus (Start Process)
- Déclencheur système (System Trigger)
- Table Cell Scope
- Prendre une capture d'écran (Take Screenshot)
- Tesseract OCR
- Texte existant (Text Exists)
- Info-bulle
- Saisir dans (Type Into)
- Saisir un texte sécurisé (Type Secure Text)
- Utiliser le premier plan
- Attendre un attribut (Wait Attribute)
- Attendre que l'élément disparaisse (Wait Element Vanish)
- Attendre que l'image disparaisse (Wait Image Vanish)
- Application event trigger
- Check/Uncheck
- Check App State
- Check Element
- Cliquer (Click)
- Click Event Trigger
- Close Popup
- Glisser et déposer
- Extract Table Data
- For Each UiElement
- Obtenir l'attribut (Get Attribute)
- Get Browser Data
- Obtenir le texte (Get Text)
- Get URL
- Go To URL
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- Inject Js Script
- Raccourcis clavier
- Keypress Event Trigger
- Mouse scroll
- Navigate Browser
- Sélectionner l'élément (Select Item)
- Set Browser Data
- Set Runtime Browser
- Définir le texte (Set Text)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- Use Application/Browser
- Joindre
- Vérifier (Check)
- Cliquer (Click)
- Glisser et déposer
- Extraire des données
- Obtenir l'attribut (Get Attribute)
- ObtenirEnfants
- ObtenirCibleRuntime
- GetText
- Get URL
- GoToUrl
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- Activé
- Raccourci clavier
- Mouse scroll
- Ouvrir
- Sélectionner l'élément (Select Item)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- ÉtatAttente
- Effectuez une recherche par navigateur et récupérez les résultats à l'aide des API UI Automation
- Navigation sur le Web
- Rechercher des images
- Cliquer sur des images
- Déclencher et surveiller des événements
- Créer et remplacer des fichiers
- Pages HTML : extraire et manipuler des informations
- Manipulation des fenêtres
- Sélection de liste automatisée
- Rechercher et manipuler des éléments de fenêtre
- Gérer l'automatisation du texte
- Charger et traiter des images
- Gérer les actions activées par la souris
- Automatiser l'exécution des applications
- Exécution automatisée d'une application locale
- Navigation avec le navigateur
- Automatisation Web
- Exemple de fonctionnalités du déclencheur
- Computer Vision Local Server
- Automatisation mobile
- Notes de publication
- Compatibilité du projet
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Installer l'application
- Gérer l'application actuelle
- Gérer une autre application
- Ouvrir DeepLink
- Ouvrir l'URL
- Mobile Device Connection
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Prendre une capture d'écran (Take Screenshot)
- Prendre une partie de capture d'écran
- Élément existant (Element Exists)
- Execute Command
- Obtenir l'attribut (Get Attribute)
- Get Selected Item
- Obtenir le texte (Get Text)
- Set Selected Item
- Définir le texte (Set Text)
- Balayer
- Tap
- Saisir texte
- Dessiner un modèle
- Terminal
- Notes de publication
- À propos du package d'activités Terminal
- Compatibilité du projet
- Session de terminal (Terminal Session)
- Accéder à la zone d'écran (Get Screen Area)
- Obtenir le texte en position (Get Text at Position)
- Get Color At Position
- Obtenir le champ en position (Get Field at Position)
- Définir le champ en position (Set Field at Position)
- Attendre le texte en position (Wait Text at Position)
- Envoyer les touches (Send Keys)
- Déplacer le curseur (Move Cursor)
- Envoyer les touches en toute sécurité (Send Keys Secure)
- Obtenir le texte (Get Text)
- Rechercher un texte (Find Text)
- Move Cursor to Text
- Envoyer la touche Contrôle (Send Control Key)
- Obtenir le champ (Get Field)
- Attendre le texte d'écran (Wait Screen Text)
- Attendre le texte de champ (Wait Field Text)
- Définir le champ (Set Field)
Écran de sélection
Les activités UI Automation vous permettent de travailler avec des éléments d'IU en simulant une interaction humaine. Pour ce faire, vous pouvez identifier les éléments d’IU en les indiquant sur votre écran. Généralement, une paire d’éléments est indiquée à cette fin : une cible et une ancre. Cette paire est appelée descripteur.
Lorsqu'il est indiqué, l' écran de sélection est utilisé pour vous aider à effectuer des tâches plus avancées, telles que la suspension de l'exécution, la modification de l'infrastructure utilisée pour la détection, la sélection d'une ancre ou la modification du sélecteur que vous utilisez, pour n'en nommer que quelques-unes.
Vous pouvez consulter la vidéo ci-dessous pour plus d’informations.
Pour indiquer un élément d'IU, vous devez d'abord faire glisser et déposer une activité Utiliser l'application/le navigateur (Use Application/Browser) dans le concepteur de workflow (Workflow Designer) de Studio, puis indiquer l'application ou le navigateur que vous souhaitez automatiser.
Une fois l’application ou le navigateur indiqué, vous pouvez faire glisser n’importe quelle activité Modern UIAutomation dans l’activité Utiliser l’application/le navigateur (Use Application/Browser) et sélectionner Indiquer dans l’application (Indicate in App ) ou Indiquer dans le navigateur (Indicate in browser) dans la carte d’application. Cela ouvre la première instance de l’assistant Options de sélection à côté de l’application cible, ce qui vous permet d’indiquer l’élément d’IU que vous souhaitez utiliser.
Ensuite, cliquez sur l'élément d'IU avec lequel vous souhaitez interagir. L'élément est surligné en vert.
À cette étape de l'assistant Options de sélection , vous pouvez utiliser certaines fonctionnalités, comme suit :
- Suspendre la sélection : vous pouvez suspendre la configuration pendant une durée spécifiée. Dans le menu déroulant, vous pouvez choisir l'une de ces options :
- 1 seconde
- 3 secondes
- 5 secondes - il s'agit de la valeur par défaut
- 7 secondes
- 9 secondes
F2
comme raccourci clavier.Remarque : vous pouvez faire défiler les applications qui défilent sans avoir à suspendre l'écran de sélection. - Sélection des éléments survolables : vous pouvez indiquer des éléments qui ne sont visibles que lorsque vous les survolez. Vous pouvez utiliser
F6
comme raccourci clavier. - Sélection de la région de l'image : vous pouvez passer de l'indication directe de l'élément à utiliser à la sélection d'une zone de forme libre qui contient l'élément cible et qui est ensuite traitée par reconnaissance d'image. Vous pouvez également faire glisser une sélection sur l'écran pour indiquer une zone que vous souhaitez utiliser comme cible. Cela désactive les méthodes de recherche Sélecteur strict et Sélecteur approximatif . Vous pouvez utiliser
F3
comme raccourci clavier. - Activer le texte natif (Enable Native text ) : vous pouvez identifier tous les libellés de texte sur l'application cible qui peuvent être affichés via la méthode Native.
En cliquant sur le bouton Afficher tous les éléments natifs ( Show all Native elements ), les libellés de texte sont mis en surbrillance dans l'application cible.
- Activer Computer Vision : vous pouvez activer Computer Vision pour automatiser certaines zones ou éléments, en particulier lorsque les sélecteurs ne sont pas disponibles, par exemple lors de l'automatisation sur un bureau à distance. Vous pouvez utiliser
F8
comme raccourci clavier.En cliquant sur le bouton Afficher tous les éléments CV ( Show all CV elements ), tous les éléments trouvés par Computer Vision sont mis en surbrillance dans l’application cible.
-
Modifier l'infrastructure d'IU (Change UI Framework ) : vous pouvez modifier la technologie utilisée pour déterminer les éléments d'IU ainsi que leurs sélecteurs. Vous pouvez utiliser le menu déroulant ou le raccourci clavier
F4
. Les types d'infrastructure disponibles sont :- Auto - Choisit automatiquement l’infrastructure considérée comme la plus appropriée pour l’élément indiqué. Cette option est sélectionnée par défaut. Fonctionne généralement très bien avec tous les types d'interfaces utilisateur.
- Accessibilité active (Active Accessibility ) - Utilise l'infrastructure Active Accessibility (Active Accessibility) spécifique à Windows. Il est recommandé d'utiliser cette option avec le logiciel existant lorsque l'option par défaut ne fonctionne pas.
- UI Automation - Utilise l'infrastructure propriétaire UiPath. Il est recommandé d'utiliser cette option avec des applications plus récentes, lorsque l'option par défaut ne fonctionne pas.
- Valider (Validate) : validez la sélection que vous avez effectuée. Plus de détails dans le chapitre Valider le descripteur ci-dessous.
- Confirmer (Confirm) : confirme les modifications et ferme l'assistant de sélection.
- Annuler (Cancel) : ignore toutes les modifications et ferme l'assistant de sélection.
Enter
ou sélectionner la coche bleue dans le menu de survol.
L'ensemble du processus ressemble à ceci :
Vous pouvez en savoir plus sur les fonctionnalités avancées de l' écran de sélection dans la page Configuration avancée du descripteur .