- Vue d'ensemble (Overview)
- Automatisation de l'interface utilisateur
- Applications et technologies automatisées avec UI Automation
- Compatibilité du projet
- UI-ANA-016 - Extraire l'URL ouverte du navigateur
- UI-ANA-017 - ContinuerSurErreur (ContinueOnError) True
- UI-ANA-018 - Répertorier les activités d'OCR/d'image
- UI-DBP-006 - Utilisation du conteneur
- UI-DBP-013 - Utilisation abusive de l’automatisation Excel
- UI-DBP-030 - Utilisation de variables interdites dans les sélecteurs
- UI-PRR-001 - Simuler un clic
- UI-PRR-002 - Type de simulation
- UI-PRR-003 - Ouverture d'une utilisation abusive de l'application
- UI-PRR-004 - Délais codés en dur
- UI-REL-001 - Idx volumineux dans les sélecteurs
- UI-SEC-004 - Données d’e-mail du sélecteur
- UI-SEC-010 - Restrictions d'applications/d'URL
- UI-USG-011 - Attributs non autorisés
- UX-SEC-010 - Restrictions d'applications/d'URL
- UX-DBP-029 - Utilisation d'un mot de passe non sécurisé
- UI-PST-001 - Niveau du journal d'audit dans les paramètres du projet
- Outil de migration de navigateur UiPath
- Zone de détourage
- Enregistreur de Computer Vision
- Activer (Activate)
- Base d'ancrage (Anchor Base)
- Lier à un navigateur (Attach Browser)
- Lier à une fenêtre (Attach Window)
- Block User Input
- Légende (Callout)
- Vérifier (Check)
- Cliquer (Click)
- Cliquer sur l'image (Click Image)
- Déclencheur de clic image (Click Image Trigger)
- Cliquer sur le texte OCR (Click OCR Text)
- Cliquer sur le texte (Click Text)
- Déclencheur de clic (Click Trigger)
- Fermer l'application (Close Application)
- Fermer l'onglet (Close Tab)
- Fermer la fenêtre (Close Window)
- Context Aware Anchor
- Copier le texte sélectionné (Copy Selected Text)
- Element Attribute Change Trigger
- Élément existant (Element Exists)
- Étendue de l'élément (Element Scope)
- Element State Change Trigger
- Export UI Tree
- Extraire les données structurées (Extract Structured Data)
- Rechercher les enfants (Find Children)
- Rechercher l'élément (Find Element)
- Rechercher l'image (Find Image)
- Rechercher les correspondances de l'image (Find Image Matches)
- Rechercher une position de texte OCR (Find OCR Text Position)
- Rechercher l'élément relatif (Find Relative Element)
- Rechercher la position du texte (Find Text Position)
- Obtenir la fenêtre active (Get Active Window)
- Obtenir l'ancêtre (Get Ancestor)
- Obtenir l'attribut (Get Attribute)
- Obtenir les infos de l'événement (Get Event Info)
- Récupérer du presse-papiers (Get From Clipboard)
- Obtenir le texte complet (Get Full Text)
- Obtenir le texte OCR (Get OCR Text)
- Récupérer le mot de passe (Get Password)
- Obtenir la position (Get Position)
- Obtenir l'élément source (Get Source Element)
- Obtenir le texte (Get Text)
- Obtenir le texte visible (Get Visible Text)
- Revenir en arrière (Go Back)
- Avancer (Go Forward)
- Accéder à l'accueil (Go Home)
- Google Cloud Vision OCR
- Masquer la fenêtre (Hide Window)
- Mettre en surbrillance (Highlight)
- Déclencheur de raccourci (Hotkey Trigger)
- Pointer (Hover)
- Pointer sur l'image (Hover Image)
- Pointer sur le texte OCR (Hover OCR Text)
- Pointer sur le texte (Hover Text)
- Image existante (Image Exists)
- Indiquer sur l'écran (Indicate On Screen)
- Injecter du code .NET
- Inject Js Script
- Invoquer la méthode ActiveX
- Déclencheur de pression de touche (Key Press Trigger)
- Charger l'image (Load Image)
- Agrandir la fenêtre (Maximize Window)
- Microsoft Azure ComputerVision OCR
- Reconnaissance optique des caractères Microsoft (Microsoft OCR)
- Microsoft Project Oxford Online OCR
- Réduire la fenêtre (Minimize Window)
- Surveiller les événements (Monitor Events)
- Déclencheur de souris (Mouse Trigger)
- Déplacer la fenêtre (Move Window)
- Accéder à (Navigate To)
- Texte OCR existant (OCR Text Exists)
- Sur affichage de l'élément (On Element Appear)
- Sur disparition de l'élément (On Element Vanish)
- Sur apparition de l'image (On Image Appear)
- Sur disparition de l'image (On Image Vanish)
- Ouvrir l'application (Open Application)
- Ouvrir le navigateur (Open Browser)
- Actualiser le navigateur (Refresh Browser)
- Relire l'événement utilisateur (Replay User Event)
- Restaurer la fenêtre (Restore Window)
- Enregistrer l'image (Save Image)
- Sélectionner l'élément (Select Item)
- Sélectionner plusieurs éléments (Select Multiple Items)
- Envoyer le raccourci (Send Hotkey)
- Définir la zone de détourage (Set Clipping Region)
- Définir le focus (Set Focus)
- Définir le texte (Set Text)
- Placer dans le presse-papiers (Set To Clipboard)
- Définir l'attribut Web (Set Web Attribute)
- Afficher la fenêtre (Show Window)
- Déclencher le processus (Start Process)
- Déclencheur système (System Trigger)
- Prendre une capture d'écran (Take Screenshot)
- Tesseract OCR
- Texte existant (Text Exists)
- Info-bulle
- Saisir dans (Type Into)
- Saisir un texte sécurisé (Type Secure Text)
- Utiliser le premier plan
- Attendre un attribut (Wait Attribute)
- Attendre que l'élément disparaisse (Wait Element Vanish)
- Attendre que l'image disparaisse (Wait Image Vanish)
- Application event trigger
- Check/Uncheck
- Check App State
- Check Element
- Cliquer (Click)
- Click Event Trigger
- Fermer la fenêtre contextuelle
- Glisser et déposer
- Extract Table Data
- For Each UiElement
- Obtenir l'attribut (Get Attribute)
- Get Browser Data
- Obtenir le texte (Get Text)
- Get URL
- Go To URL
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- Inject Js Script
- Raccourcis clavier
- Keypress Event Trigger
- Mouse scroll
- Navigate Browser
- Sélectionner l'élément (Select Item)
- Set Browser Data
- Définir le navigateur du runtime (Set Runtime Browser)
- Définir le texte (Set Text)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- Use Application/Browser
- Joindre
- Vérifier (Check)
- Cliquer (Click)
- Glisser et déposer
- Extraire des données
- Obtenir l'attribut (Get Attribute)
- ObtenirEnfants
- ObtenirCibleRuntime
- GetText
- Get URL
- GoToUrl
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- IsEnabled
- Raccourci clavier
- Mouse scroll
- Ouvrir
- Sélectionner l'élément (Select Item)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- ÉtatAttente
- Effectuez une recherche par navigateur et récupérez les résultats à l'aide des API UI Automation
- Navigation sur le Web
- Rechercher des images
- Cliquer sur des images
- Déclencher et surveiller des événements
- Créer et remplacer des fichiers
- Pages HTML : extraire et manipuler des informations
- Manipulation des fenêtres
- Sélection de liste automatisée
- Rechercher et manipuler des éléments de fenêtre
- Gérer l'automatisation du texte
- Charger et traiter des images
- Gérer les actions activées par la souris
- Automatiser l'exécution des applications
- Exécution automatisée d'une application locale
- Navigation avec le navigateur
- Automatisation Web
- Exemple de fonctionnalités du déclencheur
- Computer Vision Local Server
- Automatisation mobile
- Notes de publication
- Compatibilité du projet
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Installer l'application
- Gérer l'application actuelle
- Gérer une autre application
- Ouvrir DeepLink
- Ouvrir l'URL
- Mobile Device Connection
- Balayer directionnel
- Dessiner un modèle
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Prendre une capture d'écran (Take Screenshot)
- Prendre une partie de capture d'écran
- Élément existant (Element Exists)
- Execute Command
- Obtenir l'attribut (Get Attribute)
- Get Selected Item
- Obtenir le texte (Get Text)
- Set Selected Item
- Définir le texte (Set Text)
- Balayer
- Tap
- Saisir texte
- Terminal
- Notes de publication
- À propos du package d'activités Terminal
- Compatibilité du projet
- Meilleures pratiques
- Rechercher un texte (Find Text)
- Get Color At Position
- Obtenir la position du curseur (Get Cursor Position)
- Obtenir le champ (Get Field)
- Obtenir le champ en position (Get Field at Position)
- Accéder à la zone d'écran (Get Screen Area)
- Obtenir le texte (Get Text)
- Obtenir le texte en position (Get Text at Position)
- Déplacer le curseur (Move Cursor)
- Move Cursor to Text
- Envoyer la touche Contrôle (Send Control Key)
- Envoyer les touches (Send Keys)
- Envoyer les touches en toute sécurité (Send Keys Secure)
- Définir le champ (Set Field)
- Définir le champ en position (Set Field at Position)
- Session de terminal (Terminal Session)
- Attendre le texte de champ (Wait Field Text)
- Attendre le texte d'écran (Wait Screen Text)
- Attendre le texte en position (Wait Text at Position)
Déclencher et surveiller des événements
L’exemple ci-dessous explique comment surveiller les événements utilisateur et déclencher différentes actions en utilisant différents raccourcis clavier pour ouvrir certaines applications. Par exemple, l’utilisateur peut utiliser une combinaison de touches de raccourci pour ouvrir l’application Calculatrice dans Windows.
Il contient des activités telles que Hotkey Trigger, Monitor Events ou Get Event Info. Vous pouvez retrouver ces activités dans le package UiPath.UIAutomation.Activities.
Voici comment le processus d'automatisation peut être créé :
- Ouvrez Studio et créez un nouveau Processus nommé par défaut Principal.
- Faites glisser un conteneur Séquence vers le concepteur de workflow.
-
Créez la variable suivante :
Nom de variable
Types de variables
Valeur par défaut
ContinueMonitor
Booléen
-
Faites glisser une activité Log Message dans le conteneur Sequence.
- Dans le panneau Propriétés, sélectionnez l’option Niveau dans la liste déroulante Message.
- Indiquez l'expression
"Start monitoring..."
dans le champ Message.
-
Faites glisser une activité Assign sous l’activité Log Message.
- Dans le panneau Propriétés, ajoutez la variable
ContinueMonitor
dans le champ Vers. - Ajoutez la condition
True
dans le champ Valeur.
- Dans le panneau Propriétés, ajoutez la variable
-
Placez une activité Monitor Events sous l’activité Assign.
- Dans le panneau Propriétés, ajoutez la valeur
ContinueMonitor
dans le champ RépéterPourToujours.
- Dans le panneau Propriétés, ajoutez la valeur
-
Ajoutez une activité Hotkey Trigger dans l’activité Monitor Events. Cette activité ouvre l’application Calculatrice dans Windows.
- Cochez les cases des options
Alt
etShift
. - Dans le champ
Key
, saisissez la lettrec
. - Dans le panneau Propriétés, sélectionnez l’option EVENT_BLOCK dans la liste déroulante ModeÉvénement.
- Cochez les cases des options
-
Faites glisser une autre activité Hotkey Trigger et placez-la à côté de l’activité Hotkey Trigger précédente. Cette activité ouvre un nouvel onglet du navigateur et recherche sur Google le texte précédemment sélectionné par l’utilisateur.
- Cochez les cases des options Alt et Maj.
- Dans le champ Clé, saisissez la lettre
g
. - Dans le panneau Propriétés, sélectionnez l’option EVENT_BLOCK dans la liste déroulante ModeÉvénement.
-
Faites glisser une autre activité Hotkey Trigger et placez-la à côté de l’activité Hotkey Trigger précédente. Cette activité arrête la surveillance des événements.
- Cochez les cases des options Alt et Maj.
- Dans le champ Clé, saisissez la lettre
s
. - Dans le panneau Propriétés, sélectionnez l’option EVENT_BLOCK dans la liste déroulante ModeÉvénement.
-
Ajoutez un nouveau conteneur Sequence et placez-le sous l’activité Hotkey Trigger.
- Dans le panneau Propriétés, ajoutez la valeur
Event Handler
dans le champ NomComplet. -
Créez la variable suivante :
Nom de variable
Types de variables
Valeur par défaut
TriggerHotkey
UiPath.Core.EventInfo
ContinueMonitor
Booléen
- Dans le panneau Propriétés, ajoutez la valeur
-
Faites glisser une activité Log Message dans le conteneur Event Handler.
- Dans le panneau Propriétés, sélectionnez l’option Info dans la liste déroulante Niveau.
- Indiquez l'expression
"Event triggered"
dans le champ Message.
-
Faites glisser une activité Get Event Info sous l’activité Log Message.
- Dans le panneau Propriétés, ajoutez la variable
TriggerHotkey
dans le champ Résultat. - Sélectionnez l’option UiPath.Core.EventInfo dans la liste déroulante TypeArgument.
- Dans le panneau Propriétés, ajoutez la variable
-
Ajoutez une activité Switch sous l’activité Get Event Info. Tous les déclencheurs de raccourcis sont décrits dans cette activité et traités comme des cas.
- Dans le panneau Propriétés, ajoutez la valeur
TriggerHotkey.KeyEventInfo.KeyName.ToLower
dans le champ Expression. - Sélectionnez l’option String dans la liste déroulante TypeArgument.
- Dans le panneau Propriétés, ajoutez la valeur
-
Cliquez sur le bouton Ajouter un nouveau cas (Add new case) dans l’activité Switch.
- Ajoutez la valeur
c
dans le champ Valeur du cas.
- Ajoutez la valeur
-
Placez une activité Open Application et placez-la dans le conteneur Case c. Il s’agit du premier cas de déclencheur de raccourci qui ouvre l’application Calculatrice.
- Dans le panneau Propriétés, ajoutez l’expression
"calc.exe"
dans le champ Arguments. - Ajoutez l'expression
"<wnd app='applicationframehost.exe' title='Calculator' />"
dans le champ Sélecteur.
- Dans le panneau Propriétés, ajoutez l’expression
-
Cliquez sur le bouton Ajouter un nouveau cas (Add new case) dans l’activité Switch.
- Ajoutez la valeur
g
dans le champ Valeur du cas.
- Ajoutez la valeur
-
Faites glisser un conteneur Sequence et placez-le dans le conteneur Case g. Il s’agit du deuxième cas de déclencheur de raccourci qui lance une recherche Google pour le texte précédemment sélectionné.
- Dans le panneau Propriétés, ajoutez la valeur
Google selected text
dans le champ NomComplet. -
Créez la variable suivante :
Nom de variable
Types de variables
Valeur par défaut
TextToSearch
ValeurGénérique
- Dans le panneau Propriétés, ajoutez la valeur
-
Faites glisser une activité Delay et placez-la dans la séquence Google selected text.
- Dans le panneau Propriétés, ajoutez la valeur
00:00:00.5000000
dans le champ Durée.
- Dans le panneau Propriétés, ajoutez la valeur
-
Ajoutez une activité Copy Selected Text sous l’activité Delay.
- Dans le panneau Propriétés, ajoutez la valeur
True
dans le champ ContinuerSurErreur. - Ajoutez la variable
TextToSearch
dans le champ Résultat. - Ajoutez la valeur
2000
dans le champ Délai d’attente (millisecondes).
- Dans le panneau Propriétés, ajoutez la valeur
-
Faites glisser une activité If sous l’activité Copy Selected Text.
- Dans le panneau Propriétés , ajoutez l'expression
TextToSearch IsNot Nothing
dans le champ Condition .
- Dans le panneau Propriétés , ajoutez l'expression
-
Placez une activité Open Browser dans la zone Then.
- Dans le panneau Propriétés, sélectionnez l’option IE dans la liste déroulante TypeNavigateur.
- Ajoutez l’expression
"www.google.com"
dans le champ URL. - Cochez la case de l’option NouvelleSession. Une nouvelle session du navigateur sélectionné se lance.
-
Placez une activité Type Into dans la séquence Do.
- Dans le panneau Propriétés, sélectionnez l’option Cible dans la liste déroulante Cible.
- Ajoutez l'expression
"<webctrl tag='INPUT' aaname='Search' />"
dans le champ Sélecteur. - Sélectionnez l’option INTERACTIVE dans la liste déroulante AttendrePrêt.
- Ajoutez la variable
TextToSearch
dans le champ Texte. - Cochez la case de l’option Activer. Cette option place l’élément d’IU au premier plan et l’active avant que le texte ne soit écrit.
- Cochez la case de l’option SimulerType. Cette option simule la saisie en utilisant la technologie de l’application cible.
-
Faites glisser une application Send Hotkey sous l’activité Type Into.
- Dans le panneau Propriétés, ajoutez l’expression
"enter"
dans le champ Clé. - Sélectionnez l’option Cible dans la liste déroulante Cible.
- Ajoutez l'expression
"<webctrl tag='INPUT' aaname='Search' />"
dans le champ Sélecteur. - Sélectionnez l’option INTERACTIVE dans la liste déroulante AttendrePrêt.
- Cochez la case de l’option Activer. Cette option place l’élément d’IU au premier plan et l’active avant que le texte ne soit écrit.
- Sélectionnez l’option None dans la liste déroulante ModificateursClés.
- Cochez la case de l’option CléSpéciale. Cette option indique si le raccourci clavier utilise une clé spéciale.
- Dans le panneau Propriétés, ajoutez l’expression
-
Faites glisser une activité Message Box dans le conteneur Else.
- Dans le panneau Propriétés, sélectionnez le bouton Ok dans la liste déroulante Boutons.
- Ajoutez l'expression
"Text could not be copied. Please try again."
dans le champ Texte. - Cochez la case de l’option PlusHaut. La boîte de message se retrouve toujours au premier plan.
-
Cliquez sur le bouton Ajouter un nouveau cas (Add new case) dans l’activité Switch.
- Ajoutez la valeur
s
dans le champ Valeur du cas.
- Ajoutez la valeur
-
Faites glisser une activité Assign dans le conteneur Case s. Il s’agit du troisième cas de déclencheur de raccourci qui arrête la surveillance des événements.
- Ajoutez la variable
ContinueMonitor
dans le champ À. - Ajoutez la condition
False
dans le champ Valeur.
- Ajoutez la variable
-
Placez une activité Log Message sous l’activité Monitor Events.
- Dans le panneau Propriétés, sélectionnez l’option Info dans le champ de menu déroulant Niveau.
- Indiquez l'expression
"Stop monitoring.."
dans le champ Message. -
Voici à quoi devrait ressembler votre workflow :
- Exécutez le processus. Le robot active les déclencheurs de raccourcis, vous permettant d’utiliser n’importe lequel des raccourcis clavier définis.