- Vue d'ensemble (Overview)
- Automatisation de l'interface utilisateur
- À propos du package d'activités UIAutomation
- Applications et technologies automatisées avec UI Automation
- Compatibilité du projet
- UI-ANA-016 - Extraire l'URL ouverte du navigateur
- UI-ANA-017 - ContinuerSurErreur (ContinueOnError) True
- UI-ANA-018 - Répertorier les activités d'OCR/d'image
- UI-DBP-006 - Utilisation du conteneur
- UI-DBP-013 - Utilisation abusive de l’automatisation Excel
- UI-DBP-030 - Utilisation de variables interdites dans les sélecteurs
- UI-DBP-031 : Vérification de l’activité
- UI-PRR-001 - Simuler un clic
- UI-PRR-002 - Type de simulation
- UI-PRR-003 - Ouverture d'une utilisation abusive de l'application
- UI-PRR-004 - Délais codés en dur
- UI-REL-001 - Idx volumineux dans les sélecteurs
- UI-SEC-004 - Données d’e-mail du sélecteur
- UI-SEC-010 - Restrictions d'applications/d'URL
- UI-USG-011 - Attributs non autorisés
- UX-SEC-010 - Restrictions d'applications/d'URL
- UX-DBP-029 - Utilisation d'un mot de passe non sécurisé
- UI-PST-001 - Niveau du journal d'audit dans les paramètres du projet
- Outil de migration de navigateur UiPath
- À propos des éléments d'interface utilisateur
- Propriétés des activités de l'interface utilisateur
- Exemple d'utilisation des méthodes de saisie
- Méthodes de sortie ou de capture de données d'écran
- Exemple d'utilisation de méthodes de sortie ou de capture de données d'écran
- Génération de tables à partir de données non structurées
- Capture relative de données
- Zone de détourage
- Enregistreur de Computer Vision
- À propos de l'automatisation des images et des textes
- Activités liées à la souris et au clavier
- Exemple d'utilisation de l'automatisation de la souris et du clavier
- Les activités de type texte
- Exemple d'utilisation d'automatisation de texte
- Activités de type OCR
- Activités de type image
- Exemple d'utilisation de l'automatisation d'image et d'OCR
- Index des activités
- Activer (Activate)
- Base d'ancrage (Anchor Base)
- Lier à un navigateur (Attach Browser)
- Lier à une fenêtre (Attach Window)
- Block User Input
- Légende (Callout)
- Vérifier (Check)
- Cliquer (Click)
- Cliquer sur l'image (Click Image)
- Déclencheur de clic image (Click Image Trigger)
- Cliquer sur le texte OCR (Click OCR Text)
- Cliquer sur le texte (Click Text)
- Déclencheur de clic (Click Trigger)
- Fermer l'application (Close Application)
- Fermer l'onglet (Close Tab)
- Fermer la fenêtre (Close Window)
- Context Aware Anchor
- Copier le texte sélectionné (Copy Selected Text)
- Element Attribute Change Trigger
- Élément existant (Element Exists)
- Étendue de l'élément (Element Scope)
- Element State Change Trigger
- Export UI Tree
- Extraire les données structurées (Extract Structured Data)
- Rechercher les enfants (Find Children)
- Rechercher l'élément (Find Element)
- Rechercher l'image (Find Image)
- Rechercher les correspondances de l'image (Find Image Matches)
- Rechercher une position de texte OCR (Find OCR Text Position)
- Rechercher l'élément relatif (Find Relative Element)
- Rechercher la position du texte (Find Text Position)
- Obtenir la fenêtre active (Get Active Window)
- Obtenir l'ancêtre (Get Ancestor)
- Obtenir l'attribut (Get Attribute)
- Obtenir les infos de l'événement (Get Event Info)
- Récupérer du presse-papiers (Get From Clipboard)
- Obtenir le texte complet (Get Full Text)
- Obtenir le texte OCR (Get OCR Text)
- Récupérer le mot de passe (Get Password)
- Obtenir la position (Get Position)
- Obtenir l'élément source (Get Source Element)
- Obtenir le texte (Get Text)
- Obtenir le texte visible (Get Visible Text)
- Revenir en arrière (Go Back)
- Avancer (Go Forward)
- Accéder à l'accueil (Go Home)
- Google Cloud Vision OCR
- Masquer la fenêtre (Hide Window)
- Mettre en surbrillance (Highlight)
- Déclencheur de raccourci (Hotkey Trigger)
- Pointer (Hover)
- Pointer sur l'image (Hover Image)
- Pointer sur le texte OCR (Hover OCR Text)
- Pointer sur le texte (Hover Text)
- Image existante (Image Exists)
- Indiquer sur l'écran (Indicate On Screen)
- Injecter du code .NET
- Inject Js Script
- Invoquer la méthode ActiveX
- Déclencheur de pression de touche (Key Press Trigger)
- Charger l'image (Load Image)
- Agrandir la fenêtre (Maximize Window)
- Microsoft Azure ComputerVision OCR
- Reconnaissance optique des caractères Microsoft (Microsoft OCR)
- Microsoft Project Oxford Online OCR
- Réduire la fenêtre (Minimize Window)
- Surveiller les événements (Monitor Events)
- Déclencheur de souris (Mouse Trigger)
- Déplacer la fenêtre (Move Window)
- Accéder à (Navigate To)
- Texte OCR existant (OCR Text Exists)
- Sur affichage de l'élément (On Element Appear)
- Sur disparition de l'élément (On Element Vanish)
- Sur apparition de l'image (On Image Appear)
- Sur disparition de l'image (On Image Vanish)
- Ouvrir l'application (Open Application)
- Ouvrir le navigateur (Open Browser)
- Actualiser le navigateur (Refresh Browser)
- Relire l'événement utilisateur (Replay User Event)
- Restaurer la fenêtre (Restore Window)
- Enregistrer l'image (Save Image)
- Sélectionner l'élément (Select Item)
- Sélectionner plusieurs éléments (Select Multiple Items)
- Envoyer le raccourci (Send Hotkey)
- Définir la zone de détourage (Set Clipping Region)
- Définir le focus (Set Focus)
- Définir le texte (Set Text)
- Placer dans le presse-papiers (Set To Clipboard)
- Définir l'attribut Web (Set Web Attribute)
- Afficher la fenêtre (Show Window)
- Déclencher le processus (Start Process)
- Déclencheur système (System Trigger)
- Prendre une capture d'écran (Take Screenshot)
- Tesseract OCR
- Texte existant (Text Exists)
- Info-bulle
- Saisir dans (Type Into)
- Saisir un texte sécurisé (Type Secure Text)
- Utiliser le premier plan
- Attendre un attribut (Wait Attribute)
- Attendre que l'élément disparaisse (Wait Element Vanish)
- Attendre que l'image disparaisse (Wait Image Vanish)
- Vérification de l’accessibilité
- Application event trigger
- Block User Input
- Check/Uncheck
- Check App State
- Check Element
- Cliquer (Click)
- Click Event Trigger
- Glisser et déposer
- Étendue de l'élément (Element Scope)
- Extract Table Data
- Find Elements
- For Each UiElement
- Get Browser Data
- Get Clipboard (Obtenir le Presse-papiers)
- Obtenir le texte (Get Text)
- Get URL
- Go To URL
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- Inject Js Script
- Raccourcis clavier
- Keypress Event Trigger
- Mouse scroll
- Navigate Browser
- Enregistrer l'image (Save Image)
- Sélectionner l'élément (Select Item)
- Set Browser Data
- Set Clipboard (Définir le Presse-papiers)
- Définir CV Server
- Définir le navigateur du runtime (Set Runtime Browser)
- Définir le focus (Set Focus)
- Définir les paramètres du projet
- Définir le texte (Set Text)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- Unblock User Input
- Browser automation mode
- Window operation
- Joindre
- Vérifier (Check)
- Cliquer (Click)
- Glisser et déposer
- Extraire des données
- Obtenir l'attribut (Get Attribute)
- ObtenirEnfants
- ObtenirCibleRuntime
- GetText
- Get URL
- GoToUrl
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- IsEnabled
- Raccourci clavier
- Mouse scroll
- Ouvrir
- Sélectionner l'élément (Select Item)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- ÉtatAttente
- Effectuez une recherche par navigateur et récupérez les résultats à l'aide des API UI Automation
- Navigation sur le Web
- Rechercher des images
- Cliquer sur des images
- Déclencher et surveiller des événements
- Créer et remplacer des fichiers
- Pages HTML : extraire et manipuler des informations
- Manipulation des fenêtres
- Sélection de liste automatisée
- Rechercher et manipuler des éléments de fenêtre
- Gérer l'automatisation du texte
- Charger et traiter des images
- Gérer les actions activées par la souris
- Automatiser l'exécution des applications
- Exécution automatisée d'une application locale
- Navigation avec le navigateur
- Automatisation Web
- Exemple de fonctionnalités du déclencheur
- Activer la prise en charge d’UI Automation dans DevExpress
- Computer Vision Local Server
- Automatisation mobile
- Notes de publication
- À propos de l'architecture d'automatisation des appareils mobiles
- Compatibilité du projet
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Installer l'application
- Gérer l'application actuelle
- Gérer une autre application
- Ouvrir DeepLink
- Ouvrir l'URL
- Mobile Device Connection
- Balayer directionnel
- Dessiner un modèle
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Prendre une capture d'écran (Take Screenshot)
- Prendre une partie de capture d'écran
- Élément existant (Element Exists)
- Execute Command
- Obtenir l'attribut (Get Attribute)
- Get Selected Item
- Obtenir le texte (Get Text)
- Set Selected Item
- Définir le texte (Set Text)
- Balayer
- Tap
- Saisir texte
- Premiers pas avec les API d’automatisation mobile
- Gestion des boîtes de dialogue contextuelles dans les automatisations mobiles
- Creating variables from selector attributes
- Créer des workflows d'automatisation mobile
- Utiliser l’automatisation mobile pour les applications de banque mobile
- Automatisation pour les applications React Native
- Terminal
- Notes de publication
- À propos du package d'activités Terminal
- Compatibilité du projet
- Meilleures pratiques
- Rechercher un texte (Find Text)
- Get Color At Position
- Obtenir la position du curseur (Get Cursor Position)
- Obtenir le champ (Get Field)
- Obtenir le champ en position (Get Field at Position)
- Accéder à la zone d'écran (Get Screen Area)
- Obtenir le texte (Get Text)
- Obtenir le texte en position (Get Text at Position)
- Déplacer le curseur (Move Cursor)
- Move Cursor to Text
- Envoyer la touche Contrôle (Send Control Key)
- Envoyer les touches (Send Keys)
- Envoyer les touches en toute sécurité (Send Keys Secure)
- Définir le champ (Set Field)
- Définir le champ en position (Set Field at Position)
- Session de terminal (Terminal Session)
- Attendre le texte de champ (Wait Field Text)
- Wait Screen Ready
- Attendre le texte d'écran (Wait Screen Text)
- Attendre le texte en position (Wait Text at Position)
- API d'automatisation codée par terminal
Vue d’ensemble des méthodes d’automatisation des navigateurs disponibles dans UiPath — Extension navigateur, WebDriver et Automatisation Chromium — et de la marche à suivre pour choisir entre elles.
UiPath prend en charge plusieurs méthodes d’automatisation des navigateurs, chacune étant adaptée à différents environnements de déploiement et à différentes cibles de navigateur. Le paramètre Mode d’automatisation du navigateur vous permet de choisir la méthode à utiliser, soit pour une étendue de workflow spécifique via l’activité Utiliser l’application/le navigateur , soit comme valeur par défaut à l’échelle du projet dans Paramètres du projet moderne UI Automation > Application/Navigateur.
Méthodes d’automatisation
UiPath fournit trois méthodes d'automatisation sous-jacentes, exposées sous forme de cinq modes:
L’extension navigateur injecte l’extension UiPath dans le navigateur pour interagir directement avec les pages Web. Il nécessite l'installation de l'extension, mais fournit la couverture d'automatisation la plus riche et est compatible avec les quatre principaux navigateurs pris en charge: Chrome, Edge, Firefox, Safari.
WebDriver utilise le protocole W3C WebDriver pour ouvrir et contrôler une session de navigateur dédiée via un fichier binaire de pilote spécifique au navigateur (chromedriver, msedgedriver, geckodriver). Il fonctionne sans l'extension UiPath et prend en charge les quatre principaux navigateurs. Une variante sans affichage exécute le navigateur sans fenêtre visible.
Chromium Automation utilise le protocole CDP Chrome pour contrôler directement les navigateurs basés sur Chromium, sans téléchargement d’extension ou de pilote requis. Il est le plus simple à configurer sur Chrome et Edge. Une variante sans affichage est également disponible.
Modes disponibles
Extension de navigateur
Utilise l’extension de navigateur UiPath pour automatiser le navigateur cible. L'extension injecte des scripts dans les pages Web pour interagir avec la page et signale les informations sur les éléments au robot.
- Nécessite: l'extension de navigateur UiPath installée et activée dans le profil de navigateur cible
- Navigateurs pris en charge: Chrome, Edge, Firefox, Safari
- Fenêtre du navigateur: Visible
Il s'agit du mode par défaut. Choisissez-le pour l'automatisation Attended ou Unattended standard où le navigateur s'exécute sur la même machine que l'installation du Robot et de l'extension est possible.
Pour automatiser les pages en mode navigation privée (Incognito), ouvrez chrome://extensions., localisez l'extension UiPath et activez Autoriser en mode navigation privée et Autoriser l'accès aux URL de fichier.
WebDriver avec interface utilisateur
Ouvre une nouvelle session de navigateur visible contrôlée par le protocole W3C WebDriver. UiPath communique avec le navigateur par le biais d'un serveur WebDriver spécifique au navigateur.
- Nécessite: un binaire WebDriver compatible avec la version de navigateur installée
- Navigateurs pris en charge: Chrome, Edge, Firefox
- Fenêtre du navigateur: Visible
WebDriver crée un nouveau user-data-dir pour chaque session et ne peut pas se connecter à une instance de navigateur déjà ouverte sur le bureau de l'utilisateur. WebDriver n’est donc pas adapté à l’automatisation Attended. Pour l'automatisation Unattended, il ne s'agit pas d'une limitation.
WebDriver sans interface utilisateur
Identique à WebDriver avec interface graphique, mais le navigateur s'exécute sans fenêtre visible.
- Nécessite: un binaire WebDriver compatible avec la version de navigateur installée
- Navigateurs pris en charge: Chrome, Edge, Firefox
- Fenêtre du navigateur: Aucune (sans affichage)
Certaines opérations qui nécessitent une fenêtre visible, telles que le glisser-déposer natif ou la simulation à l'aide d'une souris matérielle, ne sont pas prises en charge en mode sans affichage.
Comme WebDriver avec interface graphique, ce mode crée un nouveau user-data-dir et ne peut pas se connecter à un navigateur déjà ouvert. Un binaire WebDriver compatible doit être téléchargé lors du runtime. Le mode navigation privée est pris en charge sans configuration supplémentaire.
Automatisation Chromium
Utilise le protocole CDP Chrome pour contrôler directement le navigateur. Aucune installation d’extension ou un fichier binaire WebDriver n’est requis — UiPath se lance et gère la session du navigateur en interne.
- Nécessite: le processus du navigateur lancé avec l’indicateur
--remote-debugging-port=0 - Navigateurs pris en charge: Chrome, Edge et tous les navigateurs basés sur Chromium
- Fenêtre du navigateur: Visible
Choisissez ce mode pour la configuration la plus simple sur Chrome ou Edge. Il ne prend pas en charge Firefox ou Safari.
Chromium Automation crée un nouveau user-data-dir pour chaque session et ne peut pas se connecter à une instance de navigateur déjà ouverte sur le bureau de l'utilisateur. Il n’est donc pas adapté à l’automatisation Attended. Pour l'automatisation Unattended, il ne s'agit pas d'une limitation.
Le mode navigation privée est pris en charge sans configuration supplémentaire.
Automatisation Chromium sans interface utilisateur
Identique à Chromium Automation, mais le navigateur s’exécute sans fenêtre visible.
- Nécessite: le processus du navigateur lancé avec l’indicateur
--remote-debugging-port=0 - Navigateurs pris en charge: Chrome, Edge et tous les navigateurs basés sur Chromium
- Fenêtre du navigateur: Aucune (sans affichage)
Ce mode combine une configuration zéro configuration avec l'exécution sans affichage, ce qui le rend bien adapté à l'automatisation unattended sur des serveurs ou des pipelines CI/CD.
Comme l’automatisation Chromium, ce mode crée une nouvelle user-data-dir et est bloqué lorsque la stratégie de groupe DeveloperToolsAvailability est définie sur 2. Le mode navigation privée est pris en charge sans configuration supplémentaire.
Comparaison
Exigences de configuration
De quoi chaque mode dépend avant de pouvoir s'exécuter.
| Mode | Extension requise | WebDriver requis | Sans affichage | Configuration supplémentaire |
|---|---|---|---|---|
| Extension de navigateur | ✅ | ❌ | ❌ | Installer l’extension UiPath |
| WebDriver avec interface utilisateur | ❌ | ✅ | ❌ | Télécharger le fichier binaire WebDriver |
| WebDriver sans interface utilisateur | ❌ | ✅ | ✅ | Télécharger le fichier binaire WebDriver |
| Automatisation Chromium | ❌ | ❌ | ❌ | Lancer le navigateur avec l’indicateur --remote-debugging-port=0 |
| Automatisation Chromium sans interface utilisateur | ❌ | ❌ | ✅ | Lancer le navigateur avec l’indicateur --remote-debugging-port=0 |
Capabilities
Ce que chaque mode prend en charge une fois qu'il est en cours d'exécution.
| Mode | Automatisation assistée | Incognito (aucune configuration) | Navigateurs pris en charge |
|---|---|---|---|
| Extension de navigateur | ✅ | ❌ | Chrome, Edge, Firefox, Safari |
| WebDriver avec interface utilisateur | ❌ | ✅ | Chrome, Edge, Firefox |
| WebDriver sans interface utilisateur | ❌ | ✅ | Chrome, Edge, Firefox |
| Automatisation Chromium | ❌ | ✅ | Chrome, Edge, basé sur Chromium |
| Automatisation Chromium sans interface utilisateur | ❌ | ✅ | Chrome, Edge, basé sur Chromium |
Choix d’un mode
| Scénario | Mode recommandé |
|---|---|
| Automatisation du bureau standard, l’extension peut être installée | Extension de navigateur |
| Automatisation Attended (fonctionner avec le navigateur déjà ouvert de l'utilisateur) | Extension de navigateur |
| L’extension ne peut pas être installée, le navigateur doit être visible | WebDriver avec interface utilisateur |
| L’extension ne peut pas être installée, aucun affichage n’est disponible | WebDriver sans interface utilisateur |
| Chrome ou Edge, configuration la plus simple possible | Automatisation Chromium |
| Automatisation Unattended ou du serveur sur Chrome/Edge, aucun affichage | Automatisation Chromium sans interface utilisateur |
| Firefox ou Safari sans extension | WebDriver avec interface utilisateur graphique ou WebDriver sans interface utilisateur |
DeveloperToolsAvailability La stratégie de groupe restreint les outils de développement | Extension de navigateur ou WebDriver |
Configurer le mode
Pour une activité spécifique
- Ajoutez une activité Utiliser l'application/le navigateur à votre workflow.
- Dans le panneau Propriétés , localisez Mode d'automatisation du navigateur.
- Sélectionnez le mode souhaité dans la liste déroulante.
Résultat: le mode sélectionné s'applique à chaque activité UI Automation limitée à ce conteneur Utiliser l'application/le navigateur .
En tant que projet par défaut
- Ouvrez les Paramètres du projet à partir de l'icône en forme d'engrenage dans le panneau Projet .
- Accédez à UI Automation Modern > Application/Navigateur.
- Définissez le Mode d'automatisation du navigateur sur votre valeur par défaut préférée.
- Sélectionnez Enregistrer.
Résultat: les nouvelles activités Utiliser l'application/le navigateur ajoutées au projet utilisent le mode sélectionné, sauf si une activité spécifique est remplacée.
Le paramètre au niveau de l'activité est prioritaire sur le paramètre par défaut du projet dans son étendue.
La propriété Mode d'automatisation du navigateur pour l'activité Utiliser l'application/le navigateur et le paramètre de projet dans UI Automation Modern > Application/Navigateur sont disponibles à partir de UIAutomation v26.10.0.
Limitations
- Les modes d’automatisation Chromium ne prennent en charge que les navigateurs basés sur Chromium. Leur utilisation avec Firefox ou Safari renvoie une erreur; aucun recours automatique ne se produit.
- Les modes sans affichage ne prennent pas en charge les opérations qui dépendent d’une fenêtre visible ou d’un rendu au niveau du système d’exploitation, telles que le glisser-déposer de la souris matérielle ou certaines opérations de capture d’écran.
- WebDriver et Chromium Automation créent un nouveau
user-data-dirpour chaque session. Ils ne peuvent pas se connecter à un navigateur déjà ouvert sur le bureau de l'utilisateur, ce qui les rend inadaptés à l'automatisation Attended. Il ne s'agit pas d'une limitation pour l'automatisation unattended. - Les sessions WebDriver et Automatisation Chromium utilisent un profil de navigateur isolé. Les extensions, les mots de passe enregistrés et les cookies de session utilisateur du profil de navigateur par défaut ne sont pas disponibles.
- WebDriver nécessite qu'un binaire spécifique au navigateur (
chromedriver,msedgedriverougeckodriver) soit téléchargé au moment du runtime et restera compatible avec la version de navigateur installée. L’extension de navigateur et l’automatisation Chromium n’ont pas une telle dépendance binaire externe. - L’automatisation Chromium est bloquée lorsque la stratégie de groupe DisponibilitéOutilsDéveloppement est définie sur
2(utilisation des outils de développement interdite). Utilisez l’extension de navigateur ou WebDriver dans les environnements où cette politique est appliquée. - L'extension navigateur nécessite une configuration manuelle supplémentaire pour automatiser les pages en mode Incognito: l'utilisateur doit ouvrir chrome://extensions, localiser l'extension UiPath et activer Autoriser en mode navigation privée et Autoriser l'accès aux URL de fichier. WebDriver et Automatisation Chromium prennent en charge le mode navigation privée sans configuration supplémentaire.
- Méthodes d’automatisation
- Modes disponibles
- Extension de navigateur
- WebDriver avec interface utilisateur
- WebDriver sans interface utilisateur
- Automatisation Chromium
- Automatisation Chromium sans interface utilisateur
- Comparaison
- Exigences de configuration
- Capabilities
- Choix d’un mode
- Configurer le mode
- Pour une activité spécifique
- En tant que projet par défaut
- Limitations