- Vue d'ensemble (Overview)
- À propos des activités UI Automation
- Automatisation de l'interface utilisateur
- Applications et technologies automatisées avec UI Automation
- Compatibilité du projet
- UI-ANA-016 - Extraire l'URL ouverte du navigateur
- UI-ANA-017 - ContinuerSurErreur (ContinueOnError) True
- UI-ANA-018 - Répertorier les activités d'OCR/d'image
- UI-DBP-006 - Utilisation du conteneur
- UI-DBP-013 - Utilisation abusive de l’automatisation Excel
- UI-DBP-030 - Utilisation de variables interdites dans les sélecteurs
- UI-PRR-001 - Simuler un clic
- UI-PRR-002 - Type de simulation
- UI-PRR-003 - Ouverture d'une utilisation abusive de l'application
- UI-PRR-004 - Délais codés en dur
- UI-REL-001 - Idx volumineux dans les sélecteurs
- UI-SEC-004 - Données d’e-mail du sélecteur
- UI-SEC-010 - Restrictions d'applications/d'URL
- UI-USG-011 - Attributs non autorisés
- UX-SEC-010 - Restrictions d'applications/d'URL
- UX-DBP-029 - Utilisation d'un mot de passe non sécurisé
- UI-PST-001 - Niveau du journal d'audit dans les paramètres du projet
- Outil de migration de navigateur UiPath
- Zone de détourage
- Enregistreur de Computer Vision
- Activer (Activate)
- Base d'ancrage (Anchor Base)
- Lier à un navigateur (Attach Browser)
- Lier à une fenêtre (Attach Window)
- Block User Input
- Légende (Callout)
- Vérifier (Check)
- Cliquer (Click)
- Cliquer sur l'image (Click Image)
- Déclencheur de clic image (Click Image Trigger)
- Cliquer sur le texte OCR (Click OCR Text)
- Cliquer sur le texte (Click Text)
- Déclencheur de clic (Click Trigger)
- Fermer l'application (Close Application)
- Fermer l'onglet (Close Tab)
- Fermer la fenêtre (Close Window)
- Context Aware Anchor
- Copier le texte sélectionné (Copy Selected Text)
- Element Attribute Change Trigger
- Élément existant (Element Exists)
- Étendue de l'élément (Element Scope)
- Element State Change Trigger
- Export UI Tree
- Extraire les données structurées (Extract Structured Data)
- Rechercher les enfants (Find Children)
- Rechercher l'élément (Find Element)
- Rechercher l'image (Find Image)
- Rechercher les correspondances de l'image (Find Image Matches)
- Rechercher une position de texte OCR (Find OCR Text Position)
- Rechercher l'élément relatif (Find Relative Element)
- Rechercher la position du texte (Find Text Position)
- Obtenir la fenêtre active (Get Active Window)
- Obtenir l'ancêtre (Get Ancestor)
- Obtenir l'attribut (Get Attribute)
- Obtenir les infos de l'événement (Get Event Info)
- Récupérer du presse-papiers (Get From Clipboard)
- Obtenir le texte complet (Get Full Text)
- Obtenir le texte OCR (Get OCR Text)
- Récupérer le mot de passe (Get Password)
- Obtenir la position (Get Position)
- Obtenir l'élément source (Get Source Element)
- Obtenir le texte (Get Text)
- Obtenir le texte visible (Get Visible Text)
- Revenir en arrière (Go Back)
- Avancer (Go Forward)
- Accéder à l'accueil (Go Home)
- Google Cloud Vision OCR
- Masquer la fenêtre (Hide Window)
- Mettre en surbrillance (Highlight)
- Déclencheur de raccourci (Hotkey Trigger)
- Pointer (Hover)
- Pointer sur l'image (Hover Image)
- Pointer sur le texte OCR (Hover OCR Text)
- Pointer sur le texte (Hover Text)
- Image existante (Image Exists)
- Indiquer sur l'écran (Indicate On Screen)
- Injecter du code .NET
- Inject Js Script
- Invoquer la méthode ActiveX
- Déclencheur de pression de touche (Key Press Trigger)
- Charger l'image (Load Image)
- Agrandir la fenêtre (Maximize Window)
- Microsoft Azure ComputerVision OCR
- Reconnaissance optique des caractères Microsoft (Microsoft OCR)
- Microsoft Project Oxford Online OCR
- Réduire la fenêtre (Minimize Window)
- Surveiller les événements (Monitor Events)
- Déclencheur de souris (Mouse Trigger)
- Déplacer la fenêtre (Move Window)
- Accéder à (Navigate To)
- Texte OCR existant (OCR Text Exists)
- Sur affichage de l'élément (On Element Appear)
- Sur disparition de l'élément (On Element Vanish)
- Sur apparition de l'image (On Image Appear)
- Sur disparition de l'image (On Image Vanish)
- Ouvrir l'application (Open Application)
- Ouvrir le navigateur (Open Browser)
- Actualiser le navigateur (Refresh Browser)
- Relire l'événement utilisateur (Replay User Event)
- Restaurer la fenêtre (Restore Window)
- Enregistrer l'image (Save Image)
- Sélectionner l'élément (Select Item)
- Sélectionner plusieurs éléments (Select Multiple Items)
- Envoyer le raccourci (Send Hotkey)
- Définir la zone de détourage (Set Clipping Region)
- Définir le focus (Set Focus)
- Définir le texte (Set Text)
- Placer dans le presse-papiers (Set To Clipboard)
- Définir l'attribut Web (Set Web Attribute)
- Afficher la fenêtre (Show Window)
- Déclencher le processus (Start Process)
- Déclencheur système (System Trigger)
- Prendre une capture d'écran (Take Screenshot)
- Tesseract OCR
- Texte existant (Text Exists)
- Info-bulle
- Saisir dans (Type Into)
- Saisir un texte sécurisé (Type Secure Text)
- Utiliser le premier plan
- Attendre un attribut (Wait Attribute)
- Attendre que l'élément disparaisse (Wait Element Vanish)
- Attendre que l'image disparaisse (Wait Image Vanish)
- Application event trigger
- Check/Uncheck
- Check App State
- Check Element
- Cliquer (Click)
- Click Event Trigger
- Fermer la fenêtre contextuelle
- Glisser et déposer
- Extract Table Data
- For Each UiElement
- Obtenir l'attribut (Get Attribute)
- Get Browser Data
- Obtenir le texte (Get Text)
- Get URL
- Go To URL
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- Inject Js Script
- Raccourcis clavier
- Keypress Event Trigger
- Mouse scroll
- Navigate Browser
- Sélectionner l'élément (Select Item)
- Set Browser Data
- Définir le navigateur du runtime (Set Runtime Browser)
- Définir le texte (Set Text)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- Use Application/Browser
- Joindre
- Vérifier (Check)
- Cliquer (Click)
- Glisser et déposer
- Extraire des données
- Obtenir l'attribut (Get Attribute)
- ObtenirEnfants
- ObtenirCibleRuntime
- GetText
- Get URL
- GoToUrl
- Mettre en surbrillance (Highlight)
- Pointer (Hover)
- IsEnabled
- Raccourci clavier
- Mouse scroll
- Ouvrir
- Sélectionner l'élément (Select Item)
- Prendre une capture d'écran (Take Screenshot)
- Saisir dans (Type Into)
- ÉtatAttente
- Effectuez une recherche par navigateur et récupérez les résultats à l'aide des API UI Automation
- Navigation sur le Web
- Rechercher des images
- Cliquer sur des images
- Déclencher et surveiller des événements
- Créer et remplacer des fichiers
- Pages HTML : extraire et manipuler des informations
- Manipulation des fenêtres
- Sélection de liste automatisée
- Rechercher et manipuler des éléments de fenêtre
- Gérer l'automatisation du texte
- Charger et traiter des images
- Gérer les actions activées par la souris
- Automatiser l'exécution des applications
- Exécution automatisée d'une application locale
- Navigation avec le navigateur
- Automatisation Web
- Exemple de fonctionnalités du déclencheur
- Computer Vision Local Server
- Automatisation mobile
- Notes de publication
- Compatibilité du projet
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Installer l'application
- Gérer l'application actuelle
- Gérer une autre application
- Ouvrir DeepLink
- Ouvrir l'URL
- Mobile Device Connection
- Balayer directionnel
- Dessiner un modèle
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Prendre une capture d'écran (Take Screenshot)
- Prendre une partie de capture d'écran
- Élément existant (Element Exists)
- Execute Command
- Obtenir l'attribut (Get Attribute)
- Get Selected Item
- Obtenir le texte (Get Text)
- Set Selected Item
- Définir le texte (Set Text)
- Balayer
- Tap
- Saisir texte
- Terminal
- Notes de publication
- À propos du package d'activités Terminal
- Compatibilité du projet
- Meilleures pratiques
- Rechercher un texte (Find Text)
- Get Color At Position
- Obtenir la position du curseur (Get Cursor Position)
- Obtenir le champ (Get Field)
- Obtenir le champ en position (Get Field at Position)
- Accéder à la zone d'écran (Get Screen Area)
- Obtenir le texte (Get Text)
- Obtenir le texte en position (Get Text at Position)
- Déplacer le curseur (Move Cursor)
- Move Cursor to Text
- Envoyer la touche Contrôle (Send Control Key)
- Envoyer les touches (Send Keys)
- Envoyer les touches en toute sécurité (Send Keys Secure)
- Définir le champ (Set Field)
- Définir le champ en position (Set Field at Position)
- Session de terminal (Terminal Session)
- Attendre le texte de champ (Wait Field Text)
- Attendre le texte d'écran (Wait Screen Text)
- Attendre le texte en position (Wait Text at Position)
À propos des activités UI Automation
Les activités d'automatisation de l'interface utilisateur vous permettent d'interagir avec les éléments de l'interface utilisateur graphique dans les applications logicielles. Ces activités comprennent le clic sur des boutons, la saisie dans des zones de texte, la sélection dans les menus déroulants, etc. Cela se fait en utilisant des robots UiPath qui effectuent des tâches de la même manière qu'un utilisateur humain, ce qui facilite l'automatisation des processus métier complexes et des tâches répétitives.
Lors de l’automatisation des interfaces utilisateur, la phase initiale consiste à comprendre la séquence logique des étapes qu’un utilisateur humain effectuerait. La phase suivante consiste à traduire ces étapes en activités et à les configurer. Les activités d'UI Automation peuvent servir de conteneurs, d'activités d'entrée, de sortie et de synchronisation, tandis que les propriétés d'activité déterminent la façon dont les Robots UiPath effectuent une Actions(Actions).
Les activités UI Automation incluent les packages suivants :
- Automatisation de l'interface utilisateur
- Computer Vision Local Server
- Automatisation mobile
- Terminal
Utilisez le tableau suivant pour identifier la compatibilité entre la plate-forme et les packages d'activités :
| Package d’activités | Windows - Projets Studio hérités | Projets Windows (Modern) Studio | Projets Studio multiplateformes |
|---|---|---|---|
| Automatisation de l'interface utilisateur |
|
|
|
| Computer Vision Local Server |
|
|
|
| Automatisation mobile |
|
|
|
| Terminal |
|
|
|
Le package d’activités UIAutomation offre une vaste gamme de fonctionnalités qui simulent le comportement humain. Il fournit des fonctionnalités puissantes et complètes conçues pour améliorer la productivité en créant des automatisations d'interface utilisateur, en permettant de gagner du temps et en minimisant les erreurs. Certains des cas d’utilisation les plus courants sont :
- Automatisation des processus métier, tels que le service client, la comptabilité, le traitement des commandes, l’intégration des employés, etc.
- L’extraction de données Web, telle que l’analyse des commentaires des clients, la comparaison des prix, la génération de leads, l’extraction des avis sur les produits, etc.
- Tests automatisés sur les interfaces utilisateur pour s’assurer que les applications fonctionnent correctement
Pour en savoir plus, consultez la sectionPackage UIAutomation.
Le package Serveur local Computer Vision ne contient aucune activité, mais une fois installé dans un projet, vous permet d'utiliser un serveur local AI Computer Vision.
AI Computer Vision est une compétence d’IA qui permet à tous les robots UiPath de capturer l’écran et d’identifier visuellement tous les éléments de l’interface utilisateur, plutôt que de se fier à des sélecteurs ou à des images. Il s’agit d’un algorithme qui permet une reconnaissance des interfaces utilisateur comme un humain, en utilisant un mélange d’IA, d’OCR, de correspondance approximative de texte et d’un système d’ancrage pour lier le tout ensemble.
Pour en savoir plus, consultez la sectionPackage de serveur local Computer Vision.
Le package d'activités Automatisation mobile ( Mobile Automation ) offre un ensemble complet d'activités pour automatiser les tests et les interactions d'applications mobiles. Il fournit des outils pour tester les applications Android et iOS, permettant d'effectuer des Actions telles que l'appui, le balayage, la saisie de texte et la validation d'éléments mobiles, entre autres. Les principales fonctionnalités du package d’activités incluent :
- Automatisation mobile multiplate-forme - automatisez les applications mobiles sur les plates-formes Android et iOS
- Interaction avec les éléments mobiles : effectuez des Actions comme appuyer, glisser, faire défiler et saisir du texte sur les éléments mobiles cibles
- Validation et vérification sur mobile - validez les propriétés des éléments mobiles, vérifiez les valeurs attendues et gérez des scénarios spécifiques
- Gestion des appareils mobiles : capturez des informations sur les appareils, gérez leur orientation, contrôlez la connectivité réseau, installez et désinstallez des applications et gérez les paramètres spécifiques aux appareils
Premiers pas avec l'automatisation mobile
Le package d'activités Terminal vous permet de vous connecter à un large éventail d'environnements de terminaux à l'aide d'une connexion directe ou d'émulateurs de terminal.
Vous pouvez ensuite utiliser des activités pour effectuer des Actions telles que récupérer du texte, des couleurs, des champs ou des positions à l’écran, envoyer des clés, déplacer le curseur ou attendre que certains textes ou champs apparaissent comme des déclencheurs.
Pour en savoir plus, accédez à la sectionPaquet de terminal (Terminal package) .
