- Introduction
- Démarrage
- Créer sur n’importe quel canevas
- Créer avec le cas
- Référence (Reference)
- Définition des clés de cas (système vs. externe)
- Établissement des contrats d'E/S et de réécriture de la tâche
- Modélisation des étapes primaires et secondaires
- Déclencher un cas à partir de Data Fabric
- Implémentation des personas et des autorisations au niveau de l'étape
- Définition des SLA et des règles d'escalade automatisées
- Configuration d'une boucle de retraitement (renouvellement)
- Configurer et tester l'agent Case Manager (aperçu)
- Créer avec Flow
- Créer avec BPMN
- Opérations
- Surveillance
- Optimisation
- Informations de référence
Processus de test
Testez les workflows RPA, les agents d'IA et les tâches humaines dans Maestro Orchestrate en validant chaque composant séparément avant les tests de processus de bout en bout.
Approche de test
Le test des processus Maestro Orchestrate repose sur trois principes:
- Conservez ce qui fonctionne: testez les workflows RPA dans votre processus Maestro Orchestrate de la même manière que vous les avez toujours testés.
- Testez chaque partie séparément : la RPA, les agents et les tâches humaines ont chacun leurs propres modèles de test. Le test des pièces individuellement permet de trouver plus facilement ce qui est en panne lorsque quelque chose ne va pas.
- Testez l'ensemble du processus : des tests de bout en bout vérifient que les étapes se connectent correctement, que les données circulent comme vous le souhaitez et que le résultat métier est le bon.
Les processus Maestro Orchestrate diffèrent des workflows RPA de manière à façonner cette approche. Les workflows RPA s'exécutent en quelques secondes et les mêmes entrées produisent toujours les mêmes sorties. Les processus Maestro Orchestrate peuvent s'exécuter pendant des minutes, des heures ou des jours. Ils combinent la RPA, les agents et les étapes humaines dans un même flux. Ils dépendent de systèmes externes que vous ne contrôlez pas.
Les processus Maestro Orchestrate deviennent directement testables avec des outils conçus pour eux. Les améliorations ci-dessous expliquent comment y accéder.
Ce que vous pouvez faire aujourd'hui
Test des workflows RPA: les workflows RPA utilisés dans un processus Maestro Orchestrate peuvent être testés avec des cas de test dans le projet RPA, de la même manière que pour tout autre workflow RPA. Les entrées de test vérifient que la sortie correspond aux attentes. Aucun outil spécifique à Maestro Orchestrate n’est requis.
Tests d'agents: les agents utilisés dans les processus Maestro Orchestrate peuvent être testés avec des ensembles d'évaluation dans Studio Web. Un ensemble d'évaluation est une liste d'entrées de test associées aux réponses que vous attendez de l'agent. Il exécute l'agent pour chaque entrée et vérifie la réponse réelle à celle attendue. Cela compte davantage lorsque des agents prennent des décisions importantes.
Tests de processus de bout en bout: un cas de test Studio peut exécuter un processus Maestro Orchestrate publié avec des données de test préparées, puis vérifier la sortie finale. Pour les nouveaux processus Maestro Orchestrate, il s'agit de l'endroit le plus important pour commencer.
Exécutions de débogage : l'exécution de débogage dans Studio Web est le bon outil pour vérifier le comportement d'un processus pendant la création. Il fournit des traces étape par étape, des mises à jour des variables en temps réel et un historique des exécutions de débogage passées.
Comment créer votre pratique de test Maestro Orchestrate
Créez la couverture dans l'ordre :
- Commencez par des tests de bout en bout sur vos processus les plus critiques : un test par résultat métier critique. Ce sont les tests qui empêchent les problèmes les plus graves d'atteindre l'environnement de production.
- Ajoutez des tests d'agent sur les processus qui s'appuient sur des agents : les réponses de l'agent varient plus que les autres parties du processus. Testez-les séparément afin de pouvoir détecter rapidement les problèmes spécifiques à l'agent.
- Développez pour gérer les échecs et les cas extrêmes: ajoutez des tests pour les entrées non valides, les étapes échouées et d'autres situations dans lesquelles les choses va mal. Ajoutez des tests pour les workflows RPA utilisés dans plusieurs processus Maestro Orchestrate.
Les parties les plus difficiles du test de Maestro Orchestrate
Quatre défis reviennent souvent. Anticipez-les dès le départ.
Processus de longue durée
Les processus Maestro Orchestrate peuvent s'exécuter pendant des heures ou des jours. Le même processus peut prendre 30 minutes en production et 2 minutes en test, en fonction des données et de la réactivité des systèmes externes. Cela rend les assertions basées sur la synchronisation non fiables. Testez ce que le processus a produit et les étapes qu’il a exécutées, pas le temps qu’il a pris.
Dépendances système externes
Les tests de bout en bout se connectent à des systèmes externes réels. Cela signifie que les tests peuvent échouer pour des raisons qui n'ont rien à voir avec votre processus : un délai d'attente de connexion, une limite de taux tiers, un système en panne. Utilisez une sandbox ou une version de test de ces systèmes lorsque cela est possible. Si une connexion échoue de manière aléatoire pendant le développement, traitez-la comme un problème de connexion, et non comme un véritable échec de test.
Variabilité de l'agent
Deux exécutions du même agent avec la même entrée peuvent produire des sorties différentes. Les assertions d'égalité échoueront par intermittence. Les ensembles d'évaluations sont conçus pour cela. Utilisez des règles de comparaison qui permettent une variation raisonnable plutôt que d'exiger une correspondance exacte.
Étapes de l'intervention humaine (HITL)
Les tests doivent s'exécuter de bout en bout sans intervention humaine, mais les étapes de Maestro Orchestrate HITL attendent qu'une personne réelle agisse. Il n’existe aucun moyen intégré d’injecter une réponse autonome. La bonne solution de contournement dépend de la façon dont vos étapes HITL sont configurées. Votre équipe de compte peut vous aider sur l'approche spécifique.