Exécutions de test

Vue d'ensemble (Overview)

Important :

Les fonctionnalités de gestion des tests ont été transférées sur Test Manager. Vous ne pouvez donc plus exécuter de scénarios de test sur tout nouveau locataire directement à partir de l'interface utilisateur d'Orchestrator, sauf par le biais des API d'automatisation de test d'Orchestrator ou à l'aide d' intégrations CI/CD. Pour exécuter des scénarios de test, utilisez désormais Test Manager.

Dans cette rubrique, vous pouvez apprendre à gérer vos exécutions de test. Les exécutions de test servent d'enregistrement immuable de l'exécution d'un ensemble de tests à un moment donné. Par comparaison, l'ensemble de tests est amené à évoluer, car il peut cibler une version d'application différente ou sa sélection de cas de test peut être modifiée.

Remarque :

Automated test executions have a default timeout of four days, that you cannot change. Any automated test execution that exceeds four days is marked as Cancelled.

Prérequis : pour effectuer des exécutions de test, le rôle Robot doit vous être attribué.

Exécuter des scénarios de test qui contiennent des connexions au service d'intégration Integration Service

Dans les scénarios de test et les projets qui contiennent des scénarios de test créés à l'aide d'une connexion Integration Service spécifique, vous ne pouvez pas affecter une connexion spécifique au moment de l'exécution, autre que celle utilisée pendant la phase de conception dans Studio.

Par exemple, si vous créez un scénario de test contenant une connexion Integration Service, puis que vous le publiez dans Orchestrator et l'exécutez indépendamment, aucune option n'est disponible pour affecter une connexion spécifique au moment de l'exécution.

Si vous publiez un projet Studio contenant des scénarios de test qui utilisent des connexions Integration Service à Orchestrator en tant que processus, l'option permettant de configurer la connexion au moment de l'exécution est disponible dans la section Package Requirements (Exigences du package) du processus.

Remarque :

Lorsque vous configurez la connexion dans la section Package Requirements , les cas de test continuent d'utiliser la connexion sélectionnée précédemment lors de leur conception dans Studio.

Exécuter à nouveau l’ensemble de tests

Important :

Pour tout nouveau locataire, vous ne pouvez réexécuter des ensembles de tests qu'à l'aide des API d'automatisation de test d'Orchestrator.

Vous pouvez exécuter à nouveau des ensembles de tests après une exécution précédente. Le résultat du nouveau cas de test remplacera le précédent affiché sur la page Exécutions de test.

Sachez que vous ne pouvez pas réexécuter des cas de test à partir d’un ensemble de tests lorsque le calcul de la couverture est activé.

1. Connectez-vous à Orchestrator.
2. Ouvrez votre dossier.
3. Accédez à Test (Testing) > Exécutions de test (Test Executions).
4. Sélectionnez une série de tests et accédez à Autres actions (More Actions) > Détails (Details).
5. Sélectionnez un cas de test et accédez à Autres actions (More Actions) > Exécuter à nouveau (Re-execute).
6. Configurez la cible d'exécution :
   • Utilisateur (User) : dans la liste déroulante, sélectionnez l'utilisateur qui est affecté à ce dossier spécifique. La valeur par défaut est définie sur Tout utilisateur (Any User).
   • Machine : sélectionnez la ressource de la machine dans la liste déroulante.
7. (Facultatif) Définissez des arguments personnalisés pour vos cas de test afin de remplacer les valeurs par défaut au niveau de l'ensemble de tests. Pour définir des arguments, vous devez avoir publié un package avec des arguments.
8. Cliquez sur Exécuter (Execute) pour confirmer.

Limites connues

Les résultats de la réexécution d'un ensemble de tests dans Orchestrator ne sont pas synchronisés avec Test Manager. Nous vous recommandons d'exécuter et de réexécuter les tests directement à partir de Test Manager.

Couverture de l'exécution des tests

Important :

For any tenant, test execution coverage is not available. You can view the activity coverage of your tests in Test Manager. For more information, visit Viewing activity coverage.

Important :

For any tenant, test management capabilities have been moved to Test Manager. As a result, test schedules are no longer available in Orchestrator, and you cannot execute test cases and test sets directly from Orchestrator anymore. However, you can continue executing test cases and test sets through Orchestrator APIs for Test automation, or using the native Test Manager - CI/CD integration.

Vous pouvez afficher des informations sur les activités qui ont été couvertes lors d'une exécution de test. Cette option est également disponible dans Studio, en tant que Couverture de l'activité (Activity Coverage).

Important :

Le calcul de la couverture d'activité est disponible lorsque vous sélectionnez cette option pour les ensembles de tests existants ou nouveaux. Pour plus d'informations, consultez Créer un ensemble de tests (Create test set).

1. Ouvrez votre dossier dans Orchestrator.
2. Accédez à Test (Testing) > Exécutions de test (Test Executions).
3. Sélectionnez une série de tests et accédez à Autres actions (More Actions) > Détails (Details).
4. Accédez à l'onglet Couverture (Coverage) pour afficher les détails de la couverture.

Les fichiers de couverture sont téléchargés vers l'onglet Pièces jointes (Attachments).

Figure 1. Onglet Couverture

Analyser les exécutions de test

Vous pouvez analyser les exécutions de test pour comprendre ce qui s’est passé dans les instances où l’exécution a échoué ou s’est bloquée.

Remarque :

Vous pouvez voir des captures d’écran d’exécutions de tests qui ont échoué en accédant à Automatisations (Automations) > Tâche (Job) > Détails de la tâche (Job Details). Pour bénéficier de cette fonctionnalité, vous devez activer les supports d’exécution au niveau de l’application. Pour plus d’informations, consultez Autorisations des supports d'exécution.

Figure 2. Détails de l'exécution

Vous pouvez choisir parmi les actions suivantes pour examiner vos séries de tests.

Actions	Description	Procédure
Détails de l'exécution	Affiche les détails du Robot, y compris les fichiers joints d’exécution, la variation des données et les captures d’écran. Assurez-vous que vous disposez des Autorisations des supports d'exécution (Execution Media Permissions).	Ouvrez votre dossier dans Orchestrator. Accédez à Test (Testing) > Exécutions de test (Test Executions). Sélectionnez une série de tests et accédez à Autres actions (More Actions) > Détails (Details). Cliquez sur Détails (Details) pour afficher les détails de l’exécution.
Afficher les assertions	Affiche les affirmations échouées ou réussies.	Ouvrez votre dossier dans Orchestrator. Accédez à Test (Testing) > Exécutions de test (Test Executions). Sélectionnez une série de tests et accédez à Autres actions (More Actions) > Détails (Details). Sélectionnez un cas de test et accédez à Autres actions (More Actions) > Afficher les assertions (View assertions).
Afficher les journaux	Affiche et exporte le journal détaillé des événements d’exécution.	Ouvrez votre dossier dans Orchestrator. Accédez à Test (Testing) > Exécutions de test (Test Executions). Sélectionnez une série de tests et accédez à Autres actions (More Actions) > Détails (Details). Sélectionnez un cas de test et accédez à Plus de détails (More details) > Afficher les journaux (View logs). Cliquez sur Exporter (Export) pour obtenir les détails de l'exécution du test au format CSV.

API d'exécutions de tests

Pour effectuer des requêtes concernant des activités liées aux éléments, vous pouvez utiliser les Tâches d’arrière-plan (Background Tasks), disponibles en interne via l'API. Pour plus d’informations sur les autorisations d'Orchestrator, consultez . Pour plus d'informations sur l'API d'automatisation de test, consultez Autorisations d'API d'automatisation de test.