Résultats de tests

Les résultats de test dans Test Manager fournissent des informations sur la conception, l'exécution, la mise à jour ou la suppression des ensembles de test qui ont été exécutés.

Lorsque vous démarrez l'exécution d'un ensemble de test, Test Manager effectue le processus suivant :

1. Une exécution de test est créée dans la section Résultats de tests de Test Manager. Celle-ci va servir de conteneur pour les résultats de test.
2. Pour chaque cas de test de l'ensemble de test exécuté, un journal de cas de test vide est généré. Ce journal sera joint à l'exécution de test et contiendra ses résultats de test associés.
3. Au fur et à mesure de l'exécution, Test Manager va remplir chaque journal de cas de test avec les résultats et les informations de journal associées.

Remarque :

À chaque fois qu’une exécution de test est créée, des journaux de cas de test sont ajoutés pour chaque cas de test associé de l’ensemble de test d’origine. Cela permet que les exécutions de test existantes restent actualisées, quelles que soient les mises à jour et les suppressions effectuées sur l’ensemble de tests d’origine.

La table ci-dessous illustre le processus d'exécution d'un ensemble de test dans Test Manager.

Par conséquent, après l'exécution d'un ensemble de test, toute modification apportée à l'ensemble de test ou à ses cas de test associés n'affecte pas les résultats des exécutions précédentes. Même lorsqu'un ensemble de test est supprimé, toutes les exécutions de tests restent inchangées.

Analyser les résultats de test

To view test executions, open Test Results in Test Manager. The execution of each test is listed as a test execution entry. To understand how the test executions work behind the scenes, see Test Results.

En analysant l'exécution de vos tests, vous pouvez effectuer les actions suivantes :

• Recherchez les résultats de test qui ont été exécutés manuellement ou automatiquement via Orchestrator.
• Vérifiez la progression de l'exécution des exécutions de tests.
• Examinez les journaux et les pièces jointes.
• Créez des défauts dans votre système de gestion des défauts directement à partir de Test Manager, si vous disposez d'une intégration d'outil de gestion du cycle de vie des applications.

Par défaut, les exécutions de tests sont triées en fonction de la date à laquelle chaque exécution s'est terminée. Les exécutions en cours et en attente sont placées en premier.

Vous pouvez identifier le statut grâce aux codes couleur attribués à chaque exécution de test, comme suit :

• Vert : cas de test qui ont réussi.
• Rouge : cas de test qui ont échoué.
• Gris : cas de test sans résultats définitifs, tels que des cas de test qui n'ont pas encore été exécutés mais qui font partie d'un ensemble de test en cours d'exécution.

Résultats de test automatisés

The results from automated test executions are imported from Orchestrator automatically. To have your automated tests imported to Test Manager, you need to meet the following condition: The automated test needs to be part of a test set on your Test Manager project. For more information, see Automated Tests.

Remarque :

Si une exécution de test d'Orchestrator contient des résultats pour des cas de test de plusieurs projets dans Test Manager, l'exécution de test est divisée dans Test Manager. Les résultats apparaissent dans les projets où se trouvent les cas de test.

Utiliser les résultats d'exécution de tests

To get detailed results from a test execution, go to Test Results and click an entry to open the detailed view. A typical test execution detailed view shows information on when the executions started, duration, and test case logs.

You can use the Reporting Date filter to set a single date for all the results from the test execution. This is useful when you run test overnight, where some test cases are executed before and after midnight. Otherwise, the results are going to be split between different dates in the reports.

In the Results section you can examine all the test cases that were executed within the test set. You can take actions for each test case. For more info, see Test case logs

Journaux de cas de test

The test case logs hold information such as steps description, error messages, and screenshots that were collected during a test set execution. To open a test case log, go to Test Results, open a test execution and then click a test case Key.

Remarque :

The Screenshots tab is available only if screenshots were taken during the test case execution. To make sure that Orchestrator takes screenshots during executions, check for Test Case Execution Artifacts permissions.

You can examine the test case details by clicking the Open Test Case icon.

Créer des défauts à partir des résultats

You can create defect reports including the execution log to your external defect management system, if you already have it integrated with Test Manager. For more information, see Defect synchronization.

Synchronisation des défauts

You can synchronize execution results with external tools, as part of the Application Lifecycle Management tool integration. Information that is gathered during execution, such as results, logs, timestamps, and other details is synchronized with the tool that you have integrated with Test Manager.

Veuillez noter qu'à l'heure actuelle, il ne peut y avoir qu'une seule connexion activée pour la synchronisation globale des défauts par projet.

Remarque :

• To synchronize defects, you need to configure a connector in Test Manager. See available connections in Test Manager.
• You need to have executed a test set first.

Créer un défaut

Vous pouvez créer des défauts lorsque vous accédez aux journaux de cas de test sur la page Résultats de test (Test Results).

1. Accédez aux résultats de test.

2. Ouvrez un résultat de test et cliquez sur la clé de cas de test pour ouvrir les journaux.

3. Cliquez sur Tâches (Tasks) et sélectionnez Créer un défaut (Create Defect).

   

Le défaut est créé et synchronisé avec votre outil externe. Vous pouvez ouvrir le défaut directement dans l'outil (par exemple, Atlassian Jira) en accédant au résultat d'exécution de test qui présente un défaut synchronisé.

Dissocier le défaut

Lorsque vous dissociez des défauts d'un outil externe, l'entrée créée dans l'outil reste inchangée. Dans Test Manager, le résultat de l'exécution de test ne sera pas lié à un outil externe.

1. Accédez aux résultats de test.
2. Ouvrez un résultat de test, puis cliquez sur Tâches (Tasks).
3. Sélectionnez Dissocier le défaut (Unlink Defect).