Ensembles de tests

Test Sets are logical groups of test cases. The purpose of test sets is to define groups of tests that should be executed together within one run. For instance, a smoke test is a group of tests that only check for top-critical capabilities.

Whenever any test case from a smoke test fails, there is a critical problem. Executing a smoke test should not take too long. They are executed for instance whenever a developer commits changes to the source code.

By comparison, a regression test is a comprehensive test which should provide a detailed overview over the system under test. Execution often takes hours or even days. To define the set of tests to be executed for those purposes, test sets are created.

A test case can be assigned to several test sets.

Conditions

• Les ensembles de test dans Test Manager peuvent inclure à la fois des cas de test manuels et automatisés, y compris des cas de test automatisés provenant de plusieurs projets Studio.
• Les ensembles de test liés entre Orchestrator et Test Manager incluent uniquement les cas de test d'Orchestrator.
  Important :

  Les fonctionnalités de gestion des tests de tout locataire ont été transférées sur Test Manager. Les planifications de test ne sont donc plus disponibles dans Orchestrator, et vous ne pouvez plus exécuter de scénarios de test ou d'ensembles de tests directement à partir d'Orchestrator. Toutefois, vous pouvez continuer à exécuter des cas de test et des ensembles de test via les API d'Orchestrator pour l'automatisation de test, ou à l'aide de l' intégration native Test Manager - CI/CD.

• Vous pouvez exécuter des ensembles de test à partir d'un dossier d'exécution par défaut ou d'un dossier d'exécution spécifié. Cela vous permet d’exécuter exclusivement des cas de test qui font partie de ce dossier particulier. Par ailleurs, vous avez également la possibilité de spécifier des packages particuliers et leurs versions à partir desquelles les cas de test seront exclusivement exécutés.