テスト セット

Test Sets are logical groups of test cases. The purpose of test sets is to define groups of tests that should be executed together within one run. For instance, a smoke test is a group of tests that only check for top-critical capabilities.

Whenever any test case from a smoke test fails, there is a critical problem. Executing a smoke test should not take too long. They are executed for instance whenever a developer commits changes to the source code.

By comparison, a regression test is a comprehensive test which should provide a detailed overview over the system under test. Execution often takes hours or even days. To define the set of tests to be executed for those purposes, test sets are created.

A test case can be assigned to several test sets.

条件

• Test Manager のテスト セットには、手動のテスト ケースと自動のテスト ケース (複数の Studio プロジェクトの自動テスト ケースを含む) の両方を含めることができます。
• Orchestrator から Test Manager にリンクされたテスト セットには、Orchestrator のテスト ケースのみが含まれます。
  重要:

  どのテナントでも、テスト管理機能は Test Manager に移動されています。このため、テスト スケジュールは Orchestrator では利用できなくなっており、テスト ケースやテスト セットを Orchestrator から直接実行することはできません。ただし、テスト オートメーション用の Orchestrator API を使用するか、Test Manager と CI/CD のネイティブ連携を使用して、引き続きテスト ケースとテスト セットを実行できます。

• テスト セットは、既定の実行フォルダーまたは指定した実行フォルダーから実行できます。これにより、その特定のフォルダーに含まれるテスト ケースのみを実行できます。さらに、テスト ケースを排他的に実行する特定のパッケージとそのバージョンを指定するオプションもあります。