テスト実行

概要

ここでは、テスト実行の管理方法について説明します。テスト実行とは、任意のテストセットによる、ある特定の時点における実行結果を、変更不可能な形で記録する機能です。これに対して、テストセットはいつでも変更できます。別のアプリケーションバージョンを対象とすることや、選択するテストケースを変更することができるからです。

テストセットを再実行する

以前に実行したテストセットを再実行できます。そのテストケースの新しい結果によって、[テスト実行] ページに表示されている前のテストケースの結果が上書きされます。

カバレッジの計算が有効化されているテストセットのテストケースは再実行できませんので、ご注意ください。

Orchestrator にログインします。
フォルダーを開きます。
[テスト] > [テスト実行] に移動します。
テスト実行を選択し、[その他のアクション] > [詳細] に移動します。
テストケースを選択して、[その他のアクション] > [再実行] に移動します。
実行ターゲットを設定します。
- ユーザー: その特定のフォルダーに割り当てられたユーザーをドロップダウンリストから選択します。既定では [すべてのユーザー] に設定されています。
- マシン: ドロップダウンリストからマシンリソースを選択します。
(任意) テストケースのカスタム引数を定義して、テストセットレベルで既定値を上書きします。引数を定義するには、引数を含むパッケージをパブリッシュしておく必要があります。
[実行] をクリックして確定します。

テスト実行のカバレッジ

テスト実行時にカバーされたアクティビティに関する情報を表示できます。このオプションはアクティビティカバレッジと同様に、Studio でも使用できます。

重要: 既存または新規のテストセットにこのオプションを選択した場合、アクティビティカバレッジの計算機能を利用できます。詳しくは、「テストセットを作成する」をご覧ください。

Orchestrator で目的のフォルダーを開きます。
[テスト] > [テスト実行] に移動します。
テスト実行を選択し、[その他のアクション] > [詳細] に移動します。
[カバレッジ] タブに移動して、カバレッジの詳細を確認します。

カバレッジファイルは [添付ファイル] タブにアップロードされます。

テスト実行を分析する

テスト実行を分析して、実行が失敗した、またはスタックしたインスタンスの詳細を把握できます。

注: [オートメーション] > [ジョブ] > [ジョブの詳細] に移動すると、失敗したテスト実行のスクリーンショットをご覧ください。この機能を利用するには、アプリケーションレベルで実行メディアを有効化しておく必要があります。詳細は、「実行メディアの権限」をご覧ください。

テスト実行の内容は、次のような操作によって確認できます。

アクション	説明	手順
実行の詳細	実行結果の添付ファイル、データバリエーション、スクリーンショットなどの、ロボットの詳細情報を表示します。実行メディアに対する権限を持っている必要があります。	Orchestrator で目的のフォルダーを開きます。 [テスト] > [テスト実行] に移動します。テスト実行を選択し、[その他のアクション] > [詳細] に移動します。 [詳細] をクリックすると、実行の詳細が表示されます。
アサーションを表示	失敗した、または成功したアサーションを表示します。	Orchestrator で目的のフォルダーを開きます。 [テスト] > [テスト実行] に移動します。テスト実行を選択し、[その他のアクション] > [詳細] に移動します。テストケースを選択し、[その他のアクション] > [アサーションを表示] に移動します。
ログを表示	実行イベントの詳細ログを表示およびエクスポートします。	Orchestrator で目的のフォルダーを開きます。 [テスト] > [テスト実行] に移動します。テスト実行を選択し、[その他のアクション] > [詳細] に移動します。テストケースを選択し、[その他のアクション] > [ログを表示] に移動します。 [エクスポート] をクリックして、テスト実行の詳細を CSV 形式で取得します。

テスト実行 API

アイテム関連のアクティビティに関するクエリの実行には、API を通じて内部で使用できるバックグラウンドタスクを使用できます。Orchestrator の権限に関する詳細は、「ロールについて」をご覧ください。テストオートメーション API の詳細は、「テストオートメーション API のアクセス許可」をご覧ください。