Insights を使用してレポートを作成する

前提条件

Insights を使用したレポート作成を有効化するには、以下の手順を実行します。

1. Test Manager インスタンスと同じテナントで Insights サービスを有効化します。

   サービスを有効化するには、Automation Cloud の Organization Administrator のロールが必要です。

2. Test Manager から、テナント レベルの設定 [Insights を使用したレポート作成を有効化] をアクティブ化します。

   Insights との連携を有効化するには、Test Manager Administrator のテナント ロールが必要です。

   設定のアクティブ化について詳しくは、「テナント レベルの設定」をご覧ください。

概要

Test Manager テナントで Insights との連携を有効化すると、そのテナント内のすべてのテスト プロジェクトの分析にアクセスできるようになります。Insights は特定のデータ モデルに基づいて Test Manager からデータを取得し、定義済みの [Test Manager 実行レポート] ダッシュボードにそのデータを表示します。このダッシュボードには、テナント内のすべてのテスト実行の概要が表示されます。

図 1. [Test Manager 実行レポート] ダッシュボード

注: Insights を使用したレポート作成を有効化すると、Test Manager のすべてのプロジェクトのデータが Insights にアップロードされます。そのため、Test Manager での権限を問わず、Insights へのアクセス権を持つすべてのユーザーが、これらのプロジェクトに関するレポートを生成できるようになります。

データ モデル

Insights は、Test Manager のテスト ケース ログを使用して、カスタマイズ可能なダッシュボードを生成します。Insights がダッシュボードの生成に使用するデータ モデルについて詳しくは、「Test Manager のデータ モデル」セクションをご覧ください。

注: Test Manager のデータ モデルでは、テスト ケース ログに「技術」と「機能」の 2 種類の結果が含まれます。実行中に技術的なエラーが発生しない限り、これらの結果は通常、同じです。技術的なエラーには、インフラストラクチャの中断、オートメーション エラー、またはその他のトリガーの不具合などがあります。これらのどのシナリオでも、技術的な結果の場合は、テストに「失敗」としてラベルが付けられます。機能的な結果は、業務上の検証結果を反映することのみが目的です。したがって、信頼できる結果がないためにエラーが発生した場合は、「結果なし」と示されます。

Test Manager のデータ モデル

用語と概念

Test Manager のデータ モデルの構造は、次の概念に基づいています。

概念	説明
Explore	検索の出発点。 データは、Explore に表示されます。Explore は、その中のフィールドに対応する汎用エンティティと考えることができます。
表示	ビューはデータのテーブルを表します。そのテーブルがデータベースにネイティブなものであるのか、それとも Looker の派生テーブル機能を使用して作成されているのかは関係ありません。 各ビュー内にはフィールド定義があり、それぞれのフィールド定義は通常、基になるテーブルの列または Looker の計算式に対応しています。
Dimension	Explore 内のビューの一部である Dimension はグループ化可能なフィールドであり、クエリ結果のフィルター処理に使用できます。 Dimension は次のいずれかです。 基になるテーブルの列に直接関連付けられている属性。 事実または数値。 1 つの行の他のフィールドの値に基づいて計算される派生値。
Measure	Explore 内のビューの一部である Measure パラメーターは、新しい Measure (集計) を宣言し、その Measure の名前を指定します。 Measure の種類の例: integer、string

Dimension と Measure

注: 要件、テスト ケース、テスト セット、テスト実行の Dimension と Measure は、Test Manager でのみ、Test Cloud を介して利用可能です。

テスト ケース ログ

次の表で、テスト ケース ログで利用可能な Dimension と Measure について説明します。

表 1. テスト ケース ログのディメンション

Dimension	入力	説明
担当者のメール アドレス	string	テスト ケースが割り当てられたユーザーのメール アドレスです。
オートメーション プロジェクト名	string	テスト ケースにリンクされているオートメーションの名前です。
期限日	Date	手動テスト用のテスト ケースがスケジュールされた日付です。
実行開始日時	Date	テスト実行が開始された日付です。
実行者	string	テストを実行したユーザー名またはロボット名です。
Execution End	Date	テスト実行が終了した日付です。
実行の種類	string	実行の種類です。 自動化: 自動化されたテストです。 手動: 手動テストです。 実行されず、 保留中 ステートのテスト ケースの場合は [なし]
ホスト マシン名	string	マシンの名前です。
プロジェクト名	string	Test Manager プロジェクトの名前です。
プロジェクトのプレフィックス	string	Test Manager プロジェクトのプレフィックスです。
レポートの日付	Date	テストが実行された日付です。 これは、時刻もタイムゾーンもない日付です。
結果	string	テスト ケースの結果: [合格]、[失敗]、または [なし]
ロボット名	string	テストを実行したロボットの名前です。
テスト実行名	string	テスト実行の名前。

表 2. テスト ケース ログの Measure

Measure	入力	説明
合計数	integer	テスト ケース ログの総数です。
成功回数	string	成功したテスト ケース ログの数です。
失敗回数 (技術的問題)	integer	技術的な結果は、実行中に例外が発生した場合、結果を 失敗 として示します。
結果の回数なし (技術的問題)	integer	技術的な結果では、実行中に例外が発生した場合、 結果が示されません 。
期間 (秒)	integer	合計実行時間 (秒単位) です。

要件

次の表で、要件で利用可能な Dimension と Measure について説明します。

表 3. 要件の Dimension

Dimension	入力	説明
プロジェクト名	string	名前を一意にし、読みやすくするために、プロジェクト名とプロジェクトのプレフィックスを組み合わせています。
名前	string	名前を一意にし、読みやすくするために、要件のキーとその名前を組み合わせています。

表 4. 要件の Measure

Measure	入力	説明
テスト ケースの合計数	integer	要件に割り当てられているテスト ケースの数です。
自動テスト ケースの数	integer	要件に割り当てられている自動テスト ケースの数です。
手動テスト ケースの数	integer	要件に割り当てられている手動テスト用のテスト ケースの数です。
合格したテスト ケースの数	integer	要件に割り当てられているテスト ケースのうち、最新のテスト実行で合格したテスト ケースの数です。
失敗したテスト ケースの数	integer	要件に割り当てられているテスト ケースのうち、最新のテスト実行で失敗したテスト ケースの数です。
「なし」のテスト ケースの数	integer	要件に割り当てられているテスト ケースのうち、最新のテスト実行の結果がないテスト ケースの数です。
要件の合計数	integer	要件の合計数です。

テスト セット

次の表で、テスト セットで利用可能な Dimension と Measure について説明します。

注: 割り当て済みのテスト ケースの場合、テスト セットの表示には静的なテストの割り当てに関する情報が含まれます。

表 5. テスト セットの Dimension

Dimension	入力	説明
プロジェクト名	string	名前を一意にし、読みやすくするために、プロジェクト名とプロジェクトのプレフィックスを組み合わせています。
名前	string	名前を一意にし、読みやすくするために、プロジェクト名とプロジェクトのプレフィックスを組み合わせています。
ロボット名	string	テスト セットを実行したロボットの名前です。
ソース	string	テスト セットのソースです (Orchestrator または Test Manager)。

表 6. テスト セットの Measure

Measure	入力	説明
テスト セットの合計数	integer	テスト セットの数です。
自動テスト ケースの数	string	テスト セットに含まれる自動化されたテスト ケースの数です。
手動テスト ケースの数	integer	テスト セットに含まれる手動テスト用のテスト ケースの数です。

テスト実行

次の表で、テスト実行で利用可能な Dimension と Measure について説明します。

表 7. テスト実行の Dimension

Dimension	入力	説明
プロジェクト名	string	名前を一意にし、読みやすくするために、プロジェクトのプレフィックスと名前を組み合わせています。
名前	string	名前を一意にし、読みやすくするために、実行 ID と名前を組み合わせています。
テスト セット名	string	名前を一意にし、読みやすくするために、テスト セットのキーと名前を組み合わせています。
実行の種類	string	実行の種類です (手動、自動、混合)。
ソース	string	実行のソースです (TestManager、Orchestrator、または Studio)。

表 8. テスト実行の Measure

Measure	入力
テスト実行の合計数	integer
手動の実行の数	integer
自動の実行の数	integer
混合の実行の数	integer
テストの実行時間 (秒単位)	integer

テスト ケース

次の表で、テスト ケースで利用可能な Dimension と Measure について説明します。

表 9. テスト ケースの Dimension

Dimension	入力	説明
プロジェクト名	GUID	名前を一意にし、読みやすくするために、プロジェクト名とプロジェクトのプレフィックスを組み合わせています。
名前	string	名前を一意にし、読みやすくするために、プロジェクト名とプロジェクトのプレフィックスを組み合わせています。
パッケージ名	string	N/A

表 10. テスト ケースの Measure

Measure	入力
テスト ケースの合計数	integer
成功したテスト ケースのログの数	integer
失敗したテスト ケースのログの数	integer