使用 Insights 报告

先决条件

要启用 Insights 报告功能，请执行以下步骤：

1. 在与 Test Manager 实例相同的租户上启用 Insights 服务。

   您需要具有 Automation Cloud 组织管理员角色才能启用服务。

2. 在 Test Manager 中，激活“启用 Insights 报告”租户级别设置。

   您需要具有Test Manager 管理员租户角色才能启用与 Insights 的集成。

   有关激活该设置的更多信息，请访问租户级别设置。

概述

Once you enable the Insights integration in your Test Manager tenant, you will be able to access analytics for all your testing projects within that tenant. Insights retrieves data from Test Manager, based on a specific data model, and presents it through the Test Manager Execution Report predefined dashboard. This dashboard provides an overview of all your test executions within your tenant.

图 1.Test Manager 执行报告仪表板

注意：当您启用 Insights 报告时，所有 Test Manager 项目中的数据都将上传到 Insights。 因此，所有有权访问 Insights 的用户都将能够生成有关这些项目的报告，而与其在 Test Manager 中的权限无关。

数据模型

Insights 使用 Test Manager 中的测试用例日志来生成可自定义的仪表板。 有关 Insights 用于生成仪表板的数据模型的更多详细信息，请查看Test Manager 数据模型部分。

注意：在 Test Manager 数据模型中，测试用例日志包含两种类型的结果：技术和功能。 通常，这些结果是相同的，除非在执行过程中出现技术错误。 技术错误可能包括基础架构中断、自动化错误或其他无法正常运行的触发器。 在任何这些场景中，技术结果都会将测试标记为失败。 功能结果仅反映业务验证的结果。 因此，如果出现错误，由于缺乏可靠的结果，它们不会指示任何结果。

Test Manager 数据模型

术语和概念

Test Manager 数据模型的结构基于以下概念：

概念	描述
Explore	探索的起点。 数据通过“探索”显现，我们可以将其视为对应于其中字段的一般实体。
视图	视图表示数据表，无论该表是数据库原生的还是使用 Looker 的派生表功能创建的。 每个视图中都有字段定义，每个定义通常对应于基础表中的列或 Looker 中的计算。
Dimension	作为“探索”中视图的一部分，维度是一个可分组字段，可用于筛选查询结果。 它可以是以下值之一： 与基础表中的列直接关联的属性。 事实或数值。 根据单行中其他字段的值计算得出的派生值。
Measure	作为“探索”中视图的一部分，“度量”参数声明一个新度量（聚合）并指定该度量的名称。 度量类型示例： integer 、 string 。

维度和度量

注意： “需求”、“测试用例”、“测试集”以及“测试执行”维度和度量仅在 Test Manager 中通过 Test Cloud 提供。

测试用例日志

下表描述了测试用例日志的可用维度和度量。

表 1.测试用例日志维度

维度	类型	描述
受分配人电子邮箱	字符串	测试用例分配到的用户的电子邮件地址。
自动化项目名称	字符串	链接到测试用例的自动化名称。
到期日期	日期	计划执行手动测试用例的日期。
执行开始时间	日期	测试执行的开始日期。
执行顺序	字符串	执行测试的用户名或机器人名称。
执行结束	日期	测试执行结束的日期。
执行类型	字符串	执行的类型： 用于自动化测试的“Automation”。 “手动”，用于手动测试。 对于未执行且处于“待处理”状态的测试用例，“无”。
主机名	字符串	计算机名称。
项目名称	字符串	Test Manager 项目的名称。
项目前缀	字符串	Test Manager 项目的前缀。
报告日期	日期	执行测试的日期。 这是一个不带时间也不带时区的日期。
结果	字符串	测试用例结果：“通过”、“失败”或“无”。
机器人名称	字符串	执行测试的机器人的名称。
测试执行名称	字符串	测试执行的名称。

表 2.测试用例日志衡量指标

衡量指标	类型	描述
总计数	整数	测试用例日志的总数。
计数通过	字符串	通过的测试用例日志数。
计数失败（技术）	整数	如果执行过程中发生异常，技术结果会将结果指示为失败。
无结果计数（技术）	整数	技术结果表明，如果执行过程中发生异常，则不会产生任何结果。
DurationInSeconds	整数	总运行时间（以秒为单位）。

要求

下表描述了要求的可用维度和衡量指标。

表 3.要求维度

维度	类型	描述
项目名称	字符串	项目名称和项目前缀的组合旨在使其具有唯一性并提高可读性。
名称	字符串	需求键及其名称的组合，旨在使其具有唯一性并提高可读性。

表 4.要求衡量指标

衡量	类型	描述
测试用例总数	整数	分配给需求的测试用例数量。
自动测试用例计数	整数	分配给需求的自动化测试用例的数量。
手动测试用例计数	整数	分配给需求的手动测试用例数量。
通过的测试用例计数	整数	分配给需求并在最近一次测试运行中通过的测试用例数量。
失败的测试用例计数	整数	在最近的测试运行中分配给需求的测试用例数量。
无测试用例计数	整数	分配给需求但在最近的测试运行中没有结果的测试用例数量。
需求总数	整数	需求总数。

测试集

下表描述了测试集的可用维度和度量。

注意：对于分配的测试用例，测试集视图包含有关静态测试分配的信息。

表 5.测试集维度

维度	类型	描述
项目名称	字符串	项目名称和项目前缀的组合旨在使其具有唯一性并提高可读性。
名称	字符串	项目名称和项目前缀的组合旨在使其具有唯一性并提高可读性。
机器人名称	字符串	执行测试集的机器人的名称。
来源	字符串	测试集的来源：Orchestrator 或 Test Manager。

表 6.测试集衡量指标

衡量	类型	描述
测试集总数	整数	测试集的数量。
自动测试用例计数	字符串	测试集中自动化测试用例的数量。
手动测试用例计数	整数	Number of manual test cases in the test set.

测试执行

下表描述了测试执行的可用维度和衡量指标。

表 7.测试执行维度

维度	类型	描述
项目名称	字符串	项目前缀和名称的组合，以使其唯一并提高可读性。
名称	字符串	执行 ID 和名称的组合，用于确保其唯一并提高可读性。
测试集名称	字符串	测试集密钥和名称的组合，用于使其唯一并提高可读性。
执行类型	字符串	执行类型：“手动”、“自动”、“无”或“混合”。
来源	字符串	执行的来源：Test Manager、Orchestrator 或 Studio。

表 8.测试执行衡量指标

衡量	类型
测试执行总数	整数
手动执行类型计数	整数
自动执行类型计数	整数
混合执行类型计数	整数
测试执行的持续时间（秒）	整数

测试用例

下表描述了测试用例的可用维度和度量。

表 9.测试用例维度

维度	类型	描述
项目名称	Guid	项目名称和项目前缀的组合旨在使其具有唯一性并提高可读性。
名称	字符串	项目名称和项目前缀的组合旨在使其具有唯一性并提高可读性。
包名称	字符串	不适用

表 10.测试用例衡量指标

衡量	类型
测试用例总数	整数
通过的测试用例日志的数量	整数
失败的测试用例日志的数量	整数