Informes

Understand the progress, detect problems at a glance, and review KPIs through reports.

Tipos de informes

Los siguientes tipos de informes están disponibles:

• Default Test Manager dashboards provided by Insights.
• Informes de panel que proporcionan un desglose diario y semanal de los resultados de las pruebas, incluyendo la proporción superada o fallida, lista de ejecución de las pruebas y los KPI, como la cobertura total o defectos abiertos.

Reporting with Insights

Requisitos previos

To enable reporting with Insights, follow these steps:

1. Enable the Insights service on the same tenant as your Test Manager instance.

   You need an Automation Cloud Organization Administrator role to enable a service.

2. From Test Manager, activate the Enable reporting with Insights tenant-level setting.

   You need a Test Manager Administrator tenant role to enable the integration with Insights.

   For more information about activating the setting, visit Tenant level settings.

Información general

Once you enable the Insights integration in your Test Manager tenant, you will be able to access analytics for all your testing projects within that tenant. Insights retrieves data from Test Manager, based on a specific data model, and presents it through two predefined dashboards:

• Test Manager Execution Report – This dashboard provides an overview of all your test executions within your tenant.
• Test Manager Additional Examples – This dashboard provides an overview of all your testing projects within your tenant.

Figure 1. Test Manager Execution Report dashboard

Note: When you enable reporting with Insights, data from all Test Manager projects are uploaded to Insights. Therefore, all users with access to Insights will be able to generate reports on those projects, independent from their permissions in Test Manager.

Modelo de datos

Insights uses test case logs from Test Manager to generate the customizable dashboards. For more details on the data model used by Insights to generate the dashboards, check the Test Manager data model section.

Note: In the Test Manager data model, test case logs contain two types of results: technical and functional. Usually these results are the same, unless a technical error appears during execution. Technical errors can include infrastructure disruptions, automation errors, or other non-functional triggers. In any of these scenarios, the technical results will be label the test as failed. Functional results are meant to only reflect the outcome of business verifications. Therefore they indicate no-result in case of errors because of the lack of a reliable outcome.

Informes del panel de Test Manager

Puedes examinar los informes de cada proyecto de forma individual. Para ver los informes del panel, abre Test Manager y selecciona un proyecto de la lista para ver la página Panel .

Número de sección	Informar	Descripción
1	Resultados	Gráfico de barras que muestra los resultados de sus ejecuciones de pruebas. Para cambiar entre las vistas diaria y semanal, haz clic en el indicador de enfoque, en la parte superior derecha del panel, y elige una opción en el menú desplegable. El informe semanal se remonta a 14 semanas.
2	Indicador actual de día/semana	Indicador de día/semana de los resultados que se muestran en el gráfico de barras. Esta sección no aparece en la figura anterior.
3	KPI	Abrir defectos solo está disponible para proyectos conectados. Por ejemplo, informes de defectos del proyecto Jira conectado a Test Manager. El número de defectos definidos con la prioridad más alta en Jira se muestra en la sección Crítico . Puedes hacer clic en el hipervínculo para abrir el filtro de Jira. Si desvinculas una conexión, Defecto abierto ya no aparecerá. Cobertura completa El porcentaje de requisitos que tienen al menos un caso de prueba del número total de requisitos. Tasa de automatización El porcentaje de casos de prueba sin pasos automatizados o manuales definidos, así como los casos de prueba automatizados y manuales, respectivamente.
4	Últimos resultados	Las últimas ejecuciones de prueba que contribuyeron a los resultados de las pruebas mostrados en el gráfico de barras.

Escenario de caso de uso

Para aprovechar los informes de panel, ten en cuenta el siguiente escenario:

Incidencia

Por ejemplo, tienes un elevado número de defectos que deben tratarse, junto con un número igualmente alto de casos de prueba manuales.

Solución

En el panel de control puedes consultar el número de defectos y hacer clic en la sección Crucial del informe Defectos abiertos, para abrir el filtro en Jira. El informe Tasa de automatización indica el grado de automatización de tu proyecto de prueba. Con esta información, puedes empezar a reducir el número de casos de prueba manuales para que los casos de prueba automatizados sean más y se asignen más probadores para hacer frente al elevado número de defectos.