Relatórios

Understand the progress, detect problems at a glance, and review KPIs through reports.

Tipos de relatório

Os seguintes tipos de relatório estão disponíveis:

• Default Test Manager dashboards provided by Insights.
• Relatórios do painel que fornecem um resumo diário e semanal dos resultados de testes, incluindo a taxa de aprovação/reprovação, lista de execução de testes e KPIs, tais como a cobertura total ou defeitos em aberto.

Reporting with Insights

Pré-requisitos

To enable reporting with Insights, follow these steps:

1. Enable the Insights service on the same tenant as your Test Manager instance.

   You need an Automation Cloud Organization Administrator role to enable a service.

2. From Test Manager, activate the Enable reporting with Insights tenant-level setting.

   You need a Test Manager Administrator tenant role to enable the integration with Insights.

   For more information about activating the setting, visit Tenant level settings.

Visão geral

Once you enable the Insights integration in your Test Manager tenant, you will be able to access analytics for all your testing projects within that tenant. Insights retrieves data from Test Manager, based on a specific data model, and presents it through two predefined dashboards:

• Test Manager Execution Report – This dashboard provides an overview of all your test executions within your tenant.
• Test Manager Additional Examples – This dashboard provides an overview of all your testing projects within your tenant.

Figura 1. Painel do Relatório de execução do Test Manager

Note: When you enable reporting with Insights, data from all Test Manager projects are uploaded to Insights. Therefore, all users with access to Insights will be able to generate reports on those projects, independent from their permissions in Test Manager.

Modelo de dados

Insights uses test case logs from Test Manager to generate the customizable dashboards. For more details on the data model used by Insights to generate the dashboards, check the Test Manager data model section.

Note: In the Test Manager data model, test case logs contain two types of results: technical and functional. Usually these results are the same, unless a technical error appears during execution. Technical errors can include infrastructure disruptions, automation errors, or other non-functional triggers. In any of these scenarios, the technical results will be label the test as failed. Functional results are meant to only reflect the outcome of business verifications. Therefore they indicate no-result in case of errors because of the lack of a reliable outcome.

Relatórios do painel do Test Manager

Você pode examinar os relatórios de cada projeto individualmente. Para visualizar relatórios de painéis, abra o Test Manager e selecione um projeto da lista para visualizar a página Painel .

Número da seção	Relatar	Description
1	Resultados	Gráfico de barras exibindo os resultados de suas execuções de teste. Para alternar entre as exibições diárias e semanais, clique no indicador de foco no lado superior direito do painel e escolha uma opção no menu suspenso. O relatório semanal remonta a 14 semanas.
2	Indicador de dia/semana atual	Indicador de dia/semana dos resultados exibido no gráfico de barras. Essa seção não é capturada na figura acima.
3	KPIs	A opção Defeitos em aberto está disponível apenas para projetos conectados. Por exemplo, relatórios de defeitos do projeto do Jira conectado ao Test Manager. O número de defeitos definidos com a maior prioridade no Jira é exibido na seção Crítico . Você pode clicar no hiperlink para abrir o filtro do Jira. Se você desvincular uma conexão, o Defeito em aberto não será mais exibido. Cobertura total A porcentagem de requisitos que têm pelo menos um caso de teste do número total de requisitos. Classificação da automação A porcentagem de casos de teste sem automação/etapas manuais definidas, assim como os casos de teste automatizados e manuais, respectivamente.
4	Últimos resultados	Execuções de teste mais recentes que contribuíram para seus resultados de teste exibidas no gráfico de barras.

Cenário do caso de uso

Para tirar proveito dos relatórios do painel, considere o seguinte cenário:

Issue

Por exemplo, você precisa lidar com um grande número de defeitos, além de um número igualmente grande de casos de teste manuais.

Solução

Você pode dar uma olhada no painel para verificar o número de defeitos e pode clicar na seção Crítico no relatório de Defeitos em aberto para abrir o filtro no Jira. O relatório de Taxa de automação indica o grau de automação de seu projeto de teste. Ao usar essa informação, você pode reduzir o número de casos de teste manuais, para que os casos de teste automatizados tomem a frente, e pode alocar mais testadores para lidar com o alto número de defeitos.