Gerar relatórios com o Insights

Pré-requisitos

Para habilitar a geração de relatórios com o Insights, siga estas etapas:

1. Habilite o serviço Insights no mesmo tenant que sua instância do Test Manager.

   Você precisa da função Organization Administrator do Automation Cloud para habilitar um serviço.

2. No Test Manager, ative a configuração no nível do tenant Habilitar relatórios com o Insights .

   Você precisa de uma função de tenant Test Manager Administrator para habilitar a integração com o Insights.

   Para obter mais informações sobre como ativar a configuração, visite Configurações do nível de tenant.

Visão geral

Depois de habilitar a integração do Insights em seu tenant do Test Manager, você poderá acessar a análise para todos os seus projetos de teste dentro desse tenant. O Insights recupera dados do Test Manager, com base em um modelo de dados específico, e os apresenta por meio do painel predefinido Relatório de execução do Test Manager . Este painel fornece uma visão geral de todas as suas execuções de testes dentro do seu tenant.

Figura 1. Painel do Relatório de execução do Test Manager

Observação: quando você habilita relatórios com o Insights, os dados de todos os projetos do Test Manager são carregados no Insights. Portanto, todos os usuários com acesso ao Insights poderão gerar relatórios sobre esses projetos, independentemente de suas permissões no Test Manager.

Modelo de dados

O Insights usa logs de casos de teste do Test Manager para gerar os painéis personalizáveis. Para obter mais detalhes sobre o modelo de dados usado pelo Insights para gerar os painéis, consulte a seção Modelo de dados do Test Manager .

Observação: no modelo de dados do Test Manager, os logs dos casos de teste contêm dois tipos de resultados: técnicos e funcionais. Geralmente, esses resultados são os mesmos, a menos que apareça um erro técnico durante a execução. Os erros técnicos podem incluir interrupções de infraestrutura, erros de automação ou outros gatilhos não funcionais. Em qualquer um desses cenários, os resultados técnicos rotularão o teste como reprovado. Os resultados funcionais devem refletir apenas o resultado das verificações de negócios. Portanto, eles indicam sem resultados em caso de erros devido à falta de um resultado confiável.

Criação de painéis do Insights com base em campos personalizados

Você pode criar painéis do Insights para Requisitos e Conjuntos de testes, com base nos campos personalizados associados a esses objetos de dados.

Você pode trabalhar com no máximo 5 seletores de campos personalizados e 5 dimensões.

1. Faça logon na sua plataforma e navegue até o Insights.
2. Acesse Painéis e adicione um painel.
3. Abra o painel e selecione Editar painel.
4. Passe o mouse na barra de ferramentas e selecione Adicionar.
   Figura 2. Adicionar painel do Insights
   

   

   
   
5. Selecione Visualização.
6. Em Test Manager, selecione o objeto de dados para o qual você deseja criar um painel. Por exemplo, vamos selecionar Requisitos.
7. Expanda a categoria do objeto de dados. Para nosso exemplo, expanda Requisitos. Observe que você pode ter um máximo de 5 seletores de campos personalizados (listados como Seletor de campo personalizado 1 e assim por diante, em Campos somente com filtro) e 5 dimensões (listados como Campo personalizado 1 e assim por diante, em Dimensões). Há uma correspondência de 1:1 entre os 5 seletores de campo personalizado e as 5 dimensões de campo personalizado. Por exemplo, Seletor de campo personalizado 1 corresponde ao Campo personalizado 1.
8. Em Campos somente de filtro, selecione um ou mais seletores de campos personalizados.
   Figura 3. Seleção de campo personalizado
   

   

   
   
9. Expanda o menu suspenso para ver todos os campos personalizados disponíveis no tenant para seu objeto de dados. O exemplo abaixo mostra os campos personalizados disponíveis no tenant de amostra, para requisitos.
   Figura 4. Valores de campos personalizados
   

   

   
   
10. Selecione os valores de campo personalizados para seus seletores de campos personalizados.
11. Em Dimensões, selecione os campos personalizados. Por exemplo, selecione Campo personalizado 1, Campo personalizado 2 e Campo personalizado 3.
12. Em Filtros de campo personalizados, selecione os valores que você precisa. Por exemplo, selecione Nome e Nome do projeto.
13. Em Medidas, selecione os valores que você precisa. Para esse exemplo, selecione Contagem total de casos de teste.
14. Os valores que você selecionou são exibidos no lado direito, no editor de espaço de trabalho.
    Figura 5. Medidas
    

    

    
    
15. No lado superior direito do espaço de trabalho, selecione Executar.
    Figura 6. Executar painel
    

    

    
    
16. Aguarde o carregamento dos dados. Os dados podem ser visualizados em vários formatos: tabela, gráficos ou tabelas.
17. (Opcional) Classifique seus dados por coluna. Por exemplo, classifique seus dados por prioridade.
18. Na parte superior direita do editor da área de trabalho, selecione Salvar.
19. Selecione o ícone de lápis ou clique dentro do nome da tabela para dar um nome oficial a seu painel. Em nosso exemplo, nomeamos o painel "Campo personalizado para requisito".
20. Redimensione a tabela arrastando suas bordas.
21. No menu da barra de ferramentas, adicione um filtro para o seu painel.
22. Selecione Filtros > Adicionar filtro.
23. Adicione filtros para seu objeto de dados, em nosso caso Requisitos. Expanda o objeto de dados (Requisitos), expanda Filtros de campo personalizados e escolha um seletor (por exemplo, Seletor de filtro de campo personalizado 1).
    Figura 7. Filtros
    

    

    
    
24. Na caixa de diálogo Adicionar filtro , continue configurando seu filtro (título, controle, valor padrão) e selecione Adicionar. Para este exemplo, escolhemos um botão de rádio.
    Figura 8. Adicionar filtro
    

    

    
    
25. Expanda o objeto de dados (Requisitos) novamente e escolha o valor do seletor. Para este exemplo, selecionamos Filtros de campo personalizados > Filtro de campo personalizado 1.
    Figura 9. Filtro de campo personalizado
    

    

    
    
26. Na caixa de diálogo Adicionar filtro , continue a configuração (título, controle, opções de filtro) e selecione Adicionar. Para nosso exemplo, escolhemos Avançado no campo Controle , e é qualquer valor do campo Configurar valor padrão .
    Figura 10. Configuração do filtro
    

    

    
    
27. No seu painel, verifique o filtro que você adicionou. Para este exemplo, adicionamos o Seletor de filtro de campo personalizado 1 e o Filtro de campo personalizado 1. Abaixo do primeiro filtro, expanda o menu, selecione um valor (Prioridade) e selecione Aplicar. Abaixo do segundo filtro, expanda o menu é qualquer valor , selecione um operador e um valor (contém Alto ou Médio), e selecione Aplicar.
    Figura 11. Valores do filtro
    

    

    
    
28. Selecione o botão Atualizar no canto superior direito do editor do espaço de trabalho.

Modelo de dados do Test Manager

Terms and concepts

A estrutura do modelo de dados do Test Manager é baseada nos seguintes conceitos:

Conceito	Description
Explore	O ponto de partida para a exploração. Os dados são exibidos por meio do Explores, que você pode imaginar como uma entidade geral que corresponde aos campos dentro dela.
Exibir	Uma exibição representa uma tabela de dados, seja essa tabela nativa do seu banco de dados ou criada usando a funcionalidade de tabela derivada do Looker. Dentro de cada exibição estão as definições de campo, cada uma das quais geralmente corresponde a uma coluna na tabela subjacente ou a um cálculo no Looker.
Dimension	Como parte de uma exibição no Explore, a dimensão é um campo agrupável e pode ser usado para filtrar os resultados da consulta. Pode ser um dos seguintes: Um atributo que tem uma associação direta com uma coluna em uma tabela subjacente. Um fato ou valor numérico. Um valor derivado calculado com base nos valores de outros campos em uma única linha.
Measure	Como parte de uma exibição no Explore, o parâmetro Measure declara uma nova medida (agregação) e especifica um nome para essa medida. Exemplos de tipos de medidas: integer, string.

Dimensões e medidas

Observação: as dimensões e medidas Requisitos, Conjuntos de testes e Execuções de testes estão disponíveis apenas no Test Manager por meio do Test Cloud.

Logs de casos de teste

As tabelas a seguir descrevem as dimensões e medidas disponíveis para logs de casos de teste.

Tabela 1. Dimensões dos logs de casos de teste

Dimensões	Tipo	Description
Email do Destinatário	String	O endereço de e-mail do usuário ao qual um caso de teste foi atribuído.
Nome do Projeto de Automação	String	O nome da automação vinculada ao caso de teste.
Data de Conclusão	data	A data em que um caso de teste manual estava agendado para ser executado.
Início da execução	data	A data de início da execução do teste.
Executado por	String	O nome de usuário ou nome do robô que executou o teste.
Fim de Execução	data	A data de término da execução do teste.
Tipo de execução	String	O tipo de execução: Automatizado para testes automatizados. Manual para testes manuais. Nenhum para casos de teste que não são executados e estão no estado Pendente .
Nome da Máquina do Host	String	O nome da máquina.
Nome do Projeto	String	O nome do projeto do Test Manager.
Prefixo do projeto	String	O prefixo do projeto do Test Manager.
Data do relatório	data	A data em que o teste foi executado. É uma data sem horário e também sem fuso horário.
Resultado	String	O resultado do caso de teste: Aprovado, Falha ou Nenhum.
Nome do Robô	String	O nome do robô que executou o teste.
Nome da execução de teste	String	O nome da execução de teste.

Tabela 2. Medidas dos logs de casos de teste

Medidas	Tipo	Description
Contagem Total	Número inteiro	O número total de logs de casos de teste.
Contagem aprovada	String	O número de logs de casos de teste aprovados.
Contagem não aprovada (técnica)	Número inteiro	Os resultados técnicos indicam resultados como com falha quando uma exceção ocorre durante a execução.
Sem contagem de resultados (técnico)	Número inteiro	Os resultados técnicos indicam que não há resultados quando uma exceção ocorre durante a execução.
DurationInSeconds	Número inteiro	Runtime total em segundos.

Requisitos

As tabelas a seguir descrevem as dimensões e medidas disponíveis para requisitos.

Tabela 3. Dimensões de requisitos

Dimensões	Tipo	Description
Nome do Projeto	String	Uma combinação do nome do projeto e do prefixo do projeto com o objetivo de torná-lo único e aumentar a legibilidade.
Name	String	Uma combinação da chave de requisito e seu nome, com o objetivo de torná-la exclusiva e aumentar a legibilidade.

Tabela 4. Medidas de requisito

Medida	Tipo	Description
Contagem total de casos de teste	Número inteiro	O número de casos de teste atribuídos a um requisito.
Contagem de casos de teste automatizados	Número inteiro	O número de casos de teste automatizados atribuídos a um requisito.
Contagem de casos de teste manuais	Número inteiro	O número de casos de teste manuais atribuídos a um requisito.
Contagem de casos de teste aprovados	Número inteiro	O número de casos de teste atribuídos a um requisito que passaram na execução de teste mais recente.
Contagem de casos de teste com falha	Número inteiro	O número de casos de teste atribuídos a um requisito que falharam na execução de teste mais recente.
Nenhuma contagem de casos de teste	Número inteiro	O número de casos de teste atribuídos a um requisito sem nenhum resultado na execução de teste mais recente.
Contagem total de requisitos	Número inteiro	O número total de requisitos.

Conjuntos de Testes

As tabelas a seguir descrevem as dimensões e medidas disponíveis para conjuntos de testes.

Observação: para casos de teste atribuídos, a visualização do conjunto de testes contém informações sobre atribuições de testes estáticas.

Tabela 5. Dimensões do conjunto de testes

Dimensões	Tipo	Description
Nome do Projeto	String	Uma combinação do nome do projeto e do prefixo do projeto com o objetivo de torná-lo único e aumentar a legibilidade.
Name	String	Uma combinação do nome do projeto e do prefixo do projeto com o objetivo de torná-lo único e aumentar a legibilidade.
Nome do Robô	String	O nome do robô que executou o conjunto de testes.
Origem	String	A origem do conjunto de testes: Orchestrator ou Test Manager.

Tabela 6. Medidas do conjunto de testes

Medida	Tipo	Description
Contagem total de conjuntos de teste	Número inteiro	O número de conjuntos de testes.
Contagem de casos de teste automatizados	String	O número de casos de teste automatizados no conjunto de testes.
Contagem de casos de teste manuais	Número inteiro	Número de casos de teste manuais no conjunto de testes.

Execução de teste

As tabelas a seguir descrevem as dimensões e medidas disponíveis para execuções de teste.

Tabela 7. Dimensões de execuções de teste

Dimensões	Tipo	Description
Nome do Projeto	String	Uma combinação de prefixo e nome do projeto para torná-lo exclusivo e aumentar a legibilidade.
Name	String	Uma combinação de ID e nome de execução para torná-la exclusiva e aumentar a legibilidade.
Nome do Conjunto de Testes	String	Uma combinação de chave e nome do conjunto de testes para torná-lo exclusivo e aumentar a legibilidade.
Tipo de execução	String	O tipo de execução: Manual, Automatizado, Nenhum ou Misto.
Origem	String	A origem da execução: TestManager, Orchestrator ou Studio.

Tabela 8. Medidas de execução de teste

Medida	Tipo
Contagem total de execuções de teste	Número inteiro
Contagem de tipos de execução manuais	Número inteiro
Contagem de tipos de execução automatizados	Número inteiro
Contagem de tipos de execução mistos	Número inteiro
Duração em segundos da execução do teste	Número inteiro