Resultados do Teste

Os resultados de teste no Test Manager fornecem informações de design, execução, atualização ou exclusão para os conjuntos de testes executados.

Quando você inicia a execução de um conjunto de testes, o Test Manager passa pelo seguinte processo:

1. Uma execução de teste é criada na seção Resultados do teste do Test Manager. Isso serve como o contêiner para os resultados do teste.
2. Para cada caso de teste dentro do conjunto de testes executado, um Log de caso de teste vazio é gerado. Esse log é anexado à execução de teste e manterá seus resultados de teste associados.
3. À medida que a execução continua, o Test Manager preenche cada Log de caso de teste com resultados e informações de log relacionadas.

Observação: toda vez que uma execução de teste é criada, são adicionados os Logs de caso de teste para todos os casos de teste associados do conjunto de testes original. Isso significa que as Execuções de teste existentes permanecem consistentes, independentemente das atualizações ou exclusões feitas no conjunto de testes original.

O gráfico abaixo ilustra o processo de executar um conjunto de testes no Test Manager.

Como consequência, após a execução de um conjunto de testes, quaisquer alterações no conjunto de testes ou nos casos de teste associados não afetam os resultados de execuções anteriores. Mesmo quando um conjunto de testes é excluído, todas as execuções de teste permanecem inalteradas.

Analisar resultados de teste

Para exibir execuções de teste, abra Resultados de teste no Test Manager. A execução de cada teste é listada como uma entrada de execução de teste. Para entender como as execuções de testes funcionam nos bastidores, consulte Resultados de testes.

Ao analisar sua execução de teste, você pode realizar as seguintes ações:

• Encontrar resultados de teste executados manualmente ou automaticamente por meio do Orchestrator.
• Consultar o progresso de execução de teste em andamento.
• Examinar logs e anexos.
• Crie defeitos no seu sistema de gerenciamento de defeitos diretamente do Test Manager, se você tiver uma integração da ferramenta do Gerenciamento de ciclo de vida do aplicativo.

Por padrão, as execuções de teste são classificadas com base na data em que a execução foi concluída. Atualmente, execuções em andamento e pendentes são colocadas no topo.

Você pode identificar o status através dos códigos de cor atribuídos a cada execução de teste, da seguinte forma:

• Verde: casos de teste que passaram.
• Vermelho: casos de teste que falharam.
• Cinza: casos de teste sem resultados definitivos, como casos de teste que ainda não foram executados, mas fazem parte de um conjunto de testes que está sendo executado atualmente.

Resultados de testes automatizados

Os resultados de execuções de teste automatizadas são importados do Orchestrator automaticamente. Para que seus testes automatizados sejam importados para o Test Manager, você precisa atender à seguinte condição: o teste automatizado precisa fazer parte de um conjunto de testes no seu projeto do Test Manager. Para obter mais informações, consulte Testes automatizados.

Observação: se uma execução de testes do Orchestrator tiver resultados de casos de teste de vários projetos no Test Manager, a execução dos testes será dividida no Test Manager. Os resultados aparecem nos projetos em que os casos de teste estão.

Trabalhando com resultados de execução de teste

Para obter resultados detalhados de uma execução de teste, acesse Resultados de teste e clique em uma entrada para abrir a exibição detalhada. Uma visualização detalhada da execução de testes típica mostra informações sobre quando as execuções começaram, sua duração e os logs de casos de teste.

Você pode usar o filtro Data do relatório para definir uma única data para todos os resultados da execução de teste. Isso é útil quando você executa testes de um dia para o outro, onde alguns casos de teste são executados antes e após a meia-noite. Caso contrário, os resultados serão divididos entre datas diferentes nos relatórios.

Na seção Resultados, você pode examinar todos os casos de teste executados no conjunto de testes. Você pode realizar ações para cada caso de teste. Para obter mais informações, consulte Logs de casos de teste

Logs de casos de teste

Os logs de caso de teste contêm informações como descrição de etapas, mensagens de erro e capturas de tela que foram coletadas durante a execução de um conjunto de teste. Para abrir um log de caso de teste, vá para Resultados de teste, abra uma execução de teste e clique em uma Chavede caso de teste .

Observação: a guia Capturas de tela está disponível apenas se as capturas de tela tiverem sido tiradas durante a execução do caso de teste. Para garantir que o Orchestrator faça capturas de tela durante as execuções, consulte as permissões de Artefatos de execução de caso de teste.

Você pode examinar os detalhes do caso de teste clicando no ícone Abrir Caso de Teste .

Criar defeitos de resultados

Você pode criar relatórios de defeitos, incluindo o log de execução para o seu sistema externo de gerenciamento de defeitos, caso já o tenha integrado com o Test Manager. Para obter mais informações, consulte Sincronização de defeitos.

Sincronização de defeitos

É possível sincronizar os resultados da execução com ferramentas externas, como parte da integração da ferramenta de gerenciamento do ciclo de vida do aplicativo. Durante a execução, são coletadas informações como resultados, logs, carimbos de data/hora e outros detalhes, e elas são sincronizadas com a ferramenta que você integrou com o Test Manager.

Não se esqueça de que, atualmente, pode haver apenas uma conexão habilitada para a sincronização de defeitos no geral por projeto.

Observação:

• Para sincronizar defeitos, é necessário configurar um conector no Test Manager. Consulte as conexões disponíveis no Test Manager.
• Você precisa ter executado um conjunto de testes primeiro.

Criar Defeito

Você pode criar defeitos acessando os logs do caso de teste na página Resultados de teste.

1. Navegue até Resultados de teste
2. Abra um resultado de teste e clique na chave do caso de teste para abrir os logs.
3. Clique em Tarefas e selecione Criar defeito.
   
   

   

   
   

O defeito é criado e sincronizado com sua ferramenta externa. Para abrir o defeito diretamente na ferramenta (por exemplo, Atlassian Jira), navegue até o resultado da execução de teste com um defeito sincronizado.

Desvincular defeito

Quando você desvincula defeitos de uma ferramenta externa, a entrada criada na ferramenta permanece inalterada. No Test Manager, o resultado da execução do teste não será vinculado a uma ferramenta externa.

1. Navegue até Resultados de teste
2. Abra um resultado de teste e clique em Tarefas
3. Selecione Desvincular defeito.