Execuções de Teste

Visão geral

Importante:

Os recursos de gerenciamento de tarefas foram movidos para o Test Manager. Como resultado, para qualquer novo tenant, não é mais possível executar casos de teste diretamente da interface do usuário do Orchestrator, exceto por meio de APIs do Orchestrator para Testar Automação ou usando integrações de CI/CD. Para executar casos de teste, use o Test Manager.

Neste tópico, você pode aprender a gerenciar suas execuções de teste. As execuções de teste funcionam como um registro imputável da execução de qualquer conjunto de teste, em um ponto específico no tempo. Por comparação, o conjunto de testes está sempre sujeito a alterações, pois pode atingir uma versão de aplicativo diferente ou sua seleção de casos de teste pode ser modificada.

Observação:

Automated test executions have a default timeout of four days, that you cannot change. Any automated test execution that exceeds four days is marked as Cancelled.

Pré-requisitos: para realizar execuções de teste, você precisa ter a função Robot atribuída.

Execução de casos de teste que contêm conexões do Integration Service

Para casos de teste e projetos que contêm casos de teste criados usando uma conexão específica do Integration Service, você não pode atribuir uma conexão específica no runtime diferente da usada durante a fase de design no Studio,

Por exemplo, se você criar um caso de teste contendo uma conexão do Integration Service e, em seguida, publicá-lo no Orchestrator e executá-lo de forma independente, não haverá nenhuma opção disponível para atribuir uma conexão específica no runtime.

Se você publicar um projeto do Studio contendo casos de teste usando conexões do Integration Service com o Orchestrator como um Processo, a opção de configurar a conexão no runtime estará disponível nos Requisitos do pacote do processo.

Observação:

Ao configurar a conexão nos Requisitos do pacote dos casos de teste, os usuários continuarão a usar a conexão de tempo de design selecionada anteriormente no Studio.

Executar o conjunto de testes novamente

Importante:

Para qualquer novo tenant, você pode executar novamente conjuntos de testes apenas usando as APIs do Orchestrator para Testar Automação.

Você pode executar novamente conjuntos de teste após uma execução anterior. O novo resultado do caso de teste substituirá o anterior exibido na página Execuções de Teste.

Esteja ciente de que você não pode executar casos de teste novamente a partir de um Conjunto de testes com o cálculo de cobertura habilitado.

1. Faça logon no Orchestrator.
2. Abra a sua pasta.
3. Navegue até Testar > Execuções de Teste.
4. Selecione uma execução de teste e acesse Mais ações > Detalhes.
5. Selecione um caso de teste e acesse Mais ações > Executar novamente.
6. Configure o destino de execução:
   • Usuário: selecione o usuário na lista suspensa que está atribuída a essa pasta específica. O padrão é definido como Qualquer usuário.
   • Máquina: selecione o recurso de máquina na lista suspensa.
7. (Opcional) Defina argumentos personalizados para seus casos de teste para substituir valores padrão no nível do conjunto de testes. Para definir argumentos, você precisa ter publicado um pacote com argumentos.
8. Clique em Executar para confirmar.

Limitação conhecida

Os resultados da reexecução de um conjunto de testes no Orchestrator não são sincronizados com o Test Manager. Recomendamos que você execute e reexecute testes diretamente do Test Manager.

Cobertura de execução de testes

Importante:

For any tenant, test execution coverage is not available. You can view the activity coverage of your tests in Test Manager. For more information, visit Viewing activity coverage.

Importante:

For any tenant, test management capabilities have been moved to Test Manager. As a result, test schedules are no longer available in Orchestrator, and you cannot execute test cases and test sets directly from Orchestrator anymore. However, you can continue executing test cases and test sets through Orchestrator APIs for Test automation, or using the native Test Manager - CI/CD integration.

Você pode exibir informações sobre as atividades que foram cobertas durante uma execução de testes. Essa opção também está disponível no Studio, como Cobertura de atividades.

Importante:

A calculador de cobertura de atividades fica disponível ao selecionar essa opção para conjuntos de teste existentes ou novos. Para obter mais informações, consulte Criar conjunto de testes.

1. Abra sua pasta no Orchestrator.
2. Navegue até Testar > Execuções de Teste.
3. Selecione uma execução de teste e acesse Mais ações > Detalhes.
4. Acesse a guia Cobertura para exibir os detalhes de cobertura.

Os arquivos de cobertura são carregados na guia Anexos.

Figura 1. Aba Cobertura

Analisar as execuções de teste

Você pode analisar execuções de teste para entender o que aconteceu em instâncias em que a execução falhou ou foi obstruída.

Observação:

Você pode exibir capturas de tela de execuções de testes com falha navegando até Automações > Trabalho > Detalhes do trabalho. Para se beneficiar dessa funcionalidade, você precisa habilitar a mídia de execução no nível do aplicativo. Para mais informações, consulte Permissões de Mídia de Execução.

Figura 2. Detalhes de execução

Você pode escolher das seguintes ações para examinar suas execuções de teste.

Ações	Description	Procedimento
Detalhes da execução	Exibir detalhes do Robô, incluindo anexos de execução, variação de dados e capturas de tela. Certifique-se de que você tenha Permissões da Mídia de Execução.	Abra sua pasta no Orchestrator. Navegue até Testar > Execuções de Teste. Selecione uma execução de testes e acesse Mais Ações > Detalhes Clique em Detalhes para ver os detalhes da execução.
Ver asserções	Veja afirmações falhas ou aprovadas.	Abra sua pasta no Orchestrator. Navegue até Testar > Execuções de Teste. Selecione uma execução de teste e acesse Mais ações > Detalhes. Selecione um caso de testes e acesse Mais ações > Exibir afirmações.
Exibir logs	Exibir e exportar um log detalhado de eventos de execução.	Abra sua pasta no Orchestrator. Navegue até Testar > Execuções de Teste. Selecione uma execução de teste e acesse Mais ações > Detalhes. Selecione um caso de teste e acesse Mais detalhes > Exibir logs. Clique em Exportar para obter os detalhes de execução de teste em um formato CSV.

API de execução de testes

Para consultar atividades relacionadas a itens, você pode usar as Tarefas em Segundo Plano, disponíveis internamente através da API. Para mais informações sobre Permissões do Orchestrator, consulte . Para mais informações sobre a API de automação de teste, consulte Permissões de API de Automação de Testes.