- Introdução
- Gerenciamento do projeto
- Documentos
- Trabalhando com análise de impacto de alterações
- Criar casos de teste
- Atribuição de casos de teste a requisitos
- Casos de teste de clonagem
- Exportação de casos de teste
- Vinculação de casos de teste no Studio ao Test Manager
- Delete test cases
- Casos de teste manuais
- Importação de casos de teste manuais
- Documentar casos de teste com o Task Capture
- Parâmetros
- Habilitação de governança no nível do projeto
- Desabilitação da governança no nível do projeto
- Habilitação de governança no nível do caso de teste
- Como desabilitar a governança no nível do caso de teste
- Gerenciamento de aprovadores para casos de teste controlados
- Gerenciamento de casos de teste governados no estado Em andamento
- Gerenciamento de casos de teste governados no estado Em Revisão
- Gerenciamento de objetos governados no estado Assinado
- Gerenciamento de comentários para casos de teste governados
- Aplicação de filtros e visualizações
- Importando conjuntos de testes do Orchestrator
- Creating test sets
- Adição de casos de teste a um conjunto de testes
- Atribuição de usuários padrão na execução do conjunto de testes
- Habilitando a cobertura de atividade
- Habilitação do Healing Agent
- Configuração de conjuntos de testes para pastas e robôs de execução específicos
- Substituindo parâmetros
- Clonagem de conjuntos de teste
- Exportação de conjuntos de testes
- Aplicação de filtros e visualizações
- Perguntas frequentes - Paridade de funcionalidades - Test Manager versus Orchestrator
- Execução de testes manuais
- Execução de testes automatizados
- Execução de casos de teste sem um conjunto de testes
- Execução de testes mistos
- Criação de execuções pendentes
- Aplicação de uma ordem de execução
- Reexecutando execuções de teste
- Agendamento de execuções
- Solução de problemas de execuções automatizadas
- Testes de acessibilidade para o Test Cloud
- Pesquisa com o Autopilot
- Operações e utilitários do projeto
- Configurações Test Manager
- Integração da ferramentas ALM
- Integração do API
- Solução de problemas
Guia do usuário do Test Manager
O painel fornece vários gráficos e indicadores de status que ajudam a determinar se seu aplicativo e infraestrutura atenderam aos níveis de desempenho esperados.
- O gráfico Usuários exibe o número de usuários virtuais ativos ao longo do tempo e sobrepõe as principais métricas adicionais, como erros de automação, tempos de resposta e erros
HTTP. Isso permite que você identifique rapidamente correções, por exemplo, se uma carga maior coincidir com erros aumentados ou tempos de resposta mais lentos. - Gráfico de infraestrutura Mostra o consumo de CPU e memória dos robôs que executam a carga (geradores de carga sem servidor ou máquinas locais). O monitoramento dessas métricas ajuda a garantir que quaisquer problemas de desempenho sejam causados pelo sistema que está sob estresse, e não por uma sobrecarga da infraestrutura do robô.
- Cartões de grupo – Cada cartão de grupo fornece uma visão geral de alto nível do status de execução e das principais métricas de um grupo de carga.
- Nome do grupo e nome do caso de teste. O nome do grupo não pode ser alterado.
- Status (sem resultado, Aprovado ou Reprovado). O status é determinado automaticamente com base na conformidade com limites, mas também pode ser ajustado manualmente. Isso permite que os proprietários de testes substituam os resultados se acharem que um grupo deve ser considerado bem-sucedido apesar de violações menores ou marcados como com falha se as expectativas críticas para os negócios não forem atendidas.
- Número de usuários virtuais executados. Essa métrica mostra uma barra completa após ser totalmente concluída.
- Taxas de erro (
HTTPe erros de automação) - Tempos médio e máximo de resposta
Para visualizar os erros HTTP e os erros de automação:
- Abra uma execução e selecione uma exibição de interesse nos gráficos de Usuários ou nos gráficos de Infraestrutura .
- Execute uma seleção na visualização de interesse (erros de HTTP ou erros de automação).
- Consulte os erros na seção Tráfego da web e a seção Erros de automação .
A visualização do painel ajuda você a avaliar rapidamente se um grupo atingiu seus objetivos de nível de serviço (SLOs) definidos. Para uma análise mais profunda, você pode abrir a visualização Métricas de grupo , que fornece gráficos detalhados sobre tempos de resposta, taxas de erro, durações das etapas e uso da infraestrutura.
A visualização detalhada fornece insights detalhados sobre eventos específicos que ocorreram durante um teste de desempenho.
- Seleção de um intervalo de tempo e um gráfico Para abrir a visualização de detalhes, primeiro selecione um intervalo de tempo no históricos e, em seguida, escolha um gráfico específico (por exemplo, tempos de resposta HTTP, erros). A visualização de detalhes mostrará entradas relevantes para o período selecionado.
- Pares de solicitação/resposta HTTP A tabela lista todas as solicitações HTTP executadas pelo grupo de carga, incluindo seu nome, tipo, tempo de resposta e código de status.
- Se as solicitações retornarem códigos de erro (por exemplo, 404, 500), eles serão sinalizados como erros.
- Se as solicitações retornarem códigos válidos (por exemplo, 200), mas excederem os limites de tempo de resposta, eles também serão relatados aqui. O número na frente de cada entrada indica quantas vezes o problema ocorreu.
- Erros de automação A mesma exibição de detalhes também pode ser usada para exibir erros no nível de automação, como falhas de seletor ou exceções de atividade. Eles fornecem visibilidade sobre problemas funcionais que podem ocorrer sob carga.
Ao combinar códigos de erro, violações de limite e logs de automação, a visualização de detalhes ajuda a identificar a causa raiz de falhas de desempenho ou funcionais em um cenário de teste.