- Introducción a Test Suite
- Studio
- Conjunto de pruebas - Estudio
- Información general
- Actividades de prueba y API
- Arquitectura de automatización de dispositivos móviles
- Primeros pasos
- Administración de Mobile Device Manager
- Administración de aplicaciones
- Creación de flujos de trabajo de automatización móvil
- Interacción de dispositivos
- Automatización para aplicaciones React Native
- Actividades de automatización móvil y API
- Orchestrator
- Testing Robots
- Test Manager
- Requisitos
- Assigning test cases to requirements
- Linking test cases in Studio to Test Manager
- Unlink automation
- Delete test cases
- Creación de casos de prueba
- Importing manual test cases
- Generate tests for requirements
- Clonación de casos de prueba
- Exportar casos de prueba
- Automatizar casos de prueba
- Casos de prueba manuales
- Aplicar filtros y vistas
- Conjuntos de prueba
- Ejecución de pruebas
- Analizar resultados de prueba
- Sincronización de defectos
- Generate test insights report
- Documentos
- Informes
- Exportar datos
- Operaciones masivas
- Solución de problemas
Analizar resultados de prueba
To view test executions, open Execution in Test Manager. The execution of each test set is listed as a test execution entry. To understand how the test executions work behind the scenes, see Execution.
Al analizar la ejecución de la prueba, puedes realizar las siguientes acciones:
- Encuentra resultados de prueba que se hayan ejecutado de forma manual o automática mediante Orchestrator.
- Marca el progreso al realizar las ejecuciones de prueba.
- Abre el conjunto de pruebas que se ha ejecutado.
- Examina registros y adjuntos.
- Create defects in your defect management system directly from Test Manager, if you have an Application Lifecycle Management tool integration. For more information, see ALM Tool Integration.
De forma predeterminada, las ejecuciones de prueba se clasifican en función de la fecha en que se finalizó la ejecución. Las ejecuciones en marcha y pendientes actualmente se ponen al principio.
Puedes identificar el estado a través de los códigos de colores asignados a cada ejecución de prueba, de la manera siguiente:
- Verde: casos de prueba que se aprobaron.
- Rojo: casos de prueba fallidos.
- Gris: casos de prueba sin resultados definitivos, como casos de prueba que aún no se han ejecutado pero que forman parte de un conjunto de pruebas que se está ejecutando.
The results from automated test executions are imported from Orchestrator automatically. To have your automated tests imported to Test Manager, you need to meet the following conditions:
- The automated test needs to be part of a test set on your Test Manager project. For more information, see Automated Tests.
Note: If a Test Execution from Orchestrator holds results for test cases from several projects in Test Manager, the test execution is split in Test Manager. The results appear in the projects where the test cases are.
Anular los resultados de un caso de prueba puede ayudar en escenarios en los que el resultado de la prueba actual no refleje con precisión el comportamiento real de la aplicación y una nueva ejecución no sea una solución efectiva. Puedes anular los resultados de la prueba de un caso de prueba y luego puedes borrar la operación, si es necesario.
- Navega a Ejecución y abre un resultado de prueba.
- En la pestaña Resultados, abre un registro de caso de prueba.
- En la pestaña Afirmaciones, selecciona Tareas > Anular resultado.
- En la ventana Anular el resultado de la prueba, configura los siguientes campos:
- Cambiar resultado a: selecciona si deseas anular el resultado con el estado opuesto (Pasado/Fallido) o establecer el resultado en Ninguno.
- Comentario: escribe la razón por la que anulas el resultado.
- Selecciona Confirmar.
Los resultados de la prueba que anulas tienen el siguiente icono junto al estado del resultado de la prueba: . Selecciona el icono y puedes ver los detalles de anular.
Figura 1. El mensaje "Resultado de prueba anulado correctamente"
- De forma opcional, si quieres borrar la operación de anulación, selecciona el junto al estado del resultado de un registro de caso de prueba.
- En la ventana Anular detalles, selecciona Borrar anulación.
Figura 2. El menú Sobrescribir detalles
- En la ventana Anular detalles, selecciona Borrar anulación.
- De forma opcional, si quieres editar la operación de anulación, selecciona el junto al estado del resultado de un registro de caso de prueba.
- Realiza los cambios y haz clic en Confirmar.
Para encontrar rápidamente tus resultados de prueba, utiliza la función de búsqueda y los filtros. Dirígete a la página utilizando y configurando el paginador.Como método alternativo, puedes utilizar las migas de pan para navegar entre las páginas.
- Filtros: puedes utilizar los filtros para reducir tu búsqueda. Por ejemplo, puedes buscar resultados de prueba según los siguientes criterios:
- Etiquetas
- Tipo de ejecución
- Ejecución finalizada
- Estado
Los filtros se guardan automáticamente y se mantienen activas hasta que los elimines.
- Buscar: utiliza la barra de búsqueda para encontrar resultados de búsqueda en función de su clave, tipo de ejecución o estado (requiere una coincidencia completa del término de búsqueda). Puedes utilizar la barra de búsqueda en la parte superior de la página para buscar los resultados de prueba.
Para ver los resultados de prueba detallados, ve a Ejecución.
- Conjunto de pruebas: los resultados de la prueba se agrupan por Ejecución de prueba (Conjunto de pruebas).
- Caso de prueba: para el análisis de ejecución cruzada al filtrar los resultados en función de criterios que excluyen los atributos de ejecución de prueba.
Puedes acceder al registro de ejecución de un caso de prueba desde la vista Caso de prueba seleccionando el chip de resultado correspondiente. Si la condición posterior de un caso de prueba no se cumplió durante una ejecución manual, el registro del caso de prueba muestra una excepción con un icono de información . El mensaje de excepción dice: Excepción durante la ejecución. Consulta los registros para obtener más detalles. Al seleccionar este mensaje, se accede a la pestaña Detalles de ejecución del registro del caso de prueba correspondiente.
Puede utilizar el filtro Fecha de informe para establecer una fecha unificada en todos los resultados de la prueba de la ejecución de la prueba. Esto es útil cuando ejecuta pruebas durante la noche, donde algunos casos de prueba se ejecutan antes y después de la medianoche, lo que evita que los resultados se dividan en fechas independientes.
En la pestaña Resultados, puedes examinar todos los casos de prueba ejecutados dentro del conjunto de pruebas y tomar medidas para cada uno, según sea necesario. Para obtener más información, consulte la sección Registro de ejecución.
También puedes abrir el conjunto de pruebas ejecutadas haciendo clic con el botón derecho en una entrada de la página Conjuntos de pruebas y seleccionando Abrir conjunto de pruebas, o directamente dentro de la ejecución de la prueba.
Como parte de informes de prueba, los registros de ejecución contienen información como detalles de ejecución (por ejemplo, variaciones de datos y capturas de pantalla), aserciones fallidas y aprobadas, y un registro detallado de eventos de ejecución.
Para abrir un registro de caso de prueba, ve a Ejecuciones, abre una ejecución de prueba y luego selecciona una Clave de caso de prueba o resultado.
En la tabla siguiente, puedes ver el tipo de información que se recopila durante la ejecución de un caso de prueba.
Informes de ejecución de prueba |
Descripción |
---|---|
Afirmaciones | Ver aserciones fallidas o aprobadas (por ejemplo, Verificar actividad de expresión) y capturas de pantalla asociadas si realizaste alguna durante la ejecución del caso de prueba.
Para asegurarte de que Orchestrator realiza capturas de pantalla durante las ejecuciones, consulta los siguientes recursos:
|
Registros | Vea los registros de nivel INFO como parte de RobotLogs , con información sobre procesos, robot de ejecución y registros de eventos, incluidos los errores.
Seleccione el para ir a la pestaña Registros del caso de prueba seleccionado para obtener una descripción detallada del error. |
Detalles de la ejecución | Ver detalles de argumentos como valores de entrada y salida, así como detalles de ejecución y robot (p. ej., proyecto, máquina, robot). Esta sección también indica si el caso de prueba cumplió o no la condición posterior. |
Requisitos afectados | Consulta los requisitos que se asignan al caso de prueba que se ha ejecutado. Puedes usar esta pestaña para ir directamente al requisito afectado. |
Archivos adjuntos | Puedes ver lo siguiente:
|
- Para descargar los registros para todas tus ejecuciones de prueba: en Ejecución, selecciona Exportar a excel.
- Para descargar los registros de casos de prueba para una ejecución de prueba específica: en Ejecución, selecciona una ejecución de prueba y luego selecciona Exportar a excel.
Consulta Exportar datos para obtener más información sobre la exportación de registros a archivos de Excel.
La pestaña Detalles de ejecución de un registro de caso de prueba ofrece información sobre las condiciones previas y las condiciones posteriores de un caso de prueba.
Si la condición posterior no se cumplió durante la ejecución de la prueba, la pestaña muestra la advertencia Condición no cumplida , que puedes investigar.
Prerequisites: Enable activity coverage for the desired test sets either in Orchestrator or Test Manager.
- Abra el conjunto de prueba y seleccione Más opciones y luego Ejecutar de forma automatizada.
- Ve a Ejecución y abre el conjunto de pruebas que ejecutaste.
- Ve a la pestaña Cobertura de la actividad e investiga la información sobre las actividades que se cubrieron durante la ejecución de la prueba.
Figura 5. Resumen de una cobertura de actividad de ejemplo
You can create defect reports including the execution log to your external defect management system, if you already have it integrated with Test Manager. For more information, see ALM Tool Integration.
Para crear un defecto a partir de un registro de ejecución, debes abrir un registro de caso de prueba, hacer clic en Tareas y luego seleccionar Crear defecto. Una vez creado el defecto, aparece un enlace en el registro de ejecución para que puedas acceder a la herramienta externa integrada.
- Resultados de pruebas automatizadas
- Anular los resultados de la prueba
- Navegación y búsqueda
- Trabajar con resultados de la ejecución de prueba
- Registro de ejecución
- Descargar registros de ejecución
- Detalles de la ejecución
- Ver cobertura de actividad
- Crear defectos a partir de resultados
- Artículos relacionados