- Primeros pasos
- Studio
- Información general
- Actividades de prueba
- Orchestrator
- Testing Robots
- Test Manager
- Integraciones de CI/CD
Resultados de las pruebas
Los resultados de las pruebas en Test Manager proporcionan información de diseño, ejecución, actualización o eliminación para los conjuntos de pruebas que se han ejecutado.
Cuando se inicia la ejecución de un conjunto de pruebas, Test Manager pasa por el proceso siguiente:
- Se crea una ejecución de prueba en la sección Resultados de prueba de Test Manager. Esto sirve como contenedor para los resultados de prueba.
- Para cada caso de prueba dentro del conjunto de pruebas ejecutado, se genera un registro de casos de prueba vacío. Este registro se adjunta a la ejecución de prueba y contendrá sus resultados de prueba asociados.
- A medida que la ejecución continúa, Test Manager llena cada registro de casos de prueba con resultados e información de registro relacionada.
La siguiente tabla ilustra el proceso de ejecución de un conjunto de pruebas en Test Manager.
Como consecuencia, después de que se haya ejecutado un conjunto de pruebas, cualquier cambio en el conjunto de pruebas o sus casos de prueba asociados no afecta a los resultados de ejecuciones anteriores. Incluso cuando se elimina un conjunto de pruebas, todas las ejecuciones de prueba permanecen inalteradas.
Para ver las ejecuciones de pruebas, abre Resultados de prueba en Test Manager. La ejecución de cada prueba se enumera como una entrada de ejecución de prueba. Para entender cómo funcionan las ejecuciones de prueba en segundo plano, consulta Resultados de prueba.
Al analizar la ejecución de la prueba, puedes realizar las siguientes acciones:
- Encuentra resultados de prueba que se hayan ejecutado de forma manual o automática mediante Orchestrator.
- Marca el progreso al realizar las ejecuciones de prueba.
- Examina registros y adjuntos.
- Crea defectos en tu sistema de gestión de defectos directamente desde Test Manager si tienes una integración de herramientas de gestión de ciclo de vida de aplicaciones.
De forma predeterminada, las ejecuciones de prueba se clasifican en función de la fecha en que se finalizó la ejecución. Las ejecuciones en marcha y pendientes actualmente se ponen al principio.
Puedes identificar el estado a través de los códigos de colores asignados a cada ejecución de prueba, de la manera siguiente:
- Verde: casos de prueba aprobados.
- Rojo: casos de prueba fallidos.
- Gris: casos de prueba sin resultados definitivos, como casos de prueba que aún no se han ejecutado pero que forman parte de un conjunto de pruebas que se está ejecutando.
Los resultados de las ejecuciones de prueba automatizadas se importan desde Orchestrator de forma automática. Para importar tus pruebas automatizadas a Test Manager, debes cumplir la siguiente condición: La prueba automatizada debe formar parte de un conjunto de pruebas en tu proyecto de Test Manager. Para obtener más información, consulta Pruebas automatizadas.
Para obtener resultados detallados de una ejecución de prueba, ve a Resultados de prueba y haz clic en una entrada para abrir la vista detallada. Una vista detallada de ejecución de prueba típica muestra información sobre cuándo se iniciaron las ejecuciones, la duración y los registros de ejecución.
Puedes usar el filtro Fecha de presentación de informes para establecer una única fecha para todos los resultados de la ejecución de prueba. Esto es útil cuando se ejecutan pruebas durante la noche, en las que algunos casos de prueba se ejecutan antes y después de la medianoche. De lo contrario, los resultados se dividirán entre diferentes fechas en los informes.
En la sección Resultados puedes examinar todos los casos de prueba que se ejecutaron dentro del conjunto de pruebas. Puedes realizar acciones para cada caso de prueba. Para obtener más información, consulta Registro de ejecución
Como parte de informes de prueba, los registros de ejecución contienen información como detalles de ejecución (por ejemplo, variaciones de datos y capturas de pantalla), aserciones fallidas y aprobadas, y un registro detallado de eventos de ejecución.
Para abrir un registro de caso de prueba, ve a Resultados de prueba, abre una ejecución de prueba y luego haz clic en Clave de caso de prueba.
En la tabla siguiente, puedes ver el tipo de información que se recopila durante la ejecución de un caso de prueba.
Informes de ejecución de prueba |
Descripción |
---|---|
Afirmaciones |
Ver aserciones fallidas o aprobadas (por ejemplo, Verificar actividad de expresión) y capturas de pantalla asociadas si realizaste alguna durante la ejecución del caso de prueba. Para asegurarte de que Orchestrator realiza capturas de pantalla durante las ejecuciones, consulta los siguientes recursos:
|
Registros |
Consulta los registros de nivel INFO como parte de
RobotLogs , con información sobre procesos, robot de ejecución y registros de eventos.
|
Detalles de la ejecución |
Consulta detalles del argumento como valores de entrada y salida, así como detalles de ejecución y robot (por ejemplo, proyecto, máquina o robot). |
Requisitos afectados |
Consulta los requisitos que se asignan al caso de prueba que se ha ejecutado. Puedes usar esta pestaña para ir directamente al requisito afectado. |
Puedes crear informes de defectos incluyendo el registro de ejecución a tu sistema de gestión de defectos externo, si ya lo tienes integrado con Test Manager. Para obtener más información, consulta Sincronización de defectos.
Puedes sincronizar los resultados de ejecución con herramientas externas como parte de la integración de la herramienta de administración de ciclo de vida de aplicaciones. La información que se recopila durante la ejecución, como resultados, registros, marcas de tiempo y otros detalles, se sincroniza con la herramienta que ha integrado con Test Manager.
Ten en cuenta que por el momento solo puede haber una conexión que está habilitada para la sincronización de defectos en general por proyecto.
- Para sincronizar defectos, debe configurar un conector en Test Manager. Consulte las conexiones disponibles en Test Manager.
- En primer lugar, debes haber ejecutado un conjunto de pruebas.
Todos los roles de usuario, aparte de Solo lectura, pueden sincronizar defectos.
Para obtener más información consulta Gestión de acceso de usuarios y grupos.
Puedes crear defectos cuando accedas a los registros de casos de prueba en la página Resultados de pruebas.
El defecto se crea y se sincroniza con tu herramienta externa. Puedes abrir el defecto directamente en la herramienta (por ejemplo, Atlassian Jira) navegando al resultado de ejecución de prueba que tiene un defecto sincronizado.
Cuando desvinculas los defectos de una herramienta externa, la entrada creada en la herramienta permanece inalterada. En Test Manager, el resultado de la ejecución de la prueba no se vinculará con una herramienta externa.
- Ve a Resultados de pruebas
- Abre un resultado de prueba y haz clic en Tareas
- Selecciona Desvincular Defecto.