- Primeros pasos
- Gestión de proyecto
- Operaciones y utilidades del proyecto
- Configuración de Test Manager
- Integración de herramientas de ALM
- Integración de API
Los resultados de las pruebas en Test Manager proporcionan información de diseño, ejecución, actualización o eliminación para los conjuntos de pruebas que se han ejecutado.
Cuando se inicia la ejecución de un conjunto de pruebas, Test Manager pasa por el proceso siguiente:
- Se crea una ejecución de prueba en la sección Resultados de prueba de Test Manager. Esto sirve como contenedor para los resultados de prueba.
- Para cada caso de prueba dentro del conjunto de pruebas ejecutado, se genera un registro de casos de prueba vacío. Este registro se adjunta a la ejecución de prueba y contendrá sus resultados de prueba asociados.
- A medida que la ejecución continúa, Test Manager llena cada registro de casos de prueba con resultados e información de registro relacionada.
Cada vez que se crea una ejecución de prueba, se añaden registros de casos de prueba para todos los casos de prueba asociados del conjunto de pruebas original. Esto significa que las ejecuciones de prueba existentes permanecen coherentes, independientemente de las actualizaciones o eliminaciones realizadas en el conjunto de pruebas original.
La siguiente tabla ilustra el proceso de ejecución de un conjunto de pruebas en Test Manager.
Como consecuencia, después de que se haya ejecutado un conjunto de pruebas, cualquier cambio en el conjunto de pruebas o sus casos de prueba asociados no afecta a los resultados de ejecuciones anteriores. Incluso cuando se elimina un conjunto de pruebas, todas las ejecuciones de prueba permanecen inalteradas.
Analizar resultados de prueba
To view test executions, open Test Results in Test Manager. The execution of each test is listed as a test execution entry. To understand how the test executions work behind the scenes, see Test Results.
Al analizar la ejecución de la prueba, puedes realizar las siguientes acciones:
- Encuentra resultados de prueba que se hayan ejecutado de forma manual o automática mediante Orchestrator.
- Marca el progreso al realizar las ejecuciones de prueba.
- Examina registros y adjuntos.
- Crea defectos en tu sistema de gestión de defectos directamente desde Test Manager si tienes una integración de herramientas de gestión de ciclo de vida de aplicaciones.
De forma predeterminada, las ejecuciones de prueba se clasifican en función de la fecha en que se finalizó la ejecución. Las ejecuciones en marcha y pendientes actualmente se ponen al principio.
Puedes identificar el estado a través de los códigos de colores asignados a cada ejecución de prueba, de la manera siguiente:
- Verde: casos de prueba aprobados.
- Rojo: casos de prueba fallidos.
- Gris: casos de prueba sin resultados definitivos, como casos de prueba que aún no se han ejecutado pero que forman parte de un conjunto de pruebas que se está ejecutando.
Resultados de pruebas automatizadas
The results from automated test executions are imported from Orchestrator automatically. To have your automated tests imported to Test Manager, you need to meet the following condition: The automated test needs to be part of a test set on your Test Manager project. For more information, see Automated Tests.
Si una ejecución de prueba de Orchestrator tiene los resultados de casos de prueba de varios proyectos en Test Manager, la ejecución de prueba se divide en Test Manager. Los resultados aparecen en los proyectos en los que están los casos de prueba.
Trabajar con resultados de la ejecución de prueba
To get detailed results from a test execution, go to Test Results and click an entry to open the detailed view. A typical test execution detailed view shows information on when the executions started, duration, and test case logs.
You can use the Reporting Date filter to set a single date for all the results from the test execution. This is useful when you run test overnight, where some test cases are executed before and after midnight. Otherwise, the results are going to be split between different dates in the reports.
In the Results section you can examine all the test cases that were executed within the test set. You can take actions for each test case. For more info, see Test case logs
Registros de casos de prueba
The test case logs hold information such as steps description, error messages, and screenshots that were collected during a test set execution. To open a test case log, go to Test Results, open a test execution and then click a test case Key.
The Screenshots tab is available only if screenshots were taken during the test case execution. To make sure that Orchestrator takes screenshots during executions, check for Test Case Execution Artifacts permissions.
You can examine the test case details by clicking the Open Test Case icon.
Crear defectos a partir de resultados
You can create defect reports including the execution log to your external defect management system, if you already have it integrated with Test Manager. For more information, see Defect synchronization.
Sincronización de defectos
You can synchronize execution results with external tools, as part of the Application Lifecycle Management tool integration. Information that is gathered during execution, such as results, logs, timestamps, and other details is synchronized with the tool that you have integrated with Test Manager.
Ten en cuenta que por el momento solo puede haber una conexión que está habilitada para la sincronización de defectos en general por proyecto.
- To synchronize defects, you need to configure a connector in Test Manager. See available connections in Test Manager.
- You need to have executed a test set first.
Crear defecto
Puedes crear defectos cuando accedas a los registros de casos de prueba en la página Resultados de pruebas.
-
Ve a Resultados de pruebas
-
Abre un resultado de prueba y haz clic en la clave del caso de prueba para abrir los registros.
-
Haz clic en Tareas y selecciona Crear defecto.
El defecto se crea y se sincroniza con tu herramienta externa. Puedes abrir el defecto directamente en la herramienta (por ejemplo, Atlassian Jira) navegando al resultado de ejecución de prueba que tiene un defecto sincronizado.
Desvincular defecto
Cuando desvinculas los defectos de una herramienta externa, la entrada creada en la herramienta permanece inalterada. En Test Manager no se vinculará el resultado de ejecución de la prueba con una herramienta externa.
- Ve a Resultados de pruebas
- Abre un resultado de prueba y haz clic en Tareas
- Selecciona Desvincular Defecto.