Analizar resultados de prueba

Para ver las ejecuciones de prueba, abre Resultados de prueba en Test Manager. La ejecución de cada conjunto de pruebas se muestra como una entrada de ejecución de prueba. Para comprender cómo funcionan las ejecuciones de prueba en segundo plano, consulta Resultados de prueba.

Al analizar la ejecución de la prueba, puedes realizar las siguientes acciones:

• Encuentra resultados de prueba que se hayan ejecutado de forma manual o automática mediante Orchestrator.
• Marca el progreso al realizar las ejecuciones de prueba.
• Abre el conjunto de pruebas que se ha ejecutado.
• Examina registros y adjuntos.
• Crea defectos en tu sistema de gestión de defectos directamente desde Test Manager, si tienes una integración de herramientas de gestión del ciclo de vida de la aplicación. Para obtener más información, consulta Integración de la herramienta ALM.

De forma predeterminada, las ejecuciones de prueba se clasifican en función de la fecha en que se finalizó la ejecución. Las ejecuciones en marcha y pendientes actualmente se ponen al principio.

Puedes identificar el estado a través de los códigos de colores asignados a cada ejecución de prueba, de la manera siguiente:

• Verde: casos de prueba aprobados.
• Rojo: casos de prueba fallidos.
• Gris: casos de prueba sin resultados definitivos, como casos de prueba que aún no se han ejecutado pero que forman parte de un conjunto de pruebas que se está ejecutando.

Resultados de pruebas automatizadas

Los resultados de las ejecuciones de pruebas automatizadas se importan desde Orchestrator automáticamente. Para importar tus pruebas automatizadas a Test Manager, debes cumplir la siguiente condición:

• La prueba automatizada debe formar parte de un conjunto de pruebas en tu proyecto de Test Manager. Para obtener más información, consulta Pruebas automatizadas.

Nota:

Si una ejecución de prueba de Orchestrator tiene los resultados de casos de prueba de varios proyectos en Test Manager, la ejecución de prueba se divide en Test Manager. Los resultados aparecen en los proyectos en los que están los casos de prueba.

Anular los resultados de la prueba

Anular los resultados de un caso de prueba puede ayudar en escenarios en los que el resultado de la prueba actual no refleje con precisión el comportamiento real de la aplicación y una nueva ejecución no sea una solución efectiva. Puedes anular los resultados de la prueba de un caso de prueba y luego puedes borrar la operación, si es necesario.

1. Dirígete a Resultados de la prueba y abre un resultado de la prueba.

2. En la pestaña Resultados, abre un registro de caso de prueba.

3. En la pestaña Afirmaciones, selecciona Tareas > Anular resultado.

4. En la ventana Anular el resultado de la prueba, configura los siguientes campos:

   1. Cambiar resultado a: selecciona si deseas anular el resultado con el estado opuesto (Pasado/Fallido) o establecer el resultado en Ninguno.
   2. Comentario : escribe el motivo por el que anulas el resultado.

5. Selecciona Confirmar. Los resultados de la prueba que anulaste tienen el siguiente icono junto al estado del resultado de la prueba: . Selecciona el icono y podrás ver los detalles de anulación.

   

6. Opcionalmente, si desea borrar la operación de anulación, seleccione la junto al estado del resultado de un registro de caso de prueba.

   1. En la ventana Anular detalles, selecciona Borrar anulación.

      

7. Opcionalmente, si deseas editar la operación de anulación, selecciona la junto al estado del resultado de un registro de caso de prueba.

   1. Realiza los cambios y haz clic en Confirmar.

Navegación y búsqueda

Para encontrar rápidamente tus resultados de prueba, utiliza la función de búsqueda y los filtros. Dirígete a la página utilizando y configurando el paginador.Como método alternativo, puedes utilizar las migas de pan para navegar entre las páginas.

1. Filter - You can use the filter to narrow your search. For example, you can search for test results by execution type, when the execution was finished or by status. The filters are automatically saved and kept active until you clear them.
2. Search - Use the search bar to find test results by their key, execution type or status (requires full search term match). You can use the search bar at the top of the page to look for test results.

Trabajar con resultados de la ejecución de prueba

Para obtener resultados detallados de una ejecución de prueba, ve a Resultados de prueba y haz clic en una entrada para abrir la vista detallada. Una vista detallada de ejecución de prueba típica muestra información sobre cuándo se iniciaron las ejecuciones, la duración y los registros de ejecución.

Puedes usar el filtro Fecha de presentación de informes para establecer una única fecha para todos los resultados de la ejecución de prueba. Esto es útil cuando se ejecutan pruebas durante la noche, en las que algunos casos de prueba se ejecutan antes y después de la medianoche. De lo contrario, los resultados se dividirán entre diferentes fechas en los informes.

En la sección Resultados puedes examinar todos los casos de prueba que se ejecutaron dentro del conjunto de pruebas. Puedes realizar acciones para cada caso de prueba. Para obtener más información, consulta Registro de ejecución.

You can also open the executed test set by right-clicking an entry in the Test Sets page and selecting Open Test Set, or directly within the test execution.

Registro de ejecución

Como parte de informes de prueba, los registros de ejecución contienen información como detalles de ejecución (por ejemplo, variaciones de datos y capturas de pantalla), aserciones fallidas y aprobadas, y un registro detallado de eventos de ejecución.

Para abrir un registro de caso de prueba, ve a Resultados de prueba, abre una ejecución de prueba y luego haz clic en Clave de caso de prueba.

En la tabla siguiente, puedes ver el tipo de información que se recopila durante la ejecución de un caso de prueba.

Informes de ejecución de prueba	Descripción
Afirmaciones	Ver aserciones fallidas o aprobadas (por ejemplo, Verificar actividad de expresión) y capturas de pantalla asociadas si realizaste alguna durante la ejecución del caso de prueba. Para asegurarte de que Orchestrator realiza capturas de pantalla durante las ejecuciones, consulta los siguientes recursos: Roles predeterminados en Orchestrator : para comprobar si los roles predeterminados tienen asignado el permiso Artefactos de ejecución de casos de prueba . En caso de que los roles predeterminados no tengan este permiso, puedes crear un rol personalizado con este permiso. Gestionar roles en Orchestrator : para aprender a crear, editar o importar un rol en Orchestrator.
Registros	Ver registros de nivel INFO como parte de RobotLogs , con información sobre procesos, robot de ejecución y registros de eventos, incluidos los fallos. Seleccione el para ir a la pestaña Registros del caso de prueba seleccionado, para obtener una descripción detallada del fallo.
Detalles de la ejecución	Consulta detalles del argumento como valores de entrada y salida, así como detalles de ejecución y robot (por ejemplo, proyecto, máquina o robot).
Requisitos afectados	Consulta los requisitos que se asignan al caso de prueba que se ha ejecutado. Puedes usar esta pestaña para ir directamente al requisito afectado.
Archivos adjuntos	Ver: los archivos adjuntos cargados utilizando la actividad Adjuntar documento. los archivos adjuntos de un resultado de caso de prueba, que está vinculado desde Orchestrator.

Ver cobertura de actividad

Nota:

La cobertura de actividades solo está disponible para ejecuciones de pruebas automatizadas.

Requisitos previos: habilita la cobertura de actividad para los conjuntos de pruebas deseados en Orchestrator o Test Manager.

1. Abre el conjunto de pruebas, selecciona Más opciones y luego Ejecutar automatizado.

2. Ve a Resultados de la prueba y abre el conjunto de pruebas que ejecutaste.

3. Ve a la pestaña Cobertura de la actividad e investiga la información sobre las actividades que se cubrieron durante la ejecución de la prueba.

   

Crear defectos a partir de resultados

Puedes crear informes de defectos que incluyan el registro de ejecución en tu sistema de gestión de defectos externo, si ya lo tienes integrado con Test Manager. Para obtener más información, consulta Integración de la herramienta ALM.

Para crear un defecto a partir de un registro de ejecución, debes abrir un registro de caso de prueba, hacer clic en Tareas y luego seleccionar Crear defecto. Una vez creado el defecto, aparece un enlace en el registro de ejecución para que puedas acceder a la herramienta externa integrada.

Artículos relacionados

• Operaciones masivas
• Exportar datos

Resultados de pruebas automatizadas

Los resultados de las ejecuciones de prueba automatizadas se importan desde Orchestrator de forma automática. Para que tus pruebas automatizadas se importen a Test Manager es necesario cumplir con las siguientes condiciones:

• .
• La prueba automatizada debe formar parte de un conjunto de pruebas en tu proyecto de Test Manager. Para obtener más información, consulta Pruebas automatizadas.
  Nota:

  Si una ejecución de prueba de Orchestrator tiene los resultados de casos de prueba de varios proyectos en Test Manager, la ejecución de prueba se divide en Test Manager. Los resultados aparecen en los proyectos en los que están los casos de prueba.

Anular los resultados de la prueba

Anular los resultados de un caso de prueba puede ayudar en escenarios en los que el resultado de la prueba actual no refleje con precisión el comportamiento real de la aplicación y una nueva ejecución no sea una solución efectiva. Puedes anular los resultados de la prueba de un caso de prueba y luego puedes borrar la operación, si es necesario.

1. Navega a Ejecución y abre un resultado de prueba.

2. En la pestaña Resultados, abre un registro de caso de prueba.

3. En la pestaña Afirmaciones, selecciona Tareas > Anular resultado.

4. En la ventana Anular el resultado de la prueba, configura los siguientes campos:

   1. Cambiar resultado a: selecciona si deseas anular el resultado con el estado opuesto (Pasado/Fallido) o establecer el resultado en Ninguno.
   2. Comentario : escribe el motivo por el que anulas el resultado.

5. Selecciona Confirmar. Los resultados de la prueba que anulaste tienen el siguiente icono junto al estado del resultado de la prueba: . Selecciona el icono y podrás ver los detalles de anulación.

   Figura 1. El mensaje "Resultado de prueba anulado correctamente"

   

6. Opcionalmente, si desea borrar la operación de anulación, seleccione la junto al estado del resultado de un registro de caso de prueba.

   1. En la ventana Anular detalles, selecciona Borrar anulación.

      Figura 2. El menú Anular detalles

      

7. Opcionalmente, si deseas editar la operación de anulación, selecciona la junto al estado del resultado de un registro de caso de prueba.

   1. Realiza los cambios y haz clic en Confirmar.

Navegación y búsqueda

Para encontrar rápidamente tus resultados de prueba, utiliza la función de búsqueda y los filtros. Dirígete a la página utilizando y configurando el paginador.Como método alternativo, puedes utilizar las migas de pan para navegar entre las páginas.

1. Filtros : puedes utilizar los filtros para acotar tu búsqueda. Por ejemplo, puedes buscar resultados de prueba según los siguientes criterios:
   1. Etiquetas
   2. Tipo de ejecución
   3. Ejecución finalizada
   4. EstadoLos filtros se guardan automáticamente y se mantienen activos hasta que los borre.
2. Search - Use the search bar to find test results by their key, execution type or status (requires full search term match). You can use the search bar at the top of the page to look for test results.

Trabajar con resultados de la ejecución de prueba

Para ver los resultados de prueba detallados, ve a Ejecución.

En la pestaña Resultados, seleccione Ver por y elija su vista preferida para los resultados de la prueba. Puede seleccionar una de las siguientes vistas:

• Conjunto de pruebas: los resultados de las pruebas se agrupan por Ejecución de pruebas (Conjunto de pruebas).

• Caso de prueba: para el análisis de ejecución cruzada al filtrar los resultados en función de criterios que excluyen los atributos de ejecución de prueba.

  

Selecciona una entrada para abrir la vista detallada. Una vista detallada de ejecución de prueba típica muestra información sobre cuándo se iniciaron las ejecuciones, la duración y los registros de ejecución.

Puede utilizar el filtro Fecha de informe para establecer una fecha unificada en todos los resultados de la prueba de la ejecución de la prueba. Esto es útil cuando ejecuta pruebas durante la noche, donde algunos casos de prueba se ejecutan antes y después de la medianoche, lo que evita que los resultados se dividan en fechas independientes.

En la pestaña Resultados, puedes examinar todos los casos de prueba ejecutados dentro del conjunto de pruebas y tomar medidas para cada uno, según sea necesario. Para obtener más información, consulte la sección Registro de ejecución.

You can also open the executed test set by right-clicking an entry in the Test Sets page and selecting Open Test Set, or directly within the test execution.

Registro de ejecución

Como parte de informes de prueba, los registros de ejecución contienen información como detalles de ejecución (por ejemplo, variaciones de datos y capturas de pantalla), aserciones fallidas y aprobadas, y un registro detallado de eventos de ejecución.

Para abrir un registro de casos de prueba, ve a Ejecuciones, abre una ejecución de prueba y luego haz clic en una clave.

Figura 3. Visión general de los detalles de ejecución de un registro de caso de prueba

En la tabla siguiente, puedes ver el tipo de información que se recopila durante la ejecución de un caso de prueba.

Informes de ejecución de prueba	Descripción
Afirmaciones	Ver aserciones fallidas o aprobadas (por ejemplo, Verificar actividad de expresión) y capturas de pantalla asociadas si realizaste alguna durante la ejecución del caso de prueba. Para asegurarte de que Orchestrator realiza capturas de pantalla durante las ejecuciones, consulta los siguientes recursos: Roles predeterminados en Orchestrator : para comprobar si los roles predeterminados tienen asignado el permiso Artefactos de ejecución de casos de prueba . En caso de que los roles predeterminados no tengan este permiso, puedes crear un rol personalizado con este permiso. Gestionar roles en Orchestrator : para aprender a crear, editar o importar un rol en Orchestrator.
Registros	Ver registros de nivel INFO como parte de RobotLogs , con información sobre procesos, robot de ejecución y registros de eventos, incluidos los fallos. Seleccione el para ir a la pestaña Registros del caso de prueba seleccionado, para obtener una descripción detallada del fallo.
Detalles de la ejecución	Consulta detalles del argumento como valores de entrada y salida, así como detalles de ejecución y robot (por ejemplo, proyecto, máquina o robot).
Requisitos afectados	Consulta los requisitos que se asignan al caso de prueba que se ha ejecutado. Puedes usar esta pestaña para ir directamente al requisito afectado.
Archivos adjuntos	Ver: los archivos adjuntos cargados utilizando la actividad Adjuntar documento. los archivos adjuntos de un resultado de caso de prueba, que está vinculado desde Orchestrator.

Descargar registros de ejecución

• Para descargar los registros para todas tus ejecuciones de prueba: en Ejecución, selecciona Exportar a excel.
• Para descargar los registros de casos de prueba para una ejecución de prueba específica: en Ejecución, selecciona una ejecución de prueba y luego selecciona Exportar a excel.

Consulta Exportar datos para obtener más información sobre la exportación de registros a archivos de Excel.

Ver cobertura de actividad

Nota:

La cobertura de actividades solo está disponible para ejecuciones de pruebas automatizadas.

Requisitos previos: habilita la cobertura de actividad para los conjuntos de pruebas deseados en Orchestrator o Test Manager.

1. Abre el conjunto de pruebas, selecciona Más opciones y luego Ejecutar automatizado.

2. Ve a Ejecución y abre el conjunto de pruebas que ejecutaste.

3. Ve a la pestaña Cobertura de la actividad e investiga la información sobre las actividades que se cubrieron durante la ejecución de la prueba.

   Figura 4. Descripción general de una cobertura de actividad de ejemplo

   

Crear defectos a partir de resultados

Puedes crear informes de defectos que incluyan el registro de ejecución en tu sistema de gestión de defectos externo, si ya lo tienes integrado con Test Manager. Para obtener más información, consulta Integración de la herramienta ALM.

Para crear un defecto a partir de un registro de ejecución, debes abrir un registro de caso de prueba, hacer clic en Tareas y luego seleccionar Crear defecto. Una vez creado el defecto, aparece un enlace en el registro de ejecución para que puedas acceder a la herramienta externa integrada.

Artículos relacionados

• Operaciones masivas
• Exportar datos