Ejecución de prueba

Información general

Importante: Las capacidades de gestión de pruebas se han movido a Test Manager. Como resultado, para cualquier nuevo tenant, ya no puedes ejecutar casos de prueba directamente desde la interfaz de usuario de Orchestrator, excepto a través de las API de Orchestrator para Probar automatización o utilizando integraciones CI/CD. Para ejecutar casos de prueba, utiliza Test Manager en su lugar.

En este tema, puedes descubrir cómo administrar tus ejecuciones de prueba. Las ejecuciones de prueba sirven como un registro inmutable de la ejecución de cualquier conjunto de pruebas correspondiente, en un momento específico. Por otro lado, el conjunto de pruebas estará siempre sujeto a cambios, ya que puede tener como objetivo una versión diferente de la aplicación o su selección de casos de prueba puede modificarse.

Nota: las ejecuciones de prueba automatizadas tienen un tiempo de espera predeterminado de cuatro días, que no puedes cambiar. Cualquier ejecución de prueba automatizada que supere los cuatro días se marca como Cancelada.

Requisitos previos: para realizar ejecuciones de prueba, debes tener asignado el rol de Robot.

Ejecutar casos de prueba que contienen conexiones de Integration Service

Para los casos de prueba y proyectos que contienen casos de prueba creados usando una conexión de Integration Service específica, no puedes asignar una conexión específica en el runtime, aparte de la utilizada durante la fase de diseño en Studio,

Por ejemplo, si creas un caso de prueba que contiene una conexión de Integration Service, luego lo publicas en Orchestrator y lo ejecutas de forma independiente, no habrá opción disponible para asignar una conexión específica en el runtime.

Si publicas un proyecto de Studio que contiene casos de prueba que usan conexiones de Integration Service a Orchestrator como un Proceso, la opción de configurar la conexión en el runtime estará disponible en los Requisitos del paquete del proceso.

Nota: Al configurar la conexión en los Requisitos del paquete de los casos de prueba, se seguirá utilizando la conexión de tiempo de diseño seleccionada previamente en Studio.

Volver a ejecutar pruebas

Importante: Para cualquier nuevo tenant, puedes volver a ejecutar conjuntos de pruebas solo utilizando las API de Orchestrator para Probar automatización.

Puedes volver a ejecutar pruebas después de una ejecución anterior. El nuevo resultado de los casos de prueba anulará el anterior que se muestra en la página Ejecuciones de prueba.

Ten en cuenta que no puedes volver a ejecutar casos de prueba de un conjunto de pruebas con el cálculo de cobertura habilitado.

1. Inicia sesión en Orchestrator.
2. Abre tu carpeta.
3. Dirígete a Pruebas > Ejecuciones de prueba.
4. Selecciona una ejecución de prueba y ve a Más acciones > Detalles.
5. Selecciona un caso de prueba y ve a Más acciones > Volver a ejecutar.
6. Configura el destino de ejecución:
   • Usuario: selecciona el usuario de la lista desplegable que está asignada a esa carpeta específica. El valor establecido de forma predeterminada es Cualquier usuario.

   • Máquina: selecciona el recurso de máquina de la lista desplegable.

7. (Opcional) Define argumentos personalizados para tus casos de prueba para anular los valores predeterminados a nivel del conjunto de pruebas. Para definir argumentos, debes haber publicado un paquete con argumentos.
8. Haz clic en Ejecutar para confirmar.

Limitación conocida

Los resultados de la nueva ejecución de un conjunto de pruebas en Orchestrator no se sincronizan con Test Manager. Te recomendamos ejecutar y volver a ejecutar pruebas directamente desde Test Manager.

Cobertura de ejecución de pruebas

Importante: Para cualquier nuevo tenant, la cobertura de ejecución de pruebas no está disponible. Puedes ver la cobertura de la actividad de tus pruebas en Test Manager. Para obtener más información, consulta Ver cobertura de actividad.

Puedes ver información sobre las actividades que se han cubierto durante la ejecución de una prueba. Esta opción también está disponible en Studio, como Cobertura de la actividad.

Importante: la calculadora de cobertura de actividades está disponible cuando se selecciona esta opción para conjuntos de pruebas existentes o nuevos. Para más información, consulta Crear conjunto de prueba.

1. Abre tu carpeta en Orchestrator.
2. Dirígete a Pruebas > Ejecuciones de prueba.
3. Selecciona una ejecución de prueba y ve a Más acciones > Detalles.
4. Ve a la pestaña Cobertura para ver los detalles de esta.

   Los archivos de cobertura se cargan en la pestaña Archivos adjuntos.

   Figura 1. Pestaña Cobertura
   

   

   
   

Analizar ejecuciones de pruebas

Puedes analizar las ejecuciones de pruebas para entender que se ocurrió en las instancias donde la ejecución no se pudo realizar o se pausó.

Nota: Puedes ver capturas de pantalla de las ejecuciones de pruebas fallidas dirigiéndote a Automatizaciones > Trabajos > Detalles de trabajo. Para aprovechar de esta característica, debes habilitar los archivos multimedia de ejecución a nivel de aplicación. Para obtener más información, consulta Permisos de ejecución de los archivos multimedia.

Figura 2. Detalles de ejecución

Puedes elegir entre las siguientes acciones para examinar tus ejecuciones de prueba.

Acciones	Descripción	Procedimiento
Detalles de la ejecución	Consulta los detalles del Robot, incluyendo los adjuntos de ejecución, la variación de datos y las capturas de pantalla. Comprueba que tienes Permisos de medios de ejecución.	Abre tu carpeta en Orchestrator. Dirígete a Pruebas > Ejecuciones de prueba. Selecciona una ejecución de prueba y ve a Más acciones > Detalles Haz clic en Detalles para ver los detalles de ejecución.
Ver aserciones	Ver afirmaciones aprobadas o fallidas.	Abre tu carpeta en Orchestrator. Dirígete a Pruebas > Ejecuciones de prueba. Selecciona una ejecución de prueba y ve a Más acciones > Detalles. Selecciona un caso de prueba y dirígete a Más detalles > Ver registros.
Ver registros	Ve y exporta un registro detallado de los eventos de ejecución.	Abre tu carpeta en Orchestrator. Dirígete a Pruebas > Ejecuciones de prueba. Selecciona una ejecución de prueba y ve a Más acciones > Detalles. Selecciona un caso de prueba y dirígete a Más detalles > Ver registros. Haz clic en Exportar para obtener los detalles de la prueba de ejecución en un formato CSV.

API de ejecuciones de pruebas

Para consultar las actividades relacionadas con los elementos, puedes utilizar Tareas en segundo plano, que están disponibles internamente con la API. Para obtener más información sobre los permisos de Orchestrator, consulta . Para obtener más información sobre la API de automatización de prueba, consulta los Permisos de la API de automatización de pruebas.