Información general

El proceso de evaluación para las versiones del modelo IXP en el nodo Extraer de UiPath Maestro™ Flow, que cubre la evaluación del rendimiento y las comprobaciones de precisión necesarias antes de implementar un modelo en producción.

Evaluar el rendimiento del modelo es fundamental para garantizar la precisión y la fiabilidad del modelo antes de implementarlo en un entorno de producción.

El proceso de evaluación del modelo

Requisito previo: anotar documentos. Necesitas datos reales para un conjunto representativo de documentos con el que comparar las predicciones del modelo.

1. Ejecuta una evaluación en un conjunto seleccionado de documentos.
2. Analiza el rendimiento del modelo revisando los resultados en el nivel de campo y en el nivel de documento de la ejecución de evaluación. Ambos te ayudan a identificar los factores que limitan la precisión de tu modelo.
3. Actúa en función de tus hallazgos: prueba una configuración de modelo diferente, itera en las instrucciones de campo en tu taxonomía o corrige las anotaciones.
4. Vuelve a ejecutar una evaluación, ya sea en el mismo conjunto de documentos o en un subconjunto específico que quieras probar.
5. Compara el rendimiento de las dos ejecuciones de evaluación. Al comparar versiones de modelos, recomendamos utilizar el mismo conjunto de datos.
6. Repite este proceso hasta que el modelo cumpla los objetivos de rendimiento que necesita para tener éxito en producción.

Dónde ver el rendimiento del modelo

Las siguientes partes del producto muestran las métricas y puntuaciones de tu modelo:

• Puntuación de salud : se muestra en el nodo Extracción de flujo en dos lugares: el panel de propiedades y la pestaña Definición en la toma de control inmersiva. También muestra de qué versión del modelo proviene la puntuación y qué modelo de extracción se utilizó.
• Historial de ejecuciones de evaluación : enumera cada ejecución de evaluación para el nodo, con la puntuación F1 y la tasa de error del documento de cada ejecución. Seleccione una ejecución para ver sus detalles.
• Tabla de rendimiento de campo : disponible en la vista Por campo de una ejecución. Muestra una fila por campo o grupo de campos, con métricas de rendimiento y error calculadas en los documentos anotados.
• Document performance table - Available in the By document view of a run. Shows one row per document, with its F1 score, document error rate, total errors, total annotations, and annotated values.

Para obtener más información sobre cada métrica, consulta Evaluación del rendimiento del modelo.

Mejores prácticas

• Anota al menos 10 valores para cada campo de la taxonomía, en tantos documentos únicos como sea posible (idealmente 10), para obtener un modelo y una puntuación de campo significativos.