Auditoría de interacciones de LLM

Auditoría de AI Trust Layer de las operaciones de extracción de documentos del nodo de extracción en UiPath Maestro™ Flow, las entradas y salidas de LLM que registra, y cómo revisarlas.

El nodo de extracción de flujo envía todas sus solicitudes de modelo de lenguaje grande (LLM) a través de UiPath AI Trust Layer™, que registra cada operación de extracción de documentos en un registro de auditoría. El registro de auditoría ofrece a los administradores visibilidad de los datos enviados a los LLM y las respuestas que devolvieron, lo que respalda los requisitos de cumplimiento, gobernanza y transparencia de datos.

Ver entradas de auditoría

Cada operación de extracción aparece en la pestaña Auditoría de la página AI Trust Layer , bajo el nombre del producto IXP , incluidas las entradas enviadas al modelo de lenguaje grande (LLM) y las salidas que devolvió, tanto para solicitudes de tiempo de diseño como de runtime.

Las entradas permanecen visibles durante 60 días y puedes exportarlas para períodos de retención más largos. Para obtener más información sobre la vista de auditoría, las exportaciones y la retención, consulta Ver registros de auditoría.

Cómo se registran las operaciones de extracción

Cada trabajo de procesamiento de documentos se registra como una única acción auditada. Un trabajo puede implicar varias solicitudes de LLM subyacentes, como el preprocesamiento seguido de la extracción, pero se muestran juntas como una sola entrada.

Las operaciones de extracción se auditan en ambos contextos en los que se generan las predicciones:

• Tiempo de diseño: predicciones generadas mientras creas y evalúas el modelo de extracción del nodo Extraer .
• Tiempo de ejecución: predicciones solicitadas cuando el nodo Extraer se ejecuta como parte de un flujo implementado.

Entradas auditadas

La entrada registrada para una operación de extracción incluye lo siguiente:

• ID del proyecto.
• Versión del modelo.
• Nombre de archivo del documento procesado.
• Tipo de solicitud: tiempo de diseño o runtime.
• Solicitud, creada a partir de la taxonomía y las instrucciones de campo.
• Configuración del modelo: la opción de preprocesamiento y las opciones avanzadas (método de atribución, temperatura, P principal, semilla y penalización de frecuencia).

Salidas auditadas

La salida registrada para una operación de extracción es la respuesta de LLM sin procesar para la solicitud de extracción, que contiene las predicciones devueltas para el documento.

Qué no se audita

Las entradas de auditoría no incluyen lo siguiente:

• Entrada y salida para pasos de preprocesamiento o posprocesamiento.
• Detalles de implementación de características de valor añadido o diferenciadores. Por ejemplo, opciones de preprocesamiento inteligente, detalles de implementación de atribución.

Controlar los datos auditados

Las políticas de Automation Ops para AI Trust Layer controlan cómo se manejan los datos de auditoría: puedes desactivar el guardado de entradas y salidas, o enmascarar la información de identificación personal (PII) antes de que las solicitudes lleguen al LLM. Para obtener más información, consulta los siguientes recursos:

• Control
• Configuración para políticas de capa de confianza de IA