Auditoría de interacciones de LLM

Auditoría de AI Trust Layer para documentos complejos y no estructurados; qué entradas y salidas de LLM se registran para las operaciones de extracción de documentos y cómo revisar su cumplimiento.

La capacidad Documentos complejos y no estructurados envía todas sus solicitudes de modelo lingüístico de gran tamaño (LLM) a través de UiPath AI Trust Layer™, que registra cada operación de extracción de documentos en un registro de auditoría. El registro de auditoría ofrece a los administradores visibilidad de los datos enviados a los LLM y las respuestas que devolvieron, lo que respalda los requisitos de cumplimiento, gobernanza y transparencia de datos.

Ver entradas de auditoría

Cada extracción aparece en la pestaña Auditoría de la página AI Trust Layer , bajo el nombre del producto IXP , incluidas las entradas enviadas al modelo de lenguaje grande (LLM) y las salidas que devolvió, tanto para solicitudes de tiempo de diseño como de tiempo de ejecución.

Las entradas permanecen visibles durante 60 días y puedes exportarlas para períodos de retención más largos. Para obtener más información sobre la vista de auditoría, las exportaciones y la retención, consulta Ver registros de auditoría.

Cómo se registran las operaciones de extracción

Cada trabajo de procesamiento de documentos se registra como una única acción auditada. Un trabajo puede implicar varias solicitudes de LLM subyacentes, como el preprocesamiento seguido de la extracción, pero se muestran juntas como una sola entrada.

Las operaciones de extracción se auditan en ambos contextos en los que se generan las predicciones:

• Tiempo de diseño: predicciones generadas al crear y validar el modelo, como en la vista de anotación.
• Runtime: predicciones solicitadas por modelos publicados, a través de flujos de trabajo de Studio o la API.

Entradas auditadas

La entrada registrada para una operación de extracción incluye lo siguiente:

• ID del proyecto.
• Versión del modelo.
• Nombre de archivo del documento procesado.
• Tipo de solicitud: tiempo de diseño o runtime.
• Solicitud, creada a partir de la taxonomía y las instrucciones de campo.
• Configuración del modelo: la opción de preprocesamiento y las opciones avanzadas (método de atribución, temperatura, P principal, semilla y penalización de frecuencia).

Salidas auditadas

La salida registrada para una operación de extracción es la respuesta de LLM sin procesar para la solicitud de extracción, que contiene las predicciones devueltas para el documento.

Qué no se audita

Las entradas de auditoría no incluyen lo siguiente:

• Entrada y salida para pasos de preprocesamiento o posprocesamiento.
• Detalles de implementación de características de valor añadido o diferenciadores. Por ejemplo, opciones de preprocesamiento inteligente, detalles de implementación de atribución.

Controlar los datos auditados

Las políticas de Automation Ops para AI Trust Layer controlan cómo se manejan los datos de auditoría: puedes desactivar el guardado de entradas y salidas, o enmascarar la información de identificación personal (PII) antes de que las solicitudes lleguen al LLM. Para obtener más información, consulta los siguientes recursos:

• Control
• Configuración para políticas de capa de confianza de IA