Realizar el mantenimiento de la base de datos de Insights

Realiza el mantenimiento de la base de datos de Insights para liberar espacio y mejorar el rendimiento en Automation Suite en EKS/AKS.

Información general

La base de datos de Insights funciona utilizando dos tablas: dbo y read. Ambas tablas almacenan datos de bases de datos de Orchestrator y se pasan datos una a otra. Con el tiempo, las tablas almacenan una gran cantidad de datos, lo que puede afectar al rendimiento de la base de datos. Puedes liberar espacio eliminando datos que no sean relevantes o estén obsoletos.

El umbral estimado para almacenar datos históricos está establecido en

• Hasta 100 millones de trabajos
• Hasta mil millones de eventos de trabajo
• Hasta 100 millones de elementos en cola
• Hasta 500 millones de eventos de elementos en cola
• Hasta 1000 millones de registros de robot

Usa los siguientes scripts SQL de mantenimiento de base de datos para crear Procedimientos almacenados de SQL, y luego ejecuta estos Procedimientos almacenados de SQL para eliminar todos los datos de las tablas [dbo].Jobs, [dbo].JobEvents, [dbo].QueueItems, [dbo].QueueItemEvents y [dbo].RobotLogs o solo la [dbo].RobotLogs.

Nota:

Haz una copia de seguridad de tu base de datos antes de ejecutar los scripts. Antes de ejecutar los scripts PROCEDURE [read].[Delete_Insights_Data_Read] y PROCEDURE [read].[Delete_Process_Logs_Read] , es necesario deshabilitar el módulo Insights.

Consideraciones

• Los scripts con el sufijo _DBO se utilizan para eliminar datos de las tablas de esquemas DBO,
• Los scripts con el sufijo _Read se utilizan para eliminar datos de las tablas de Leer esquema.
• Los lotes de gran tamaño pueden afectar a la velocidad de ejecución. Plantéate usar el tamaño de lote predeterminado, que está establecido en 10 000.

Requisitos previos

Antes de ejecutar los scripts PROCEDURE [read].[Delete_Insights_Data_Read] y PROCEDURE [read].[Delete_Process_Logs_Read] , es necesario deshabilitar el módulo de Insights.

1. Inicie sesión en el clúster de Automation Suite.

2. Elimina los archivos que puedan entrar en conflicto con los comandos:

   rm -f values.json && rm -f appsettings.json
   

3. Obtener la configuración actual:

   kubectl -n uipath get cm orchestrator-customconfig -o jsonpath='{.data.values\.json}' | jq '.' > values.json
   

4. Formatea la configuración:

   jq '.AppSettings' values.json > appsettings.json
   

5. Establece la clave Insights.ModuleEnabled en False:

   jq '.["Insights.ModuleEnabled"] = "false"' appsettings.json > temp.json && mv -f temp.json appsettings.json
   

6. Actualiza la configuración:

   ./bin/uipathctl config orchestrator update-config --app-settings appsettings.json
   

7. Valida la configuración:

   kubectl -n uipath get cm orchestrator-customconfig -o jsonpath='{.data.values\.json}' | jq
   

   El resultado esperado es el siguiente:

   {
     "AppSettings": {
       "Insights.ModuleEnabled": "false"
     }
   }
   

   El resultado puede contener otros ajustes no relacionados con Insights.

8. Ejecuta los scripts de mantenimiento. Después de ejecutar el script de mantenimiento, vuelve a habilitar Insights siguiendo los siguientes pasos.

9. Elimina cualquier archivo en conflicto:

   rm -f values.json && rm -f appsettings.json
   

10. Recuperar la configuración actual:

    kubectl -n uipath get cm orchestrator-customconfig -o jsonpath='{.data.values\.json}' | jq '.' > values.json
    

11. Formatea la configuración:

    jq '.AppSettings' values.json > appsettings.json
    

12. Eliminar la clave Insights.ModuleEnabled :

    jq 'del(.["Insights.ModuleEnabled"])' appsettings.json > temp.json && mv -f temp.json appsettings.json
    

13. Actualiza la configuración:

    ./bin/uipathctl config orchestrator update-config --app-settings appsettings.json
    

14. Confirma la configuración:

    kubectl -n uipath get cm orchestrator-customconfig -o jsonpath='{.data.values\.json}' | jq
    

    El resultado esperado es el siguiente:

    {
      "AppSettings": {}
    }
    

El resultado puede contener otros ajustes no relacionados con Insights.

Recursos

Ubicación de descarga de procedimientos almacenados SQL

Procedimiento SQL almacenado 1: elimina todos los datos en función de la marca de tiempo de corte

Genera y guarda los siguientes Procedimientos almacenados de SQL para eliminar todos los tipos de datos (Jobs, JobEvents, QueueItems, QueueItemEvents y RobotLogs) para una marca de tiempo de corte.

Procedimientos almacenados de SQL	Parámetro	Descripción
Delete_Insights_Data_DBO	@CutoffTimeStamp DATETIME (Obligatorio) Elimina los cinco tipos de datos antes de una marca de tiempo especificada (por ejemplo, 2021-01-01 01:00:05). No proporciones una marca de tiempo que elimine todos los datos en una tabla vacía. @BatchSize INT = 100000 (Opcional) El valor predeterminado está establecido en 100000. Data is deleted batch by batch. For example, if you have 1 million RobotLogs and leave the default value, the delete command runs ten times to remove all data.	Eliminar datos de las tablas [dbo].[Jobs], [dbo].[JobEvents], [dbo].[QueueItems], [dbo].[QueueItemEvents], [dbo].[RobotLogs] en función de una marca de tiempo de corte.
Delete_Insights_Data_Read	N/D	Trunca las tablas [read].Jobs, [read].JobEvents, [read].QueueItems, [read].QueueItemEvents y [read].RobotLogs.

Nota:

Los widgets del panel de Insights estarán de nuevo disponibles después de que haya finalizado el Procedimiento almacenado 1 de SQL y los datos se hallan rellenado de nuevo. Ten en cuenta que el proceso de rellenado puede tardar en completarse horas, dado que tienes una gran cantidad de datos.

Al ejecutar por primera vez el script SQL Delete_Insights_Data_DBO crea un índice no agrupado QueueItems.IX_CreationTime con el objetivo de hacer que las ejecuciones futuras sean más rápidas.

Procedimiento almacenado de SQL 2: elimina los datos de RobotLogs basados en ProcessNames y en ID de tenant

Genera y guarda este Procedimiento almacenado de SQL para eliminar RobotsLogs basados en ProcessNames y en ID de tenant.

Procedimientos almacenados de SQL	Parámetro	Descripción
Delete_Process_Logs_DBO	@ProcessName NVARCHAR(128) (Requerido) El nombre del proceso de Orchestrator. @TenantId INT (obligatorio) Es necesario el ID de tenant, ya que dos tenantes pueden ejecutar procesos con nombres idénticos. @BatchSize INT = 100000 (opcional) Eliminar datos en lotes de 100 000. Para obtener más información, consulta Consideraciones.	Elimina datos de la tabla [dbo].[RobotLogs] por NombreDelProceso y por ID de tenant.
Delete_Process_Logs_Read	@ProcessName NVARCHAR(128) (Requerido) @TenantId INT (obligatorio)	Trunca la tabla [read].RobotLogs.

Nota:

Los widgets del panel de Insights relacionados con RobotLogs estarán disponibles de nuevo después de que haya finalizado el Procedimiento almacenado 2 de SQL y los datos se hayan vuelto a rellenar. Ten en cuenta que el proceso de rellenado puede tardar en completarse horas, dado que tienes una gran cantidad de datos.

Artículos relacionados

Procedimientos almacenados (motor de base de datos)