Ejemplo de uso de la automatización de OCR y la automatización de imágenes

Dado que el OCR y la automatización de imágenes suelen ir de la mano debido a la dificultad de automatizar en entornos virtuales, creamos una automatización que recupera el correo electrónico de un empleado y el número de factura a partir de una factura escaneada. Seguidamente, se introduce la información en una aplicación de gastos ficticia (ExpenseIt) en una máquina virtual, y se compara el total de la factura con el de la aplicación:

1. Crear una nueva Secuencia.
2. Abre la factura escaneada, la factura que se utiliza en el ejemplo puede descargarse aquí. Recomendamos usar Adobe Acrobat Reader por razones de compatibilidad.
3. As explained Relative Scraping, scrape the employee’s email by using OCR technology. A container, Attach Window renamed in this example to Attach PDF, that holds the selector and lets all the other activities know where to perform actions is generated. In it, there are a Find Image, that selects the anchor for relative scraping, a Get OCR Text that retrieves the email address of the employee, and two Set Clipping Region activities: one to translate the first clipping region to the second one, and the other to reset the clipping region.
4. En el Panel de variables, crea una nueva variable GenericValue, llamada email.
5. Ingresa la variable de correo electrónico en la propiedad Texto de la actividad Obtener Texto OCR generada previamente.
6. Nombra la secuencia anterior Leer el correo electrónico.
   
   

   

   
   

   Nota: Los motores OCR presentados en UiPath Studio tienen sus pros y sus contras; utilizarlos depende de las circunstancias, y probar cuáles funcionan mejor en cada situación es fundamental a la hora de decidir cuál utilizar. Cambiar el motor de OCR para diferentes tareas puede mejorar los resultados.
7. As explained in Relative Scraping, scrape the invoice number by using OCR technology. The recorder generates a container, Attach Window renamed in this example to Attach PDF, that holds the selector and lets all the other activities know where to perform actions. Inside the container, there are a Find Image, that selects the anchor for relative scraping, a Get OCR Text that retrieves the invoice number of the employee, and two Set Clipping Region activities, one to translate the first clipping region to the second one, and one to reset the clipping region.
8. En el Panel de variables, crea una nueva variable GenericValue llamada invoiceNo.
9. Ingresa la variable invoiceNo en la propiedad Texto de la actividad Obtener texto OCR generada previamente.
10. Nombra la secuencia anterior Leer número de factura
    
    

    

    
    
11. As explained Relative Scraping, scrape the employee’s total expenses by using OCR technology. The recorder generates a container, Attach PDF, that holds the selector and lets all the other activities know where to perform actions. Inside it, there are a Find Image, that selects the anchor for relative scraping, a Get OCR Text that retrieves the total expenses of the employee, and two Set Clipping Region activities, one to translate the first clipping region to the second one, and one to reset the clipping region.
12. En el Panel de variables crea una nueva variable GenericValue llamada totalValue.
13. Ingresa la variable totalValue en la propiedad Texto de la actividad Obtener texto OCR generada previamente.
14. Nombra la secuencia anterior Leer los gastos totales.
    
    

    

    
    

    Nota: Una de las mejores prácticas para abrir aplicaciones en entornos de máquinas virtuales es crear un acceso directo para la aplicación que se va a abrir en el escritorio de la máquina y asignarle una tecla de acceso rápido. El intento de hacer clic en el icono de la aplicación usando hacer Clic en el texto OCR puede fallar a veces debido a los cambios en el color de fondo o al icono seleccionado.
15. Crea un acceso directo para la aplicación ExpenseIt en el escritorio de la máquina virtual.
16. Haz clic con el botón derecho en el acceso directo y selecciona Propiedades en el menú contextual. Se mostrará la ventana de Propiedades del acceso directo.
17. En la pestaña Acceso directo, en el campo Tecla de acceso directo, para asignar una tecla de acceso directo a la aplicación, presiona las teclas que deseas usar, por ejemplo Alt + Ctrl + T.
    
    

    

    
    
18. Inicia una nueva sesión de grabación abriendo el Asistente de Grabación de Citrix.
19. Graba enviando a la ventana de la máquina virtual la tecla de acceso rápido que se asignó previamente al acceso directo de la aplicación.
20. Usa Extracción relativa para hacer clic en el campo Correo electrónico en la aplicación ExpenseIt basado en la ubicación de su etiqueta.
21. En el campo Correo electrónico de la aplicación ExpenseIt, introduce la variable email.
22. Usa el Extracción relativa para hacer clic en el campo Número de empleado en la aplicación ExpenseIt basado en la ubicación de su etiqueta.
23. Agrega la variable invoiceNo en el campo Número de empleado de la aplicación ExpenseIt.
24. Haz clic en Guardar y Salir en el Asistente de Grabación. La grabación genera un contenedor Asociar ventana que contiene el selector y permite que todas las demás actividades sepan dónde realizar las acciones. Contiene una actividad Enviar tecla de acceso rápido, una actividad Hacer clic en la imagen para hacer clic en el campo a la derecha de la etiqueta Correo electrónico, una actividad Escribir en que escribe la variable de correo electrónico en el campo, una actividad Hacer clic en la imagen para hacer clic en el campo a la derecha de la etiqueta Número de empleado y una actividad Escribir en que escribe la variable en el campo invoiceNo.
    
    

    

    
    
25. Inicia una nueva sesión de grabación abriendo el Asistente de Grabación de Citrix.
26. Registra haciendo clic en el botón Crear informe de gastos en la aplicación ExpenseIt.
27. Usa la Extracción relativa para extraer el valor que corresponde a la etiqueta de Gastos totales ($).
28. Haz clic en Guardar y Salir en el Asistente de Grabación. La grabación genera un contenedor Asociar ventana que contiene el selector y permite que todas las demás actividades sepan dónde realizar las acciones. Contiene un Clic de Texto OCR que hace clic en el botón Crear Informe de gastos, una Buscar imagen que establece el anclaje para el raspado relativo, una Obtener texto OCR que recupera el valor total de los gastos y dos actividades Establecer Región de Recorte, una para traducir la primera región de recorte a la segunda, y otra para restablecer la región de recorte.
    
    

    

    
    
29. En el Panel de variables, crea una nueva variable GenericValue llamada totalExpense.
30. Escribe la variable totalExpense en el campo de propiedad Texto de la actividad Obtener texto OCR generada previamente.
31. Arrastra una actividad Si después de la última secuencia de grabación generada.
32. Establece la propiedad Condición de la actividad Si como totalExpense = totalValue. Esto significa que la automatización comprobará si el valor total de la factura es igual al valor en la aplicación de gastos.
33. Arrastra una actividad Bandeja de mensajes a la sección Entonces de la actividad Si.
34. En el campo de propiedad Texto de Bandeja de mensajes, escribe un mensaje que indique que los valores son iguales, por lo que la factura es correcta.
35. Arrastrar una actividad Bandeja de mensajes a la sección Si no de la actividad Si.
36. En el campo de propiedad Texto de Bandeja de mensajes, escribe un mensaje que indique que los valores no son iguales, por lo que la factura es incorrecta.
    
    

    

    
    
37. Press F5 to run the automation. Note that the automation inputs the employee data from the scanned invoice into the ExpenseIt application, compares the total value of the invoice with the total expenses registered, and informs the user if the values are equal or not.

Debido a que esta automatización implica conectarse a una máquina virtual, subir el proyecto original es redundante, ya que no funcionaría en otra máquina. Te animamos a crear un proyecto propio siguiendo los pasos anteriores.