Ejemplo de uso de la automatización de OCR y la automatización de imágenes

Dado que el OCR y la automatización de imágenes suelen ir de la mano debido a la dificultad de automatizar en entornos virtuales, creamos una automatización que recupera el correo electrónico de un empleado y el número de factura a partir de una factura escaneada. Seguidamente, se introduce la información en una aplicación de gastos ficticia (ExpenseIt) en una máquina virtual, y se compara el total de la factura con el de la aplicación:

1. Crea una nueva secuencia.
2. Abre la factura escaneada, la factura que se utiliza en el ejemplo puede descargarse aquí. Recomendamos usar Adobe Acrobat Reader por razones de compatibilidad.
3. Como se explica en Relative Scraping, extrae el correo electrónico del empleado utilizando la tecnología OCR. Se genera un contenedor, Adjuntar ventana renombrado en este ejemplo como Adjuntar PDF, que contiene el selector y permite que todas las demás actividades sepan dónde realizar acciones. En él, hay Buscar imagen, que selecciona el anclaje para la extracción relativa, Obtener texto OCR que recupera la dirección de correo electrónico del empleado y dos actividades Establecer región de recorte : una para traducir la primera región de recorte a la segunda, y el otro para restablecer la región de recorte.
4. En el Panel de variables, crea una nueva variable GenericValue, llamada email.
5. Ingresa la variable de correo electrónico en la propiedad Texto de la actividad Obtener Texto OCR generada previamente.
6. Nombra la secuencia anterior Leer el correo electrónico.

Nota:

Los motores de OCR que ofrece UiPath Studio tienen sus pros y sus contras, su uso depende de las circunstancias, y probar cuál hace el mejor trabajo en cada situación es clave para decidir cuál usar. Cambiar el motor de OCR para diferentes tareas puede mejorar los resultados.

7. Como se explica en Extracción relativa, extrae el número de factura utilizando la tecnología OCR. La grabadora genera un contenedor, Adjuntar ventana renombrado en este ejemplo como Adjuntar PDF, que contiene el selector y permite que todas las demás actividades sepan dónde realizar acciones. Dentro del contenedor, hay Buscar imagen, que selecciona el anclaje para la extracción relativa, Obtener texto OCR que recupera el número de factura del empleado y dos actividades Establecer región de recorte , una para traducir la primera región de recorte a la segunda. y uno para restablecer la región de recorte.

8. En el Panel de variables, crea una nueva variable GenericValue llamada invoiceNo.

9. Ingresa la variable invoiceNo en la propiedad Texto de la actividad Obtener texto OCR generada previamente.

10. Nombra la secuencia anterior Leer número de factura

    

11. Como se explica en Relative Scraping, extrae los gastos totales del empleado utilizando la tecnología OCR. La grabadora genera un contenedor, Adjuntar PDF, que contiene el selector y permite que todas las demás actividades sepan dónde realizar las acciones. En su interior, hay Buscar imagen, que selecciona el anclaje para la extracción relativa, Obtener texto OCR que recupera los gastos totales del empleado y dos actividades Establecer región de recorte , una para traducir la primera región de recorte a la segunda, y uno para restablecer la región de recorte.

12. En el Panel de variables crea una nueva variable GenericValue llamada totalValue.

13. Ingresa la variable totalValue en la propiedad Texto de la actividad Obtener texto OCR generada previamente.

14. Nombra la secuencia anterior Leer los gastos totales.

    

    Nota:

    Una de las mejores prácticas para abrir aplicaciones en entornos de máquinas virtuales es crear un acceso directo para la aplicación que se va a abrir en el escritorio de la máquina y asignarle una tecla de acceso rápido. El intento de hacer clic en el icono de la aplicación usando hacer Clic en el texto OCR puede fallar a veces debido a los cambios en el color de fondo o al icono seleccionado.

15. Crea un acceso directo para la aplicación ExpenseIt en el escritorio de la máquina virtual.

16. Haz clic con el botón derecho en el acceso directo y selecciona Propiedades en el menú contextual. Se mostrará la ventana de Propiedades del acceso directo.

17. En la pestaña Acceso directo, en el campo Tecla de acceso directo, para asignar una tecla de acceso directo a la aplicación, presiona las teclas que deseas usar, por ejemplo Alt + Ctrl + T.

    

18. Inicia una nueva sesión de grabación abriendo el Asistente de Grabación de Citrix.

19. Graba enviando a la ventana de la máquina virtual la tecla de acceso rápido que se asignó previamente al acceso directo de la aplicación.

20. Utiliza Extracción relativa para hacer clic en el campo Correo electrónico en la aplicación ExpenseIt en función de la ubicación de su etiqueta.

21. En el campo Correo electrónico de la aplicación ExpenseIt, introduce la variable email.

22. Usa el Extracción relativa para hacer clic en el campo Número de empleado en la aplicación ExpenseIt basado en la ubicación de su etiqueta.

23. Agrega la variable invoiceNo en el campo Número de empleado de la aplicación ExpenseIt.

24. Haz clic en Guardar y Salir en el Asistente de Grabación. La grabación genera un contenedor Asociar ventana que contiene el selector y permite que todas las demás actividades sepan dónde realizar las acciones. Contiene una actividad Enviar tecla de acceso rápido, una actividad Hacer clic en la imagen para hacer clic en el campo a la derecha de la etiqueta Correo electrónico, una actividad Escribir en que escribe la variable de correo electrónico en el campo, una actividad Hacer clic en la imagen para hacer clic en el campo a la derecha de la etiqueta Número de empleado y una actividad Escribir en que escribe la variable en el campo invoiceNo.

    

25. Inicia una nueva sesión de grabación abriendo el Asistente de Grabación de Citrix.

26. Registra haciendo clic en el botón Crear informe de gastos en la aplicación ExpenseIt.

27. Usa la Extracción relativa para extraer el valor que corresponde a la etiqueta de Gastos totales ($).

28. Haz clic en Guardar y Salir en el Asistente de Grabación. La grabación genera un contenedor Asociar ventana que contiene el selector y permite que todas las demás actividades sepan dónde realizar las acciones. Contiene un Clic de Texto OCR que hace clic en el botón Crear Informe de gastos, una Buscar imagen que establece el anclaje para el raspado relativo, una Obtener texto OCR que recupera el valor total de los gastos y dos actividades Establecer Región de Recorte, una para traducir la primera región de recorte a la segunda, y otra para restablecer la región de recorte.

    

29. En el Panel de variables, crea una nueva variable GenericValue llamada totalExpense.

30. Escribe la variable totalExpense en el campo de propiedad Texto de la actividad Obtener texto OCR generada previamente.

31. Arrastra una actividad Si después de la última secuencia de grabación generada.

32. Establece la propiedad Condición de la actividad Si como totalExpense = totalValue. Esto significa que la automatización comprobará si el valor total de la factura es igual al valor en la aplicación de gastos.

33. Arrastra una actividad Bandeja de mensajes a la sección Entonces de la actividad Si.

34. En el campo de propiedad Texto de Bandeja de mensajes, escribe un mensaje que indique que los valores son iguales, por lo que la factura es correcta.

35. Arrastrar una actividad Bandeja de mensajes a la sección Si no de la actividad Si.

36. En el campo de propiedad Texto de Bandeja de mensajes, escribe un mensaje que indique que los valores no son iguales, por lo que la factura es incorrecta.

    

37. Presiona F5 para ejecutar la automatización. Ten en cuenta que la automatización introduce los datos del empleado de la factura escaneada en la aplicación ExpenseIt, compara el valor total de la factura con el total de los gastos registrados, e informa al usuario de si los valores son iguales o no.

Debido a que esta automatización implica conectarse a una máquina virtual, subir el proyecto original es redundante, ya que no funcionaría en otra máquina. Te animamos a crear un proyecto propio siguiendo los pasos anteriores.