ScreenPlay

UiPath.Semantic.Activities.NUITask

Descripción

ScreenPlay es el agente de automatización de próxima generación de UiPath®, diseñado para llevar el comportamiento agéntico y las capacidades cognitivas al escritorio. ScreenPlay interactúa con las aplicaciones de forma muy similar a como lo haría un humano: navegando por las interfaces, adaptándose a los cambios y gestionando tareas complejas que antes eran inviables con los métodos de automatización tradicionales.

Para obtener más información, consulta ScreenPlay.

Esta actividad debe añadirse dentro de una actividad Usar aplicación/navegador.

Compatibilidad de proyectos

Ventanas | Multiplataforma

Configuración

• Task - Prompt describing the UI task to be performed, with the ability to:
  • Use Variables
  • Add image from screen (inline with the text)
  • View last execution trace. For more details, see the Running and inspecting the execution results page.

• Model - Indicates the underlying LLM used by ScreenPlay for task execution planning and reasoning. The following options are available:

  UiPath (con Gemini Flash 2.5)

  • Modelo básico
  • Funciona mejor en navegadores
  • Utiliza una implementación patentada basada en el DOM de la página, utilizando Gemini Flash para el razonamiento y la comprensión de imágenes
  • Moderadamente rápido
  UiPath (con GPT-4.1)
  • Modelo estándar: para tareas complejas
  • Funciona mejor en navegadores
  • Utiliza una implementación patentada basada en el DOM de la página y la comprensión de imágenes, utilizando GPT-4.1 para el razonamiento
  • No muy rápido
  UiPath (con GPT-4.1 mini)
  • Modelo básico: más rápido, más barato
  • Funciona mejor en navegadores
  • Utiliza una implementación patentada basada en el DOM de la página y la comprensión de imágenes, utilizando GPT-4.1 mini para el razonamiento
  • Moderadamente rápido
  UiPath (con GPT-5)
  • Modelo estándar: para tareas complejas
  • Funciona mejor en navegadores
  • Utiliza una implementación patentada basada en el DOM de la página y la comprensión de la imagen, utilizando GPT-5 para el razonamiento
  • Lenta
  UiPath (con GPT-5 mini)
  • Modelo básico: más rápido, más barato
  • Funciona mejor en navegadores
  • Utiliza una implementación patentada basada en el DOM de la página y la comprensión de imágenes, utilizando GPT-5 mini para el razonamiento
  • Moderadamente rápido
  OpenAI: operador
  • Modelo estándar: para tareas complejas
  • Funciona en cualquier tipo de aplicación, incluidas las interfaces basadas en imágenes
  • Utiliza el operador OpenAI, un modelo de razonamiento basado en imágenes. Probablemente el mejor del grupo
  • Lenta
  Anthropic: uso del ordenador
  • Modelo estándar: para tareas complejas
  • Funciona en cualquier tipo de aplicación, incluidas las interfaces basadas en imágenes
  • Utiliza Anthropic Computer Use, un modelo de razonamiento basado en imágenes
  • Lenta
• Rate this activity - Good or Poor

Opciones adicionales

Opciones

• Max number of steps - This is the maximum number of steps that ScreenPlay can take to achieve its goal. The property can be used as a basic guardrail to prevent infinite agentic loops.
• Type by clipboard - Indicates whether the clipboard is used to type the given text. The following options are available:
  • Nunca : no usar nunca el portapapeles
  • Siempre : utiliza siempre el portapapeles
  • Siempre que sea posible : utiliza el portapapeles cuando sea posible. Esto depende del sistema operativo y del texto que se va a escribir (p. ej. Si se utiliza cualquier tecla especial, no se utilizará el portapapeles)

• Use DOM when available - Indicates whether DOM data will be used/sent to the LLM Model for applications where DOM can be extracted.

  DOM solo puede ser utilizado por las implementaciones de LAM de UiPath.

  Deshabilitar si la orientación basada en DOM provoca coordenadas incorrectas de elemento.

  Default value is True.

• Disable variable security - Indicates whether the variable security should be disabled.

  Variable security ensures that prompt instructions can not be passed via variable values.

  The purpose of this feature is to prevent prompt injection attacks and is based on LLM, so if a "false positive" occurs, the user can disable it for each ScreenPlay activity. To conclude if it is a "false positive", the user can inspect the execution trace, system prompt, reasoning, and actions.

  Enable this option only if you need to pass prompt instructions via variable values or if a "false positive" result occurred.

  Default value is False.

• Input mode - Select which method should be used to generate keyboard and mouse input:
  • Same as App/Browser - Uses the Input mode settings from the parent Use Application/Browser activity.
  • Eventos de hardware : actúa como un usuario real utilizando entradas de "hardware" como los movimientos del ratón o las pulsaciones del teclado para interactuar con las aplicaciones. Estos son eventos desencadenados por hardware enviados directamente al sistema operativo. Aunque este método ofrece una emulación de comportamiento del 100 %, algunos eventos pueden perderse ocasionalmente. Como desarrollador, es tu responsabilidad garantizar que todos los eventos lleguen de forma fiable a la aplicación de destino.
  • API de Chromium : realiza acciones utilizando las API de depuración. Solo funciona para elementos de Chromium. Envía todo el texto de una vez. Funciona incluso si la aplicación de destino no está enfocada. Para obtener más información, consulta API de Chromium.
  • Simular : simula mediante API de accesibilidad. Recomendado para navegadores, aplicaciones basadas en Java, SAP. Suele ser más fiable que los eventos de hardware. Envía todo el texto en una sola Actions. Funciona incluso si la aplicación de destino no está enfocada. Pruebe si el elemento de la interfaz de usuario de su aplicación de destino lo admite.
  • Window messages - Simulates using Win32 messages. Recommended for desktop apps. Usually more reliable than Hardware Events. Sends all text in one go. Works even if target app is not in focus. Please test if your target application UI element supports this.

• Continuar en caso de error : especifica si la automatización debe continuar incluso cuando la actividad arroja un error. Este campo solo admite valores Boolean (Verdadero, Falso). El valor predeterminado es Falso. Como resultado, si el campo está en blanco y se produce un error, se detiene la ejecución del proyecto. Si el valor se establece en Verdadero, la ejecución del proyecto continúa independientemente de cualquier error.

Plazos

• Retraso antes de: retraso (en segundos) entre la hora a la que se termina la actividad anterior y la hora a la que esta actividad empieza a ejecutar operaciones. El valor predeterminado es 0,2 segundos. Añadir un retraso entre actividades garantiza que una actividad tiene tiempo suficiente para completarse antes de que comience la actividad siguiente.

• Retraso después de : retraso (en segundos) entre el momento en que se completa esta actividad y el momento en que la siguiente actividad inicia cualquier operación. El valor predeterminado es 0,3 segundos. Agregar un retraso entre actividades garantiza que una actividad tenga tiempo suficiente para completarse antes de que comience la siguiente.

• Tiempo de espera: especifica la cantidad de tiempo (en segundos) que se debe esperar a que se ejecute la actividad antes de arrojar un error. El valor predeterminado es 30 segundos.

Salida

• Result - The result of the task, if any. For now we only support String output.