Gravador do Autopilot para Automação de Interface Gráfica

O Gravador de Autopilot para Automação de Interface Gráfica é uma ferramenta com tecnologia de IA que visa acelerar e simplificar significativamente o processo de estruturação de sequências básicas de Automação de Interface Gráfica.

Você pode criar sequências de Automação de Interface Gráfica usando o Gravador, tanto gerando atividades por meio de um prompt de linguagem natural quanto adicionando-as manualmente.

Importante:

Não há suporte para adicionar loops de lógica condicional. O Gravador somente pode lidar com uma lista predefinida de atividades básicas de Automação de interface gráfica.

Extract Data Table ainda não é suportada.

Após criar a sequência desejada, basta selecionar Salvar. As atividades necessárias para executar a sequência são então preenchidas em sua tela de fluxo de trabalho do Studio Web.

Acesso ao gravador

Para acessar o Gravador do Autopilot para Automação de Interface Gráfica, siga estas etapas:

Abra um projeto do Studio Web existente ou crie um novo.
No fluxo de trabalho, adicione uma atividade Usar Navegador .
Em Trabalhar no escopo, selecione uma guia para automatizar no menu suspenso.
Selecione o ícone Gerar as atividades de automação da interface gráfica usando o Autopilot no canto superior direito da caixa de captura de tela informativa ou no botão Gerar . O botão Gerar fica visível apenas quando não há atividades dentro da atividade Use Browser .
O Gravador agora está aberto.

Observação: se você criar um projeto do zero com o Autopilot e o fluxo de trabalho exigir uma sequência UIAutomation, a parte do prompt de texto pertencente à sequência UIAutomation é pré-carregada no Gravador após você selecionar Gerar na atividade Use Browser . Portanto, quando você acessa o Gravador neste contexto, ele vai diretamente gerar as atividades.

Como gerar atividades por meio do prompt de texto

Para gerar atividades por meio do prompt de texto no Gravador, siga estas etapas:

Selecione o botão de adição.
Prossiga com a etapa a ou b. Independentemente da escolha, o resultado é o mesmo.
1. 1. Selecione a opção Gerar com o Autopilot da lista. Isso cria um cartão de atividade de espaço reservado.
  2. Escreva um prompt de texto no campo Descreva suas ações nesta página e, em seguida, pressione a tecla Enter ou selecione o símbolo de seta. Uma solicitação é mais eficaz se descrever com precisão a tarefa em questão. Isso pode incluir instruções como "criar um novo fornecedor" ou "criar uma solicitação de licença entre 25 e 30 de dezembro", em vez de uma instrução genérica como "clique no botão 'nova'".
2. Escreva um prompt de texto na caixa de pesquisa e, em seguida, pressione a tecla Enter ou selecione a opção Gerar com Autopilot .
As atividades agora são geradas a partir do prompt. O Gravador usa apenas as seguintes atividades de Automação de Interface Gráfica para gerar sequências:
- Click
- Type Into
- Get Text
- Select Item
- Check/Uncheck
As atividades geradas são preenchidas no Gravador. Para fazer a transição para o próximo estado do aplicativo, selecione o botão Testar . O botão Testar é uma tentativa de execução configurada por padrão de um clique com o único propósito de ajudar você na transição para o próximo estado do aplicativo, para que você possa continuar estruturando sua automação.
Você fez a transição para o próximo estado do aplicativo. As atividades executadas são marcadas com uma marca de seleção verde. Se, por algum motivo, a tentativa de Testar execução do melhor esforço configurada por padrão falhar, você ainda poderá interagir livremente com o aplicativo para executar manualmente as etapas necessárias. Se o aviso não for totalmente coberto, selecione o botão Continuar 'prompt' .
Uma nova atividade foi adicionada ao Gravador. Para fazer a transição para o próximo estado do aplicativo, selecione o botão Testar .
Você fez a transição para o próximo estado do aplicativo. Você pode usar Continuar 'prompt' e Testar alternativamente até atingir o estado desejado do aplicativo e todo o prompt ser coberto.

Como adicionar uma atividade manualmente

Para adicionar manualmente uma atividade no Gravador, siga estas etapas:

Selecione o botão de adição.
Escolha uma das seguintes atividades de Automação de Interface Gráfica da lista:
- Click
- Type Into
- Get Text
- Select Item
- Check/Uncheck
- Hover
- Keyboard Shortcuts
- Take Screenshot
- Get Attribute
- Mouse Scroll
- Check Element
Indique um destino selecionando um elemento de interface gráfica na tela.
Indique uma âncora selecionando um elemento de interface gráfica próximo que ajude a identificar exclusivamente o destino.
Selecione Confirmar.
A atividade agora é adicionada no Gravador.

Ações que você pode realizar na interface do usuário

Explore as opções disponíveis na interface do usuário conforme detalhado na tabela a seguir.

Opções	Description
Botão de Gerar	Abre o Gravador. Você também pode selecionar o ícone Gerar as atividades de automação da interface do usuário usando o ícone Autopilot no canto superior direito da caixa de captura de tela informativa.
Botão de mais	Abre a barra de pesquisa e a lista suspensa de atividades.
Cartão de atividade	Você pode realizar o seguinte: Reinicie as atividades no Gravador arrastando e soltando-as. Acesse a tela de seleção clicando duas vezes no cartão da atividade. Verifique o destino e as âncoras de diferentes atividades sem acessar a tela de seleção, bastando selecionar o cartão da atividade. Isso dispara uma visualização de destaque de cinco segundos do destino e das âncoras.
Menu de hambúrguer do cartão de atividade	Ela contém as seguintes opções: Propriedades - Abre a tela de seleção, onde você pode indicar o destino e a âncora. Renomear - Permite renomear a atividade. Você pode usar até 100 caracteres. Excluir - Exclui o cartão de atividade do Gravador.
Botão de Teste	Executa todas as atividades geradas. Esta é uma execução de configuração padrão destinada a ajudar você a fazer a transição de um estado do aplicativo para outro. Observação: o botão Testar não está disponível no Safari.
Continuar botão "prompt"	Gera novas atividades no Gravador para cobrir todo o prompt.
`Delete` chave	Exclui o cartão de atividades selecionado. Atalho de teclado de usuário avançado; nenhum prompt de confirmação será exibido.
Gerar com botão de lixeira do Autopilot	Exclui o cartão de atividade do espaço reservado Gerar com Autopilot .
`Esc` chave	Retorna à tela do Studio Web. Se você tiver feito alterações no Gravador, um pop-up com o erro Salvar suas alterações feitas no Auxiliar de seleção? mensagem de erro será exibida. Você pode selecionar: Cancelar - Leva você de volta para o Gravador, onde suas alterações são preservadas. Não salvar - Leva você de volta para a tela do Studio Web sem salvar quaisquer alterações. Salvar - Salva suas alterações e sua sequência UIAutomation é preenchida na tela Web do Studio. Se o painel Propriedades estiver aberto, pressionar `Esc` leva você de volta à visualização Atividades do Gravador.
Botão Cancelar	Retorna para a tela do Studio Web sem salvar as alterações.
Botão Salvar	Salva sua sequência de fluxo de trabalho e preenche as atividades na tela do Studio Web.
Ícone de ajuda (F1)	Abre a página Documentação.

Controle de recursos do Autopilot

O Autopilot é habilitado por padrão para todos os usuários.

Você pode desabilitar recursos do Autopilot por meio das políticas de governança do Automation Ops de duas maneiras:

Adicionando uma política do Studio Web e definindo a opção Permitir Autopilot como Não.
Adicionando uma política de camada de confiança da IA e desabilitando o botão Habilitar chamadas para modelos de IA de terceiros por meio da camada de confiança da IA .

Quando qualquer uma dessas opções estiver desabilitada, você ainda poderá usar o Gravador de Autopilot Automação para Automação de Interface Gráfica, mas não poderá gerar atividades por meio de prompts de texto, bastando adicionar atividades manualmente no Gravador.

Nesta página