v24.10

v24.10.3

Data de lançamento: 12 de agosto de 2024

Estruture sua UI Automation

Quando Permitir o Autopilot é definido como Não na política do Automation Ops para o Studio Web, o ícone Gerar atividades UI Automation usando o Autopilot no canto superior direito das alterações da caixa informativa de captura de tela para Estruturar sua UI Automation usando o Gravador.

v24.10.2

Data de lançamento: 16 de julho de 2024

Controle de recursos do Autopilot

Observação:

Errata - adicionada em 12 de agosto de 2024

A segunda opção, adicionar uma política da Camada de Confiança da IA e desabilitar o Habilitar chamadas para modelos de IA de terceiros por meio do botão de alternância da Camada de Confiança da IA, não restringe você no momento de gerar atividades usando o Gravador do Autopilot para a UI Automation.

O Autopilot é habilitado por padrão para todos os usuários.

Você pode desabilitar recursos do Autopilot por meio das políticas de governança do Automation Ops de duas maneiras:

• Adicionando uma política do Studio Web e definindo a opção Permitir Autopilot como Não.
• Adicionando uma política de camada de confiança da IA e desabilitando o botão Habilitar chamadas para modelos de IA de terceiros por meio da camada de confiança da IA .

Quando qualquer uma dessas opções estiver desabilitada, você ainda poderá usar o Gravador de Autopilot Automação para Automação de Interface Gráfica, mas não poderá gerar atividades por meio de prompts de texto, bastando adicionar atividades manualmente no Gravador.

v24.10.1

Data de lançamento: 1.º de julho de 2024

Gravador do Autopilot para Automação de Interface Gráfica

Estamos animados em introduzir nossa funcionalidade mais recente, o Gravador do Autopilot para Automação de Interface Gráfica. Essa ferramenta com IA está disponível no Studio Web e permite que você crie sequências de Automação de Interface Gráfica e as preencha na sua tela. Você pode gerar atividades por meio de uma solicitação de linguagem natural ou adicioná-las manualmente ao Gravador.

O Gravador permite que você navegue pelo aplicativo que você deseja automatizar usando os botões Testar e Continuar "solicitação". O botão Testar executa todas as atividades atuais que você gerou ou criou, fazendo a transição para o próximo estado do aplicativo. Se sua solicitação não estiver totalmente coberta, Continuar "solicitação" gera as atividades necessárias para concluí-la. Trabalhando juntos, esses dois botões habilitam uma progressão perfeita por meio do seu processo de sequências de Automação de Interface Gráfica de Scaffolding.

Para obter mais detalhes sobre o Gravador, consulte a página Gravador do Autopilot para Automação de Interface Gráfica.

Para obter uma visão geral extensa da iniciativa do Autopilot, consulte o guia do Autopilot.

v24.10.0

Data de lançamento: 1.º de julho de 2024

Melhorias gerais

• Adicionado suporte personalizado para controles BasicTreeTable e JxTreeTable do Java.
• As atividades ClosePopup, SetRuntimeBrowser e SetValue agora podem ser usadas a partir de fluxos de trabalho codificados.
• Para aprimorar a segurança, o arquivo .xaml de saída não inclui mais a propriedade NomeAmigável.
• Adicionado suporte à atividade Extract Table Data para grade do DevExpress.
• A regra Analisador de fluxo de trabalho UI-USG-011 agora ignora seletores com idx=*, porque esse é um caso válido usado em pesquisas não greedy.

Automação de Interface Gráfica Moderna

Ao executar no modo Attended ou depurar no Studio, se a execução parar devido ao fato de um elemento de interface gráfica não ser encontrado, uma caixa de diálogo será exibida na tela. Anteriormente, apenas a mensagem de erro era exibida. Atualmente, várias opções na caixa de diálogo permitem que você decida o que fazer em seguida. Essa funcionalidade pode ser habilitada por meio da configuração Perguntar ao usuário sobre o projeto de erro de runtime (Automação de Interface Gráfica Moderna > Genérica). No modo Debug, você pode Salvar as alterações quando a execução terminar, para que a próxima execução de fluxo de trabalho comece diretamente com o seletor correto. Além das opções Tentar novamente, Ignorar e Continuar, você também tem a opção de Indicar o elemento. Essa opção específica está disponível apenas para as seguintes atividades:

• Check/Uncheck
• Check Element
• Click
• Get Attribute
• Get Text
• Highlight
• Hover
• Inject Js Script
• Keyboard Shortcuts
• Select Item
• Set Text
• Take Screenshot
• Type Into
• Use Application/Browser

A nova atividade Set Runtime Browser permite que você configure facilmente o tipo de navegador usado em todas as suas execuções de automação. A seleção permanece eficaz até que a execução termine, a menos que seja substituída por outra atividade Set Runtime Browser. Esse aprimoramento simplifica o processo de execução de automações em diferentes navegadores, minimizando a necessidade de configurar seletores manualmente e duplicar o código de testes. A atividade está disponível em projetos do Windows e multiplataforma.

A nova atividade Close Popup foi projetada para resolver interrupções de automação de pop-ups inesperados. Essa atividade baseada em IA fecha com eficiência quaisquer pop-ups detectados, sejam eles nativos, alertas, encontrados em uma página de navegador ou dentro de um aplicativo de área de trabalho, ao corresponder semanticamente os rótulos configurados para possíveis botões de fechamento. A atividade está disponível em projetos do Windows e multiplataforma.

A atividade Inject Js Script agora é compatível com fluxos de trabalho multiplataforma. Além disso, essa atividade agora pode aproveitar o poder da Automação de Interface Gráfica Moderna para identificar destinos por meio do Destino Unificado e usar elementos armazenados do Repositório de Objetos.

Para novos projetos, verifique se a execução está habilitada por padrão para as atividades Click, Hover, Keyboard Shortcuts e Type Into . Isso pode ser desabilitado para a atividade Type Into , definindo a configuração de projeto Sempre verificar automaticamente o texto digitado (UI Automation Modern > Verificar execução) como False. Para as atividades Click, Hover e Keyboard Shortcuts , você precisa desabilitar a configuração de projeto Exibir verificação para atividades Click, Hover, Keyboard Shortcuts .

A atividade Check App State agora permite que você selecione a opção Indicar em qualquer aplicativo enquanto estiver dentro de uma atividade Use Application/Browser, evitando a necessidade de um novo cartão de aplicativo ao verificar os estados do aplicativo para janelas ou elementos fora do escopo do cartão de aplicativo atual.

Expôs a propriedade Arguments na atividade Use Application/Browser para projetos multiplataforma. A propriedade já estava disponível para projetos do Windows.

Agora, você tem melhor controle sobre o URL de destino na atividade Use Browser em projetos multiplataforma, podendo abrir o URL de dentro da própria atividade. Se a URL já estiver aberta, você pode trazê-la para o foco ou abri-la novamente em uma nova guia.

As seguintes regras do Analisador de fluxo de trabalho, anteriormente exclusivas das atividades Clássicas, agora também se aplicam às atividades Modernas:

• UI-ANA-016
• UI-ANA-017
• UI-DBP-013
• UI-PRR-004
• UI-REL-001
• UI-SEC-004
• UI-USG-011

Para ajudar você a resolver o problema de correspondência no caso de uma falha de pesquisa de destino com o seletor difuso habilitado como um método de segmentação, uma mensagem de aviso destacando as correspondências mais próximas é exibida na tela. As correspondências mais próximas não são listadas se você alterou o seletor padrão adicionando ou removendo nós de seletor ou se a pesquisa falhar por causa de várias correspondências.

Adicionada uma caixa de seleção Não mostrar novamente na caixa de diálogo O aplicativo de destino não pôde ser identificado. Quando selecionado, se o aplicativo não estiver no estado correto e você quiser editar o destino, a caixa de diálogo não será mais exibida, e você será levado diretamente para a tela de seleção.

Otimizado o comportamento sobreposto para destinos e âncoras estreitando a borda do retângulo e posicionando os rótulos onde podem ser vistos claramente.

Os destinos duplicados agora são exibidos na tela de seleção sob demanda. Para verificar/ocultar destinos duplicados, selecione o botão Mostrar/esconder duplicatas.

Aprimorada a funcionalidade Gravador de aplicativo/web personalizando atividades disponíveis com base nos tipos de elementos. Agora, diferentes atividades aparecem ao indicar elementos, tornando mais rápido localizar e selecionar ações relevantes. As seguintes atividades estão disponíveis:

• Padrão para todos os elementos:
  • Click
  • Take Screenshot
  • Highlight
• Para rótulos:
  • Obter Texto
• Para caixas de texto editáveis:
  • Obter Texto
  • Type Into
• Para listas suspensas e caixas de listas:
  • Selecionar item
  • Obter Texto
• Para botões:
  • Click
  • Obter Texto

Agora, você pode verificar o valor atual de uma variável na tela de seleção sem ter que acessar o menu de contexto da variável. Para fazê-lo, basta passar o mouse sobre a variável da tag de seletor, e o valor é exibido como uma dica de ferramenta.

Adicionada a opção Iniciar aplicativo no assistente de Extração de tabela ao editar no modo off-line.

Automação assistida baseada em gatilho

Adicionados à atividade Application Event Trigger dois novos tipos de eventos que podem ser monitorados para elementos de interface gráfica WND, CTRL e UIA: Click e Key pressed. Até agora, os eventos Click e Key pressed podiam ser monitorados separadamente usando a atividade Click Event Trigger ou a atividade Keypress Event Trigger, respectivamente.

Compatibilidade aprimorada para incluir o monitoramento de eventos nativos do Modo Edge IE, que são assistentes principalmente de aplicativos legados que só podem ser executados no Internet Explorer. Todos os eventos da Web existentes para elementos WEBCTRL agora também são compatíveis com páginas do navegador que utilizam o Modo Edge IE por meio da atividade Application Event Trigger.

Com base na funcionalidade de automatizar aplicativos independentes com navegadores incorporados nativos, como Slack, Discord ou Electron, incorporamos a compatibilidade com o monitoramento nativo dentro de navegadores incorporados gerenciados, como CefSharp, nesta versão.

A compatibilidade com o monitoramento do evento Text selection changed foi adicionada para aplicativos criados na estrutura de Automação de Interface Gráfica da Microsoft, como Word, Outlook, Excel ou OneNote.

Adicionada compatibilidade com o monitoramento nativo de HTML para páginas da Web com CSP ativo carregado usando widgets do WebView2 ou Qt WebView incorporados em aplicativos nativos. A configuração Habilitar projeto de automação nativa do WebView2 precisa ser definida como True.

Adicionados vários eventos de janela HTML para uma página da Web identificada por meio dos seletores <html> + <webctrl>:

• Navegação na guia iniciada
• Navegação na guia concluída
• Foco da janela alterado
• Limites da janela alterados
• Janela criada
• Janela removida

Atividades semânticas

Experimente a simplicidade e a eficácia da automação de formulários com nossas atividades semânticas mais recentes, disponíveis tanto em projetos do Windows quanto em multiplataforma.

A atividade Extract Form Data foi projetada tendo em mente dados do formulário. Cria objetos de tipo personalizados que são tokens ideais para passar dados estruturados ao longo do seu pipeline de automação. Esses objetos de tipo personalizados também podem ser usados nas atividades Fill Form ou Set Value ou para preencher entidades de dados.

A atividade Fill Form pode usar como entrada qualquer objeto de dados estruturados: DocumentData, Dictionary, DataEntity, DataRow, DataTable, arquivo JSON, e até mesmo tipos personalizados, como aqueles produzidos como saída pela atividade Extract Form Data. O esquema de dados é extraído automaticamente no runtime e a IA corresponde semanticamente aos campos do formulário de destino, que são inseridos no formulário correspondente. Você só precisa indicar uma origem de dados, e o formulário de destino é escolhido automaticamente da atividade Use Application/Browser.

A atividade Set Value é uma versão simplificada da atividade Fill Form, com foco em apenas um elemento de interface gráfica. Essa atividade simplifica o processo de entrada de dados. Independentemente do elemento de formulário, se é uma caixa de texto, uma caixa de seleção, um botão de opção e assim por diante, essa atividade se adapta ao tipo de elemento, aprimorando seu processo de automação de formulários. Pode até lidar com seletores de datas e grupos de botões de opção.

Computer Vision

O Computer Vision fez a transição com sucesso para projetos multiplataforma e agora está totalmente disponível no Destino Unificado. Isso representa um passo significativo em frente, pois permite que você automatize cenários sem seletores, não apenas em projetos baseados no Windows, mas também em projetos multiplataforma do Studio Desktop e no Studio Web.

Essa versão introduz nosso novo modelo de IA do Vision Transformer. Devido à nova arquitetura do Vision Transformer, a detecção de elementos de interface gráfica em automações baseadas no Computer Vision é mais rápida e precisa em toda a parte. Isso leva a menos erros e acelera seus fluxos de trabalho de automação. Traz melhorias notáveis na detecção de tabelas, sendo compatível com várias estruturas e tamanhos de tabelas. Devido aos requisitos de GPU mais altos, esse modelo está disponível apenas no UiPath Cloud Server.

Adicionada compatibilidade total do Computer Vision com a atividade Select Item, habilitando não apenas o cenário do Computer Vision puro, mas também o cenário híbrido do seletor e do Computer Vision. Quando os seletores não estão disponíveis (um cenário puro do Computer Vision), a atividade agora replica a funcionalidade da atividade CV Dropdown Select. Quando os seletores estão disponíveis (um cenário híbrido), mas falham durante o runtime, o Computer Vision dispara um processo de autorrecuperação, realizando uma nova pesquisa de seletor com base nas informações do Computer Vision. Isso é usado para execução. Além disso, uma mensagem de aviso com informações detalhadas sobre o seletor problemático e o resultado da autorrecuperação é exibido nos logs, permitindo que você corrija problemas de automação usando seletores recém-descobertos.

A atividade Get Attribute agora também é compatível com destinos de botões de opção, mas não também com caixas de seleção. Isso é feito usando um novo atributo checked, que retorna um valor booleano (True ou False), de acordo com a detecção do modelo de IA do Computer Vision.

Você pode definir um ponto personalizado onde o evento de rolagem é enviado para o elemento de destino. Antes, o evento de rolagem era enviado no meio do elemento de destino. Agora, isso pode ser feito usando a funcionalidade de rolagem automática de tempo de execução nas atividades do Computer Vision por meio da propriedade Deslocamento de rolagem na atividade CV Screen Scope e, ao extrair tabelas ou texto rolável, usando a propriedade Deslocamento de rolagem de conteúdo nas atividades CV Extract Table e CV Get Text.

Quando o método de segmentação de Seletor Difuso não consegue encontrar uma âncora automática, o Computer Vision agora intervém e fornece uma âncora automática gerada pelo modelo de IA.

Para alternar do mecanismo UiPath Screen OCR padrão para o mecanismo UiPath Extended Languages OCR nas atividades Use Browser/Application e CV Screen Scope, você deve fornecer a chave de API do Computer Vision. Isso pode ser feito na propriedade ChaveDaAPI, no nível da atividade ou em Configurações do projeto > OCR > UiPath Extended Languages OCR > ChaveDaAPI.

Para fins de rastreabilidade e velocidade de depuração na análise de tempo de execução do Computer Vision, o DesignTime ScreenId agora é enviado no cabeçalho da solicitação HTTP.

SAP

Uma nova configuração de projeto está disponível no Studio: Configurações do projeto > Automação de Interface Gráfica Clássica > SAP > Habilitar o monitoramento do SAP. Essa configuração permite a vinculação de transações e casos de teste executados. Quando Habilitar monitoramento SAP é definido como Verdadeiro, as informações sobre as transações executadas e suas dependências são coletadas no runtime e enviadas para o Test Manager. Essa configuração é relevante atualmente apenas para projetos de Automação de Testes no Studio. O suporte para outros tipos de projeto será adicionado em uma versão futura.

Adicionamos suporte para um novo elemento do SAP WebGUI: Barra de Status do SAP. Agora você pode usar a atividade SAP Read Statusbar para extrair o tipo e o texto de mensagem da barra de Status do SAP.

Extensões do navegador

Em resposta à linha do tempo do Google para descontinuação do Manifest V2 (MV2) do Chrome a partir de junho de 2024, as extensões do Studio Web existentes para Chrome e Edge foram atualizadas para serem totalmente compatíveis com o Manifest V3, mantendo os mesmos IDs de extensão para ambos os navegadores. Nenhuma ação é necessária para receber as novas extensões MV3, que serão atualizadas automaticamente quando você reabrir o navegador.

Se você atualizar para as extensões 24.10 para Chrome e Edge, você não precisa mais definir manualmente o valor da política DeveloperToolsAvailability como 1 ao instalar extensões da Política de Grupo.

O suporte à automação de interface gráfica do Safari agora está disponível em visualização. A nova extensão UiPath para Safari permite que você projete automações de interface gráfica no Studio Web usando o Safari no macOS e execute automações de navegadores no Safari por meio do UiPath Assistant e UiPath Robot no macOS.

Repo. de Objetos

Fizemos melhorias substanciais em nosso Repositório de Objetos, adicionando funcionalidade para cenários anteriores não compatíveis. Os parágrafos a seguir fornecem um resumo abrangente de cada melhoria.

A compatibilidade com o Repositório de Objetos, anteriormente exclusiva do Windows, agora foi expandida para incluir multiplataforma no Studio Desktop. Ser capaz de criar e reutilizar objetos de interface gráfica em projetos de tipo multiplataforma permite um processo de desenvolvimento de automação mais rápido, redução de custos de manutenção e ajustes mais fáceis para automações impactadas por alterações na estrutura do seletor de elementos de aplicativo ou interface gráfica.

Aproveitando o poder do mecanismo de extração de interface gráfica avançado do Clipboard AI, que mescla Computer Vision e extrator DOM, a funcionalidade Capture All agora é capaz de capturar todos os elementos em uma página da Web, incluindo conteúdo rolável e hiperlinks. Tendo dependido antes disso apenas do modelo do Computer Vision para detecção de elementos, ele poderia extrair apenas os elementos visíveis. Agora, com a adição do extrator DOM, ele pode extrair todos os elementos, não apenas os visíveis, permitindo que eles sejam adicionados à biblioteca do Repositório de Objetos.

Agora, você pode destacar um elemento extraído enquanto mantém a seleção atual na janela Capturar elementos, usando o ícone Realçar.

Simplificada a experiência do usuário para criar, integrar e editar telas, nós e aplicativos dentro do Repositório de Objetos, garantindo um processo mais eficiente do início ao fim. Antes, o processo exigia que você navegasse manualmente por várias telas de confirmação. Agora, o Repositório de Objetos atribui automaticamente seu novo objeto ao aplicativo ou tela apropriado. Se houver algum objeto principal ausente, o Repositório de Objetos o criará automaticamente.

Caso você já tenha criado uma automação sem o Repositório de Objetos e queira adicionar as atividades e destinos a uma biblioteca do Repositório de Objetos, você pode usar o novo assistente Sincronizar Repositório de Objetos. Isso sincroniza todas as atividades de interação de interface gráfica e cria um aplicativo com seu nome, uma tela com seu nome e os elementos de interface gráfica correspondentes no repositório local. No passado, você teria que adicionar manualmente cada aplicativo, tela e elemento ao Repositório de Objetos. Agora, todo o projeto é adicionado à biblioteca local do Repositório de Objetos de uma vez. Isso está disponível para atividades Modernas e Clássicas. Para atividades Clássicas, apenas os destinos que estão usando seletores completos são adicionados, enquanto aqueles com seletores parciais não são. Além disso, agora você pode incluir uma biblioteca existente, e os objetos correspondentes que você indica serão sincronizados automaticamente.

Quando uma atividade é vinculada ao Repositório de Objetos, as edições feitas em um objeto local no painel de propriedades de destino agora se propagam automaticamente para o descritor correspondente no Repositório de Objetos, removendo a necessidade de sincronização manual.

As propriedades de destino de atividades vinculadas a objetos somente leitura são desabilitadas automaticamente. Antes, essas propriedades de destino permaneciam ativas no painel de propriedades, podendo causar confusão. Agora, se você quiser editar as propriedades de destino, você tem a opção de desvincular o objeto e fazer edições locais. No entanto, deve ser notado que essas alterações não se propagam para o descritor real no Repositório de Objetos.

Padronizamos o menu burger das atividades de Automação de Interface Gráfica, alinhando as opções de atividades que têm destinos vinculados a um Repositório de Objetos local com as opções de atividades regulares. Anteriormente, certas opções, como Indicar destino na tela ou Editar destino, estavam indisponíveis para atividades vinculadas ao Repositório de Objetos. Também padronizamos a funcionalidade de indicação para atividades Use Application/Browser quando o Repositório de Objetos é imposto ou não imposto.

Suporte adicionado para edição do elemento de interface gráfica da atividade Extract Table Data quando sincronizado com o Repositório de Objetos.

Correções de bugs

• O UI Explorer falhava ao validar seletores para SAP Interaction Center ao tentar ignorar o uso de iframe.
• Comportamento inesperado do aplicativo Java de terminal quando executado com uma executável de 32 bits; agora funciona sem problemas com executáveis de 32 e 64 bits.
• Ao navegar até a segunda página de uma tabela do Kendo Angular, a atividade Extrair dados de tabela não recuperava com sucesso os dados.
• Corrigido um problema de pop-up do aplicativo Java que ocorria a partir da versão 21.10.6 do pacote que afetava a experiência de tempo de design.
• O OCR para chinês, japonês e coreano não estava funcionando como um OCR personalizado na atividade Use Application/Browser quando o nome do projeto continha caracteres japoneses.
• Uma exceção Value cannot be null foi lançada ao remover a atividade OCR engine do CV Screen Scope após ter indicado um destino.
• Uma exceção There is no row at position 0 foi lançada ao remover a atividade OCR engine do CV Screen Scope e a ação de pairar sobre as células da tabela persistiu.
• Os elementos em páginas da Web que eram reconhecidos pelo widget de seletor não eram preservados ao salvar e fechar o seletor.
• Não é possível interagir com widgets da Web incorporados em aplicativos que hospedam controles da Web em várias janelas de nível superior.
• Quando uma atividade Click era cancelada em uma sequência paralela, a atividade Try Catch falhava ao capturar as exceções geradas.
• A extração de dados de tabelas grandes de páginas HTML estáticas estava causando erros e retardando todos os navegadores compatíveis. Essa correção não cobre o Internet Explorer.
• Anteriormente, a atividade Get From Clipboard podia não buscar o valor mais recente da área de transferência.
• A atividade Type Into ignoraria o texto inserido antes de caracteres especiais quando a propriedade Input mode era definida como Simular.
• A atividade Select Item e a atividade Select Menu Item específica do SAP estavam falhando quando o item selecionado continha texto com wildcards.
• A indicação de linhas em um aplicativo de bloco de notas falharia.
• Ao usar o Foxit Reader, alguns problemas eram encontrados. A atividade Extract Table Data não podia extrair caracteres chineses de arquivos PDF digitalizados. Além disso, o UI Explorer não podia disparar a acessibilidade de documentos. Além disso, mesmo que a execução de uma automação no modo Attended funcionasse corretamente, a pesquisa do aplicativo durante o modo Unattended falhava.
• Ao indicar o nome do documento da faixa de opções de um documento do Word aberto armazenado em unidades compartilhadas, como o SharePoint, você encontraria um erro de seletor inválido.
• Os elementos HTML em iframes aninhados no Salesforce não rolavam automaticamente para visualização quando uma entrada do mouse era enviada por meio de Eventos de hardware.
• Em alguns casos, o UiPath Remote Runtime leva mais tempo para retornar resultados Get Text de uma máquina remota. Como uma solução alternativa, defina o modo anexar do Windows como Janela única em vez da Instância do aplicativo na atividade Use Application/Browser. Observe que a opção Janela única não pode interagir com novas janelas ou pop-ups de aplicativos. Use uma nova atividade Application/Browser para essas interações.
• Quando atualizada do Windows - Legado para projetos do Windows, a atividade Extract Table Data não podia extrair valores da coluna devido à geração de seletor incorreta.
• Ao baixar a versão mais recente do WebDriver, a atividade Open Browser a armazenava na pasta WebDriverExe, mas ainda fazia referência à versão anterior em vez de aplicar a atual. Uma mensagem de erro de incompatibilidade apareceria ao tentar abrir navegadores.
• Ao adicionar as atividades clássicas On Element Appear, On Element Vanish, On Image Appear e On Image Vanish ao painel de designer, você obteria avisos de validação.