Habilitação do Computer Vision para automação móvel

O Computer Vision permite que você use a rede neural do UiPath para identificar elementos de interface gráfica e interagir com eles por meio de Robôs, simulando a interação humana. No contexto de Automação móvel, a funcionalidade Computer Vision aumenta o número de elementos de destino que podem ser identificados, permitindo automatizar elementos de interface gráfica que, de outra forma, serão mais difíceis de identificar e automatizar.

Veja as atividades que podem usar o Computer Vision na tabela abaixo:

Atividade	Description
Get Text	Extrai o texto de um elemento de UI especificado.
Set Text	Digita o texto especificado em um elemento de interface gráfica de destino.
Tap	Retorna uma variável de booleano que declara se um elemento de interface gráfica especificado existe.
Deslizar	Desliza a tela em uma direção especificada e por uma quantidade de vezes especificada.
Element Exists	Retorna uma variável de booleano que declara se um elemento de interface gráfica especificado existe.

Para começar a descobrir elementos de interface gráfica móveis usando o Computer Vision, você precisa configurar seu servidor do Computer Vision, seja para servidor Cloud ou locais. Você pode configurar o servidor do Computer Vision no menu Configurações do projeto no qual você está trabalhando.

A seção Configuração do Computer Vision é dividida em três outras subseções:

• Servidor - A URL para o tipo de servidor do Computer Vision ao qual você deseja se conectar: Cloud ou On-Premises. O valor padrão para os campos Valor de execução e Valor de depuração do servidor é a Instância de Cloud do Computer Vision: https://cv.uipath.com.
• Chave de API - a chave de API do Computer Vision, específica para sua organização.
• Usar Servidor Local – use um servidor de visão computacional local.

Limitação conhecida

O Computer Vision para automação móvel não é compatível com idiomas CJK (chinês, japonês, coreano).

Servidor do Cloud Computer Vision

Para se conectar a um servidor na nuvem do Computer Vision, você pode autenticar usando uma chave de API ou um token de usuário.

Chave de API

1. No painel Projeto , acesse Configurações do Projeto, Automação Móvel e se concentre na seção Visão Computacional .
2. Em Servidor , nos campos Valor de execução e Valor de depuração , insira a URL de um servidor de nuvem do Computer Vision. https://cv.uipath.com é o valor padrão.

   Para alterar o endpoint, acesse Endpoints públicos.

3. Insira a chave de API do Computer Vision da sua organização. Acesse as chaves de API para saber como obter a chave de API do Computer Vision.

Autenticação para o servidor do Computer Vision

Acesse Autenticação para aprender como autenticar no Servidor do Computer Vision, para que você possa usar os recursos correspondentes dentro do seu projeto.

Artigos relacionados

Para saber como configurar seu servidor de nuvem do Computer Vision, visite os recursos abaixo:

• Endpoints públicos
• Alteração do ponto de extremidade do servidor

Habilitando o servidor local do Computer Vision

Siga estas etapas para usar um Computer Vision local server:

1. Instale o pacote UiPath.ComputerVision.LocalServer.
2. No painel Projeto , acesse Configurações do Projeto, Automação Móvel e se concentre na seção Visão Computacional .
3. No campo Servidor:
   1. Se você estiver usando uma versão do MobileAutomation.Activities até e incluindo 24.12-preview: insira um URL do servidor Computer Vision nos campos Valor de execução e Valor de depuração.
      Aviso: normalmente, para um Computer Vision local server, esta etapa não é necessária, mas, devido a um problema atual conhecido, uma URL do servidor do Computer Vision é necessária para que o servidor local do Computer Vision para a automação móvel funcione conforme o esperado.
      O valor padrão do servidor do Computer Vision é https://cv.uipath.com.

      Para obter mais informações sobre os endpoints públicos disponíveis do Computer Vision que você pode usar, acesse Endpoints públicos.

   2. Se você estiver usando a versão 25.2.0-preview ou superior: você pode pular esta etapa.
4. Em Usar servidor local, defina o valor de Executar e o valor de Depuração como True.