- Visão geral
- Automação de Interface Gráfica
- Sobre o pacote de atividades UIAutomation
- Aplicativos e tecnologias automatizados com a Automação de Interface Gráfica
- Compatibilidade do projeto
- UI-ANA-016 - Extrair URL de navegador aberto
- UI-ANA-017 - ContinuarComErro verdadeiro
- UI-ANA-018 - Listar atividades de OCR/Imagem
- UI-DBP-006 - Uso do contêiner
- UI-DBP-013 - Uso Incorreto da Automação do Excel
- UI-DBP-030 - Uso de variáveis proibidas em seletores
- UI-DBP-031 - Verificação de atividades
- UI-PRR-001 - Simular clique
- UI-PRR-002 - Simular Digitação
- UI-PRR-003 - Uso incorreto do aplicativo aberto
- UI-PRR-004 - Atrasos Embutidos em Código
- UI-REL-001 - Idx grande em Seletores
- UI-SEC-004 - Dados de e-mail do seletor
- UI-SEC-010 — restrições de app/URL
- UI-USG-011 - Atributos não permitidos
- UX-SEC-010 — restrições de app/URL
- UX-DBP-029 - Uso de senha não segura
- UI-PST-001 - Nível de log de auditoria nas configurações do projeto
- Ferramenta de Migração de Navegador do UiPath
- Região do Recorte
- Computer Vision Recorder
- Índice de atividades
- Ativar
- Anchor Base
- Anexar Navegador
- Anexar Janela
- Block User Input
- Texto Explicativo
- Marcar
- Click
- Clicar na Imagem
- Click Image Trigger
- Click OCR Text
- Clicar no Texto
- Click Trigger
- Close Application
- Fechar Guia
- Close Window
- Context Aware Anchor
- Copy Selected Text
- Element Attribute Change Trigger
- Element Exists
- Element Scope
- Element State Change Trigger
- Export UI Tree
- Extrair Dados Estruturados
- Find Children
- Localizar Elemento
- Localizar Imagem
- Find Image Matches
- Find OCR Text Position
- Localizar Elemento Relativo
- Find Text Position
- Get Active Window
- Get Ancestor
- Get Attribute
- Get Event Info
- Get From Clipboard
- Obter Texto Completo
- Get OCR Text
- Get Password
- Get Position
- Get Source Element
- Get Text
- Obter Texto Visível
- Voltar
- Avançar
- Ir para a Página Inicial
- Google Cloud Vision OCR
- Hide Window
- Highlight
- Hotkey Trigger
- Hover
- Focalizar Imagem
- Hover OCR Text
- Focalizar Texto
- Imagem Existe
- Indicate On Screen
- Inject .NET Code
- Inject Js Script
- Invoke ActiveX Method
- Key Press Trigger
- Carregar Imagem
- Maximize Window
- Microsoft Azure Computer Vision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- Minimize Window
- Monitorar eventos
- Mouse Trigger
- Move Window
- Navegar Para
- OCR Text Exists
- On Element Appear
- On Element Vanish
- Aparecer Na Imagem
- Desaparecer Na Imagem
- Abrir Aplicativo
- Abrir Navegador
- Atualizar Navegador
- Replay User Event
- Restore Window
- Save Image
- Select Item
- Select Multiple Items
- Enviar Tecla de Acesso
- Set Clipping Region
- Set Focus
- Set Text
- Set To Clipboard
- Set Web Attribute
- Show Window
- Iniciar Processo
- System Trigger
- Take Screenshot
- Tesseract OCR
- Texto Existe
- Dica de ferramenta
- Type Into
- Digitar Texto Seguro
- Use Foreground
- Wait Attribute
- Esperar Elemento Desaparecer
- Aguardar Imagem Desaparecer
- Verificação de acessibilidade
- Application event trigger
- Block User Input
- Check/Uncheck
- Check App State
- Check Element
- Click
- Click Event Trigger
- Drag and Drop
- Element Scope
- Extract Table Data
- Localizar elementos
- For Each UI Element
- Get Browser Data
- Obter Área de Transferência
- Get Text
- Get URL
- Go To URL
- Highlight
- Hover
- Inject Js Script
- Keyboard Shortcuts
- Keypress Event Trigger
- Mouse Scroll
- Navigate Browser
- Save Image
- Select Item
- Set Browser Data
- Definir Área de Transferência
- Definir servidor CV
- Set Runtime Browser
- Set Focus
- Definir configuração do projeto
- Set Text
- Take Screenshot
- Type Into
- Unblock User Input
- Window operation
- Realize pesquisa no navegador e recupere resultados usando APIs de Automação de interface gráfica
- Navegação na Web
- Localizar imagens
- Clicar em imagens
- Disparar e monitorar eventos
- Criar e substituir arquivos
- Páginas HTML: extrair e manipular informações
- Manipulação de janelas
- Seleção automatizada de listas
- Localizar e manipular elementos de janela
- Gerenciar automação de texto
- Carregar e processar imagens
- Gerenciar ações ativadas pelo mouse
- Automatizar o runtime de aplicativos
- Execução automatizada de um aplicativo local
- Navegação em navegador
- Automação da Web
- Exemplo de escopo de disparador
- Habilitar o suporte de Automação de Interface Gráfica no DevExpress
- Computer Vision Local Server
- Automação Móvel
- Notas de versão
- Sobre a arquitetura de automação de dispositivos móveis
- Compatibilidade do projeto
- Get Log Types
- Get Logs
- Get Page Source
- Get Device Orientation
- Get Session Identifier
- Instalar Aplicativo
- Gerenciar Aplicativo Atual
- Manage Other App
- Open DeepLink
- Abrir URL
- Mobile Device Connection
- Deslizar Direcional
- Padrão de Desenho
- Positional Swipe
- Press Hardware Button
- Set Device Orientation
- Take Screenshot
- Obter parte da captura de tela
- Element Exists
- Execute Command
- Get Attribute
- Get Selected Item
- Get Text
- Set Selected Item
- Set Text
- Deslizar
- Tap
- Type Text
- Terminal
- Notas de versão
- Sobre o pacote de atividades Terminal
- Compatibilidade do projeto
- Melhores práticas
- Find Text
- Get Color At Position
- Get Cursor Position
- Get Field
- Obter Campo na Posição
- Obter Área da Tela
- Get Text
- Obter Texto na Posição
- Mover Cursor
- Mover cursor para o texto
- Enviar Tecla de Controle
- Send Keys
- Send Keys Secure
- Set Field
- Definir Campo na Posição
- Terminal Session
- Aguardar Texto do Campo
- Wait Screen Ready
- Aguardar Texto da Tela
- Aguardar Texto na Posição
- APIs de automação codificadas em terminais
Configuração de dispositivos iOS locais para automação móvel executando uma instância do Appium local.
Configurando dispositivos iOS locais
Para configurar um dispositivo local para funcionar com as atividades de Automação móvel, você precisa executar uma instância local do Appium e ter as ferramentas necessárias para automatizar dispositivos iOS.
Há dois tipos de dispositivos iOS locais que você pode automatizar:
- Physical - a physical iOS device that you can connect to your local machine, through a USB cable.
- Emulator - an emulator for an iOS device that's stored locally.
Comandos Appium mais usados
A lista abaixo descreve os comandos mais usados para configurar o Appium no contexto de Automação de dispositivos móveis (recomendado para o Appium 2.0):
xcrun simctl list- Listar dispositivos disponíveis, tipos de dispositivos, tempos de execução ou pares de dispositivos.xcrun simctl list devices- lista os dispositivos disponíveis.xcrun simctl list devicetypes- lista os tipos de dispositivos.xcrun simctl list runtimes- lista os tempos de execução.xcrun simctl list runtimes- lista os pares de dispositivos.
Armazenamento de aplicativos
Você precisará armazenar seus aplicativos móveis na mesma máquina em que seu servidor Appium está em execução ou fazer upload do arquivo IPA para um URL que seja acessível anonimamente pelo servidor Appium (por exemplo, armazenamento de blobs).
Não é possível instalar aplicativos da Play Store ou App Store, exceto se você automatizar manualmente esses aplicativos para instalar seu aplicativo específico.
Se o artefato do seu aplicativo usar a extensão APP e você quiser carregar o aplicativo em uma URL pública, será necessário criar uma pasta chamada Payload, colocar o APP dentro dela, arquivar a pasta Payload e alterar a extensão para IPA ao invés de ZIP. Além disso, certifique-se de que o aplicativo que você está tentando automatizar seja compilado para a arquitetura de destino (Simulador ou dispositivo físico).
Configurando o Dispositivo Físico IOS
Pré-requisitos
-
Instale o Xcode.
-
Abra um Terminal e execute o seguinte comando para instalar o Homebrew:
/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"-
Execute o seguinte comando para adicionar o Homebrew à sua variável de ambiente
PATH:echo >> /Users/<username>/.zprofile echo 'eval "$(/opt/homebrew/bin/brew shellenv)"' >> /Users/<username>/.zprofile eval "$(/opt/homebrew/bin/brew shellenv)"echo >> /Users/<username>/.zprofile echo 'eval "$(/opt/homebrew/bin/brew shellenv)"' >> /Users/<username>/.zprofile eval "$(/opt/homebrew/bin/brew shellenv)"
-
-
Execute o seguinte comando para instalar o NodeJS:
brew install node 4. Instale o Appium:
- For Appium 1.0, run the following command:
npm install -g appium. This automatically installed all drivers needed. - For Appium 2.0, run the following command:
npm install -g appium@next.
Appium 2.0 comes without the drivers installed. Therefore, to install the needed drivers, also run the following command: appium driver install xcuitest.
- We recommend using Appium 2.0 with Mobile Automation version 22.10 or higher.
- Instale o Appium 2.0 se você quiser testar suas automações móveis em um Dispositivo Físico iOS. 1. Abra o Xcode e permita que ele instale quaisquer componentes adicionais necessários. Feche-o após ver a tela inicial. 2. Inicie o servidor do Appium, usando o seguinte comando:
appium --port 8001 --default-capabilities "{\"appium:systemPort\":9001}" --relaxed-security.
Configuração de dispositivo IOS físico local
-
Conecte seu dispositivo físico ao seu Mac.
-
Desbloqueie seu dispositivo e, se um alerta aparecer, certifique-se de permitir que o computador o acesse.
-
Obtenha o URL do Appium e salve-o para mais tarde:
- Go to System Settings, then the Network tab, and select the Wi-Fi network that the physical device is connected to.
- Copie o endereço IP para a rede Wi-Fi à qual o dispositivo está conectado. O formato da URL do Appium é
http://<ipaddress>:8001(8001é o número da porta onde você inicia o Appium).
-
Obtenha o UDID do dispositivo iOS físico que você conectou à sua máquina, do XCode.
- Go to Window > Devices and Simulators > Devices.
- Clique no dispositivo iOS ao qual você se conectou.
- Copy the Identifier. This is the UDID, that you'll later add as an additional desired capability, when adding this iOS physical device to MDM.
-
Crie o WebDriverAgent com o XCode no seu Mac.
- Navegue até a pasta
appium-webdriveragentusando o seguinte caminho:/Users/<username>/appium2/node_modules/appium-xcuitest-driver/node_modules/appium-webdriveragente abra o arquivoxcodeproj. - Select WebDriverAgent, and open WebDriverAgentRunner, under the Targets section.
- Switch to the Signing & Capabilities tab, select Automatically manage signing, and choose a user account from the Team dropdown.
- Change the Bundle Identifier to a unique value.
- Copie e salve este Identificador de pacote. Você o usará para adicionar seu aplicativo dentro do MDM (Id do pacote).
- Navegue até a pasta
-
Install the WebDriverAgent on your iOS physical device.
- Select WebDriverAgentRunner in the WebDriverAgent navigation bar.
- In XCode, go to Product, and click Test. On your connected iOS physical device, you'll see the WebDriverAgent installing.
-
Adicione o dispositivo iOS físico local configurado no Mobile Device Manager usando o procedimento Adição de dispositivo iOS no Mobile Device Manager.
Adicionando dispositivo IOS local no Gerenciador de dispositivos móveis
-
Abra o Gerenciador de dispositivos móveis do Studio.
-
No painel de navegação à esquerda, acesse Dispositivos.
-
Configure seu dispositivo da seguinte forma:
-
Nome — insira um nome para identificar seu dispositivo na aba Dispositivos.
-
Appium URL - Enter the Appium URL, that you previously copied, using the following format:
http://<ipaddress>:8001. -
Platform - Click the field to select iOS from the dropdown.
-
Nome do dispositivo — insira o nome do dispositivo.
-
Additional Desired Capabilities - Add the following capabilities:
Name Valor automationNamexcuitest(esse recurso ativa o driver Appium iOS)udidthe Identifier of the connected physical iOS device
-
-
(Opcional) Configure os detalhes de registro em log e gravação de vídeo na aba Registro em log.
-
(Opcional) Configure seu processo de desenvolvimento na aba Desenvolvimento.
- Fechar abas similares (ativado por padrão): feche abas que estejam executando conexões com dispositivos e aplicativos semelhantes.
- Aguardar atualização da página (ativado por padrão): aguarde a origem da página recuperar uma captura de tela de cada ação.
-
Clique em Salvar e fechar para adicionar seu dispositivo.
Seu dispositivo é adicionado à lista de Dispositivos . Para adicionar um dispositivo local, consulte . Se você não conseguir iniciar seu dispositivo, consulte Solução de problemas: falha na inicialização de dispositivo físico.
Automação Híbrida e Web no IOS
A automação híbrida funciona por padrão para dispositivos iOS, desde que você não esteja tentando automatizar um aplicativo criado para produção. Ao automatizar aplicativos de produção, o conteúdo hospedado do WKWebView não será automatizado, embora qualquer conteúdo da web hospedado em um SFSafariViewController também possa ser automatizado em aplicativos de produção. Para obter mais informações, consulte SFSafariViewController.