- 概述
- 用户界面自动化
- 通过用户界面自动化实现自动化的应用程序和技术
- 项目兼容性
- UI-ANA-016 - 拉取打开浏览器 URL
- UI-ANA-017 - 出错时继续 True
- UI-ANA-018 - 列出 OCR/图像活动
- UI-DBP-006 - 容器使用情况
- UI-DBP-013 - Excel 自动化误用
- UI-DBP-030 - 选取器中的禁止变量使用情况
- UI-DBP-031 - 活动验证
- UI-PRR-001 - 模拟单击
- UI-PRR-002 - 模拟键入
- UI-PRR-003 - 打开应用程序误用
- UI-PRR-004 - 硬编码延迟
- UI-REL-001 - 选取器中的大 IDX
- UI-SEC-004 - 选取器电子邮件数据
- UI-SEC-010 - 应用程序/Url 限制
- UI-USG-011 - 不允许的属性
- UX-SEC-010 - 应用程序/Url 限制
- UX-DBP-029 - 使用不安全的密码
- UI-PST-001 - 项目设置中的审核日志级别
- UiPath 浏览器迁移工具
- 剪切区域
- 计算机视觉录制器
- 活动索引
- 激活
- 锚点基准
- 附加浏览器
- 附加窗口
- 阻止用户输入
- 标注
- 选中
- 单击
- 单击图像
- 单击图像触发器
- 单击 OCR 文本
- 单击文本
- 单击触发器
- 关闭应用程序
- 关闭选项卡
- 关闭窗口
- 上下文感知锚点
- 复制选定文本
- 元素属性更改触发器
- 存在元素
- 元素作用域
- 元素状态更改触发器
- 导出用户界面树
- 提取结构化数据
- 查找子元素
- 查找元素
- 查找图像
- 查找图像匹配项
- 查找 OCR 文本位置
- 查找相对元素
- 查找文本位置
- 获取活动窗口
- 获取上级
- 获取属性
- 获取事件信息
- 从剪贴板获取
- 获取全文
- 获取 OCR 文本
- 获取密码
- 获取位置
- 获取源元素
- 获取文本
- 获取可见文本
- 返回
- 前往
- 转至主页
- Google Cloud Vision OCR
- 隐藏窗口
- 高亮显示
- 热键触发器
- 悬停
- 悬停在图像上方
- 悬停在 OCR 文本上方
- 悬停文本
- 存在图像
- 在屏幕上指定
- 注入 .NET 代码
- 插入 Js 脚本
- 调用 ActiveX 方法
- 按键触发器
- 加载图像
- 最大化窗口
- Microsoft Azure 计算机视觉 OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- 最小化窗口
- 监控事件
- 鼠标触发器
- 移动窗口
- 导航至
- 存在 OCR 文本
- 在元素出现时
- 在元素消失时
- 在图像出现时
- 在图像消失时
- 打开应用程序
- 打开浏览器
- 刷新浏览器
- 重播用户事件
- 还原窗口
- 保存图像
- 选择项目
- 选择多个项目
- 发送热键
- 设置剪切区域
- 设置焦点
- 设置文本
- 设置为剪贴板
- 设置网页属性
- 显示窗口
- 启动进程
- 系统触发器
- 截取屏幕截图
- Tesseract OCR
- 存在文本
- 工具提示
- 键入
- 输入安全文本
- 使用前台
- 等待属性
- 等待元素消失
- 等待图像消失
- Computer Vision Local Server
- 移动自动化
- 终端

用户界面自动化活动
图像识别活动还可以使用图像作为识别用户界面元素的方法来模拟人类行为。此活动可能很有用,因为它可用于根据是否显示给定图像来做出决策,或者用作重试范围活动中的条件,从而在循环中执行某些操作。它们还可以扫描计算机的屏幕,寻找出现在随机位置的用户界面元素,并返回用户界面元素变量,这些变量将剪切区域设置为找到的元素。它们还实现了图像的上传和下载。图像识别活动有一个准确度参数,该参数进行如下规定:要将图像注册为找到的元素,图像是必须完全匹配,还是可以部分匹配,该参数可补偿可能的更改。如果您正在搜索的图形元素可能略有不同,则此功能非常有用。
单击图像 和 悬停图像 是用于根据图像识别用户界面元素的活动。 指定图像后,该活动将扫描屏幕以查找给定元素,并单击或悬停在该元素上。 这些活动快速可靠,但对图形变化很敏感,因为如果颜色或背景详细信息发生变化,它们可能会失败。 这些活动在使用用户界面元素(例如按钮或复选框)自动化意味着模拟人类行为的流程时非常有用。 在 Citrix 等虚拟机环境中自动化流程时,这些活动也很重要,因为它们使与用户界面元素的交互成为可能。 这些活动收到一个图像变量和一个目标作为输入,图像变量包含要单击的图像,目标可以是字符串变量、区域变量、用户界面元素变量或选取器,指示必须执行操作的坐标。 还可以使用“ 在屏幕上指示” 功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。 如果这不适合您,则可能需要手动干预。
“查找图像”是一种等待某个用户界面元素出现的活动。为此,由用户提供用户界面元素的图像作为要搜索的图像的模型。元素出现后,该活动返回一个用户界面元素变量,同时将剪切区域设置为找到的图像。在虚拟机中识别用户界面元素并对这些元素执行不同操作时,该活动是一个很有用的工具。“查找图像”还用于根据是否显示给定图像来做出决策,或者用作“重试范围”活动中的条件,从而在循环中执行某些操作。此活动收到一个图像变量和一个目标作为输入,此图像变量包含要搜索的图像,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。
“存在图像”是一个用于验证屏幕上是否存在某个图像的活动。此活动返回一个布尔值变量,用于声明是否找到图像。此活动可能很有用,因为它可用于根据是否显示给定图像来做出决策,或者用作“重试范围”活动中的条件,从而在循环中执行某些操作。此活动收到一个图像变量和一个目标作为输入,此图像变量包含要搜索的图像,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。
“在图像出现时”等待图像在屏幕上显示一段时间。此活动是一个容器,这意味着可以在其中插入多个操作并可以对找到的图像执行多个操作。在虚拟机环境中,这是一个非常有用的活动,因为它可以监视用户界面元素何时出现,然后执行一组操作。“在图像出现时”也可用作其他活动的触发器。此活动收到一个图像变量和一个目标作为输入,此图像变量包含要搜索的图像,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。
“在图像消失时”等待图像从屏幕上消失一段时间。此活动是一个容器,这意味着可以在其中插入多个操作并在图像消失后执行这些操作。在虚拟机环境中,这是一个非常有用的活动,因为它可以监视用户界面元素何时消失,然后执行一组操作。“在图像消失时”也可用作其他活动的触发器。此活动收到一个图像变量和一个目标作为输入,此图像变量包含要搜索的图像,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。