- 概述
- 用户界面自动化
- 通过用户界面自动化实现自动化的应用程序和技术
- 项目兼容性
- UI-ANA-016 - 拉取打开浏览器 URL
- UI-ANA-017 - 出错时继续 True
- UI-ANA-018 - 列出 OCR/图像活动
- UI-DBP-006 - 容器使用情况
- UI-DBP-013 - Excel 自动化误用
- UI-DBP-030 - 选取器中的禁止变量使用情况
- UI-PRR-001 - 模拟单击
- UI-PRR-002 - 模拟键入
- UI-PRR-003 - 打开应用程序误用
- UI-PRR-004 - 硬编码延迟
- UI-REL-001 - 选取器中的大 IDX
- UI-SEC-004 - 选取器电子邮件数据
- UI-SEC-010 - 应用程序/Url 限制
- UI-USG-011 - 不允许的属性
- UX-SEC-010 - 应用程序/Url 限制
- UX-DBP-029 - 使用不安全的密码
- UI-PST-001 - 项目设置中的审核日志级别
- UiPath 浏览器迁移工具
- 剪切区域
- 计算机视觉录制器
- 激活
- 锚点基准
- 附加浏览器
- 附加窗口
- 阻止用户输入
- 标注
- 选中
- 单击
- 单击图像
- 单击图像触发器
- 单击 OCR 文本
- 单击文本
- 单击触发器
- 关闭应用程序
- 关闭选项卡
- 关闭窗口
- 上下文感知锚点
- 复制选定文本
- 元素属性更改触发器
- 存在元素
- 元素作用域
- 元素状态更改触发器
- 导出用户界面树
- 提取结构化数据
- 查找子元素
- 查找元素
- 查找图像
- 查找图像匹配项
- 查找 OCR 文本位置
- 查找相对元素
- 查找文本位置
- 获取活动窗口
- 获取上级
- 获取属性
- 获取事件信息
- 从剪贴板获取
- 获取全文
- 获取 OCR 文本
- 获取密码
- 获取位置
- 获取源元素
- 获取文本
- 获取可见文本
- 返回
- 前往
- 转至主页
- Google Cloud Vision OCR
- 隐藏窗口
- 高亮显示
- 热键触发器
- 悬停
- 悬停在图像上方
- 悬停在 OCR 文本上方
- 悬停文本
- 存在图像
- 在屏幕上指定
- 注入 .NET 代码
- 插入 Js 脚本
- 调用 ActiveX 方法
- 按键触发器
- 加载图像
- 最大化窗口
- Microsoft Azure 计算机视觉 OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- 最小化窗口
- 监控事件
- 鼠标触发器
- 移动窗口
- 导航至
- 存在 OCR 文本
- 在元素出现时
- 在元素消失时
- 在图像出现时
- 在图像消失时
- 打开应用程序
- 打开浏览器
- 刷新浏览器
- 重播用户事件
- 还原窗口
- 保存图像
- 选择项目
- 选择多个项目
- 发送热键
- 设置剪切区域
- 设置焦点
- 设置文本
- 设置为剪贴板
- 设置网页属性
- 显示窗口
- 启动进程
- 系统触发器
- 截取屏幕截图
- Tesseract OCR
- 存在文本
- 工具提示
- 键入
- 输入安全文本
- 使用前台
- 等待属性
- 等待元素消失
- 等待图像消失
- Computer Vision Local Server
- 移动自动化
- 终端
用户界面自动化活动
查找图像
下面的示例说明了如何识别同一图像在不同名称下的出现次数。 它提供了诸如 查找图像匹配项 和 查找图像之类的活动。 您可以在 UiPath.UIAutomation.Activities 包中找到这些活动。
此自动化流程的构建方法如下:
-
打开 Studio ,创建一个新“流程”。
注意:需要一个具有预定义设计的简单网页才能运行此示例。请务必创建/使用您自己的网页,或使用我们在可下载示例中提供的网页。 -
在工作流设计器中拖动序列容器,并将其命名为 Count Errors。
-
创建以下变量:
变量名称
变量类型
默认值
CurrentDirectory
字符串
XMatches
System.Collections.Generic.IEnumerable<UiPath.Core.UiElement>
PagePath
字符串
-
- 将序列容器拖动至 Count Errors 容器,并将其命名为初始页面路径。
-
打开初始页面路径序列并在其中添加一个分配活动。
- 在“收件人”字段中添加“
CurrentDirectory
”变量。 - 在“值”字段中添加表达式“
Environment.CurrentDirectory
”。
- 在“收件人”字段中添加“
-
在上一个“分配”活动下方放置另一个分配活动。
- 在“收件人”字段中添加“
PagePath
”变量。 - 在“值”字段中添加表达式“
Path.Combine(CurrentDirectory,"DemoPage","Table.html")
”。 -
初始页面路径序列应如下所示:
- 在“收件人”字段中添加“
- 返回主屏幕。
-
拖动打开浏览器活动并将其置于初始页面路径序列下方。
- 在URL字段中添加
PagePath
变量。
- 在URL字段中添加
-
选择打开浏览器活动的执行容器并创建以下变量:
变量名称
变量类型
默认值
Type1Err
Int32
0
Type2Err
Int32
0
- 将最大化窗口活动拖动至执行容器内。
-
在最大化窗口活动下放置单击活动。
-
在活动中,单击在浏览器中指定元素选项。选择允许阻止的内容按钮,如下面的动图所示:
- 在属性面板中,向出错时继续字段添加
True
值。 - 选中模拟单击选项的复选框。通过这样做,单击将使用目标应用程序的技术,这是最快的方法,并且也在后台工作。如果此选项和选择窗口消息选项均未选择,则单击使用的是最慢的硬件方法,并且无法在后台运行。
-
-
将“ 查找图像匹配项 ”活动拖动到“ 单击 ”活动下方。
-
在活动中,单击在浏览器中指定屏幕截图选项。选择所需的按钮,如下面的动图所示:
- 在属性面板中,从等待准备就绪下拉列表中选择
COMPLETE
选项。 - 在匹配项字段中添加
XMatches
变量。
-
-
将日志消息活动置于查找图像匹配项活动下方。
- 在“行”字段中添加表达式“
"Total number of errors: "+XMatches.Count.ToString
”。
- 在“行”字段中添加表达式“
-
将遍历循环活动拖动至日志消息活动下方。
- 在遍历循环字段中添加
element
值,并在值字段中添加变量XMatches
。
- 在遍历循环字段中添加
-
将悬停活动拖动至遍历循环活动的正文容器内。
- 在属性面板中,向元素字段添加值
element
。 - 从等待就绪下拉列表中选择
COMPLETE
选项。
- 在属性面板中,向元素字段添加值
- 在悬停活动下方放置选取活动。
- 将选取分支活动拖动至选取活动中,并将其命名为
PickBranch Type1
。 -
将查找图像活动放置在触发器容器中。
-
在活动中,单击在浏览器中指定元素选项。选择所需的按钮,如下面的动图所示:
-
-
在操作字段中放置分配活动。
- 在“收件人”字段中添加“
Type1Err
”变量。 - 在“值”字段中添加表达式“
Type1Err+1
”。
- 在“收件人”字段中添加“
- 将另一个选取分支活动拖动到选取活动中,将其放在先前添加的活动旁边,并将其命名为
PickBranch Type2
。 -
将查找图像活动放置在触发器容器中。
-
在活动中,单击在浏览器中指定元素选项。选择所需的按钮,如下面的动图所示:
-
-
在操作字段中放置分配活动。
- 在“收件人”字段中添加“
Type2Err
”变量。 - 在“值”字段中添加表达式“
Type2Err+1
”。
- 在“收件人”字段中添加“
-
将日志消息活动拖动至遍历循环活动下方。
- 在“行”字段中添加表达式“
"Errors of type 1: "+ Type1Err.ToString
”。
- 在“行”字段中添加表达式“
-
将日志消息活动拖动至上一个日志消息活动下方。
- 在“行”字段中添加表达式“
"Errors of type 2: "+ Type2Err.ToString
”。
- 在“行”字段中添加表达式“
- 运行流程。机器人识别标题为
Type1
的 图像的数量,以及名称为Type2
的图像的数量。