activities
latest
false
- 概述
- 用户界面自动化
- 通过用户界面自动化实现自动化的应用程序和技术
- 项目兼容性
- UI-ANA-016 - 拉取打开浏览器 URL
- UI-ANA-017 - 出错时继续 True
- UI-ANA-018 - 列出 OCR/图像活动
- UI-DBP-006 - 容器使用情况
- UI-DBP-013 - Excel 自动化误用
- UI-DBP-030 - 选取器中的禁止变量使用情况
- UI-PRR-001 - 模拟单击
- UI-PRR-002 - 模拟键入
- UI-PRR-003 - 打开应用程序误用
- UI-PRR-004 - 硬编码延迟
- UI-REL-001 - 选取器中的大 IDX
- UI-SEC-004 - 选取器电子邮件数据
- UI-SEC-010 - 应用程序/Url 限制
- UI-USG-011 - 不允许的属性
- UX-SEC-010 - 应用程序/Url 限制
- UX-DBP-029 - 使用不安全的密码
- UI-PST-001 - 项目设置中的审核日志级别
- UiPath 浏览器迁移工具
- 剪切区域
- 计算机视觉录制器
- 激活
- 锚点基准
- 附加浏览器
- 附加窗口
- 阻止用户输入
- 标注
- 选中
- 单击
- 单击图像
- 单击图像触发器
- 单击 OCR 文本
- 单击文本
- 单击触发器
- 关闭应用程序
- 关闭选项卡
- 关闭窗口
- 上下文感知锚点
- 复制选定文本
- 元素属性更改触发器
- 存在元素
- 元素作用域
- 元素状态更改触发器
- 导出用户界面树
- 提取结构化数据
- 查找子元素
- 查找元素
- 查找图像
- 查找图像匹配项
- 查找 OCR 文本位置
- 查找相对元素
- 查找文本位置
- 获取活动窗口
- 获取上级
- 获取属性
- 获取事件信息
- 从剪贴板获取
- 获取全文
- 获取 OCR 文本
- 获取密码
- 获取位置
- 获取源元素
- 获取文本
- 获取可见文本
- 返回
- 前往
- 转至主页
- Google Cloud Vision OCR
- 隐藏窗口
- 高亮显示
- 热键触发器
- 悬停
- 悬停在图像上方
- 悬停在 OCR 文本上方
- 悬停文本
- 存在图像
- 在屏幕上指定
- 注入 .NET 代码
- 插入 Js 脚本
- 调用 ActiveX 方法
- 按键触发器
- 加载图像
- 最大化窗口
- Microsoft Azure 计算机视觉 OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- 最小化窗口
- 监控事件
- 鼠标触发器
- 移动窗口
- 导航至
- 存在 OCR 文本
- 在元素出现时
- 在元素消失时
- 在图像出现时
- 在图像消失时
- 打开应用程序
- 打开浏览器
- 刷新浏览器
- 重播用户事件
- 还原窗口
- 保存图像
- 选择项目
- 选择多个项目
- 发送热键
- 设置剪切区域
- 设置焦点
- 设置文本
- 设置为剪贴板
- 设置网页属性
- 显示窗口
- 启动进程
- 系统触发器
- 截取屏幕截图
- Tesseract OCR
- 存在文本
- 工具提示
- 键入
- 输入安全文本
- 使用前台
- 等待属性
- 等待元素消失
- 等待图像消失
- Computer Vision Local Server
- 移动自动化
- 终端
重要 :
请注意此内容已使用机器翻译进行了部分本地化。
用户界面自动化活动
Last updated 2024年10月28日
使用用户界面自动化 API 执行浏览器搜索并检索结果
本教程说明如何使用用户界面自动化 API 创建自动化,以打开 Google 搜索引擎,执行 UiPath 搜索,从官方 UiPath 网站检索结果并将其显示在控制台中。
- UiPath Studio 2023.10 或更高版本
- UiPath.UIAutomation.Activities 23.10.3 或更高版本
- 访问在编码自动化中使用对象,了解在编码自动化中使用对象存储库元素的方法。
- 通过选择“新建”,然后从“文件”组中选择“编码工作流”,创建一个编码工作流。
- 捕获要在对象存储库内的编码工作流中使用的所有用户界面元素。
对于此示例,您需要捕获以下用户界面元素:
GoogleHomeScreen
- Google 主屏幕,您可以在其中执行搜索。googleSearchBar
- Google 搜索栏,您可以在其中输入 UiPath 关键字。
googleResultsScreen
- 执行搜索后显示前几个 Google 结果的屏幕。firstPageOfResults
- 屏幕上仅包含前几个结果的部分。uipathOfficialWebsite
- 会将您定向至 UiPath 官方网站的结果。
- 为 Google 主屏幕创建一个变量,并使用 Open API 打开该变量。
public class Search : CodedWorkflow { [Workflow] public void Execute() { // 1. Open Google var homeScreen = uiAutomation.Open(ObjectRepository.Descriptors.Google.GoogleHomeScreen);
public class Search : CodedWorkflow { [Workflow] public void Execute() { // 1. Open Google var homeScreen = uiAutomation.Open(ObjectRepository.Descriptors.Google.GoogleHomeScreen); - 使用 TypeInto API 在 Google 搜索栏中键入 UiPath。
// 2. Type "UiPath" in the Google search bar homeScreen.TypeInto(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "UiPath");
// 2. Type "UiPath" in the Google search bar homeScreen.TypeInto(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "UiPath"); - 发送 Enter 键盘快捷方式以使用 KeyboardShortcut API 搜索相应的结果。
// 3. Send the "Enter" keyboard shortcut to search for the corresponding Google results homeScreen.KeyboardShortcut(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "[d(hk)][k(enter)][u(hk)]");
// 3. Send the "Enter" keyboard shortcut to search for the corresponding Google results homeScreen.KeyboardShortcut(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "[d(hk)][k(enter)][u(hk)]"); - 使用 Attach API 在显示 Google 结果的屏幕上聚焦。
注意:当您需要定位已使用 Open API 打开的应用程序中的特定屏幕时,请使用 Attach API,而不是 Open API。Attach API 可防止系统启动不必要的应用程序,确保您的自动化如期运行。
var googleScreen = uiAutomation.Attach(ObjectRepository.Descriptors.Google.googleResultsScreen);
var googleScreen = uiAutomation.Attach(ObjectRepository.Descriptors.Google.googleResultsScreen); - 使用 GetText API 从前几个 Google 结果中获取文本,并在控制台中将其打印出来。
string firstresultsText = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.firstPageOfResults); Console.WriteLine(firstresultsText);
string firstresultsText = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.firstPageOfResults); Console.WriteLine(firstresultsText); - 创建一个 If 子句,该子句会打印第一个结果,其中包含
"https://www.uipath.com"
字符串的文本。// Initialize with an empty string string officialWebsiteUiPath = ""; if (firstresultsText.Contains("https://www.uipath.com")) { officialWebsiteUiPath = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.uipathOfficialWebsite); } Console.WriteLine(officialWebsiteUiPath);
// Initialize with an empty string string officialWebsiteUiPath = ""; if (firstresultsText.Contains("https://www.uipath.com")) { officialWebsiteUiPath = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.uipathOfficialWebsite); } Console.WriteLine(officialWebsiteUiPath);
要按照本教程的步骤操作并自行尝试,您可以下载以下示例项目:使用用户界面自动化 API 的 Goggle 结果。