- 发行说明
- 入门指南
- 设置和配置
- 自动化项目
- 依赖项
- 工作流类型
- 文件比较
- 自动化最佳实践
- 源代码控件集成
- 调试
- 诊断工具
- 工作流分析器
- 变量
- 参数
- 导入的命名空间
- 录制
- 用户界面元素
- 控制流程
- 选取器
- 对象存储库
- 数据抓取
- 图像与文本自动化
- Citrix 技术自动化
- RDP 自动化
- Salesforce 自动化
- SAP 自动化
- VMware Horizon 自动化
- 日志记录
- ScreenScrapeJavaSupport 工具
- Webdriver 协议
- 测试套件 - Studio
- 扩展程序
- 故障排除
OCR 活动
In some situations, certain applications are not compatible with the usage of normal scraping or UI automation technologies. Activities in Studio which use OCR technology scan the entire screen of the machine, finding all the characters that are displayed. This enables the user to create automations based on what can be seen on the screen, simplifying automation in virtual machine environments. Citrix and other remote desktop utilities are usually the target of OCR-based activities, as they only stream an image of the desktop to the user, which means normal UI selectors are impossible to find.
单击 OCR 文本和悬停 OCR 文本使用 OCR 扫描计算机屏幕上的文本并执行与其相关的操作。如果图形元素发生变化,但文本没有变化,使用文本识别创建的自动化通常仍然有效。这些都是在虚拟机环境中自动化基本操作的非常有用的活动。这些活动收到一个目标作为输入,目标可以是字符串变量、区域变量、用户界面元素变量或选取器,指示必须执行操作的坐标。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。
获取 OCR 文本使用 OCR 屏幕抓取方法从指定的用户界面元素中提取一个字符串及其信息。该活动可在执行屏幕抓取时自动生成,同时还会生成一个容器。默认情况下,使用 Google OCR 引擎,但您可以轻松地将其更改为 ABBYY 或 Microsoft。如此处所述,这些 OCR 引擎之间有一些不同,因此适合不同的情况。此活动收到一个目标作为输入,目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。此活动返回一个字符串变量,其中包含在用户界面元素中找到的文本,以及一个文本信息变量,其中包含所有找到的单词的屏幕坐标。
“查找 OCR 文本位置”可在用户界面元素中搜索给定的字符串,并返回包含所述字符串的用户界面元素变量。此活动对于定位相对于屏幕上文本的用户界面元素非常有用。此活动收到一个字符串和一个目标作为输入,字符串包含要搜索的文本,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。此活动返回一个用户界面元素变量,其中包含找到文本的位置。
“OCR 文本存在”检查能否通过使用 OCR 技术在给定用户界面元素中查找到文本,如果存在文本,则返回布尔值变量 true,如果不存在,则返回 false。此活动在所有类型的基于文本的自动化中都很有用,因为它可用于根据是否显示给定字符串来做出决策,或者用作“重试范围”活动中的条件,从而在循环中执行某些操作。此活动收到一个字符串和一个目标作为输入,字符串包含要搜索的文本,而目标可以是区域变量、用户界面元素变量或选取器,这可帮助您识别要自动化的内容以及必须执行这些操作的位置。还可以通过使用“在屏幕上指示”功能自动生成目标,该功能会尝试识别指定区域中的用户界面元素,并为它们生成选取器。如果此操作无效,则可能需要手动干预。此活动返回一个布尔值变量,用于声明是否找到文本。
IEnumerable<KeyValuePair<Rectangle,String>>
变量和一个字符串变量作为输出,变量包含提取的文本及其屏幕上坐标,而字符串变量包含提取的文本。