画像とテキストの自動化について

To enable image and text-based process automation, Studio features activities that simulate keyboard and mouse input, such as clicking, hovering or typing, text recognition and OCR activities that use screen scraping to identify UI elements, and image recognition activities that work directly with images to identify UI elements. Specialized recording wizards for Screen Scraping and Citrix recording can also automatically generate the activities required for each process, as explained here.

画像とテキストの自動化は、通常のメソッドではセレクターを見つけることができず、UI 操作の自動化が機能しない場合 (仮想マシン環境など) に便利です。

この章では、各種オートメーションにおいて重要となるアクティビティについて説明します。それらのアクティビティの動作と使用例を示し、前述のアクティビティを使用した、画像およびテキストベースのプロセスの自動化の例を 3 つ紹介します。