UI Automation アクティビティについて

概要

UI Automation アクティビティを使用すると、ソフトウェアアプリケーションのグラフィカルユーザーインターフェイスの要素を操作できます。ボタンのクリック、テキストボックスへの入力、ドロップダウンメニューからの選択などのアクティビティがあります。このためには UiPath Robot を使用します。UiPath Robot は人間のユーザーと同じようにタスクを実行するので、複雑な業務プロセスや反復的な作業の自動化が容易になります。

ユーザーインターフェイスを自動化する場合、最初のフェーズは、人間のユーザーが行う手順の論理的なシーケンスを理解することです。そして次のフェーズで、その手順をアクティビティに変換して構成します。UI Automation アクティビティはコンテナー、入力、出力、同期のアクティビティとして機能することができ、アクティビティのプロパティで UiPath Robot によるアクションの実行方法を指定します。

UI Automation アクティビティには、次のパッケージが含まれています。

UI Automation
Computer Vision ローカルサーバー
モバイルオートメーション
ターミナル

プロジェクトの対応 OS

以下の表を使用して、プラットフォームとアクティビティパッケージ間の相互運用性を確認します。

アクティビティパッケージ	Windows - レガシ Studio プロジェクト	Windows (モダン) Studio プロジェクト	クロスプラットフォーム Studio プロジェクト
UI Automation
Computer Vision ローカルサーバー
モバイルオートメーション
ターミナル

UI Automation アクティビティパッケージについて

UI Automation アクティビティパッケージには、人間の動作をシミュレートする幅広い機能が用意されています。このパッケージで提供される強力で包括的な機能の目的は、ユーザーインターフェイスのオートメーションを構築して生産性を向上させ、時間の節約とエラーの最小化を実現することです。最も一般的なユースケースをいくつか示します。

業務プロセスの自動化 (カスタマーサービス、会計、受注処理、従業員のオンボーディングなど)
Web スクレイピング (顧客のフィードバックの分析、価格比較、リード生成、製品レビューのスクレイピングなど)
ユーザーインターフェイスのテストを自動化して、アプリケーションが正しく機能することを確認

詳細については、UI Automation パッケージのセクションをご覧ください。

Computer Vision ローカルサーバーパッケージについて

Computer Vision ローカルサーバー パッケージにはアクティビティが含まれていませんが、プロジェクトにインストールすると、ローカルの AI Computer Vision サーバーを使用できるようになります。

AI Computer Vision は、すべての UiPath Robot がセレクターや画像に依存することなく画面をキャプチャしたり、あらゆる UI 要素を視覚的に識別したりできるようにする AI スキルです。人間と同じようにユーザーインターフェイスを認識できるアルゴリズムであり、AI、OCR、テキストのあいまい一致の組み合わせと、そのすべてを関連付けるアンカーシステムを使用します。

詳細については、Computer Vision ローカルサーバーパッケージのセクションをご覧ください。

モバイルオートメーションアクティビティパッケージについて

モバイルオートメーション アクティビティパッケージは、モバイルアプリケーションのテストと操作を自動化する一連の堅牢なアクティビティを提供します。このパッケージは Android および iOS アプリケーションをテストするためのツールを備えており、タップ、スワイプ、テキストの入力、モバイル要素の検証などのアクションを実行できます。このアクティビティパッケージの主な機能は以下のとおりです。

マルチプラットフォームのモバイルオートメーション - Android プラットフォームと iOS プラットフォームでモバイルアプリケーションを自動化できます。
モバイル要素の操作 - タップ、スワイプ、スクロール、テキスト入力などのアクションをターゲットのモバイル要素で実行します。
モバイルの検証と確認 - モバイル要素のプロパティの検証、期待される値の確認、特定のシナリオの処理を行います。
モバイルデバイス管理 - デバイス情報のキャプチャ、デバイスの向きの管理、ネットワーク接続の制御、アプリケーションのインストールとアンインストール、デバイス固有の設定の処理を行います。