- 概要
- UI Automation
- UI Automation アクティビティ パッケージについて
- UI Automation を使用して自動化されるアプリケーションと技術
- プロジェクトの対応 OS
- UI-ANA-016 - [ブラウザーを開く] に使用されている URL を検出
- UI-ANA-017 - [エラー発生時に実行を継続] の値が True
- UI-ANA-018 - OCR/画像関連のアクティビティのリスト
- UI-DBP-006 - コンテナーの使用
- UI-DBP-013 - Excel の自動化方法の誤用
- UI-DBP-030 - セレクター内での変数の使用禁止
- UI-DBP-031 - アクティビティの検証
- UI-PRR-001 - クリックをシミュレート
- UI-PRR-002 - 入力をシミュレート
- UI-PRR-003 - [アプリケーションを開く] の誤用
- UI-PRR-004 - ハードコードされた待機時間
- UI-REL-001 - セレクター内の大きいインデックス値
- UI-SEC-004 - メール アドレスのデータを含むセレクター
- UI-SEC-010 - アプリ/URL の制限
- UI-USG-011 - 許可されていない属性
- UX-SEC-010 - アプリ/URL の制限
- UX-DBP-029 - セキュリティで保護されていないパスワードの使用
- UI-PST-001 - [プロジェクト設定] の監査ログ レベル
- UiPath ブラウザー移行ツール
- クリッピング領域
- Computer Vision レコーダー
- アクティビティの索引
- アクティベート
- アンカー ベース
- ブラウザーにアタッチ
- ウィンドウにアタッチ
- ユーザー入力をブロック
- 吹き出し
- チェック
- クリック
- 画像をクリック
- 画像クリック トリガー
- OCR で検出したテキストをクリック
- テキストをクリック
- クリック トリガー
- アプリケーションを閉じる
- タブを閉じる
- ウィンドウを閉じる
- コンテキスト対応のアンカー
- 選択されたテキストをコピー
- 要素属性変更トリガー
- 要素の存在を確認
- 要素スコープ
- 要素ステート変更トリガー
- UI ツリーをエクスポート
- 構造化データを抽出
- 子要素を探す
- 要素を探す
- 画像を探す
- 一致する画像を探す
- OCR でテキスト位置を探す
- 相対要素を探す
- テキスト位置を探す
- アクティブ ウィンドウを取得
- 親要素を取得
- 属性を取得
- イベント情報を取得
- クリップボードから取得
- フル テキストを取得
- OCR でテキストを取得
- パスワードを取得
- 位置を取得
- ソース要素を取得
- テキストを取得
- 表示中のテキストを取得
- 前に戻る
- 次に進む
- ホームに移動
- Google Cloud Vision OCR
- ウィンドウを隠す
- 強調表示
- ホットキー トリガー
- ホバー
- 画像上でホバー
- OCR で検出したテキスト上でホバー
- テキスト上でホバー
- 画像の存在を確認
- 画面上で指定
- .NET コードを挿入
- JS スクリプトを挿入
- ActiveX メソッドを呼び出し
- キー操作トリガー
- 画像を読み込み
- ウィンドウを最大化
- Microsoft Azure ComputerVision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- ウィンドウを最小化
- イベントを監視
- マウス トリガー
- ウィンドウを移動
- URL に移動
- OCR でテキストの存在を確認
- 要素が出現したとき
- 要素が消滅したとき
- 画像が出現したとき
- 画像が消滅したとき
- アプリケーションを開く
- ブラウザーを開く
- ブラウザーを更新
- ユーザー イベントを再生
- ウィンドウを復元
- 画像を保存
- 項目を選択
- 複数の項目を選択
- ホットキーを押下
- クリッピング領域を設定
- フォーカスを設定
- テキストを設定
- クリップボードに設定
- Web 属性を設定
- ウィンドウを表示
- プロセスを開始
- システム トリガー
- スクリーンショットを作成
- Tesseract OCR
- テキストの存在を確認
- ツールチップ
- 文字を入力
- SecureString で文字を入力
- フォアグラウンドを使用
- 属性を待つ
- 要素の消滅を待つ
- 画像の消滅を待つ
- アクセシビリティ チェック
- アプリケーション イベント トリガー
- ユーザー入力をブロック
- チェック/チェック解除
- アプリのステートを確認
- 要素を確認
- クリック
- クリック イベント トリガー
- ドラッグ アンド ドロップ
- 要素スコープ
- 表データを抽出
- 要素を探す
- 繰り返し (各 UI 要素)
- ブラウザーのデータを取得
- クリップボードを取得
- テキストを取得
- URL を取得
- URL に移動
- 強調表示
- ホバー
- JS スクリプトを挿入
- キーボード ショートカット
- キー押下イベント トリガー
- マウス スクロール
- ブラウザー内を移動
- 画像を保存
- 項目を選択
- ブラウザーのデータを設定
- クリップボードに設定
- CV サーバを設定
- ランタイム ブラウザーを設定
- フォーカスを設定
- プロジェクト設定を行う
- テキストを設定
- スクリーンショットを作成
- 文字を入力
- ユーザー入力のブロックを解除
- ウィンドウ操作
- UI Automation API を使用してブラウザー検索を実行し、結果を取得する
- Web の閲覧
- 画像を検索する
- 画像をクリックする
- イベントをトリガーおよび監視する
- ファイルを作成して上書きする
- HTML ページ: 情報を抽出して操作する
- ウィンドウの操作
- リスト項目の選択の自動化
- ウィンドウ要素を探して操作する
- テキスト操作の自動化を行う
- 画像を読み込んで処理する
- マウスでアクティブ化する操作を管理する
- アプリケーションランタイムの操作を自動化する
- ローカル アプリケーションの自動実行
- ブラウザーのナビゲーション
- Web オートメーション
- トリガー スコープの例
- DevExpress での UI Automation の有効化
- Computer Vision Local Server
- モバイル オートメーション
- ターミナル
既存の UI 要素にアタッチし、それを複数の子アクティビティのスコープとして公開する要素スコープ アクティビティです。
[ 要素スコープ ] モダン アクティビティはプレビュー版でのみ利用可能です。
UiPath.UIAutomationNext.Activities.NElementScope
説明
[ 要素スコープ] アクティビティは、1 つの UI 要素を一度識別すると、その本体に配置されたすべてのアクティビティのスコープとして公開されます。すべての子アクティビティ ( [クリック]、[ 文字を入力]、[テキストを 取得]、[ 属性を取得] など) は、画面全体を再度検索するのではなく、指定した要素 からの相対的な 要素をターゲットにします。
セレクターを短く、安定して高速に保ちながら、同じコンテナー (表の行、フォーム セクション、カード、またはパネル) 内で複数のアクションを実行する場合に使用します。
アクティビティの本体はコンテナーです。指定した要素 (またはその子孫) を対象とする子アクティビティは、本体内に配置されます。すべての子アクティビティは、スコープでキャプチャされた要素に対して実行されるため、親要素を指定するのは 1 回だけです。
[要素スコープ ] は [ アプリケーション/ブラウザーを使用 ] アクティビティ内に配置できます。これにより、要素はそのアプリケーション/ブラウザーのスコープ内で解決され、子アクティビティはその設定を継承できます。要素を直接指定して単独で使用することもできます。
プロジェクトの対応 OS
Windows | クロスプラットフォーム
構成
- 画面上で指定 - アタッチする UI 要素を指定します。ターゲットを指定すると、アクティビティ カードにターゲット要素とそのアンカーのプレビューが表示されます。
ターゲットを指定したら、メニュー オプション ボタンを選択し、以下のいずれかのオプションを選択してターゲットを管理します。- ターゲットを指定 - ターゲットをもう一度指定します。記述子がオブジェクト リポジトリで定義されている場合は、現在のアクティビティに対してのみ記述子を指定する前にリンクを解除する必要があります。
- ターゲットを編集 - 選択ヘルパーを開いて、ターゲット要素を設定します。
- 参考スクリーンショットを削除 - ターゲット要素のスクリーンショットを削除します。
- 参考スクリーンショットを変更 - ターゲット要素のスクリーンショットを変更します。
- オブジェクト リポジトリに表示 - 記述子を選択した状態で [オブジェクト リポジトリ] パネルを開きます。
- オブジェクト リポジトリへのリンクを解除 - オブジェクト リポジトリへの記述子のリンクを解除します。
- オブジェクト リポジトリに追加 - 現在の UI 要素をライブラリ プロジェクトに追加し、オートメーション プロセス全体で要素を再利用できます。
プロパティ パネル
ターゲット
スコープがアタッチされる UI 要素です。ターゲットは、画面上で要素を指定したときに設定され、以下のオプションを使用して調整できます。
- ウィンドウ セレクター (アプリケーション インスタンス) - アプリケーション ウィンドウ (アプリケーション/ブラウザー) のセレクターです。
- 厳密セレクター - 指定した要素に対して生成されるセレクターです。セレクターは、要素をその属性によって識別する XML フラグメントです。
オプション
- Healing Agent モード - プロセス レベルまたはジョブ レベルでのガバナンスまたは Orchestrator の設定に基づいて、このアクティビティでの Healing Agent の動作を設定します。
- アプリ/ブラウザーと同一 - 親の [アプリケーション/ブラウザーを使用] アクティビティの設定を継承します。
- ジョブの設定を継承 - ガバナンスまたは Orchestrator で定義された設定を、プロセス レベルまたはジョブ レベルで適用します。
- 無効化 - このアクティビティの Healing Agent をオフにします。
- 推奨事項のみ - Healing Agent が、実行中のジョブの UI Automation の問題を修正するための推奨事項を提供できるようにします。ただし、ガバナンスまたは Orchestrator の設定で許可されている場合に限ります。
- エラー発生時に実行を継続 - アクティビティでエラーが発生した場合でも、オートメーションを継続するかどうかを指定します。このフィールドでは、
Boolean値 (True、False) のみがサポートされています。既定値はFalseです。そのため、フィールドが空白でエラーが発生すると、プロジェクトの実行が停止します。値をTrueに設定すると、プロジェクトの実行はエラーに関係なく継続されます。 - 入力モード - ターゲット要素の操作に使用するテクノロジを指定します。スコープ内の子アクティビティは、このモードを継承できます。利用可能なオプションは次のとおりです。
- ハードウェア イベント - オペレーティング システム上でマウスとキーボードを使用して、実際のユーザーのように動作します。人間の操作を完全にエミュレートしますが、一部のイベントが失われる可能性があるため、対象のアプリケーションにフォーカスする必要があります。
- シミュレート - アクセシビリティ API を使用してアクションをシミュレートします。ブラウザー、Java ベースのアプリ、SAP を使用する場合に推奨されます。通常はハードウェア イベントよりも信頼性が高く、すべてのテキストを 1 回の操作で送信し、対象のアプリにフォーカスしていなくても動作します。ターゲット要素がこのオプションをサポートしていることを確認します。
- Chromium API - デバッガー API を使用してアクションを実行します。これは、Chromium の要素に対してのみ動作します。すべてのテキストを一度に送信し、対象のアプリにフォーカスしていなくても動作します。
- ウィンドウ メッセージ - Win32 メッセージを使用します。デスクトップ アプリに適しています。通常はハードウェア イベントよりも信頼性が高く、すべてのテキストを一度に送信し、対象のアプリにフォーカスしていなくても動作します。ターゲット要素がこのオプションをサポートしていることを確認します。
- バックグラウンド - バックグラウンドで実行されます。可能な場合は [シミュレート] を使用します。複雑なアクティビティ (画像、ネイティブ テキスト) は引き続きフォアグラウンドで実行されます。
タイミング
- タイムアウト - エラーがスローされる前にターゲット要素が見つかるまで待機する時間 (単位: 秒) を指定します。既定値は 30 秒です。
[ 実行前の待機時間 ] プロパティと [ 実行後の待機時間 ] プロパティは [ 要素スコープ ] では使用されず、デザイナーには表示されません。プロジェクト レベルの待機時間の設定は、このアクティビティには意図的に適用されません。
入力/出力
- 入力要素 - アクティビティの実行対象となる UI 要素で、
UiElementオブジェクトに保存されます。このフィールドではUiElementオブジェクトのみがサポートされています。このオブジェクトは、他の UI Automation アクティビティの [ 出力要素 ] プロパティ フィールドから取得できます。 - 出力要素 - 解決された UI 要素で、
UiElementオブジェクトに保存されます。その後、この変数を、UiElementを入力として受け入れる他のアクティビティに渡すことができます。