activities
latest
false
- 概要
- UI Automation
- UI Automation を使用して自動化されるアプリケーションと技術
- プロジェクトの対応 OS
- UI-ANA-016 - [ブラウザーを開く] に使用されている URL を検出
- UI-ANA-017 - [エラー発生時に実行を継続] の値が True
- UI-ANA-018 - OCR/画像関連のアクティビティのリスト
- UI-DBP-006 - コンテナーの使用
- UI-DBP-013 - Excel の自動化方法の誤用
- UI-DBP-030 - セレクター内での変数の使用禁止
- UI-PRR-001 - クリックをシミュレート
- UI-PRR-002 - 入力をシミュレート
- UI-PRR-003 - [アプリケーションを開く] の誤用
- UI-PRR-004 - ハードコードされた待機時間
- UI-REL-001 - セレクター内の大きいインデックス値
- UI-SEC-004 - メール アドレスのデータを含むセレクター
- UI-SEC-010 - アプリ/URL の制限
- UI-USG-011 - 許可されていない属性
- UX-SEC-010 - アプリ/URL の制限
- UX-DBP-029 - セキュリティで保護されていないパスワードの使用
- UI-PST-001 - [プロジェクト設定] の監査ログ レベル
- UiPath ブラウザー移行ツール
- クリッピング領域
- Computer Vision レコーダー
- アクティベート
- アンカー ベース
- ブラウザーにアタッチ
- ウィンドウにアタッチ
- ユーザー入力をブロック
- 吹き出し
- チェック
- クリック
- 画像をクリック
- 画像クリック トリガー
- OCR で検出したテキストをクリック
- テキストをクリック
- クリック トリガー
- アプリケーションを閉じる
- タブを閉じる
- ウィンドウを閉じる
- コンテキスト対応のアンカー
- 選択されたテキストをコピー
- 要素属性変更トリガー
- 要素の存在を確認
- 要素スコープ
- 要素ステート変更トリガー
- UI ツリーをエクスポート
- 構造化データを抽出
- 子要素を探す
- 要素を探す
- 画像を探す
- 一致する画像を探す
- OCR でテキスト位置を探す
- 相対要素を探す
- テキスト位置を探す
- アクティブ ウィンドウを取得
- 親要素を取得
- 属性を取得
- イベント情報を取得
- クリップボードから取得
- フル テキストを取得
- OCR でテキストを取得
- パスワードを取得
- 位置を取得
- ソース要素を取得
- テキストを取得
- 表示中のテキストを取得
- 前に戻る
- 次に進む
- ホームに移動
- Google Cloud Vision OCR
- ウィンドウを隠す
- 強調表示
- ホットキー トリガー
- ホバー
- 画像上でホバー
- OCR で検出したテキスト上でホバー
- テキスト上でホバー
- 画像の存在を確認
- 画面上で指定
- .NET コードを挿入
- JS スクリプトを挿入
- ActiveX メソッドを呼び出し
- キー操作トリガー
- 画像を読み込み
- ウィンドウを最大化
- Microsoft Azure ComputerVision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- ウィンドウを最小化
- イベントを監視
- マウス トリガー
- ウィンドウを移動
- URL に移動
- OCR でテキストの存在を確認
- 要素が出現したとき
- 要素が消滅したとき
- 画像が出現したとき
- 画像が消滅したとき
- アプリケーションを開く
- ブラウザーを開く
- ブラウザーを更新
- ユーザー イベントを再生
- ウィンドウを復元
- 画像を保存
- 項目を選択
- 複数の項目を選択
- ホットキーを押下
- クリッピング領域を設定
- フォーカスを設定
- テキストを設定
- クリップボードに設定
- Web 属性を設定
- ウィンドウを表示
- プロセスを開始
- システム トリガー
- スクリーンショットを作成
- Tesseract OCR
- テキストの存在を確認
- ツールチップ
- 文字を入力
- SecureString で文字を入力
- フォアグラウンドを使用
- 属性を待つ
- 要素の消滅を待つ
- 画像の消滅を待つ
- Computer Vision ローカル サーバー
- モバイル オートメーション
- ターミナル
重要 :
このコンテンツの一部は機械翻訳によって処理されており、完全な翻訳を保証するものではありません。
UI Automation のアクティビティ
Last updated 2024年10月28日
UI Automation API を使用してブラウザー検索を実行し、結果を取得する
このチュートリアルでは、Google 検索エンジンを開いて「UiPath」を検索し、UiPath の公式 Web サイトから結果を取得してコンソールに表示するオートメーションを、UI Automation API を使用して作成する方法について説明します。
- v2023.10 以降の UiPath Studio
- UiPath.UIAutomation.Activities v23.10.3 以降
- コード化されたオートメーション内でオブジェクト リポジトリの要素を使用する方法については、「コード化されたオートメーションでオブジェクトを使用する」をご覧ください。
- [新規] を選択してコード化されたワークフローを作成し、[ファイル] グループから [コード化されたワークフロー] を選択します。
- オブジェクト リポジトリ内のコード化されたワークフローで使用する、すべての UI 要素をキャプチャします。
この例では、次の UI 要素をキャプチャする必要があります。
GoogleHomeScreen
- Google のホーム画面です。ここで検索を実行します。googleSearchBar
- Google の検索バーです。ここにキーワード「UiPath」を入力します。
googleResultsScreen
- 検索の実行後に Google の最初の結果を表示する画面です。firstPageOfResults
- 最初の結果のみを含む画面の部分です。uipathOfficialWebsite
- UiPath の公式 Web サイトに誘導する結果です。
- Google のホーム画面用の変数を作成し、Open API を使用してホーム画面を開きます。
public class Search : CodedWorkflow { [Workflow] public void Execute() { // 1. Open Google var homeScreen = uiAutomation.Open(ObjectRepository.Descriptors.Google.GoogleHomeScreen);
public class Search : CodedWorkflow { [Workflow] public void Execute() { // 1. Open Google var homeScreen = uiAutomation.Open(ObjectRepository.Descriptors.Google.GoogleHomeScreen); - TypeInto API を使用して、Google の検索バーに「UiPath」と入力します。
// 2. Type "UiPath" in the Google search bar homeScreen.TypeInto(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "UiPath");
// 2. Type "UiPath" in the Google search bar homeScreen.TypeInto(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "UiPath"); - KeyboardShortcut API を使用して Enter のキーボード ショートカットを送信し、対応する結果を検索します。
// 3. Send the "Enter" keyboard shortcut to search for the corresponding Google results homeScreen.KeyboardShortcut(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "[d(hk)][k(enter)][u(hk)]");
// 3. Send the "Enter" keyboard shortcut to search for the corresponding Google results homeScreen.KeyboardShortcut(ObjectRepository.Descriptors.Google.GoogleHomeScreen.googleSearchBar, "[d(hk)][k(enter)][u(hk)]"); - Attach API を使用して、Google の結果が表示された画面にフォーカスします。
注: アプリケーション内の特定の画面をターゲットにする必要があり、その画面が既に Open API を使用して開かれている場合は、Open API ではなく Attach API を使用します。Attach API ではアプリケーションが不必要に起動されないため、オートメーションをスムーズに動作させることができます。
var googleScreen = uiAutomation.Attach(ObjectRepository.Descriptors.Google.googleResultsScreen);
var googleScreen = uiAutomation.Attach(ObjectRepository.Descriptors.Google.googleResultsScreen); - GetText API を使用して Google の最初の結果からテキストを取得し、コンソールに出力します。
string firstresultsText = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.firstPageOfResults); Console.WriteLine(firstresultsText);
string firstresultsText = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.firstPageOfResults); Console.WriteLine(firstresultsText); - 文字列「
"https://www.uipath.com"
」を含む最初の結果のテキストを出力する If 句を作成します。// Initialize with an empty string string officialWebsiteUiPath = ""; if (firstresultsText.Contains("https://www.uipath.com")) { officialWebsiteUiPath = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.uipathOfficialWebsite); } Console.WriteLine(officialWebsiteUiPath);
// Initialize with an empty string string officialWebsiteUiPath = ""; if (firstresultsText.Contains("https://www.uipath.com")) { officialWebsiteUiPath = googleScreen.GetText(ObjectRepository.Descriptors.Google.googleResultsScreen.uipathOfficialWebsite); } Console.WriteLine(officialWebsiteUiPath);
このオートメーションは、Google 検索エンジンを好みの Web ブラウザーで開いて「UiPath」を検索し、最初のページから結果を取得して、リンク
https://uipath.com
を含む結果からテキストを抽出します。
この手順に従ってチュートリアルを自分で試してみるには、サンプル プロジェクト「Google Results using UI Automation API (UI Automation API を使用した Google の検索結果」をダウンロードします。