- 概要
- UI Automation
- UI Automation を使用して自動化されるアプリケーションと技術
- プロジェクトの対応 OS
- UI-ANA-016 - [ブラウザーを開く] に使用されている URL を検出
- UI-ANA-017 - [エラー発生時に実行を継続] の値が True
- UI-ANA-018 - OCR/画像関連のアクティビティのリスト
- UI-DBP-006 - コンテナーの使用
- UI-DBP-013 - Excel の自動化方法の誤用
- UI-DBP-030 - セレクター内での変数の使用禁止
- UI-PRR-001 - クリックをシミュレート
- UI-PRR-002 - 入力をシミュレート
- UI-PRR-003 - [アプリケーションを開く] の誤用
- UI-PRR-004 - ハードコードされた待機時間
- UI-REL-001 - セレクター内の大きいインデックス値
- UI-SEC-004 - メール アドレスのデータを含むセレクター
- UI-SEC-010 - アプリ/URL の制限
- UI-USG-011 - 許可されていない属性
- UX-SEC-010 - アプリ/URL の制限
- UX-DBP-029 - セキュリティで保護されていないパスワードの使用
- UI-PST-001 - [プロジェクト設定] の監査ログ レベル
- UiPath ブラウザー移行ツール
- クリッピング領域
- Computer Vision レコーダー
- アクティベート
- アンカー ベース
- ブラウザーにアタッチ
- ウィンドウにアタッチ
- ユーザー入力をブロック
- 吹き出し
- チェック
- クリック
- 画像をクリック
- 画像クリック トリガー
- OCR で検出したテキストをクリック
- テキストをクリック
- クリック トリガー
- アプリケーションを閉じる
- タブを閉じる
- ウィンドウを閉じる
- コンテキスト対応のアンカー
- 選択されたテキストをコピー
- 要素属性変更トリガー
- 要素の存在を確認
- 要素スコープ
- 要素ステート変更トリガー
- UI ツリーをエクスポート
- 構造化データを抽出
- 子要素を探す
- 要素を探す
- 画像を探す
- 一致する画像を探す
- OCR でテキスト位置を探す
- 相対要素を探す
- テキスト位置を探す
- アクティブ ウィンドウを取得
- 親要素を取得
- 属性を取得
- イベント情報を取得
- クリップボードから取得
- フル テキストを取得
- OCR でテキストを取得
- パスワードを取得
- 位置を取得
- ソース要素を取得
- テキストを取得
- 表示中のテキストを取得
- 前に戻る
- 次に進む
- ホームに移動
- Google Cloud Vision OCR
- ウィンドウを隠す
- 強調表示
- ホットキー トリガー
- ホバー
- 画像上でホバー
- OCR で検出したテキスト上でホバー
- テキスト上でホバー
- 画像の存在を確認
- 画面上で指定
- .NET コードを挿入
- JS スクリプトを挿入
- ActiveX メソッドを呼び出し
- キー操作トリガー
- 画像を読み込み
- ウィンドウを最大化
- Microsoft Azure ComputerVision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- ウィンドウを最小化
- イベントを監視
- マウス トリガー
- ウィンドウを移動
- URL に移動
- OCR でテキストの存在を確認
- 要素が出現したとき
- 要素が消滅したとき
- 画像が出現したとき
- 画像が消滅したとき
- アプリケーションを開く
- ブラウザーを開く
- ブラウザーを更新
- ユーザー イベントを再生
- ウィンドウを復元
- 画像を保存
- 項目を選択
- 複数の項目を選択
- ホットキーを押下
- クリッピング領域を設定
- フォーカスを設定
- テキストを設定
- クリップボードに設定
- Web 属性を設定
- ウィンドウを表示
- プロセスを開始
- システム トリガー
- スクリーンショットを作成
- Tesseract OCR
- テキストの存在を確認
- ツールチップ
- 文字を入力
- SecureString で文字を入力
- フォアグラウンドを使用
- 属性を待つ
- 要素の消滅を待つ
- 画像の消滅を待つ
- UI Automation API を使用してブラウザー検索を実行し、結果を取得する
- Web の閲覧
- 画像を検索する
- 画像をクリックする
- イベントをトリガーおよび監視する
- ファイルを作成して上書きする
- HTML ページ: 情報を抽出して操作する
- ウィンドウの操作
- リスト項目の選択の自動化
- ウィンドウ要素を探して操作する
- テキスト操作の自動化を行う
- 画像を読み込んで処理する
- マウスでアクティブ化する操作を管理する
- アプリケーションランタイムの操作を自動化する
- ローカル アプリケーションの自動実行
- ブラウザーのナビゲーション
- Web オートメーション
- トリガー スコープの例
- DevExpress での UI Automation の有効化
- Computer Vision Local Server
- リリース ノート
- Computer Vision Local Server パッケージについて
- モバイル オートメーション
- ターミナル
UI Automation のアクティビティ
Computer Vision Local Server パッケージについて
UiPath.ComputerVision.LocalServer
パッケージにはアクティビティが含まれていませんが、プロジェクトにインストールすると、ローカルの Computer Vision サーバーを使用できるようになります。Studio のパッケージ マネージャーによってインストールできます。
ローカルの Computer Vision モデルは、現在のサーバー モデルと機能的には同等です。これらのモデルのバージョン間には、以下のような若干の差異があります。
- Computer Vision Local Server を使用すると、Computer Vision をインストールしたマシン上で直接使用できます。別のサーバー マシンや強力な GPU などの外部リソースは必要ありません。
- ローカル サーバーは、利用可能な他の種類のサーバーよりも速度が遅くなります。
- このモデルのバージョンで使用されるデータはすべて、そのモデルのバージョンがインストールされているマシン上でローカルに処理されます。データがマシン外に送信されて処理されることはありません。
- このモデルのバージョンに関連するコストは大幅に低く抑えることができます。オンプレミスのサーバー バージョンと異なり、ハードウェアやメンテナンスの要件がないためです。
- このモデルは、1 回の要求で最大 2,000 語を処理できます。要求がこの制限を超えても 2,000 語を返しますが、順序は保証されません。
- v21.6 までは、Computer Vision Local Server は OCR をサポートしません。
- v22.7 までは、Computer Vision Local Server は表抽出をサポートしません。
推奨ハードウェア仕様
以下のハードウェア仕様を満たすマシンが必要です。
- 4 コア以上の CPU。複数の CPU によってパフォーマンスがスケールするため、8 コアであればさらに効果的です。ただし、16 コアを超えると、スケーリングによる速度の向上はほとんどまたはまったく見込めなくなります。
- AVX2 のサポート: AVX2 命令に対応していない CPU はサポートされません。使用するとエラーが発生します。
- 8 GB 以上の RAM。
このサーバー バージョンはどのような場合に使用するのですか?
- Computer Vision Cloud サーバーまたは Computer Vision オンプレミス サーバーを使用できない場合
- セキュリティ上の問題により、オートメーション プロセスを実行しているマシンにデータを残したくない場合。
- 使用するマシンに追加のソフトウェアをインストールできない場合でも、このバージョンはマシンに追加でインストールする必要がなく、パッケージ マネージャーを使用して Studio から簡単にインストールできます。
このサーバーはどのように使用するのですか?
パッケージ マネージャーを使用して、Studio プロジェクトに UiPath.ComputerVision.LocalServer アクティビティ パッケージをインストールします。
このパッケージをインストールすると、[CV 画面スコープ] アクティビティを [ローカル サーバーを使用] プロパティによって設定し、このローカル サーバーを使用できるようになります。
[プロジェクト設定] > [Computer Vision] で [ローカル サーバーを使用] が True に設定されている場合は、Computer Vision Local Server も使用できます。Local Server が有効な場合、サーバーの値は上書きされます。
Computer Vision Local Server は、クロスプラットフォーム プロジェクトでは利用できません。
UiPath.ComputerVision.LocalServer を適切に実行するには、このパッケージを使用するオペレーティング システム (x64 および x86 システムの両方) に 2015-2019 用 Visual C++ 再頒布可能パッケージがインストールされている必要があります。最新のバージョンは、こちらで確認できます。
Response from server is not valid
エラーが発生する場合は、ローカル サーバーの実行可能ファイルがウイルス対策ソフトウェアによってブロックされている可能性が最も高いと考えられます。その場合、
CurrentUser\.nuget\packages\uipath.computervision.localserver\20.10.0\lib\net461
の UiPath.CVLocalServer.Host.exe
(バージョン 20.10 の場合) または CurrentUser\.nuget\packages\uipath.computervision.localserver\USED_VERSION\build
(バージョン 21.2 以降の場合) が、使用中のウイルス対策ソフトウェアによって信頼されていることを確認してください。