- 概要
- UI Automation
- UI Automation を使用して自動化されるアプリケーションと技術
- プロジェクトの対応 OS
- UI-ANA-016 - [ブラウザーを開く] に使用されている URL を検出
- UI-ANA-017 - [エラー発生時に実行を継続] の値が True
- UI-ANA-018 - OCR/画像関連のアクティビティのリスト
- UI-DBP-006 - コンテナーの使用
- UI-DBP-013 - Excel の自動化方法の誤用
- UI-DBP-030 - セレクター内での変数の使用禁止
- UI-PRR-001 - クリックをシミュレート
- UI-PRR-002 - 入力をシミュレート
- UI-PRR-003 - [アプリケーションを開く] の誤用
- UI-PRR-004 - ハードコードされた待機時間
- UI-REL-001 - セレクター内の大きいインデックス値
- UI-SEC-004 - メール アドレスのデータを含むセレクター
- UI-SEC-010 - アプリ/URL の制限
- UI-USG-011 - 許可されていない属性
- UX-SEC-010 - アプリ/URL の制限
- UX-DBP-029 - セキュリティで保護されていないパスワードの使用
- UI-PST-001 - [プロジェクト設定] の監査ログ レベル
- UiPath ブラウザー移行ツール
- クリッピング領域
- Computer Vision レコーダー
- アクティベート
- アンカー ベース
- ブラウザーにアタッチ
- ウィンドウにアタッチ
- ユーザー入力をブロック
- 吹き出し
- チェック
- クリック
- 画像をクリック
- 画像クリック トリガー
- OCR で検出したテキストをクリック
- テキストをクリック
- クリック トリガー
- アプリケーションを閉じる
- タブを閉じる
- ウィンドウを閉じる
- コンテキスト対応のアンカー
- 選択されたテキストをコピー
- 要素属性変更トリガー
- 要素の存在を確認
- 要素スコープ
- 要素ステート変更トリガー
- UI ツリーをエクスポート
- 構造化データを抽出
- 子要素を探す
- 要素を探す
- 画像を探す
- 一致する画像を探す
- OCR でテキスト位置を探す
- 相対要素を探す
- テキスト位置を探す
- アクティブ ウィンドウを取得
- 親要素を取得
- 属性を取得
- イベント情報を取得
- クリップボードから取得
- フル テキストを取得
- OCR でテキストを取得
- パスワードを取得
- 位置を取得
- ソース要素を取得
- テキストを取得
- 表示中のテキストを取得
- 前に戻る
- 次に進む
- ホームに移動
- Google Cloud Vision OCR
- ウィンドウを隠す
- 強調表示
- ホットキー トリガー
- ホバー
- 画像上でホバー
- OCR で検出したテキスト上でホバー
- テキスト上でホバー
- 画像の存在を確認
- 画面上で指定
- .NET コードを挿入
- JS スクリプトを挿入
- ActiveX メソッドを呼び出し
- キー操作トリガー
- 画像を読み込み
- ウィンドウを最大化
- Microsoft Azure ComputerVision OCR
- Microsoft OCR
- Microsoft Project Oxford Online OCR
- ウィンドウを最小化
- イベントを監視
- マウス トリガー
- ウィンドウを移動
- URL に移動
- OCR でテキストの存在を確認
- 要素が出現したとき
- 要素が消滅したとき
- 画像が出現したとき
- 画像が消滅したとき
- アプリケーションを開く
- ブラウザーを開く
- ブラウザーを更新
- ユーザー イベントを再生
- ウィンドウを復元
- 画像を保存
- 項目を選択
- 複数の項目を選択
- ホットキーを押下
- クリッピング領域を設定
- フォーカスを設定
- テキストを設定
- クリップボードに設定
- Web 属性を設定
- ウィンドウを表示
- プロセスを開始
- システム トリガー
- スクリーンショットを作成
- Tesseract OCR
- テキストの存在を確認
- ツールチップ
- 文字を入力
- SecureString で文字を入力
- フォアグラウンドを使用
- 属性を待つ
- 要素の消滅を待つ
- 画像の消滅を待つ
- UI Automation API を使用してブラウザー検索を実行し、結果を取得する
- Web の閲覧
- 画像を検索する
- 画像をクリックする
- イベントをトリガーおよび監視する
- ファイルを作成して上書きする
- HTML ページ: 情報を抽出して操作する
- ウィンドウの操作
- リスト項目の選択の自動化
- ウィンドウ要素を探して操作する
- テキスト操作の自動化を行う
- 画像を読み込んで処理する
- マウスでアクティブ化する操作を管理する
- アプリケーションランタイムの操作を自動化する
- ローカル アプリケーションの自動実行
- ブラウザーのナビゲーション
- Web オートメーション
- トリガー スコープの例
- DevExpress での UI Automation の有効化
- Computer Vision Local Server
- モバイル オートメーション
- ターミナル
UI Automation のアクティビティ
リリース ノート
公開日: 2024 年 10 月 18 日
[指定方向にスワイプ] アクティビティと API
[指定方向にスワイプ] アクティビティと API を使用して、テスト対象のモバイル アプリケーションで素早く簡単にスワイプを実行できます。[指定方向にスワイプ] では、定義済みの方向 ([上]、[下]、[左]、[右]) に対してスワイプ操作を実行できます。
- [指定方向にスワイプ] アクティビティ
- DirectionalSwipe API
公開日: 2024 年 9 月 5 日
UiPath では、モバイル オートメーションのユーザー エクスペリエンスを向上させるために継続的な改善を行っています。今回のリリースでは大幅な変更はありませんが、製品の軽微な改良を行いました。
公開日: 2024 年 8 月 9 日
UiPath では、モバイル オートメーションのユーザー エクスペリエンスを向上させるために継続的な改善を行っています。今回のリリースでは大幅な変更はありませんが、製品の軽微な改良を行いました。
公開日: 2024 年 7 月 1 日
モバイル オートメーション API とコード化されたワークフローのサポート
コーディングによるオートメーションの構築を希望する場合に、コード化されたオートメーションと UiPath のサービスを使用できるようになりました。モバイル オートメーション アクティビティ パッケージに、モバイル テスト シナリオのオートメーションを作成できる API が含まれるようになりました。
利用可能な API については「モバイル オートメーション API」を、UiPath® Studio のコード化されたオートメーションについて詳しくは「コード化されたオートメーション」をご覧ください。
Computer Vision での [スワイプ] のサポート
[スワイプ] アクティビティのターゲットを指定する際の選択肢として Computer Vision を使用できるようになりました。
モバイル オートメーション用の Computer Vision が記録で利用可能に
アクションの記録時に、モバイル デバイス マネージャー (MDM) からモバイル オートメーション用の Computer Vision を使用できるようになりました。デバイスをアプリケーションと接続したら、アクション バーから [CV 記録を有効化] を選択します。MDM 内で利用可能なアクションを確認するには、「デバイスとの対話」をご覧ください。
モバイル デバイス マネージャーのパフォーマンスが向上し、モバイル デバイス オートメーションが高速化されました。
デバッグの効率化のために、MDM ログから出力メッセージをコピーできるようになりました。
公開日: 2023 年 10 月 23 日
モバイル オートメーション用の Computer Vision
Computer Vision は、UiPath の高度なニューラル ネットワーク機能を使用して、ロボットによる UI 要素のシームレスな識別を可能にします。 Computer Vision を使用すると、これまで識別や自動化が困難だった UI 要素を自動化できます。 Computer Vision は、アクティビティのターゲットを指定する際の選択肢として使用できます。
Computer Vision を使用するアクティビティは次のとおりです。
- テキストを取得
- テキストを設定
- タップ
- 要素の存在を確認
Computer Vision の使用を開始するには、モバイル オートメーション用の Computer Vision を有効化する必要があります。 プロジェクト用の Computer Vision を有効化する方法については、「モバイル オートメーション用の Computer Vision を有効化する」をご覧ください。
公開日: 2023 年 4 月 7 日
多くの場合、プロキシはモバイル テストを自動化しようとしているアプリケーションに干渉します。そのため、テスト プロジェクトにカスタム HTTP ヘッダーを追加して、モバイル オートメーションを簡単に実現できるようにしました。カスタム HTTP ヘッダーを追加すると、特定のヘッダーのみを受け入れるプロキシを使用できるようになります。
モバイル オートメーション アクティビティ パッケージを以下の 2 つの独立したアクティビティ パッケージに分割しました。
-
UiPath.Mobile.Automation.Activties - このパッケージは、ワークフローの設計とカスタマイズに使用します。
-
UiPath.Mobile.Automation.Activities.Runtime - このパッケージはワークフローの実行に使用されます。
この変更の目的は、モバイル オートメーションの実行を高速化することです。モバイル オートメーション ワークフローの設計と実行の両方を行う場合は、必ず両方のパッケージをダウンロードしてください。
新しい [テキストを入力] アクティビティを使用して、アクティブな UI 要素の中に任意のテキストを追加します。このアクティビティは、キーボードで入力されたコンテンツを取得し、それを現在アクティブな UI 要素に貼り付けます。[テキストを入力] アクティビティは、他の方法ではセレクターでアクセスできない UI 要素にテキストを入力できるようにするために設計されています。
ユーザーとモバイル デバイス間のインタラクションは複雑であり、場合によってはデバイス画面上にパスを描画する必要があります。これを実現するため、[パターンを描画] アクティビティを使用できるようになりました。たとえば、モバイル デバイスのパターンのロックを解除するために画面上にパスを描画する必要がある場合の操作を自動化できるようになりました。
モバイル デバイス マネージャーの [スワイプ] アクションと [パターンを描画] アクションのユーザー エクスペリエンスを更新し、デザインを視覚的に向上させました。あらかじめ定義された場所までスワイプする場合、モバイル デバイス マネージャー画面に [指定位置をスワイプ] を線で表示できるようになりました。また、[絶対位置による選択] を有効化したスワイプ操作は、[指定位置をスワイプ] アクティビティとしてインポートされます。
公開日: 2022 年 10 月 24 日
ターゲットの座標
ターゲット セレクターが含まれているアクティビティで、ターゲットをオフセットするための式がサポートされるようになりました。これらの入力引数は、[タップのオフセット] を使用して定義できます。
位置に関連するすべてのアクティビティに、要素の位置を指定するターゲット セレクター (あいまいセレクターと座標系を含む) が含まれるようになりました。
新しい座標系の一部として [デバイスに依存しないピクセル] オプションを追加し、領域のピクセル密度に基づいてターゲットを指定できるようにしました。このパラメーターを [部分的なスクリーンショットを作成] アクティビティや [指定位置をスワイプ] アクティビティで使用すると、画面の密度が似ている複数のデバイス上でワークフローを実行できます。
公開日: 2022 年 8 月 26 日
React Native アプリのオートメーション
iOS 用の React Native Demo アプリを使用して、特定のコンポーネントを自動化できるようにする方法を学習できるようになりました。テストの際に正しい要素が識別されない問題がある場合に役立ちます。
アクティビティ
特定の API エンドポイントへの呼び出しを行いネイティブのモバイル コマンドを実行できるようにするアクティビティを 2 つ追加しました。
- セッション識別子を取得: HTTP 要求を通じて Appium エンドポイントを呼び出すための現在のセッション識別子を取得します。
- コマンドを実行: バッテリー情報の読み取りやアラートを閉じる操作など、ネイティブのモバイル コマンドを実行します。
[部分的なスクリーンショットを作成] アクティビティを使用して、モバイル デバイスの画面を四角形にキャプチャしたスクリーンショットを取得できるようになりました。
開始位置と終了位置を指定して画面上の特定の場所から場所にスワイプする機能を追加しました。[指定位置をスワイプ] アクティビティは、標準の [スワイプ] アクティビティでは自動化しづらい、最新のカスタム コントロールが実装されたオブジェクトやアクセスできない Web 表示のオブジェクトの場合に便利です。
デバイスの設定時に、[Appium URL] フィールドでは HTTPS がサポートされていないことを示すインラインのエラー メッセージが表示されるようになりました。
公開日: 2021 年 4 月 26 日
[オフライン編集] モードでセレクターを設定できるようになりました。
ユーザー エクスペリエンスを向上させるため、記録されるアクションの位置およびサイズを変更しました。
アクション バーの UI を変更し、より洗練されたデザインにしました。
アクションの記録時に表示されるスワイプ アクションの表示線が削除されました。
モバイル デバイス マネージャーは、タブレット端末のネイティブ アプリケーションをサポートしますが、アプリケーションが元々はモバイル端末用に開発されている場合、そのアプリケーションのタブレット版に対するサポートには制限があります。
公開日: 2020 年 12 月 15 日
- 特定の状況下で、[ページのソースを取得] アクティビティは破損したリンクを返していました。
- モバイル デバイス マネージャーで同様の Android デバイスを 2 つ実行すると、場合によってはターゲット要素が正常に取得されませんでした。
- ネイティブ セレクターと Web セレクターの両方に誤ったタグ要素が挿入される場合がありました。
- Studio の言語を変更すると、[デバイスの地理的位置を設定] アクティビティの位置座標が変わってしまっていました。この問題は、異なる言語において使用される区切り文字が違うために発生しており、結果として場所のアルゴリズムに干渉していました。この問題は既に解決しています。
- [繰り返し (前判定)] アクティビティに含まれるセレクター変数が最初のインスタンスでのみ使用でき、再利用できませんでした。
公開日: 2020 年 10 月 13 日
テスト作業をよりきめ細かく制御できるように、アクティビティの実行や Appium 呼び出しのタイムラインを含むログを取得する、高度なデバッグ機能を実装しました。
画面上の対話を記録し、それを Studio に直接インポートしてモバイル オートメーション ワークフローを作成できます。
モバイル デバイス マネージャーにデバイスやアプリケーションを追加する際に、動的な値を構築するための変数を定義できるようになりました。
プロジェクト、デバイスならびにアプリケーションの設定をインポートまたはエクスポートして、プロジェクトを自由に切り替えられるようになりました。
デバイスとアプリケーションをフィルター処理できるようになりました。
大量のバグを修正しました。
- v24.10.3
- 更新内容
- 改良点
- v24.10.2
- v24.10.1
- v24.10.0
- 更新内容
- 改良点
- バグ修正
- v23.10.5
- バグ修正
- v23.10.4
- バグ修正
- v23.10.3
- バグ修正
- v23.10.2
- バグ修正
- v23.10.1
- バグ修正
- v23.4.3
- バグ修正
- v22.10.6
- バグ修正
- v23.10.0
- 新着情報
- バグ修正
- 重大な変更
- v23.4.2
- バグ修正
- v22.10.5
- バグ修正
- v22.4.6
- バグ修正
- v21.10.7
- バグ修正
- v23.4.1
- 改良点
- v22.10.4
- 新機能
- 改良点
- バグ修正
- v23.4.0
- 更新内容
- 改良点
- バグ修正
- v21.10.6
- 改良点
- v22.10.2
- 新機能
- 改良点
- v22.10.1
- 改良点
- バグ修正
- v22.8.0
- 改良点
- v22.4.5
- 改良点
- v20.10.10
- 改良点
- v21.10.5
- 改良点
- v21.10.4
- 改良点
- v22.4.4
- 改良点
- v21.10.3
- 改良点
- v21.10.2
- 改良点
- v20.10.9
- 改良点
- v21.10.1
- 改良点
- v21.4.4
- 改良点
- v21.4.3
- 改良点
- v20.10.8
- 改良点
- v21.4.2
- 改良点
- 制限事項
- バグ修正
- v20.10.7
- バグ修正
- v20.10.6
- バグ修正
- v20.4.4
- 改良点
- v20.10.5
- 新機能と改良点
- v20.4.3
- 改良点
- v20.4.2
- 改良点
- v20.4.1
- 新機能と改良点
- 既知の問題