評価を実行する

データセットのアノテーション済みのドキュメントに対して UiPath Maestro™ Flow の抽出ノードで IXP モデルの評価を実行し、まだ評価されていない変更を追跡します。

前提条件

• ノードのデータセットに含まれるアノテーション済みのドキュメント。モデルの予測と比較するには、代表的な一連のドキュメントのグラウンド トゥルースが必要です。

評価を実行する

評価を実行するには、以下の手順を実行します。

1. [フロー 抽出 ] ノード上でホバーし、[ 全画面表示を開く] を選択します。

2. [ データセット ] タブまたは [ 評価の実行 ] タブで、[ 評価を実行] を選択します。[ 評価の実行を設定 ] ペインが開きます。

   

   または、ノードのプロパティ ペインの [定義] セクションで [評価を実行] を選択します。

3. [ 評価の実行を設定 ] ペインで、以下のオプションをオンにします。

   • データセット - 実行で評価するデータセットです。[評価ターゲット ] には、実行で評価するノードが表示されます。
   • タグでフィルター処理 - 必要に応じて、タグを選択して、データセット内のドキュメントのサブセットのみを評価します。既定では、この実行では [すべてのドキュメント] が評価されます。
   • 評価器 - 実行をスコアリングする評価器です。

4. ペインに「 評価を実行する前にこれらのデータ ポイントを確認してください」 という警告が表示されている場合は、表示されているドキュメントを確認します。たとえば、この警告には、期待される出力が現在の出力スキーマと一致しないドキュメントが一覧表示されます。

5. 必要に応じて、[ 実行の設定] を展開し、次のオプションを設定します。

   • 名前 - 評価の実行の名前です。既定では、名前はデータセットの名前で、その後に現在の日付が続きます。
   • バッチ サイズ - 1 から 50 までの値です。既定値は 10 です。
   • タイムアウト - 5 から 500 分の値です。既定値は 20 分です。

   

6. [ 保存して実行] を選択します。

実行の結果を確認するには、[ 評価の実行 ] タブに移動します。詳しくは、「 モデルのパフォーマンスを評価する」をご覧ください。

ドキュメントのサブセットに対する評価の実行は、ノードのヘルス スコアには影響しません。詳しくは、「 ノードのヘルス スコア」をご覧ください。

変更は評価されていません。

[ 未評価の変更] ラベルは 、ノードに モデル設定の変更、タクソノミーの変更、アノテーションの変更など変更が加えられたときに、フロー抽出ノードに表示されます。これらの変更は抽出モデルが受け取る入力に影響するため、まだ評価されていない変更があることをラベルで警告します。

変更を表示するには、[ 評価されていない変更 ] ラベルにカーソルを合わせます。このリストには、変更件数と各変更 ( 例: モデルの設定の変更) が表示されます。変更を評価するには、[ 評価を実行] を選択します。