検証の統計情報を収集する

各フィールドについて少なくとも 10 個の例を検証し、プラットフォームがモデルのパフォーマンスに関する有意義な統計情報を自動的に計算できるようにする必要があります。

これらの統計情報によってモデルの長所と短所を把握し、それに従ってさらに調整を進めることができます。

統計情報を表示する

モデルのパフォーマンスに関する統計情報を収集するには、以下の手順を実行します。

1. [評価] タブに移動します。
2. [モデルのバージョン] ドロップダウン メニューを展開して、利用可能なすべてのバージョンのリストを表示します。
3. パフォーマンスを確認するモデル バージョンを選択します。
4. このページに、メイン ダッシュボードのすべてのフィールド グループの統計情報が表示されます。 すべてのフィールド グループについて以下の詳細を表示できます。
   • 抽出フィールドがあるフィールド グループの数
   • アノテーション済みのドキュメント
   • アノテーション済みの抽出データ
   • 確認済みのフィールド
   • 検証済み
   • フィールドの平均 F1 スコア
   • 抽出データの平均 F1 スコア
   • 抽出データの平均適合率
   • 抽出データの平均再現率
   注:

   これらの詳細は、Communications Mining の詳細と同じです。詳しくは、『Communications Mining ガイド』の「メトリック」と「抽出データの検証について」および「抽出パフォーマンスについて」をご覧ください。

5. さらに、[フィールド グループを検索] にフィールドを入力するか、タクソノミーからフィールド グループを手動で選択して、特定のフィールド グループを検索することもできます。
6. 特定のフィールド グループを選択すると、ダッシュボードが更新されてその統計情報が表示されます。 特定のフィールド グループについて以下の詳細を表示できます。
   • アノテーション済みのドキュメント
   • アノテーション済みの抽出データ
   • 抽出
   • アノテーション済みのフィールド
   • フィールドの検証
   • ドキュメント検証
   • 平均 F1 スコア
   • 平均適合率
   • 平均再現率
7. フィールド グループを選択した後に、特定のフィールドを選択して、その統計情報をダッシュボード内の [フィールド] に表示することもできます。