重新训练提取程序

您可以使用在验证站点中验证的文档，进一步提高模型的性能。

您可以使用以下活动重新训练文档经过处理的文档：

• UiPath.DocumentUnderstanding.Activities：使用此活动包处理并在验证站点中验证的所有文档都会自动收集，可用于重新训练。
  注意：如果验证任务与 Document Understanding 项目部署在不同环境，则系统不会收集已处理文档，且这些文档无法用于重新训练。
• UiPath.IntelligentOCR.Activities（从 6.25.0 预览版开始）：要重新训练使用此活动包处理的文档，请在工作流中使用 Document Understanding 项目提取程序训练活动。这样，可以收集文档以进行重新训练。

收集了至少一个文档时，“待审核的异常”按钮可用于“构建”区域中的相应文档类型。

注意：收集的文档不会自动包含在训练集中。 您需要查看文档并确认将其添加到训练集中，以重新训练您的模型。

待审核的异常

按照此过程中的步骤，使用验证站点中的文档微调模型。

注意：为异常收集的文档会存储 30 天，存储期限过后会自动删除。

不会收集持续时间超过 7 天的验证任务的文档。

1. 选择“待审核的异常”按钮。
   
   

   

   
   
2. 查看“待微调的异常”菜单中的异常文档。
   每个文档都提供以下信息：

   • 文件名称：包含异常的文档的文件名称。
   • 状态：文档的状态。
   • 页面：文档包含的页面数。
   • 项目版本：包含文档的项目版本。
   • 处理日期：处理文档的日期。
   • 提取字段的数量：包含异常的文档的提取字段数量。
   • 更正字段的数量：在验证阶段被修改的字段数量。
   • 验证者姓名：验证文档的人员的用户名。

   
   

   

   
   
3. 从列表中选择你想要用于微调的文档。
   每个文档都提供以下信息：

   • 此时将显示所有提取的字段以及模型的置信度。如果置信度的值为 N/A，这表示该字段未自动提取，而是由验证者手动添加的。
   • 更正的字段的提取字段名称旁边标记有黄点。
   • 以下信息可用于所有更正的字段：
     • 预测值：模型预测的值。
     • 更正的值：如果手动更改，则为验证后的值。 如果文档类型在验证后未更改，值将为“不适用”。
     • 引用：文档上高亮显示的原始值。 如果您决定将该文档用于微调，此值会用于标注。
   • 您可以轻松按置信度排序查看置信度低的字段，无需进行更正。
   • 您也可以筛选出已更正的字段，专注于这类字段。

   
   

   

   
   
4. 如果您想进一步标注此文档，请选择“标注”，如果您想使用此文档重新训练模型，请选择“用于模型微调”。
   • 用于模型微调：
     • 当文档是模型微调的理想样本、且所有字段在文档中引用正确时选择此项。
     • 文档导入训练中时带有“异常”标签，而且所有标注均已完成确认。文档将用于微调。
   • 标注：
     • 当文档是模型微调的理想样本、但存在部分验证错误时选择此项，例如并非所有字段都在文档中正确引用，且需进一步修正。
     • 文档导入训练集中时带有“异常”标签，而且所有标注均未确认。标注必须在构建部分中完成确认，文档才能用于微调模型。
     • 如果您选择进一步标注文档，请查看“标注文档”页面，了解有关如何标注文档的更多信息。
   • 排除：
     • 当文档并非理想样本，且需将其从待审核异常列表中移除，而且在未来审核会话中无需审核该文档时选择此项。
     • 您可以更改文档的状态以恢复更改。

   Figure 1. Selected document used for fine-tuning or annotation
   

   

   
   

选择所有文档进行微调后，系统会使用验证站点中的新数据重新训练您的模型。

您可以创建新的项目版本，并使用“度量”部分中的“比较模型”功能对模型性能进行比较。

Exporting and importing re-training candidates

Document Understanding allows you to export re-training candidates from one environment and import them into another.

Exporting re-training candidates

You can export re-training candidates directly from the Exceptions for review page by clicking the Export button.

Note: Click View exports to access the list of exported files.

Importing re-training candidates

Importing is done from the Exceptions for review page. Imported documents are displayed in a similar manner to documents automatically collected from Validation Station, with the status To review.

Imported documents are not added directly to the training dataset. You must review and confirm them before they can be included in a retraining dataset.