- 入门指南
- 管理
- 管理来源和数据集
- 模型训练和维护
- 使用分析与监控
- 自动化和 Communications Mining
- 常见问题解答及更多内容
提高实体性能
所需的用户权限:“审核并为其添加标签”。
与训练标签类似,训练实体是用户教会平台使用各种训练模式将哪些实体应用于给定消息的过程。
与标签一样,“示教”、“检查”和“遗漏”模式可用于帮助训练和提高实体的性能,可以通过以下方式访问这些模式:1) 在“探索”页面上使用训练下拉列表,或 2) 通过关注“验证” 页面“实体” 选项卡上的建议操作。
如果特定实体存在性能警告,平台会 按优先级顺序 推荐其认为有助于解决该警告的 下一个最佳操作 。当您从分类或“所有实体”图表中选择特定实体时,将显示此字段。
下一个最佳操作建议充当链接,单击该链接会将您定向到平台建议的训练视图,以提高实体的性能。 这些建议会按照 优先级最高的操作 智能排序 ,以改进首先列出的实体。
这是帮助您了解实体性能的最重要工具,在尝试提高实体性能时应定期将其用作指南。
下表总结了平台推荐每种实体训练模式的时间:
指导实体 | 检查实体 | 缺少的实体 |
- 显示模型最混淆的标签的预测(无论是否适用) - 用于未经审核的消息训练实体 |
- 显示平台认为实体可能已误用的消息 - 针对已审核消息的训练实体,以尝试查找并更正任何不一致之处 |
- 显示平台认为可能缺少所选实体的消息 - 针对已审核消息的训练实体,以尝试查找并更正任何不一致之处 |
使用“学习实体”可提升实体性能,因为系统将为模型提供有关不确定消息的新信息,而不是已作出高度可信预测的消息。
在以下情况下,平台会建议“训练实体”:
- 实体旁边会显示性能警告(如下所示, 未提供 25 个示例)
- 给定实体的 F1 分数较低
- 实体的文本中可能并不总是有明显的上下文,或者给定类型的实体值存在很多变化
使用“检查实体” 有助于识别审核集中的不一致之处,同时通过确保模型具有正确且一致的示例来进行预测,提高模型对实体的理解。 这将提高实体的召回率。
在以下情况下,平台会建议“检查实体”:
- 召回率低,但精度高
- 平台做出的预测非常准确,但在应用实体的很多时候,它都没有捕获这些示例
(有关实体验证计算的更多详细信息,请参阅此处)
使用缺失的实体有助于在已审核的集合中查找应具有所选实体但没有的示例。 它还有助于识别部分标记的消息,这些消息可能会不利于模型预测实体的能力。 这将提高实体的精度,并确保模型具有用于预测的正确且一致的示例。
在以下情况下,平台会建议“缺少实体”:
- 召回率高,但精度低
- 我们经常错误地预测实体,但是当我们确实正确预测实体时,我们会捕获许多本应存在的示例
(有关实体验证计算的更多详细信息,请参阅此处)