Retreinar extratores

Você pode usar documentos que foram validados na Validation Station para melhorar ainda mais o desempenho de seus modelos.

Você pode retreinar documentos que foram processados usando as seguintes atividades:

• UiPath.DocumentUnderstanding.Activities: all documents that were processed using this activity package and were validated in Validated Station are collected automatically and can be used for retraining.
  Observação:

  If the validation task resides in a different environment than the Document Understanding project, the processed documents are not collected and available for retraining.

• UiPath.IntelligentOCR.Activities (starting with version 6.25.0-preview): to retrain documents processed using this activity package, use the Document Understanding Project Extractor Trainer activity in your workflow. This allows documents to be collected for retraining purposes.

When there is at least one document collected, the Exceptions for review button is available for the corresponding document type within the Build section.

Observação:

Collected documents are not automatically included in the training set. You need to review the documents and confirm their addition in the training set to retrain your model.

Exceções para revisão

Siga as etapas deste procedimento para ajustar seu modelo usando documentos da Validation Station.

Observação:

Documents collected for exceptions are stored for a period of 90, after which they are automatically deleted. Documents are not collected for validation tasks with a duration greater than 7 days.

1. Select the Exceptions for review button.

2. Check the exception documents from the Exceptions for fine-tuning menu.

   As seguintes informações estão disponíveis para cada documento:

   • File name: the file name of the document containing an exception.

   • Status: the status of the document.

   • Pages: the number of pages that the document contains.

   • Project version: the project version that contains the document.

   • Processed date: the date when the document was processed.

   • No of extracted fields: the number of extracted fields for the document containing an exception.

   • No of corrected fields: the number of modified fields during validation step.

   • Validator name: the username of the person who validated the document.

     Observação:

     The Exceptions for fine-tunning list may include documents imported from other Document Understanding projects or environments.

     

3. Selecione o documento que você deseja usar para ajuste fino na lista.

   As seguintes informações estão disponíveis para cada documento:

   • All extracted fields are displayed, along with their model confidence. If the confidence value is N/A, this indicates that the field was not automatically extracted and was instead manually added by the validator.

   • Os campos corrigidos são marcados com um ponto amarelo ao lado do nome do campo extraído.

   • As seguintes informações estão disponíveis para todos os campos corrigidos:

     • Predicted value: the value predicted by the model.
     • Corrected value: if changed manually, the value after validation. If the document type was not changed after validation, the value will be N/A.
     • Reference: the original value that is highlighted on the document. This value is used for annotation if you decide to use the document for fine-tuning.

   • Você pode classificar facilmente por confianças para verificar campos com baixas confianças sem correções.

   • Você pode filtrar por campos corrigidos para focar apenas neles.

     

4. Choose Annotate if you want to further annotate this document or choose Use for fine-tuning if you want to use this document to retrain your model.

   • Use for fine-tuning:
     • Escolha esta opção quando o documento for um bom exemplo para o ajuste fino do modelo e todos os campos forem referenciados corretamente dentro do documento.
     • The document is imported in the training with the Exception tag and all annotations confirmed. The document will be used for fine-tuning.
   • Annotate:
     • Escolha isso se o documento for um bom exemplo para o ajuste fino do modelo, mas houver alguns erros de validação, por exemplo, nem todos os campos são referenciados corretamente no documento e mais correções são necessárias.
     • The document is imported in the training set with the Exception tag and all annotations unconfirmed. Annotations must be confirmed in the Build section in order for the document to be used to fine-tune the model.
     • If you choose to further annotate your document, check the Annotate documents page for more information on how to annotate documents.
   • Exclude:

     • Escolha isso quando o documento não for um bom exemplo e você quiser removê-lo da lista de exceções para revisão e não precisar revisá-lo em sessões de revisão futuras.

     • Você pode alterar o status do documento para reverter as alterações.

       Figure 1. Selected document used for fine-tuning or annotation

       

Após selecionar todos os seus documentos para ajuste fino, seu modelo é treinado novamente usando os novos dados da Validation Station.

You can create a new project version and use the Compare model feature from the Measure section to compare the performance of your model.

[Visualização] Exportação e importação de candidatos a retreinamento

O Document Understanding permite que você exporte candidatos a retreinamento de um ambiente e os importe para outro.

Essa configuração é comumente usada em cenários em que você mantém uma estrutura de ambiente de desenvolvimento-teste-produção, e seu processo envolve a criação de uma cópia do projeto de desenvolvimento do Document Understanding em ambientes superiores, como teste, UAT ou produção.Nesse arranjo, os documentos de retreinamento são reunidos dentro do projeto de produção, e a funcionalidade de exportação-importação permite que você traga os documentos de volta para o ambiente de desenvolvimento para retreinamento de modelos, antes de promover as atualizações de volta para os ambientes superiores.

Exportação de candidatos a retreinamento

You can export retraining candidates directly from the Exceptions for review page by selecting the Export button. Select View exports to access the list of exported files.

Você pode optar por exportar todos os documentos coletados ou apenas um subconjunto selecionado, dependendo de como você prefere gerenciar o processo de revisão, conforme explicado nos seguintes exemplos:

• Você pode exportar todos os documentos coletados e triá-los no ambiente onde você pretende importá-los e para retreinar o modelo.
• Você pode concluir a revisão no ambiente atual e exportar apenas os documentos específicos que você deseja usar para para retreinamento.

Importação de candidatos a retreinamento

Importing is done from the Exceptions for review page. Imported documents are displayed in a similar manner to documents automatically collected from the Validation Station, with the To review status.

Imported documents are added as retraining candidates. For model fine-tuning, simply follow the same steps as for documents collected directly in a project. Remember to review and confirm the retraining candidates before adding them to the training set.