Validação dos valores previstos

Valide previsões do modelo IXP no nó Extract do UiPath Maestro™ Flow para estabelecer a verdade após refinar as instruções de solicitação, sem treinar diretamente o modelo a partir de anotações.

Visão geral

Atualmente, o modelo não aprende diretamente de anotações do usuário. Para melhorar o desempenho do modelo, modifique suas instruções de solicitação ou configuração do modelo.

Depois de estar satisfeito com suas instruções de solicitação, você pode começar a validar as previsões do modelo para estabelecer a verdade para sua avaliação de desempenho. Antes de fazer isso, é importante entender as diferenças entre previsões e referências.

Previsões e referências

Previsões são os valores previstos e são comparadas com a verdade fundamental.

Observação:

Previsões incorretas ou ausentes afetam a pontuação do modelo e as métricas de desempenho na guia Execuções de avaliação .

Referências são as referências correspondentes aos valores previstos encontrados no documento. O propósito das referências é ajudar os usuários a encontrar a parte certa do documento.

Observação:

Referências incorretas ou ausentes não afetam a pontuação do modelo ou as métricas de desempenho. No entanto, pode ser útil adicionar ou corrigir referências para melhorar a experiência de validação humana.

Existem limitações conhecidas com referências e intervalos destacados, que são uma das nossas principais prioridades para melhorar.

Você pode encontrar um dos seguintes cenários:

• Previsão correta e referência correta, mas um intervalo incorreto é destacado. Normalmente, a primeira correspondência que foi localizada.
• Previsão correta, mas há uma referência ausente e um intervalo destacado. Nesses cenários, fornecemos um número de página como um fallback.

Observação:

Previsões e referências são independentes. Isso significa que referências ausentes ou incorretas não afetam os valores previstos.

Validação dos valores previstos

Na visualização de anotação, cada valor extraído é destacado no documento com a cor de seu campo, conforme mostrado ao lado do nome do campo no painel de anotação. Os valores extraídos são destacados da seguinte forma:

• Preenchido - Valores extraídos. O preenchimento é o mesmo para valores confirmados e não confirmados. Para verificar se um valor está confirmado, use sua caixa de seleção no painel de anotação: a caixa de seleção é selecionada para valores confirmados e desmarcada para valores não confirmados.

  

• Borda sólida - O valor selecionado. Quando você seleciona um valor no painel de anotação, seu destaque no documento fica com uma borda sólida.

  

Para validar os valores previstos, siga estas etapas:

1. Passe o mouse sobre o nó Flow Extract e selecione Abrir visualização completa.

2. Na guia Conjunto de dados , selecione Anotar para o documento que você deseja validar. O modelo destaca a extensão relevante do texto no documento e exibe as previsões geradas no painel de anotação. Os valores que são aplicáveis a várias instâncias de um grupo de campos, como o número da conta, têm botões de seta para ajudar a acessar as seções relevantes. Os botões aparecem quando você aponta para os valores.

   

3. Revise as previsões e confirme os valores extraídos de uma das seguintes maneiras:

   • Para confirmar um único valor, marque sua caixa de seleção.
   • Para confirmar uma linha inteira do grupo de campos, marque a caixa de seleção da linha.
   Observação:

   Todas as alterações que você faz mas não envia são salvas como um rascunho, ao qual você pode retornar e atualizar mais tarde. Para obter mais detalhes, consulte Rascunhos de anotações.

4. Selecione Enviar para enviar suas anotações.

Você pode configurar campos adicionais em seu esquema de extração a qualquer momento na aba Definição .

Exemplo de validação de valores previstos no Action Center

Interrompendo a validação

É recomendável que você valide pelo menos 10 exemplos para cada campo, para que o modelo possa fornecer estatísticas de validação significativas.

Referências e valores confirmados e não confirmados

O processo de validação envolve o seguinte:

• Confirmando os valores extraídos se estiverem corretos.
• Anotando os valores esperados se os valores previstos estiverem incorretos.
• Marcando campos como ausentes se não estiverem presentes no documento.
• Configurando quaisquer campos adicionais em seu esquema de extração.

Esta seção mostra como os valores e referências se parecem em seu estado confirmado (validado) e não confirmado (não validado).

Observação:

Todas as alterações que você faz mas não envia são salvas como um rascunho, ao qual você pode retornar e atualizar mais tarde. Para obter mais detalhes, consulte Rascunhos de anotações.

Valor previsto

Valores não confirmados

Nenhum valor é marcado como confirmado:

Figura 1. Valores não confirmados

Confirmado

As referências são destacadas com uma borda sólida:

Figura 2. Referência confirmada

Os valores são marcados como confirmados:

Figura 3. Valores confirmados

Valores validados

Esta seção contém cenários de exemplo de quando as previsões do modelo fazem ou não correspondência às anotações do usuário.

Quando a anotação faz correspondências à previsão, o valor é exibido da seguinte forma:

Figura 4. Previsão correta

Quando a anotação não corresponde à previsão, o valor é parecido com o seguinte:

Figura 5. Previsão incorreta

Observação:

As previsões são comparadas às anotações, não às referências. As referências podem estar ausentes ou incorretas, mas isso não será sinalizado como uma incompatibilidade.

Anotando o valor esperado

Quando um valor previsto estiver incorreto, anote o valor esperado. A anotação define a verdade fundamental, o valor verdadeiro esperado, com o qual as execuções de avaliação comparam as previsões do modelo. Isso não altera o modelo ou suas previsões futuras.

Para anotar o valor esperado, proceda da seguinte forma:

1. No painel de anotação, selecione as reticências para o campo e, em seguida, selecione Alterar valor extraído. Para um campo sem valor, que mostra Está ausente, selecione o ícone de mais.

2. Realce o valor correto no documento.

   Observação:

   Todas as alterações que você faz mas não envia são salvas como um rascunho, ao qual você pode retornar e atualizar mais tarde. Para obter mais detalhes, consulte Rascunhos de anotações.

   

Editando valores

Na visualização de anotação do nó Flow Extract , edite os valores da seguinte forma:

1. Selecione Adicionar valor para criar um novo valor sem referência no documento.

2. Selecione as reticências para um campo para usar uma das seguintes opções:

   • Alterar valor extraído
   • Reverter para o valor anterior
   • Marcar como ausente

3. Selecione as reticências para uma linha do grupo de campos para usar uma das seguintes opções:

   • Realçar linha
   • Excluir linha

4. Confirme os valores marcando a caixa de seleção de cada valor ou linha do grupo de campos.

   Observação:

   Todas as alterações que você faz mas não envia são salvas como um rascunho, ao qual você pode retornar e atualizar mais tarde. Para obter mais detalhes, consulte Rascunhos de anotações.

   

Para mostrar cada instância de um grupo de campos como uma linha em uma tabela em vez de uma lista no painel de anotação, acesse a guia Definição , selecione as reticências para o grupo de campos e ative Exibir como uma tabela.

Anotações de rascunho

Quaisquer edições que você faz em valores e referências em um documento são armazenadas como anotações de rascunho até que você as envie para o modelo como anotações. Como resultado, o status do documento aparece como Em andamento ou como Anotado (Editando) para um documento que já foi anotado. Para descartar o rascunho, selecione Descartar rascunho.

Todas as ações mencionadas anteriormente, como validar, anotar e editar valores e, em seguida, enviar as anotações, são mantidas no rascunho enquanto você faz alterações.

Se você atualizar previsões enquanto um documento estiver em um estado de rascunho, o sistema preserva as anotações de rascunho enquanto preenche novamente novas previsões e realiza correspondências entre o novo conjunto de previsões do modelo e as anotações de rascunho.