Validação

A página Validação mostra aos usuários informações detalhadas sobre o desempenho de seu modelo, tanto para rótulos quanto para campos gerais.

Na guia Rótulos , os usuários podem visualizar sua Classificação geral do modelo de rótulo, incluindo um detalhamento dos fatores que compõem sua classificação e outras métricas em seu conjunto de dados e o desempenho de rótulos individuais.

Na guia Campos gerais , os usuários podem visualizar estatísticas sobre o desempenho de previsões de campos gerais para todos os campos gerais habilitados no conjunto de dados.

O menu suspenso Versão do modelo permite visualizar todas as pontuações de validação em versões anteriores do modelo em um determinado conjunto de dados. Você também pode priorizar ou marcar itens individuais, para que apareçam no topo da lista no futuro. Essa ferramenta pode ser útil para rastrear e comparar o progresso à medida que você cria seu modelo.

Rótulos

A aba Fatores mostra:

• os quatro fatores-chave que contribuem para a classificação do modelo: equilíbrio, cobertura, desempenho médio do rótulo e o desempenho dos rótulos com pior desempenho.
• para cada fator, fornece uma pontuação e um detalhamento dos colaboradores da pontuação do fator.
• podem ser selecionadas as próximas melhores ações recomendadas para melhorar a pontuação de cada fator.

A guia Métricas mostra:

• o tamanho do conjunto de treinamento - o número de mensagens nas quais o modelo foi treinado.
• o tamanho do conjunto de testes - o número de mensagens nas quais o modelo foi avaliado.
• número de rótulos - o número total de rótulos em sua taxonomia.
• Precisão média no recall – um gráfico que mostra a precisão média em um determinado valor de recall em todos os rótulos.
• Precisão média média – uma estatística que mostra a precisão média em todos os rótulos.
• um gráfico mostrando, em todos os rótulos, a precisão média por rótulo versus o tamanho do conjunto de treinamento.

A página Validação também permite que os usuários selecionem rótulos individuais de sua taxonomia para detalhar seu desempenho.

Depois de selecionar um rótulo, os usuários podem visualizar a precisão média para esse rótulo, bem como a precisão versus recall para esse rótulo com base em um determinado limite de confiança, que os usuários podem ajustar por conta própria.

Para obter mais detalhes sobre como a validação para rótulos realmente funciona e como usá-la, consulte Como a validação funciona.

Campos gerais

A guia Campos gerais mostra:

• O número de campos gerais no conjunto de treinamento - o número de campos gerais anotados nos quais o modelo de validação foi treinado.
• O número de campos gerais no conjunto de testes – o número de campos gerais anotados nos quais o modelo de validação foi avaliado.
• O número de mensagens no conjunto de treinamento – o número de mensagens que têm campos gerais anotados no conjunto de treinamento.
• O número de mensagens no conjunto de testes - o número de mensagens que têm campos gerais anotados no conjunto de testes
• Precisão média - a pontuação de precisão média em todos os campos gerais.
• Recall médio - a pontuação de recall média em todos os campos gerais.
• Pontuação F1 média – A pontuação F1 média em todos os campos gerais, onde a pontuação F1 é a média hermônica de precisão e recall, e os pondera igualmente.
• As mesmas estatísticas, mas para cada campo geral individual.

Para obter mais detalhes sobre como a validação para campos gerais funciona e como usá-la, consulte Como usar campos gerais.