Validation

La page Validation (Validation) affiche aux utilisateurs des informations détaillées sur les performances de leur modèle, pour les libellés et les champs généraux.

Dans l'onglet Libellés , les utilisateurs peuvent afficher l'évaluation globale de leur modèle de libellé, y compris une répartition détaillée des facteurs qui composent leur évaluation, ainsi que d'autres mesures concernant leur ensemble de données et les performances des libellés individuels.

Dans l’onglet Champs généraux , les utilisateurs peuvent afficher les statistiques sur les performances des prédictions de champ général pour tous les champs généraux activés dans l’ensemble de données.

Le menu déroulant Version du modèle vous permet d’afficher tous les scores de validation des versions antérieures du modèle pour un ensemble de données donné. Vous pouvez également hiérarchiser ou marquer des valeurs individuelles en haut de la liste, afin qu'elles apparaissent en haut de la liste à l'avenir. Cet outil peut être utile pour suivre et comparer les progrès pendant que vous créez votre modèle.

Libellés

L'onglet Facteurs indique :

• les quatre facteurs clés qui contribuent à l'évaluation du modèle : l'équilibre, la couverture, les performances moyennes des libellés et les performances des libellés les moins performants.
• pour chaque facteur, il fournit un score et une ventilation des contributeurs au score du facteur.
• les meilleures actions suivantes recommandées pour améliorer le score de chaque facteur.

L'onglet Métriques indique :

• la taille de l'ensemble d'entraînement : le nombre de messages sur lesquels le modèle a été entraîné.
• la taille de l'ensemble de tests : le nombre de messages sur lesquels le modèle a été évalué.
• nombre de libellés : le nombre total de libellés de votre taxonomie.
• Précision moyenne au moment du rappel : un graphique montrant la précision moyenne à une valeur de rappel donnée sur tous les libellés.
• Précision moyenne : une statistique montrant la précision moyenne sur tous les libellés.
• un graphique montrant, pour tous les libellés, la précision moyenne par libellé par rapport à la taille de l'ensemble d'entraînement.

La page Validation permet également aux utilisateurs de sélectionner des libellés individuels à partir de leur taxonomie afin d'explorer leurs performances.

Après avoir sélectionné un libellé, les utilisateurs peuvent afficher la précision moyenne de ce libellé, ainsi que la précision par rapport au rappel pour ce libellé en fonction d'un seuil de confiance donné, que les utilisateurs peuvent ajuster eux-mêmes.

Pour de plus amples informations sur le fonctionnement réel de la validation pour les libellés et sur son utilisation, consultez la section Comment fonctionne la validation.

Champs généraux

L’onglet Champs généraux indique :

• Le nombre de champs généraux dans l’ensemble d’entraînement : le nombre de champs généraux annotés sur lesquels le modèle de validation a été entraîné.
• Le nombre de champs généraux dans l’ensemble de tests : le nombre de champs généraux annotés sur lesquels le modèle de validation a été évalué.
• Le nombre de messages dans l’ensemble d’entraînement : le nombre de messages qui ont des champs généraux annotés dans l’ensemble d’entraînement.
• Le nombre de messages dans l’ensemble de test : le nombre de messages qui ont des champs généraux annotés dans l’ensemble de test
• Précision moyenne : le score de précision moyen sur tous les champs généraux.
• Rappel moyen : le score de rappel moyen sur tous les champs généraux.
• Score F1 moyen : le score F1 moyen sur tous les champs généraux, où le score F1 est la méthode robotique de précision et de rappel, et les pondère de manière égale.
• Les mêmes statistiques, mais pour chaque champ général individuel.

Pour plus de détails sur le fonctionnement de la validation des champs généraux et son utilisation, consultez la section Utilisation des champs généraux.