Exécution d'une évaluation

Exécutez une évaluation du modèle IXP dans le nœud d'extraction du flux UiPath Maestro™ sur les documents annotés de l'ensemble de données et suivez les modifications qui ne sont pas encore évaluées.

Prérequis

• Documents annotés dans le jeu de données du nœud. Vous avez besoin d’une vérité du terrain pour un ensemble représentatif de documents afin de comparer les prédictions du modèle.

Exécution d'une évaluation

Pour exécuter une évaluation, procédez comme suit:

1. Pointez sur le nœud Extraction de flux et sélectionnez Ouvrir la vue complète.

2. Dans l'onglet Ensemble de données ou l'onglet Exécutions d'évaluation , sélectionnez Exécuter l'évaluation. Le volet Configurer l'exécution de l'évaluation s'ouvre.

   

   Vous pouvez également sélectionner Exécuter l'évaluation dans la section Définition du volet Propriétés du nœud.

3. Dans le volet Configurer l'exécution de l'évaluation , vérifiez les options suivantes:

   • Ensemble de données : l'ensemble de données que l'exécution évalue. La cible d'évaluation affiche le nœud que l'exécution évalue.
   • Filtrer par balises : vous pouvez éventuellement sélectionner les balises afin d'évaluer uniquement un sous-ensemble des documents de l'ensemble de données. Par défaut, l'exécution évalue Tous les documents.
   • Évaluateurs : les évaluateurs qui notent l’exécution.

4. Si le volet affiche l' avertissement Examiner ces points de données avant d'exécuter l'évaluation , examinez les documents répertoriés. Par exemple, l’avertissement répertorie les documents dont la sortie attendue ne correspond pas au schéma de sortie actuel.

5. Vous pouvez également développer les paramètres d'exécution et configurer les options suivantes:

   • Nom : le nom d'exécution de l'évaluation. Par défaut, le nom est le nom du jeu de données, suivi de la date actuelle.
   • Taille du lot : une valeur comprise entre 1 et 50. La valeur par défaut est 10.
   • Délai d'attente : valeur comprise entre 5 et 500 minutes. La valeur par défaut est 20 minutes.

   

6. Sélectionnez Enregistrer et exécuter.

Pour vérifier les résultats de l'exécution, accédez à l'onglet Exécutions d'évaluation . Pour plus de détails, vérifiez Évaluation des performances du modèle.

L'exécution des évaluations sur un sous-ensemble de documents n'affecte pas le score de santé du nœud. Pour plus de détails, consultez le Score de santé du nœud.

Modifications non évaluées

Le libellé Modifications non évaluées s'affiche dans le nœud Extraction de flux lorsque des modifications sont apportées au nœud, telles qu'une modification de la configuration du modèle, une modification de la taxonomie ou une modification de l'annotation. Ces modifications affectent l'entrée reçue par le modèle d'extraction, de sorte que le libellé vous avertit qu'il existe des modifications qui n'ont pas encore été évaluées.

Pour afficher les modifications, pointez sur le libellé Modifications non évaluées . La liste affiche le nombre de modifications et chaque modification, par exemple Configuration du modèle modifiée. Pour évaluer les modifications, sélectionnez Exécuter l'évaluation.