- Überblick
- Modellerstellung
- Modellauswertung
- Überblick
- Ausführen einer Auswertung
- Evaluierung der Modellleistung
- Modellbereitstellung
- Verbrauchen von Modellen
- Entwickler (Developer)
- Häufig gestellte Fragen
Ausführen einer Auswertung
Führen Sie eine Auswertung des IXP-Modells im Extraktionsknoten von UiPath Maestro™ Flow für die mit Anmerkungen versehenen Dokumente des Datasets aus und verfolgen Sie die Änderungen nach, die noch nicht ausgewertet wurden.
Voraussetzungen
- Dokumente mit Anmerkungen im Dataset des Knotens. Sie benötigen Ground Truth für einen repräsentativen Satz von Dokumenten, mit denen die Vorhersagen des Modells verglichen werden können.
Ausführen einer Auswertung
Um eine Bewertung auszuführen, gehen Sie wie folgt vor:
-
Zeigen Sie mit der Maus auf den Knoten Flow- Extraktion und wählen Sie Vollständige Ansicht öffnen aus.
-
Wählen Sie auf der Registerkarte Dataset oder auf der Registerkarte Evaluierungsausführungen die Option Auswertung ausführen aus. Der Bereich „Auswertungsausführung konfigurieren“ wird geöffnet.
Alternativ können Sie im Abschnitt Definition des Eigenschaftenbereichs des Knotens die Option Auswertung ausführen auswählen.
-
Aktivieren Sie im Bereich Bewertungsausführung konfigurieren die folgenden Optionen:
- Dataset – Das Dataset, das von der Ausführung ausgewertet wird. Das Auswertungsziel zeigt den Knoten, den die Ausführung auswertet.
- Nach Tags filtern – Wählen Sie optional Tags aus, um nur eine Teilmenge der Dokumente im Dataset auszuwerten. Standardmäßig bewertet die Ausführung alle Dokumente.
- Evaluierer – Die Evaluierer, die die Ausführung bewerten.
-
Wenn im Bereich die Warnung Diese Datenpunkte überprüfen vor dem Ausführen der Auswertung angezeigt wird, überprüfen Sie die aufgeführten Dokumente. Beispielsweise listet die Warnung Dokumente auf, deren erwartete Ausgabe nicht dem aktuellen Ausgabeschema entspricht.
-
Erweitern Sie optional Ausführungseinstellungen und konfigurieren Sie die folgenden Optionen:
- Name – Der Name des Testlaufs. Standardmäßig ist der Name der Name des Datasets, gefolgt vom aktuellen Datum.
- Batchgröße – Ein Wert von 1 bis 50. Der Standardwert ist 10.
- Zeitüberschreitung - Ein Wert von 5 bis 500 Minuten. Der Standardwert ist 20 Minuten.
-
Wählen Sie Speichern und Ausführen.
Um die Ergebnisse der Ausführung zu überprüfen, navigieren Sie zur Registerkarte Bewertungsausführungen . Weitere Informationen finden Sie unter Bewertung der Modellleistung.
Bewertungsläufe für eine Teilmenge von Dokumenten wirken sich nicht auf die Zustandsbewertung des Knotens aus. Weitere Informationen finden Sie unter Knotenzustandsbewertung.
Änderungen nicht ausgewertet
Die Beschriftung Änderungen nicht ausgewertet wird im Flow Extract- Knoten angezeigt, wenn Änderungen am Knoten vorgenommen werden, z. B. eine Modellkonfigurationsänderung, eine Taxonomieänderung oder eine Anmerkungsänderung. Diese Änderungen wirken sich auf die Eingabe aus, die das Extraktionsmodell erhält, sodass Sie durch die Beschriftung darauf informiert werden, dass Änderungen noch nicht ausgewertet wurden.
Um die Änderungen anzuzeigen, zeigen Sie mit dem Mauszeiger auf die Beschriftung Änderungen nicht ausgewertet . Die Liste zeigt die Anzahl der Änderungen und jede Änderung an, z. B. Modellkonfiguration geändert. Um die Änderungen auszuwerten, wählen Sie Auswertung ausführen.