Evaluierung der Modellleistung

Sie können die Leistung des Modells an folgenden Stellen bewerten:

• Über die Registerkarte Erstellen, die die Gesamtpunktzahl des Projekts sowie die Fehlerquote für jedes Dokument anzeigt.
• Über die Registerkarte Messen, die die Leistung auf Feldgruppen- und Feldebene anzeigt.

Auswerten der Modellleistung in „Erstellen“

Unter der Projektpunktzahl auf der Registerkarte Erstellen können Sie eine Gesamtbewertung sehen.

Hinweis:

• Gesunde Modelle haben eine Projektbewertung gut oder ausgezeichnet und keine Warnung zur Feldleistung.​.
• Die Projektpunktzahl wird basierend auf dem durchschnittlichen F1-Score über alle Felder hinweg berechnet.

Darüber hinaus können Sie die Fehlerquote für jedes Dokument in der Spalte Fehlerquote im Abschnitt Dokumente in Erstellen sehen.

Hinweis: Fehlerquoten sind nur für mit Anmerkungen versehene Dokumente verfügbar und geben die Anzahl der Fehler an, die das Modell bei jedem Dokument gemacht hat, d. h. den Unterschied zwischen den Vorhersagen des Modells und Benutzeranmerkungen.

Evaluierung der Modellleistung in „Messen“

Eine detailliertere, auf der Modellversion basierende Evaluierung finden Sie im Dashboard auf der Registerkarte Messen. Dazu gehört die Gesamtpunktzahl des Projekts sowie die individuelle Leistung von Extraktionen.

Modellversionen

Modellversionen erfassen den aktuellen Status des Projekts zum Zeitpunkt der Versionserstellung. Diese können veröffentlicht werden, um sie zu speichern und in einer Automatisierung zu verwenden, oder in „Messen“ zur Speicherung ihrer Leistungsstatistiken markiert werden. Die aktuelle Leistung kann mit früheren Versionen verglichen werden, um eine kontinuierliche Leistungsverbesserung während der Iteration von Anweisungen zu gewährleisten.

Vergleich verschiedener Modellversionen

Gehen Sie wie folgt vor, um Modellversionen zu vergleichen:

1. Gehen Sie zur Registerkarte Messen. Die Seite kann die neueste Version des Modells oder die zuvor angeheftete Version anzeigen.
2. Erweitern Sie die Modellversion und wählen Sie eine ältere Version, um die Leistung verschiedener Modellversionen zu vergleichen.
3. Aktivieren und vergleichen Sie die Leistung der ausgewählten Version, die im Dashboard angezeigt wird.

Fixieren einer Modellversion

Jedes Mal, wenn Sie Änderungen an Ihrer Taxonomie, einschließlich Anweisungen​, oder an den Modelleinstellungen vornehmen, wird eine neue Modellversion erstellt. Die neueste Version des Modells ist immer verfügbar, aber Sie können auch eine bestimmte Modellversion mit einem Stern versehen, also fixieren, sodass die Leistungsstatistiken immer im Dashboard angezeigt werden.

Um eine Modellversion zu fixieren, gehen Sie wie folgt vor:

1. Erweitern Sie das Auswahlmenü Modellversion, um die Liste mit allen verfügbaren Versionen zu sehen.
2. Wählen Sie das Sternsymbol neben der Modellversion, die immer oben in der Liste und im Dashboard angezeigt werden soll.
   Hinweis: Wenn Sie eine Modellversion fixieren, wird nicht die Modellversion selbst gespeichert, sondern nur die Leistungsstatistiken. Um eine Modellversion zu speichern, muss sie auf der Registerkarte Veröffentlichen veröffentlicht werden.