Validierung

Auf der Seite Validierung werden Benutzern detaillierte Informationen über die Leistung ihres Modells sowohl für Bezeichnungen als auch für allgemeine Felder angezeigt.

Auf der Registerkarte Beschriftungen können Benutzer die allgemeine Modellbewertung für die Beschriftung anzeigen, einschließlich einer detaillierten Aufschlüsselung der Faktoren, aus denen sich ihre Bewertung zusammensetzt, und anderer Metriken zu ihrem Dataset und der Leistung einzelner Beschriftungen.

Auf der Registerkarte Allgemeine Felder können Benutzer Statistiken über die Leistung von Vorhersagen für allgemeine Felder für alle im Dataset aktivierten allgemeinen Felder anzeigen.

Im Dropdownmenü Modellversion können Sie alle Validierungspunktzahlen für frühere Modellversionen in einem bestimmten Dataset anzeigen. Sie können auch einzelne priorisieren oder mit einem Stern versehen, sodass sie in Zukunft oben auf der Liste erscheinen. Dieses Tool kann nützlich sein, um den Fortschritt bei der Erstellung Ihres Modells zu verfolgen und zu vergleichen.

Beschriftungen

Die Registerkarte Faktoren zeigt:

• die vier Schlüsselfaktoren, die zur Modellbewertung beitragen: Ausgewogenheit, Abdeckung, durchschnittliche Beschriftungsleistung und die Leistung der Beschriftungen mit der schlechtesten Leistung.
• Für jeden Faktor wird eine Punktzahl sowie eine Aufschlüsselung der mitwirkenden Faktoren angegeben.
• auswählbare empfohlene nächstbeste Aktionen, um die Punktzahl jedes Faktors zu verbessern.

Die Registerkarte Metriken zeigt:

• Die Größe des Trainingssatzes – die Anzahl der Nachrichten, auf denen das Modell trainiert wurde.
• Die Testsatzgröße – die Anzahl der Nachrichten, für die das Modell ausgewertet wurde.
• Anzahl der Beschriftungen – Die Gesamtzahl der Beschriftungen in Ihrer Taxonomie.
• Mittlere Genauigkeit bei Erinnerung – eine Grafik, die die durchschnittliche Genauigkeit bei einem bestimmten Erinnerungswert in allen Beschriftungen zeigt.
• Mittlere durchschnittliche Genauigkeit – eine Statistik, die die durchschnittliche Genauigkeit über alle Beschriftungen hinweg zeigt.
• ein Diagramm, das über alle Beschriftungen hinweg die durchschnittliche Genauigkeit pro Beschriftung im Verhältnis zur Trainingssatzgröße zeigt.

Auf der Seite Validierung können Benutzer auch einzelne Beschriftungen aus ihrer Taxonomie auswählen, um ihre Leistung zu überprüfen.

Nachdem sie eine Beschriftung ausgewählt haben, können Benutzer die durchschnittliche Genauigkeit für diese Beschriftung sowie die Genauigkeit im Vergleich zur Erinnerung für diese Beschriftung basierend auf einem bestimmten Konfidenzschwellenwert anzeigen, den Benutzer selbst anpassen können.

Weitere Informationen dazu, wie die Validierung für Beschriftungen tatsächlich funktioniert und wie sie verwendet wird, finden Sie unter So funktioniert die Validierung.

Allgemeine Felder

Die Registerkarte Allgemeine Felder zeigt:

• Die Anzahl der allgemeinen Felder im Trainingssatz – Die Anzahl der allgemeinen Felder mit Anmerkungen, auf denen das Validierungsmodell trainiert wurde.
• Die Anzahl der allgemeinen Felder im Testsatz – Die Anzahl der allgemeinen Felder mit Anmerkungen, für die das Validierungsmodell ausgewertet wurde.
• Die Anzahl der Nachrichten im Trainingssatz – Die Anzahl der Nachrichten, die über allgemeine Felder mit Anmerkungen im Trainingssatz verfügen.
• Die Anzahl der Nachrichten im Testsatz – Die Anzahl der Nachrichten, die über allgemeine Felder mit Anmerkungen im Testsatz verfügen
• Durchschnittliche Genauigkeit – Die durchschnittliche Genauigkeitspunktzahl für alle allgemeinen Felder.
• Durchschnittliche Erinnerung – Die durchschnittliche Erinnerungspunktzahl für alle allgemeinen Felder.
• Durchschnittliche F1-Punktzahl – Die durchschnittliche F1-Punktzahl für alle allgemeinen Felder, wobei die F1-Punktzahl das harmonische Mittelwert für Genauigkeit und Erinnerung ist und sie gleich gewichtet.
• Dieselben Statistiken, aber für jedes einzelne allgemeine Feld.

Weitere Informationen zur Funktionsweise und Verwendung der Validierung für allgemeine Felder finden Sie unter Verwenden von allgemeinen Feldern.