Überprüfung von Vorhersagen

Überprüfen Sie die anfänglichen Modellvorhersagen mit Ihrem Extraktionsschema, um festzustellen, wo Prompt-Anweisungen angepasst werden müssen, um die IXP-Modellleistung zu verbessern.

Evaluieren Sie die anfänglichen Vorhersagen, die das Modell basierend auf dem zuvor definierten Extraktionsschema generiert hat. Auf diese Weise erfahren Sie, wo Sie Ihre Prompt-Anweisungen möglicherweise anpassen müssen, um die Leistung des Modells zu verbessern.

Das Modell verwendet generative KI, um im Extraktionsschema definierte Felder und Feldgruppen zuzuordnen und sie zuverlässig und genau vorherzusagen. Es extrahiert diese Felder und Feldgruppen und gibt sie in einem strukturierten JSON-Format zurück, wenn sie im Dokument vorhanden sind.

Vorhersagen werden automatisch generiert. Möglicherweise müssen Sie jedoch die Schaltfläche Extraktionen vorhersagenauf der Seite Vorhersagen validieren auswählen, um die Vorhersagen zu aktualisieren, wenn Sie Änderungen an Ihrer Taxonomie vorgenommen oder neue Dokumente hochgeladen haben.

1. Überprüfen Sie die Vorhersagen für eine Stichprobe von 2 bis 3 Dokumenten.

2. Entscheiden Sie, ob Sie Ihre Prompt-Anweisungen ändern müssen.

3. Erhöhen Sie die Stichprobe schrittweise auf 10, 20, 30 Dokumente usw. Dies wird ein iterativer Prozess sein. Sie können basierend auf Ihren geschäftlichen Akzeptanzkriterien entscheiden, wie viele Dokumente über das Minimum von 10 hinaus aktualisiert werden sollen.

   

Sie können die Filterschaltfläche in annotierten Dokumenten verwenden, um Anmerkungen von der aktuellen Seite oder nur übermittelte Anmerkungen anzuzeigen, im Gegensatz zu Anmerkungen und Vorhersagen, die miteinander verglichen werden. Wählen Sie eine der folgenden Optionen aus:

• aktuelle Seite
• Nur übermittelte Anmerkungen

Änderung von Anweisungen

Nachdem Sie die Out-of-the-Box-Vorhersagen überprüft haben, prüfen Sie, wo Sie zur Bereitstellung von zusätzlichem Kontext für das Modell die ursprünglichen Prompt-Anweisungen ändern müssen. Die iterative Verfeinerung von Anweisungen ist unerlässlich, um die Leistung des Modells zu verbessern.

Ändern der allgemeinen Anweisung für die Extraktion

Um die gesamte Anweisung für die Extraktion zu ändern, gehen Sie zur Registerkarte Erstellen, wählen Sie Taxonomie verwalten und bearbeiten Sie die Prompt-Anweisung.

Ändern von Feldanweisungen

Sie können die Prompt-Anweisungen von Feldern an folgenden Stellen ändern:

• Seite Taxonomie- verwalten.
• Anmerkungspaneel der Seite Validierung der Vorhersagen.

Von „Taxonomie verwalten“ aus

1. Wählen Sie auf der Registerkarte Erstellen die Option Taxonomie- verwalten aus.

2. Erweitern Sie auf der Registerkarte Felder und Feldgruppen eine Feldgruppe und ändern Sie für ein bestimmtes Feld die Anweisung direkt in der Inline-Tabelle.

3. Wählen Sie Speichern.

   

Im Anmerkungsbereich

1. Wählen Sie auf der Registerkarte Erstellen die Option Vorhersagen validieren aus.

2. Wählen Sie im Anmerkungsbereich die Ellipsen für Ihr Feld aus.

3. Wählen Sie Feld bearbeiten aus und ändern Sie die Anweisung.

4. Wählen Sie Speichern.

   

   

Ändern von Feldgruppenanweisungen

Sie können die Prompt-Anweisungen von Feldgruppen an folgenden Stellen ändern:

• Die Seite Taxonomie verwalten.
• Anmerkungspaneel der Seite Validierung der Vorhersagen.

Von „Taxonomie verwalten“ aus

1. Wählen Sie auf der Registerkarte Erstellen die Option Taxonomie- verwalten aus.

2. Ändern Sie auf der Registerkarte Felder und Feldgruppen die Anweisung für eine bestimmte Feldgruppe direkt in der Inline-Tabelle.

3. Wählen Sie Speichern.

   

Im Anmerkungsbereich

1. Wählen Sie auf der Registerkarte Erstellen die Option Vorhersagen validieren aus.

2. Wählen Sie im Anmerkungsbereich die Auslassungszeichen für die Feldgruppe aus.

3. Wählen Sie Feldgruppe bearbeiten aus.

4. Im angezeigten Seitenbereich unter Feldgruppendetails können Sie die Anweisungen ändern.

   

5. Wählen Sie die Schaltfläche Bleistift aus.

   

6. Ändern Sie im Feld Anweisung die Anweisung.

7. Wählen Sie Speichern.

Änderungsverlauf für Felder und Feldgruppen verwenden.

Mit der Funktion Änderungsverlauf können Sie frühere Versionen eines Felds oder einer Feldgruppe überprüfen, vergleichen und wiederherstellen. Sie können damit Namen, Feldtypen und Anweisungen sicher iterieren, ohne die gesamte Projektversion zurückzusetzen.

Sie können an den folgenden Orten auf den Änderungsverlauf zugreifen:

• Seite Taxonomie- verwalten.
• Anmerkungsbereich auf der Seite zur Validierung von Vorhersagen.

Anzeigen und Vergleichen früherer Versionen

Um die Funktion Änderungsverlauf zu verwenden, gehen Sie wie folgt vor:

1. Wählen Sie auf der Registerkarte Erstellen die Option Taxonomie- verwalten aus.
2. Wählen Sie die Ellipsen für Ihr Feld oder Ihre Feldgruppe aus.
3. Wählen Sie Änderungsverlauf aus.
4. Im angezeigten Fenster können Sie alle vorherigen Versionen des ausgewählten Felds oder der Feldgruppe anzeigen.
5. Aktivieren Sie die Option Mit der aktuellen vergleichen, um eine beliebige frühere Version mit der aktuellen zu vergleichen. Die Funktion zeigt folgende Details an:
   • Das Datum und die Uhrzeit der letzten Aktualisierung des Felds oder der Feldgruppe.
   • Name des Felds
   • Feldtyp
   • AnweisungVerwenden Sie die Versionsliste, um einen früheren Status auszuwählen und zu überprüfen, wie er sich von der aktuellen Konfiguration unterscheidet.
6. Nachdem Sie die Versionen miteinander verglichen haben, wählen Sie eine der folgenden Optionen aus:
   • Alle wiederherstellen – Stellt die gesamte ausgewählte Version einschließlich Name, Feldtyp und Anweisungen wieder her.
   • Anweisungen wiederherstellen – Stellt nur die Anweisungen der ausgewählten Version wieder her, der aktuelle Name und der Feldtyp werden beibehalten.Das System wendet die wiederhergestellte Konfiguration sofort an und zeichnet sie als neue Projektversion auf.

Warnung:

Das Ändern des Feldtyps eines Felds hat zur Folge, dass alle vorhandenen Anmerkungen verloren gehen und der Versionsverlauf des Felds verworfen wird.Diese Aktion kann nur durch das Zurücksetzen auf eine zuvor bereitgestellte Modellversion rückgängig gemacht werden. Stellen Sie die aktuelle Modellversion bereit, bevor Sie wesentliche Änderungen vornehmen.

Alternativ können Sie im Anmerkungsbereich über die Auslassungspunkte auf den Änderungsverlauf zugreifen.

Felder und Feldgruppen.

Zurückkehren zu vorherigen Anweisungen

Um zu einer vorherigen Anweisung zurückzukehren, gehen Sie wie folgt vor:

1. Navigieren Sie zur Registerkarte „Erstellen“.

2. Wählen Sie Taxonomie verwalten.

3. Wählen Sie die Auslassungspunkte für Ihr Feld oder Ihre Feldgruppe und dann Änderungsverlauf anzeigen aus.Im angezeigten Fenster können Sie alle vorherigen Versionen des ausgewählten Felds oder der Feldgruppe anzeigen.

4. Wählen Sie dann die Version aus, die die Anweisungen enthält, die Sie wiederherstellen möchten.

5. Aktivieren Sie die Option Mit der aktuellen vergleichen, um eine beliebige frühere Version mit der aktuellen zu vergleichen.

6. Wählen Sie Anweisungen wiederherstellen aus, um nur die Anweisungen aus der ausgewählten Version wiederherzustellen, wobei der aktuelle Name und der Typ beibehalten werden.

   

Überprüfung neuer Vorhersagen

Um neue Vorhersagen zu überprüfen, gehen Sie wie folgt vor:

1. Gehen Sie zur Registerkarte Erstellen in der Funktion „Unstrukturierte und komplexe Dokumente“.

2. Wählen Sie Vorhersagen validieren.

3. Neue Vorhersagen sollten im Seitenbereich angezeigt werden. Wählen Sie andernfalls die Taste Extraktionen vorhersagen.

   

Fehlende Feldgruppen in Vorhersagen

Die Extraktion kann gelegentlich eine leere Feldgruppe für ein Dokument zurückgeben, während dieselbe Feldgruppe korrekt aus Dokumenten extrahiert wird, die im selben Projekt identisch aussehen. Dies ist auf die Variabilität des zugrunde liegenden Modells und nicht auf den Inhalt oder die Struktur des Dokuments zurückzuführen.

Vorhersagen werden für das Dokument und die Modellkonfiguration zwischengespeichert, sodass das Ergebnis für dieses Dokument erhalten bleibt, bis sich die Modellkonfiguration oder die Taxonomie ändert. Das Löschen des Dokuments und das erneute Hochladen derselben Datei gibt das gespeicherte Ergebnis zurück, anstatt eine neue Extraktion auszuführen.

Fehlende Feldgruppen erkennen

Um fehlende Feldgruppen in einem Projekt zu erkennen, fügen Sie die Spalte Fehlende Vorhersagen zur Feldleistungstabelle auf der Seite Measure hinzu. Eine hohe Anzahl für eine Feldgruppe bedeutet, dass ganze Gruppen fehlen, anstatt dass einzelne Werte falsch extrahiert werden. Weitere Informationen finden Sie unter Bewertung der Modellleistung in Measure.

Neue Vorhersagen werden ausgeführt

Um neue Vorhersagen auszuführen, ändern Sie die Modellkonfiguration oder die Taxonomie. Durch das Ändern von Seed unter Modellkonfiguration und dann Erweiterte Optionen werden neue Vorhersagen für jedes Dokument im Projekt ausgeführt, ohne dass andere Modelleinstellungen geändert werden. Weitere Informationen finden Sie unter Erweiterte Optionen.