Überwachen

Sie können die Leistungsmetriken für Ihre Document Understanding^TM -Automatisierungen im Abschnitt Überwachen in den folgenden Hauptbereichen überprüfen:

• Projektleistung (Vorschau)
• Verarbeitete Dokumente und die entsprechenden Dokumentdetails

Tipp: Auf der Seite Rollenbasierte Zugriffssteuerung finden Sie detaillierte Informationen zu Benutzerberechtigungen für den Abschnitt Überwachen.

Projektleistung (Vorschau)

Die Registerkarte Projektleistung enthält nützliche Leistungsmetriken für Ihr Projekt, z. B. die Anzahl der verarbeiteten Dokumente, die Zeitersparnis bei der Verarbeitung von Dokumenten oder den Zeitaufwand beim Extrahieren von Daten aus Dokumenten.

Aktivieren des Dashboards

Die im Dashboard Projektleistung angezeigten Metriken werden in Form eines Insights-Dashboards angezeigt.Um das Dashboard zu verwenden, müssen Sie Insights auf Ihrem Mandanten aktivieren:

1. Wechseln Sie zum Drei-Punkte-Menü ⋮ in der oberen rechten Ecke des Bildschirms und wählen Sie Mandantenprofil aus.
   
   

   

   
   
2. Wählen Sie die Umschaltfläche URL des Insights-Dashboards aus, um Insights zu aktivieren.
   
   

   

   
   

Note: The data for the Project performance dashboard is ingested asynchronously. Due to this process, it can take up to 10-15 minutes until data is displayed on the dashboard. For more information, check the Data Ingestion for Insights section from the Insights User Guide.

Metriken

Nachdem ein Projekt veröffentlicht wurde, können Sie die Leistung der Automatisierungen und wichtige Geschäftsmetriken überprüfen.

Tabelle 1. Metriken zum Projekterfolg

Metrik	Beschreibung
Geschätzte eingesparte Zeit	Die Zeitersparnis wird als die Anzahl der Stunden berechnet, die durch die Einführung des Document Understanding-Prozesses eingespart werden, unter der Annahme, dass ein Mensch eine Dokumentenseite in der konfigurierten Zeit bearbeitet. Die Metrik verwendet die folgende Formel: {Geschätzte Zeitersparnis} = {Anzahl der verarbeiteten Dokumente} * {x} (Minuten) - {Validierungszeit} Anzahl der verarbeiteten Dokumente: Die Gesamtzahl der mit der Automatisierung verarbeiteten Dokumente. x: Die Zeit, die ein Benutzer benötigen würde, um ein Dokument ohne Automatisierung zu bearbeiten. Validierungszeit: Die Zeit, die der Benutzer in der Validierungsstation verbracht hat.
Geschätzte Kosten	Die geschätzten Kosten, die für die verbrauchten AI Units gezahlt werden, abhängig von der Eingabe Kosten der AI Unit, die als Einstellung auf dem Dashboard vorgesehen ist.
Anzahl der verarbeiteten Dokumente, monatlicher Trend, nach Verbraucher	Die Gesamtzahl der Dokumente, die von einem Verbraucher während eines Monats verarbeitet wurden. Der Verbraucher kann alles Mögliche sein von: APIs Verwenden von DocumentUnderstanding.Activities
Validierungszeit, pro Validierer	Die aufgewendete Gesamtzeit in Stunden für die Validierung der Klassifizierungs- und Extraktionsergebnisse, pro Validierer.
Zeit, die ein Dokument auf die Validierung gewartet hat	Die Zeit, die ein Dokument auf eine Benutzeraktion gewartet hat: Mindestzeit Maximale Zeit Durchschnittliche Zeit
Durchschnittliche Bearbeitungszeit	Die durchschnittlich erforderliche Zeit für die Validierung eines Dokuments. Insbesondere, wie viel Zeit ein Benutzer durchschnittlich für die Validierung von Klassifizierungs- und Extraktionsergebnissen aufgewendet hat. Sie können diese Metrik überprüfen als: Gesamt: Die gesamte durchschnittliche Bearbeitungszeit. Pro Validierer: Die durchschnittliche Bearbeitungszeit pro Validierer.
Direkt verarbeitete Dokumente im Vergleich zu insgesamt verarbeiteten Dokumenten	Die direkt verarbeiteten Dokumente sind die automatisch verarbeiteten Dokumente, für die keine Validierungs- oder Klassifizierungsaktion erstellt wurde. Die insgesamt verarbeiteten Dokumente sind die direkt verarbeiteten Dokumente sowie die manuell validierten Dokumente zusammen.

Tabelle 2. Verbrauchsmetriken

Metrik	Beschreibung
Übersicht zum Verbrauch von AI Units	Die Anzahl der verfügbaren AI Units im Vergleich zur Anzahl der verbrauchten AI Units, gruppiert nach Projekten. Der Zeitrahmen, für den sie gültig sind, und die Gesamtverbrauchsrate sind ebenfalls verfügbar.
AI Units – Verbrauchsdetails	Die Gesamtzahl der verbrauchten AI Units pro Monat, aufgeteilt nach Verbrauchern. Die Gesamtzahl der verbrauchten AI Units für Modell-Hosting, aufgeteilt nach Projektversion und Monat. Verbrauchte AI Units für jedes Bereitstellungsereignis für das gehostete Modell.
Laufzeitverbraucher	Die größten Verbraucher nach der Anzahl der verarbeiteten Seiten: API-Verbraucher: Verbraucher, der mindestens eine Seite mit dem ausgewählten Projekt digitalisiert hat. RPA-Verbraucher: Studio-, Studio X- oder Studio Web-Projekte, die mindestens eine Document Understanding-Aktivität enthalten, die auf das aktuelle Projekt verweist.

Tabelle 3. Laufzeitmetriken

Metrik	Beschreibung
Wichtigste Dokumenttypen zur Validierung	Die wichtigsten Dokumenttypen, für die Validierungs- oder Klassifizierungsaktionen erstellt wurden, mit den folgenden Informationen: Name des Dokumenttyps Anzahl der verarbeiteten Seiten Durchschnittliche Klassifizierungskonfidenz Durchschnittliche Extraktionskonfidenz Anzahl der angeforderten im Vergleich zu extrahierten Feldern Gesamtzeitaufwand für die Validierung von Dokumenten Durchschnittliche Zeit pro Seite
Trend bei Feldkorrekturen	Die Anzahl der korrigierten Felder, gruppiert nach Änderung (bearbeiteter Wert, bearbeitetes Feld, als fehlend markiert usw.), pro Monat.
Feldkorrekturdetails, nach Dokumenttyp	Die wichtigsten Feldänderungen an einem Dokumenttyp mit den folgenden Informationen: Document type Name des Felds Feldwert (Groß-/Kleinschreibung wird beachtet) Durchschnittliche Konfidenz Durchschnittliche Genauigkeit Änderung Anzahl der Vorkommen
Metriken für Extraktionsgenauigkeit	Durchschnittliche Ausgabegenauigkeit: Die Anzahl der nicht geänderten Felder oder die Anzahl der angeforderten Felder. Genauigkeit der Validiererausgabe: Die Anzahl der nicht geänderten Felder oder die Anzahl der angeforderten Felder pro Validierer.
Metriken für Klassifizierungsgenauigkeit	Die durchschnittliche Genauigkeit der Klassifizierungsausgabe, insbesondere die Anzahl der Klassifizierungsergebnisse, die als korrigiert markiert sind, oder die Anzahl der klassifizierten Dokumente.
Klassifizierungskonfusionsmatrix	Überprüfen Sie, welcher Dokumenttyp mit einem anderen Typ verwechselt wurde.
Übersicht zu Validierungsaktionen	Validierungsaufgaben, die mit RPA oder APIs erstellt wurden, gruppiert nach Status: Zugewiesen Nicht zugewiesen Eingereicht Abgelehnt
Am häufigsten aufgetretene Ausnahmen	Die häufigsten Ausnahmen beim Ausführen von Workflows oder beim Verwenden der Modelle mithilfe von APIs. Die Anzahl der Vorkommen der Ausnahmen und der zugehörige Verbraucher werden ebenfalls angezeigt.

Verwenden des Dashboards

Filtern des Dashboards

Es gibt mehrere Möglichkeiten, das Dashboard zu filtern. Für ein genaues und besseres Verständnis der verfügbaren Optionen gehen wir alle Optionen durch.

Zum Filtern der im Dashboard angezeigten Daten sind mehrere Optionen verfügbar:

• Prozessname
• Zeitraum
• Pro Dokument verbrachte Sekunden
• Informationen neu laden
• Filter ausblenden/anzeigen
• Cache leeren
• Verfügbare Informationen herunterladen
• Lieferung planen
• Filtern zurücksetzen
• Zeitzone auswählen

Option	Beschreibung
Prozessname	Wählen Sie einen, mehrere oder alle Prozesse aus, die bei der Generierung von Informationen im Dashboard berücksichtigt werden sollen.
Zeitraum	Wählen Sie den Zeitraum aus, für den die Informationen angezeigt werden. Ist im letzten Ist an dem Tag Ist im Bereich Ist vor Ist am oder nach dem Ist das Jahr Liegt innerhalb des Monats Ist dies Ist als nächstes Ist vorheriger Ist Ist null Ist jederzeit ist nicht null Entspricht einem Benutzerattribut Übereinstimmungen (erweitert)
Pro Dokument verbrachte Sekunden	Wählen Sie die Zeit aus, die ein Benutzer mit der Verarbeitung eines Dokuments aufwendet.
Document Understanding-Projekt	Wählen Sie ein, mehrere oder alle Projekte aus, die bei der Generierung von Informationen im Dashboard berücksichtigt werden sollen.
Informationen neu laden	Aktualisieren Sie die verfügbaren Informationen.
Filter ausblenden/anzeigen	Wählen Sie aus, ob die Filter im Dashboard sichtbar sind oder nicht.
Herunterladen (Download)	Laden Sie die im Dashboard angezeigten Informationen als PDF oder CSV herunter.
Versenden planen	Planen einer Wiederholung des Dashboard-Exports (täglich, monatlich, wöchentlich oder an einem bestimmten Tag). Verfügbare Formate sind PDF, CSV, ZIP-Datei oder PNG-Visualisierung.
Filtern zurücksetzen	Setzen Sie alle benutzerdefinierten Filter zurück.
Zeitzone der Anzeige	Wählen Sie die Zeitzone des Betrachters aus.

Versenden planen

Sie können die Zustellung einer E-Mail mit Ihren Dashboard-Daten planen. Klicken Sie auf das Drei-Punkte-Menü ⋮, wählen Sie die Option Versenden planen aus und passen Sie sie nach Bedarf an.

Registerkarte	Option	Beschreibung
Einstellungen	Name des Zeitplans	Benennen Sie Ihre geplante Lieferung.
	Wiederholung	Legen Sie den Wiederholungszeitraum Ihrer E-Mail-Zustellung fest.
	Zeit	Legen Sie die Zeit der geplanten Lieferung fest.
	Ziel (Destination)	Legen Sie das Ziel Ihrer geplanten Lieferung fest.
	E-Mail-Adressen	Legen Sie die E-Mail-Adresse fest, an die Ihre Dashboard-Informationen gesendet werden sollen.
	Format	Legen Sie das Format Ihrer geplanten Lieferung fest.
	Jetzt testen	Testen Sie die Option für die geplante Zustellung.
Filter	Prozessname	Wählen Sie einen, mehrere oder alle Prozesse aus, die bei der Generierung von Informationen im Dashboard berücksichtigt werden sollen.
	Zeitraum	Legen Sie den Zeitraum für die im Dashboard angezeigten Informationen fest.
	Pro Dokument verbrachte Sekunden	Legen Sie die Zeit fest, die ein Benutzer mit der Verarbeitung eines Dokuments verbringt.
	Document Understanding-Projekt	Wählen Sie ein, mehrere oder alle Projekte aus, die bei der Generierung von Informationen im Dashboard berücksichtigt werden sollen.
	Jetzt testen	Testen Sie die Option für die geplante Zustellung.
Erweiterte Optionen	Benutzerdefinierte Nachricht	Fügen Sie Ihrer geplanten Zustellung eine benutzerdefinierte Nachricht hinzu.
	Links einschließen	Fügen Sie zugängliche Links zu Ihrer geplanten Lieferung hinzu.
	Tabellen erweitern, um alle Zeilen anzuzeigen	Wählen Sie aus, ob alle Zeilen im Export enthalten sein sollen oder nicht. Große Tabellen können als reiner Text dargestellt werden oder die angezeigten Zeilen einschränken.
	Dashboard-Struktur in einer einzigen Spalte anordnen	Wählen Sie aus, ob Informationen übereinander angezeigt werden sollen.
	Papiergröße	Wählen Sie die gewünschte Papiergröße aus: Seite an Dashboard anpassen, US-Letter, US-Legal, Tabloid, A0, A1, A2, A3, A4, A5.
	Zeitzone zum Versenden	Wählen Sie die Zeitzone aus, die für Ihre geplante Lieferung verwendet werden soll.
	Jetzt testen	Testen Sie die Einstellungen für Ihre geplante Zustellung.

Verarbeitete Dokumente

Auf der Registerkarte Verarbeitete Dokumente wird eine Liste der Dokumente angezeigt, die mit dem ausgewählten Projekt verarbeitet wurden, entweder über APIs oder die Aktivitäten, die Teil des Pakets UiPath.DocumentUnderstanding.Activities sind. Wenn das Dokument mindestens über APIs digitalisiert oder in irgendeiner Weise über die Aktivitäten verarbeitet wurde, die auf das Projekt verweisen, wird es hier angezeigt. Die folgenden Metriken sind verfügbar:

• Dateiname: Der Name des bearbeiteten Dokuments. Klicken Sie auf den Dokumentnamen, um zur Ansicht der Dokumentdetails zu wechseln.
• Dokumenttyp: Der Dokumenttyp des verarbeiteten Dokuments.
• Verbraucher:
  • API: Verbraucher, der mindestens eine Seite mit dem ausgewählten Projekt digitalisiert hat. Zeigen Sie mit der Maus auf das Feld, um die AppId anzuzeigen, die beim Einrichten der externen Anwendung konfiguriert wurde, um den Verbraucher eindeutig zu identifizieren.
  • RPA: Studio Desktop- oder Studio Web-Projekte, die mindestens eine Document Understanding-Aktivität enthalten, die auf das aktuelle Projekt verweist. Zeigen Sie mit der Maus auf das Feld, um den Prozessnamen anzuzeigen.
• Geändert am: Datum, an dem die letzte Bearbeitung des Dokuments stattgefunden hat.
• Validator: Benutzername des Benutzers, der die Aufgabe validiert hat. Wenn für das jeweilige Dokument keine Validierungsaufgabe erstellt wurde, wird im Feld Nicht zutreffend angezeigt.
• AI Units: Anzahl der verbrauchten AI Units.

Verwenden Sie die Suchleiste, um nach einem bearbeiteten Dokument anhand des Dateinamens zu suchen.

Hinweis: Dokumente sind sechs Monate lang auf der Registerkarte Verarbeitete Dokumente verfügbar.

Dokumentdetails

Klicken Sie auf einen Dateinamen auf der Registerkarte Verarbeitete Dokumente, um zur Ansicht „Dokumentdetails“ zu gelangen. Diese Ansicht enthält die folgenden Informationen:

• Metriken:
  • Gesamtverbrauch: Die Anzahl der AI Units, die vom Dokument verbraucht werden.
  • Erstellungsdatum: Das Datum, an dem das Dokument erstellt wurde.
  • Datum der letzten Aktualisierung: Datum, an dem die letzte Bearbeitung des Dokuments stattgefunden hat.
  • Verbraucher: Der Name des Workflows, der in einem RPA-Projekt erstellt wurde.
• Klassifizierung:
  • Dokumenttyp vor der Validierung: Der Dokumenttyp, der automatisch vom Klassifizierer bestimmt wird.
  • Dokumenttyp nach der Validierung: Der Dokumenttyp bei manueller Änderung nach der Validierung. Wenn der Dokumenttyp nach der Validierung nicht geändert wurde, ist der Wert Nicht zutreffend.
  • Konfidenz: Die vom Klassifizierer bestimmte Konfidenzpunktzahl.
• Extraktion:
  • Modell: Das verwendete Extraktionsmodell.
  • Extrahierte Felder: Informationen zu jedem Feld des Dokumenttyps:
    • Vorhergesagter Wert: Vom Modell vorhergesagter Wert.
    • Extraktionskonfidenz: Die vom Extraktor bestimmte Konfidenzpunktzahl.
    • OCR-Konfidenz: Die vom OCR-Modul bestimmte Konfidenzpunktzahl.
    • Wert nach der Validierung: Der Wert bei manueller Änderung nach der Validierung. Wenn der Dokumenttyp nach der Validierung nicht geändert wurde, ist der Wert Nicht zutreffend.
• Validierung:
  • Aufgabenname: Der Name der Validierungsaufgabe.
  • Aufgabentyp: Der Typ der Validierungsaufgabe. Mögliche Werte: Klassifizierung oder Extraktion.
  • Name des Aufgabenkatalogs: Der Name des Validierungsaufgabenkatalogs.
  • Beauftragter: Der Beauftragte für die Validierungsaufgabe („Nicht zugewiesen“, wenn noch kein Benutzer zugewiesen ist).
  • Kritikalität: Die Prioritätsstufe der Validierungsaufgabe.
  • Erstellungsdatum der Aufgabe: Das Datum, an dem die Validierungsaufgabe erstellt wurde.
  • Abschlussdatum der Aufgabe: Das Datum, an dem die Validierungsaufgabe abgeschlossen wurde.
  • Gültige Felder: Die Anzahl der validierten Felder nach Human-in-the-Loop (als gültig markiert).
  • Geänderte Felder: Die Anzahl der geänderten Felder nach Human-in-the-Loop.
  • Aufgabenergebnis: Das Ergebnis der Aufgabe.