Vorbereiten von Daten für den CSV-Upload

Benutzerberechtigungen erforderlich: „Sources admin“ UND „Nachrichten bearbeiten“.

Sie können Anweisungen zum Hochladen von Daten aus einer CSV-Datei hier zusammen mit häufigen Fehlermeldungen, die in der Plattform auftreten können.

Vor dem Hochladen von Daten in Communications Mining müssen einige Faktoren berücksichtigt werden, wenn die Daten vorbereitet werden, die von der Plattform erfasst werden sollen.

Wichtig:

Stellen Sie sicher, dass Sie eine CSV-Datei hochladen und nicht in einer Excel-Datei sein.

Wenn Sie die CSV-Datei in Excel geöffnet und Änderungen vorgenommen haben, kann dies zu Formatierungsproblemen führen, die möglicherweise Probleme zum Zeitpunkt des Hochladens verursachen. Um dies zu vermeiden, stellen Sie sicher, dass alle Aktualisierungen in der CSV-Datei erfolgen direkt.

Überprüfen Sie außerdem auf Folgendes, bevor Sie Ihre CSV-Datei hochladen in die Plattform, um Fehler beim Hochladen oder Probleme mit der Datenqualität zu vermeiden, die sich negativ auf die Qualität der Modellleistung auswirken:

Element	Beschreibung
Doppelte Zeilen	Dieselben Daten werden im gesamten Datenextrakt mehrmals wiederholt
Header stimmen nicht überein	Die falschen Header werden auf die falschen Datenfelder ausgerichtet
Hängende Zeilen oder Spalten	Nicht alle Daten sind in sequenziellen Zeilen enthalten Beispiel: Alle Meldungen in Zeile 1 bis 10.000, aber eine Zeile mit einer Zelle mit Daten in Zeile 19.999.
Inkonsistente Datumsformatierung	Unterschiedliche Zeilen mit inkonsistenten Datumsformaten Beispiel: Eine Reihe von Nachrichten im US-Datumsformat und eine Reihe von Nachrichten im EU-Datumsformat, alle im selben Dataset, da dies Probleme bei der Normalisierung im Downstream haben wird.
Inkhärente Sätze	Das sind Sätze, die eine Auswahl von Wörtern ohne klare Syntax- oder Semantikstruktur enthalten Beispiel: „Der Benutzer fordert ein neues portierbares Ticket 28442 298 an, das erstellt werden soll“
Inkonsistente Abstände	Wenn zwischen Wörtern eine unregelmäßige Anzahl von Leerzeichen vorhanden ist. Beispiel: „Die Richtlinie ist auf Erneuerung festgelegt“ statt „Die Richtlinie ist auf Erneuerung festgelegt“
Pausen in Wörtern	Wenn es in der Mitte eines Wortes Umbrüche gibt, die nicht vorhanden sein sollten. Beispiel: Die Richtlinie ist festgelegt. zu verlängern“ anstelle von „Die Richtlinie ist auf Verlängerung festgelegt“
Fehlerhafte Zeichencodierung	Wenn Textdaten nicht richtig codiert sind, führt dies zu unlesbaren oder unlesbaren Zeichen. Beispiel: „Thread åpp is gélöt“ statt „Die App ist großartig.“
Leere Nachrichten	Kommunikationen ohne Inhalt im Betreff/Text
Nachrichten mit vielen Tippfehlern	Textdaten mit vielen Fehlern in der Rechtschreibung
Header/Fußzeilen	Wenn Header oder Fußzeilen enthalten sind Beispiele: Spam-Warnungen, Virenscan-Warnungen usw.
Metadaten im Betreff/Textkörper anstatt als Metadateneigenschaft enthalten	Wenn Metadaten im Betreff oder Text enthalten sind Beispiel: „[01/01/2023] Ich möchte meine Richtlinie erneuern“ als Text einer Nachricht, anstatt „Ich möchte meine Richtlinie erneuern“ als Nachricht mit dem Datum „01/01/2023“. die Metadaten.
Mehrere Nachrichten in einer Nachricht kombiniert	Wenn es mehrere Nachrichten gibt, die in einem Thread in separate Nachrichten aufgeteilt und in einer einzigen Kommunikation kombiniert werden sollten.