Verwenden von benutzerdefinierter NER mit kontinuierlichem Lernen

Hintergrundinformationen

Dieses Beispiel wird dazu verwendet, um Chemikalien nach der Kategorie zu extrahieren, die in der Forschungsarbeit erwähnt wird. Mit dem folgenden Verfahren extrahieren Sie die Chemikalien und kategorisieren sie als ABKÜRZUNG, FAMILIE, FORMEL, IDENTIFIZIERER, MEHRFACH, SYSTEMATISCH, TRIVIAL und NO_CLASS.

Voraussetzungen

Dieses Verfahren verwendet das Paket Custom Named Entity Recognition. Weitere Informationen darüber, wie dieses Paket funktioniert und wofür es verwendet werden kann, finden Sie unter Custom Named Entity Recognition.

Für dieses Verfahren haben wir Beispieldateien wie folgt bereitgestellt:

• Vorbeschriftetes Trainings-Dataset im CoNLL-Format. Sie können es hier herunterladen.
• Vorbeschriftetes Test-Dataset. Sie können es hier herunterladen.
• Beispielworkflow zum Extrahieren von Kategorien von Chemikalien, die in der Forschungsarbeit erwähnt wurden. Sie können ihn hier herunterladen.
  Hinweis: Stellen Sie sicher, dass die folgenden Variablen in der Beispieldatei ausgefüllt sind:

  • in_emailAdress – die E-Mail-Adresse, der die Action Center-Aufgabe zugewiesen wird
  • in_MLSkillEndpoint – Öffentlicher Endpunkt der ML-Fähigkeit
  • in_MLSkillAPIKey – API-Schlüssel der ML-Fähigkeit
  • in_labelStudioEndpoint – Optional, um kontinuierliche Beschriftung zu aktivieren: Import-URL eines Label-Studio-Projekts angeben

Verfahren

Gehen Sie wie folgt vor, um Chemikalien nach ihrer Kategorie aus Forschungsarbeiten zu extrahieren.

1. Importieren Sie das Beispiel-Dataset in UiPath® AI Center. Wechseln Sie dazu zum Menü Datasets und laden Sie den Ordner train und den Ordner test aus dem Beispiel hoch.
2. Wählen Sie das gewünschte benutzerdefinierte NER-Paket unter ML-Pakete > Sofort einsetzbare Pakete > UiPath Sprachanalyse aus und erstellen Sie es.
3. Wechseln Sie zum Menü Pipelines und erstellen Sie eine neue, vollständige Pipelineausführung für das Paket, das im vorherigen Schritt erstellt wurde. Verweisen Sie auf das Trainings- und das Test-Dataset, die in der Beispieldatei zur Verfügung gestellt werden.

   Nach Abschluss sind die Ergebnisse der Pipeline unter Artefakte verfügbar. Sie können den Klassifizierungsbericht herunterladen, um die Testergebnisse auszuwerten.

4. Erstellen Sie eine neue ML-Fähigkeit mithilfe des Pakets, das von der Pipelineausführung aus dem vorherigen Schritt generiert wurde, und stellen Sie sie bereit.
5. Sobald die Fähigkeit bereitgestellt wurde, nutzen Sie sie im in UiPath® Studio bereitgestellten Workflow. Um die Erfassung von Daten mit schwachen Vorhersagen zu ermöglichen, stellen Sie eine Label Studio-Instanz bereit und geben Sie die Instanz-URL und den API-Schlüssel in der Label Studio-Aktivität im Workflow an.

Erste Schritte mit Label Studio

Befolgen Sie die Anweisungen unten, um mit Label Studio zu beginnen und Daten zum AI Center zu exportieren.

1. Installieren Sie Label Studio auf Ihrer lokalen Maschine oder Cloud-Instanz. Folgen Sie dazu den Anweisungen hier.
2. Erstellen Sie ein neues Projekt aus der benannten Entitätserkennungsvorlage und definieren Sie Ihre Labelnamen.
   
   

   

   
   
3. Stellen Sie sicher, dass die Labelnamen keine Sonderzeichen oder Leerzeichen enthalten. Verwenden Sie beispielsweise anstelle von Set Date SetDate.
4. Stellen Sie sicher, dass der Wert des <Text>-Tags "$text" ist.
   
   

   

   
   
5. Laden Sie die Daten mithilfe der API von hier hoch.

   Beispiel für eine cURL-Anforderung:

   curl --location --request POST 'https://<label-studio-instance>/api/projects/<id>/import' \)\)
   --header 'Content-Type: application/json' \)\)
   --header 'Authorization: Token <Token>' \)\)
   --data-raw '[
       {
         "data": {
           "text": "<Text1>"
         },
       },
       {
         "data": {
           "text": "<Text2>"
          }
       }
   ]'

6. Erstellen Sie Anmerkungen zu Ihren Daten.
7. Exportieren Sie die Daten im CoNLL 2003-Format und laden Sie sie im AI Center hoch.
8. Die Label Studio-Instanz-URL und der API-Schlüssel wurden im bereitgestellten Beispielworkflow zur Verfügung gestellt, um falsche Vorhersagen und Vorhersagen mit geringer Konfidenz zu erfassen.