Suppression par lot

La CLI vous permet de supprimer des commentaires en fonction d'une période, par exemple tous les commentaires antérieurs à deux ans. Ceci est utile pour nettoyer les données historiques. Notez que la période est basée sur le champ timestamp du commentaire, plutôt que sur la date et l'heure auxquelles le commentaire a été téléchargé sur Communications Mining.

Remarque : Cette section suppose que vous avez déjà installé et configuré la CLI.

Sauvegarde des données annotées

Avant de supprimer ou de modifier vos commentaires, vous pouvez éventuellement sauvegarder les commentaires annotés, afin de ne pas perdre accidentellement le travail manuel des entraîneurs de modèle :

re get comments \
  <project_name/source_name> \
  --dataset <project_name/dataset_name> \
  --reviewed-only true \
  --file <output_file_name.jsonl>

Si la source a été ajoutée à plusieurs ensembles de données, vous devez exécuter la commande ci-dessus pour chacun de ces ensembles de données.

Suppression de données (Deleting Data)

Avertissement :

La suppression des annotations modifie les performances du modèle

Si les commentaires que vous supprimez ont été ajoutés à un ou plusieurs jeux de données dans lesquels ils auraient pu être annotés, la suppression des commentaires annotés entraînera une modification des performances du modèle dans ces jeux de données à l'avenir (les modèles épinglés ne seront pas affectés). Vous pouvez éventuellement indiquer à la CLI d'ignorer les commentaires annotés.

La commande ci-dessous supprimera tous les commentaires dans une source comprise entre FROM_TIMESTAMP et TO_TIMESTAMP , à l'exception des commentaires annotés. L'horodatage doit être au format RFC 3339, par exemple 1970-01-02T03:04:05Z

re delete bulk \
  --source <project_name/source_name> \
  --include-annotated=false \
  --from-timestamp FROM_TIMESTAMP \
  --to-timestamp TO_TIMESTAMP

Si vous voulez vraiment supprimer les commentaires annotés, vous pouvez définir --include-annotated=true.