Clasificador basado en palabras clave

Qué es el clasificador basado en palabras claves

The Keyword Based Classifier is a simple classifier that searches for repeating string sequences within a given file, in order to perform document classification.

El algoritmo se crea en torno al concepto de títulos de documentos y parte de la premisa de que el aspecto de los tipos de documentos con títulos suele tener una variación relativamente baja en los documentos.

Al clasificar un archivo en un tipo de documento, el clasificador basado en palabras claves:

• encuentra la mejor string o colección de string coincidentes, a partir de sus datos de aprendizaje, que se aplica a un tipo de documento de la taxonomía. La confianza se calcula en función de:
  • la proximidad de la coincidencia con el principio del documento,
  • cuántas veces han confirmado la coincidencia los trabajadores y ha sido reforzada en los datos de aprendizaje.
• informa sobre el tipo de documento con mayor puntuación, con la configuración de coincidencia subyacente.

El clasificador basado en palabras claves puede trabajar con una sola entrada de string (una string que se considera como una entrada en los datos de aprendizaje que usa el clasificador), o con una entrada que contiene múltiples strings (dos o más strings que forman una sola entrada). En caso de que haya varias strings, el clasificador aplica el algoritmo de concordancia a cada una de ellas por separado y, a continuación, calcula una media simple de las confidencias de las coincidencias identificadas.

Ejemplo

Tomemos el siguiente ejemplo:

• if an entry contains a single string, for instance, "this is my match", then the Keyword Based Classifier searches and rates this string as a potential document type match (according to which document type the string is attributed to).
• if an entry contains three strings, for instance, ["this is a match", "needs more evidence for filtering", "yet another one"], then the Keyword Based Classifier searches and rates each one of the three strings, and then computes a simple average of the matching confidences for reporting.

El conjunto de palabras claves puede definirse dentro de una línea o usando varias líneas. Cuando se establece dentro de una línea, identifica la entrada dada. Por ejemplo, si x, y, y z se enumeran como palabras claves, entonces la búsqueda está buscando x e y y z.

Tener varias líneas definidas significa que la búsqueda busca las palabras claves enumeradas en la primera línea, o en la segunda, o en la tercera, hasta que cubre todas las líneas e identifica las mejores coincidencias, aumentando así la puntuación de confianza por el simple hecho de haber identificado más coincidencias de más palabras claves disponibles.

Cuándo usarlo

Deberías plantearte el uso de este clasificador si:

• tus archivos contienen un solo tipo de documento cada uno (por lo que no es necesario dividir los archivos);
• tus expedientes contienen pruebas relacionadas con el tipo de documento en las tres primeras páginas del expediente.

Requisitos especiales

No hay requisitos especiales para usar el clasificador basado en palabras claves.

For more information on how to train a Classifier, check this page that describes the process of using the Manage Learning wizard.