Latent Dirichlet Allocation complement in the vector space model for Multi-Label Text Classification

En la tarea de clasificación de texto uno de los principales problemas es elegir qué características dan los mejores resultados. Se pueden utilizar diversas características como palabras, n-gramos, n-gramos sintácticos de varios tipos (etiquetas POS, relaciones de dependencia, mezclas, etc.) o se pu...

Descripción completa

Detalles Bibliográficos
Autores: Víctor Carrera-Trejo, Grigori Sidorov, Sabino Miranda, Marco Moreno-Ibarra, Rodrigo Cadena Martínez
Tipo de recurso: artículo
Estado:Versión publicada
Fecha de publicación:2015
País:México
Institución:Centro de Investigación e Innovación en Tecnologías de la Información y Comunicación
Repositorio:Repositorio Institucional de INFOTEC
Idioma:inglés
OAI Identifier:oai:infotec.repositorioinstitucional.mx:1027/203
Acceso en línea:http://infotec.repositorioinstitucional.mx/jspui/handle/1027/203
Access Level:acceso abierto
Palabra clave:info:eu-repo/classification/LEM/Clasificación de texto
info:eu-repo/classification/cti/1
info:eu-repo/classification/cti/12
info:eu-repo/classification/cti/1299
info:eu-repo/classification/cti/129999
Descripción
Sumario:En la tarea de clasificación de texto uno de los principales problemas es elegir qué características dan los mejores resultados. Se pueden utilizar diversas características como palabras, n-gramos, n-gramos sintácticos de varios tipos (etiquetas POS, relaciones de dependencia, mezclas, etc.) o se pueden considerar combinaciones de estas características. Además, se pueden aplicar algoritmos para la reducción de la dimensionalidad de estos conjuntos de características, como la Asignación de Dirichlet Latente (LDA). En este artículo, consideramos la tarea de clasificación de texto de varias etiquetas y aplicamos varios conjuntos de características. Consideramos un subconjunto de archivos multi-etiquetados del corpus de Reuters-21578. Utilizamos valores tf-IDF tradicionales de las características e intentamos considerar e ignorar las palabras de parada. También probamos varias combinaciones de características, como bigrams y unigrams. También experimentamos con la adición de los resultados LDA en Vector Space Models como nuevas características. Estos últimos experimentos tuvieron los mejores resultados.