| Título: | Minería de texto para la categorización automática de documentos (2010) |
| es una parte de : | |
| Autores: | M. Alicia Pérez Abelleira ; Carolina A. Cardoso |
| Tipo de documento: | Article : texto impreso |
| Dans : | Cuadernos de la Facultad de Ingeniería e Informática (No. 5, 2010) |
| Artículo en la página: | pp. 11-45 |
| Langues: | Español |
| Materias: | Procesamiento de datos | Sistema de información educativa |
| Resumen: |
"La clasificación de documentos de texto es una aplicación de la minería de textos que pretende extraer información de texto no estructurado. Su interés se justifica porque se estima que entre el 80% y el 90% de los datos de las organizaciones son no estructurados. Por otro lado, la búsqueda semántica permite al usuario especificar en una
consulta no solamente términos que deben aparecer en el documento, sino conceptos y relaciones, que pueden detectarse mediante el análisis de texto. El objetivo de este trabajo es implementar un buscador semántico que aproveche el resultado de algoritmos de aprendizaje automático para la clasificación de documentos. El dominio de aplicación es un corpus de más de 8000 documentos que contienen nueve años de resoluciones rectorales de la Universidad Católica de Salta en distintos formatos (Microsoft Word, texto plano, PDF). El sistema aprovecha las ventajas de la arquitectura UIMA sobre la que se han implementado analizadores que extraen meta-datos (fecha y número de resolución, unidad académica, personas, etc.) Asimismo se han explorado una variedad de algoritmos de aprendizaje semi-supervisado aplicados a la categorización de documentos, comparándolos experimentalmente entre sí y con algoritmos supervisados. Estos últimos precisan una gran cantidad de ejemplos etiquetados, algo generalmente costoso en la práctica en el caso de la clasificación de documentos. Los algoritmos semisupervisados en cambio son capaces de aprovechar ejemplos no etiquetados. En particular, en los experimentos en nuestro dominio el algoritmo de co-training ha demostrado tener buenas propiedades, incluso a pesar de la restricción teórica de que los atributos deben ser redundantes e independientes. No obstante el algoritmo supervisado SMO que entrena SVMs es superior. Nuestro objetivo final es construir un buscador semántico que utilice los metadatos obtenidos automáticamente por los anotadores implementados en UIMA y las categorías asignadas automáticamente por los algoritmos de aprendizaje" |
| Nota de contenido: | 1. Introducción -- 2. Información estructurada y no estructurada -- 3. Arquitectura del sistema. Análisis a nivel de documento. Análisis a nivel de colección. Formato de la información estruturada -- 4. Aprendizaje automático para la categoriazación de documentos. Pre-procesamiento de los datos. Construcción del clasificador. SMO. Co-Training. Espectation maximization(EM). Configuración de los experimentos. Resultados y discusión -- 5. Búsqueda semántica. Búsqueda semántica. Fundamentos de un motor de búsqueda. El lenguaje XML Fragments. SemanticSearch. Implementación del buscador semántico utilizando SemanticSearch. El proyecto Lucene. Implementación utilizando Lucene -- 6. Conclusiones -- Agradecimientos -- Bibliografía |
| En línea: | http://www.ucasal.edu.ar/htm/ingenieria/cuadernos/archivos/5-p11-alicia-articulo-cuadernos-formateado.pdf |
Dirección
Universidad Católica de Salta - Campo Castañares
4400 Salta
Argentina
(0387)4268529-4268528
contacto
Inicio
