Text Classification of Stereotypes through Learning With Disagreement
[ES] El aprendizaje con desacuerdo tiene como objetivo incorporar las etiquetas de los anotadores en los datos de entrenamiento, permitiendo que los modelos apren- dan de las anotaciones realizadas por un grupo diverso. La mayoría de los sistemas de inteligencia artificial se construyen utilizando u...
| Autor: | |
|---|---|
| Tipo de recurso: | tesis de maestría |
| Fecha de publicación: | 2024 |
| País: | España |
| Institución: | Universitat Politècnica de València (UPV) |
| Repositorio: | RiuNet. Repositorio Institucional de la Universitat Politécnica de Valéncia |
| Idioma: | inglés |
| OAI Identifier: | oai:riunet.upv.es:10251/210945 |
| Acceso en línea: | https://riunet.upv.es/handle/10251/210945 |
| Access Level: | acceso abierto |
| Palabra clave: | Text classification Clasificacion de texto Estereotipos raciales Aprendizaje por desacuerdo Racial stereotypes Learning with disagreement LENGUAJES Y SISTEMAS INFORMATICOS Máster Universitario en Inteligencia Artificial, Reconocimiento de Formas e Imagen Digital-Màster Universitari en Intel·ligència Artificial, Reconeixement de Formes i Imatge Digital |
| id |
ES_04edf122adee7d53deffef18ec6e317d |
|---|---|
| oai_identifier_str |
oai:riunet.upv.es:10251/210945 |
| network_acronym_str |
ES |
| network_name_str |
España |
| repository_id_str |
|
| dc.title.none.fl_str_mv |
Text Classification of Stereotypes through Learning With Disagreement Clasificación textual de estereotipos mediante el aprendizaje con desacuerdo Classificació textual d&apos estereotips mitjançant l&apos aprenentatge amb desacord |
| title |
Text Classification of Stereotypes through Learning With Disagreement |
| spellingShingle |
Text Classification of Stereotypes through Learning With Disagreement Moreno Abad, Briant Text classification Clasificacion de texto Estereotipos raciales Aprendizaje por desacuerdo Racial stereotypes Learning with disagreement LENGUAJES Y SISTEMAS INFORMATICOS Máster Universitario en Inteligencia Artificial, Reconocimiento de Formas e Imagen Digital-Màster Universitari en Intel·ligència Artificial, Reconeixement de Formes i Imatge Digital |
| title_short |
Text Classification of Stereotypes through Learning With Disagreement |
| title_full |
Text Classification of Stereotypes through Learning With Disagreement |
| title_fullStr |
Text Classification of Stereotypes through Learning With Disagreement |
| title_full_unstemmed |
Text Classification of Stereotypes through Learning With Disagreement |
| title_sort |
Text Classification of Stereotypes through Learning With Disagreement |
| dc.creator.none.fl_str_mv |
Moreno Abad, Briant |
| author |
Moreno Abad, Briant |
| author_facet |
Moreno Abad, Briant |
| author_role |
author |
| dc.contributor.none.fl_str_mv |
Rosso, Paolo Coll Ardanuy, María Departamento de Sistemas Informáticos y Computación Escuela Técnica Superior de Ingeniería Informática Centro de Investigación Pattern Recognition and Human Language Technology Repositorio Institucional de la Universitat Politècnica de València Riunet |
| dc.subject.none.fl_str_mv |
Text classification Clasificacion de texto Estereotipos raciales Aprendizaje por desacuerdo Racial stereotypes Learning with disagreement LENGUAJES Y SISTEMAS INFORMATICOS Máster Universitario en Inteligencia Artificial, Reconocimiento de Formas e Imagen Digital-Màster Universitari en Intel·ligència Artificial, Reconeixement de Formes i Imatge Digital |
| topic |
Text classification Clasificacion de texto Estereotipos raciales Aprendizaje por desacuerdo Racial stereotypes Learning with disagreement LENGUAJES Y SISTEMAS INFORMATICOS Máster Universitario en Inteligencia Artificial, Reconocimiento de Formas e Imagen Digital-Màster Universitari en Intel·ligència Artificial, Reconeixement de Formes i Imatge Digital |
| description |
[ES] El aprendizaje con desacuerdo tiene como objetivo incorporar las etiquetas de los anotadores en los datos de entrenamiento, permitiendo que los modelos apren- dan de las anotaciones realizadas por un grupo diverso. La mayoría de los sistemas de inteligencia artificial se construyen utilizando una única etiqueta considerada es- tándar, comúnmente determinada mediante votación mayoritaria, asumiendo que existe una verdad objetiva única para cada instancia. Sin embargo, este enfoque no considera los desacuerdos presentes en las anotaciones. En lugar de ignorar estas discrepancias y utilizar una única etiqueta fija, conserva las diferencias entre las an- otaciones de los distintos anotadores, lo que genera una representación más precisa de la realidad, reconociendo así la validez de diversas perspectivas. El conocimiento actual y la práctica del aprendizaje con desacuerdo aún son lim- itados. Para abordar esta brecha, esta tesis investiga la aplicación del aprendizaje con desacuerdo. En el estado del arte se presenta la clasificación de textos con un enfoque específico en la tarea de identificación de estereotipos raciales explícitos e implícitos. Los experimentos se llevaron a cabo utilizando el conjunto de datos presentado en la tarea compartida: Detección y clasificación de estereotipos raciales en español - Aprendizaje con Desacuerdo. En primer lugar, introducimos los enfoques más avanzados para la detección de estereotipos y exploramos qué técnicas de procesamiento de texto y arquitecturas de modelos se adaptan mejor al paradigma de aprendizaje con desacuerdo. Posterior- mente, se describen las métricas de evaluación utilizadas en esta tesis. Además, nue- stro análisis profundiza en diversas técnicas de procesamiento de datos, aumento de datos y un enfoque de procesamiento de texto que añade mayor contexto a las oraciones originales. También se realizó un análisis de sentimientos y minería de opiniones para evaluar el impacto en la detección de estereotipos. La tesis concluye proporcionando recomendaciones sobre los aspectos que re- quieren mayor mejora y sugiriendo direcciones para futuros trabajos. Al integrar es- tos análisis, esta tesis ofrece un panorama completo del aprendizaje con desacuerdo aplicado al reconocimiento de estereotipos dentro del estado del arte en la clasifi- cación de textos. Esta tesis aborda el problema del proyecto de investigación FAK- EnHATE (PDC2022-133118-I00, dirigido por MCIN/AEI/10.13039/501100011033 y por la Unión Europea NextGenerationEU/PRTR) de identificar estereotipos en es- pañol. |
| publishDate |
2024 |
| dc.date.none.fl_str_mv |
2024 2024-10-28 2024 2024-09-27 |
| dc.type.none.fl_str_mv |
master thesis http://purl.org/coar/resource_type/c_bdcc |
| dc.type.openaire.fl_str_mv |
info:eu-repo/semantics/masterThesis |
| format |
masterThesis |
| dc.identifier.none.fl_str_mv |
https://riunet.upv.es/handle/10251/210945 |
| url |
https://riunet.upv.es/handle/10251/210945 |
| dc.language.none.fl_str_mv |
Inglés eng |
| language_invalid_str_mv |
Inglés |
| language |
eng |
| dc.rights.none.fl_str_mv |
open access http://purl.org/coar/access_right/c_abf2 Reserva de todos los derechos http://rightsstatements.org/vocab/InC/1.0/ |
| dc.rights.openaire.fl_str_mv |
info:eu-repo/semantics/openAccess |
| rights_invalid_str_mv |
open access http://purl.org/coar/access_right/c_abf2 Reserva de todos los derechos http://rightsstatements.org/vocab/InC/1.0/ |
| eu_rights_str_mv |
openAccess |
| dc.format.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universitat Politècnica de València |
| publisher.none.fl_str_mv |
Universitat Politècnica de València |
| dc.source.none.fl_str_mv |
reponame:RiuNet. Repositorio Institucional de la Universitat Politécnica de Valéncia instname:Universitat Politècnica de València (UPV) |
| instname_str |
Universitat Politècnica de València (UPV) |
| reponame_str |
RiuNet. Repositorio Institucional de la Universitat Politécnica de Valéncia |
| collection |
RiuNet. Repositorio Institucional de la Universitat Politécnica de Valéncia |
| repository.name.fl_str_mv |
|
| repository.mail.fl_str_mv |
|
| _version_ |
1869402823670628352 |
| spelling |
Text Classification of Stereotypes through Learning With DisagreementClasificación textual de estereotipos mediante el aprendizaje con desacuerdoClassificació textual d&aposestereotips mitjançant l&aposaprenentatge amb desacordMoreno Abad, BriantText classificationClasificacion de textoEstereotipos racialesAprendizaje por desacuerdoRacial stereotypesLearning with disagreementLENGUAJES Y SISTEMAS INFORMATICOSMáster Universitario en Inteligencia Artificial, Reconocimiento de Formas e Imagen Digital-Màster Universitari en Intel·ligència Artificial, Reconeixement de Formes i Imatge Digital[ES] El aprendizaje con desacuerdo tiene como objetivo incorporar las etiquetas de los anotadores en los datos de entrenamiento, permitiendo que los modelos apren- dan de las anotaciones realizadas por un grupo diverso. La mayoría de los sistemas de inteligencia artificial se construyen utilizando una única etiqueta considerada es- tándar, comúnmente determinada mediante votación mayoritaria, asumiendo que existe una verdad objetiva única para cada instancia. Sin embargo, este enfoque no considera los desacuerdos presentes en las anotaciones. En lugar de ignorar estas discrepancias y utilizar una única etiqueta fija, conserva las diferencias entre las an- otaciones de los distintos anotadores, lo que genera una representación más precisa de la realidad, reconociendo así la validez de diversas perspectivas. El conocimiento actual y la práctica del aprendizaje con desacuerdo aún son lim- itados. Para abordar esta brecha, esta tesis investiga la aplicación del aprendizaje con desacuerdo. En el estado del arte se presenta la clasificación de textos con un enfoque específico en la tarea de identificación de estereotipos raciales explícitos e implícitos. Los experimentos se llevaron a cabo utilizando el conjunto de datos presentado en la tarea compartida: Detección y clasificación de estereotipos raciales en español - Aprendizaje con Desacuerdo. En primer lugar, introducimos los enfoques más avanzados para la detección de estereotipos y exploramos qué técnicas de procesamiento de texto y arquitecturas de modelos se adaptan mejor al paradigma de aprendizaje con desacuerdo. Posterior- mente, se describen las métricas de evaluación utilizadas en esta tesis. Además, nue- stro análisis profundiza en diversas técnicas de procesamiento de datos, aumento de datos y un enfoque de procesamiento de texto que añade mayor contexto a las oraciones originales. También se realizó un análisis de sentimientos y minería de opiniones para evaluar el impacto en la detección de estereotipos. La tesis concluye proporcionando recomendaciones sobre los aspectos que re- quieren mayor mejora y sugiriendo direcciones para futuros trabajos. Al integrar es- tos análisis, esta tesis ofrece un panorama completo del aprendizaje con desacuerdo aplicado al reconocimiento de estereotipos dentro del estado del arte en la clasifi- cación de textos. Esta tesis aborda el problema del proyecto de investigación FAK- EnHATE (PDC2022-133118-I00, dirigido por MCIN/AEI/10.13039/501100011033 y por la Unión Europea NextGenerationEU/PRTR) de identificar estereotipos en es- pañol.[EN] Learning with disagreement aims to incorporate annotator labels into the train- ing data, enabling models to learn from crowd annotations. Most artificial intel- ligence systems are built using a single gold standard label, often determined by majority voting, assuming that a single objective truth exists for every instance. This method of learning with disagreement does not account for the presence of disagree- ments in the annotations. Instead of discarding these differences and using a single hard label, retaining all the annotators differences creates a more appropriate repre- sentation of reality that acknowledges the validity of different perspectives. The current state of knowledge and practice in applying learning with disagree- ment is limited. To address this gap, this thesis investigates the application of learn- ing with disagreement to the state-of-the-art of text classification, focusing on the task of explicit and implicit racial stereotype identification. The experiments were conducted using the dataset introduced in the shared task: DETEction and classifica- tion of racial STereotypes in Spanish Learning with Disagreement. First, we introduce state-of-the-art approaches to stereotype detection and ex- plore which text processing techniques and model architectures best incorporate the learning with disagreement paradigm. We then describe the evaluation metrics used in this thesis. Furthermore, our analysis delves into different data processing tech- niques, data augmentation, and a text processing technique that adds more context to the original sentence input. We also conducted a sentiment and opinion-mining analysis to evaluate the impact on stereotype detection. The thesis concludes by offering insights into aspects that need further improve- ment and suggesting directions for future work. By integrating these analyses, this thesis provides a comprehensive survey of learning with disagreement in stereo- type recognition within state-of-the-art text classification. This MSc thesis addresses the problem of the FAKEnHATE research project (PDC2022-133118-I00 funded by MCIN/AEI/10.13039/501100011033 and by European Union NextGenerationEU/PRTR) of identifying stereotypes in Spanish.Universitat Politècnica de ValènciaRosso, PaoloColl Ardanuy, MaríaDepartamento de Sistemas Informáticos y ComputaciónEscuela Técnica Superior de Ingeniería InformáticaCentro de Investigación Pattern Recognition and Human Language TechnologyRepositorio Institucional de la Universitat Politècnica de València Riunet20242024-10-2820242024-09-27master thesishttp://purl.org/coar/resource_type/c_bdccinfo:eu-repo/semantics/masterThesisapplication/pdfhttps://riunet.upv.es/handle/10251/210945reponame:RiuNet. Repositorio Institucional de la Universitat Politécnica de Valénciainstname:Universitat Politècnica de València (UPV)Inglésengopen accesshttp://purl.org/coar/access_right/c_abf2Reserva de todos los derechoshttp://rightsstatements.org/vocab/InC/1.0/info:eu-repo/semantics/openAccessoai:riunet.upv.es:10251/2109452026-06-13T07:49:27Z |
| score |
15,811543 |