Automatic query expansion for vehicle repair documents through user behavior

The process of Information Retrieval (IR) by query driven search engines have become an essential part of the customer experience in any data related digital product. The accuracy and completeness of the search results is a matter of great interest and a crucial key performance indicator. An importa...

ver descrição completa

Detalhes bibliográficos
Autor: Ghiringhelli, Juan Carlos
Tipo de documento: dissertação
Data de publicação:2020
País:España
Recursos:Universitat Oberta de Catalunya (UOC)
Repositório:O2, repositorio institucional de la UOC
OAI Identifier:oai:openaccess.uoc.edu:10609/121326
Acesso em linha:http://hdl.handle.net/10609/121326
Access Level:Acceso aberto
Palavra-chave:nlp
embeddings
query expansion
synonyms
pln
incorporaciones
expansión de consultas
sinónimos
incorporacions
expansió de consultes
sinònims
Artificial intelligence -- TFM
Intel·ligència artificial -- TFM
Inteligencia artificial -- TFM
id ES_e34772f396162b3b4e6cf3f5fb56fdea
oai_identifier_str oai:openaccess.uoc.edu:10609/121326
network_acronym_str ES
network_name_str España
repository_id_str
dc.title.none.fl_str_mv Automatic query expansion for vehicle repair documents through user behavior
title Automatic query expansion for vehicle repair documents through user behavior
spellingShingle Automatic query expansion for vehicle repair documents through user behavior
Ghiringhelli, Juan Carlos
nlp
embeddings
query expansion
synonyms
pln
incorporaciones
expansión de consultas
sinónimos
pln
incorporacions
expansió de consultes
sinònims
Artificial intelligence -- TFM
Intel·ligència artificial -- TFM
Inteligencia artificial -- TFM
title_short Automatic query expansion for vehicle repair documents through user behavior
title_full Automatic query expansion for vehicle repair documents through user behavior
title_fullStr Automatic query expansion for vehicle repair documents through user behavior
title_full_unstemmed Automatic query expansion for vehicle repair documents through user behavior
title_sort Automatic query expansion for vehicle repair documents through user behavior
dc.creator.none.fl_str_mv Ghiringhelli, Juan Carlos
author Ghiringhelli, Juan Carlos
author_facet Ghiringhelli, Juan Carlos
author_role author
dc.contributor.none.fl_str_mv Bouayad-Agha, Nadjet
dc.subject.none.fl_str_mv nlp
embeddings
query expansion
synonyms
pln
incorporaciones
expansión de consultas
sinónimos
pln
incorporacions
expansió de consultes
sinònims
Artificial intelligence -- TFM
Intel·ligència artificial -- TFM
Inteligencia artificial -- TFM
topic nlp
embeddings
query expansion
synonyms
pln
incorporaciones
expansión de consultas
sinónimos
pln
incorporacions
expansió de consultes
sinònims
Artificial intelligence -- TFM
Intel·ligència artificial -- TFM
Inteligencia artificial -- TFM
description The process of Information Retrieval (IR) by query driven search engines have become an essential part of the customer experience in any data related digital product. The accuracy and completeness of the search results is a matter of great interest and a crucial key performance indicator. An important enhancer for search engines is query expansion Query Expansion (QE), where equivalent search queries Equivalent Search Query (ESQ) are added to the original request to increase recall. ESQs can be discovered using the same tools as synonym discovery given certain considerations, taking advantage of the fact that synonym discovery is a well developed field of Natural Language Processing (NLP) with many available techniques. The motivation for this project is to use the tools available in NLP Machine Learning (ML) to automatically detect ESQs. For this a large sample of logs describing search query customer behavior was used. This data set was obtained from a live enterprise product that publishes repair documents for automobiles. Graph embeddings through an implementation method called node2Vec and vector cosine similarity is the chosen discovery method for the ESQs. The conclusion of the experiment is that while usable search expansion queries are discovered, extra human intervention or further automatic selection is necessary to filter the valuable cases from the large number of found cases, even working within a strict similarity threshold.
publishDate 2020
dc.date.none.fl_str_mv 2020
2020
2020
dc.type.none.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
dc.identifier.none.fl_str_mv http://hdl.handle.net/10609/121326
url http://hdl.handle.net/10609/121326
dc.language.none.fl_str_mv Inglés
language_invalid_str_mv Inglés
dc.rights.none.fl_str_mv CC BY-NC-ND
http://creativecommons.org/licenses/by-nc-nd/3.0/es/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv CC BY-NC-ND
http://creativecommons.org/licenses/by-nc-nd/3.0/es/
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
application/pdf
dc.publisher.none.fl_str_mv Universitat Oberta de Catalunya (UOC)
publisher.none.fl_str_mv Universitat Oberta de Catalunya (UOC)
dc.source.none.fl_str_mv reponame:O2, repositorio institucional de la UOC
instname:Universitat Oberta de Catalunya (UOC)
instname_str Universitat Oberta de Catalunya (UOC)
reponame_str O2, repositorio institucional de la UOC
collection O2, repositorio institucional de la UOC
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869422486894936064
spelling Automatic query expansion for vehicle repair documents through user behaviorGhiringhelli, Juan Carlosnlpembeddingsquery expansionsynonymsplnincorporacionesexpansión de consultassinónimosplnincorporacionsexpansió de consultessinònimsArtificial intelligence -- TFMIntel·ligència artificial -- TFMInteligencia artificial -- TFMThe process of Information Retrieval (IR) by query driven search engines have become an essential part of the customer experience in any data related digital product. The accuracy and completeness of the search results is a matter of great interest and a crucial key performance indicator. An important enhancer for search engines is query expansion Query Expansion (QE), where equivalent search queries Equivalent Search Query (ESQ) are added to the original request to increase recall. ESQs can be discovered using the same tools as synonym discovery given certain considerations, taking advantage of the fact that synonym discovery is a well developed field of Natural Language Processing (NLP) with many available techniques. The motivation for this project is to use the tools available in NLP Machine Learning (ML) to automatically detect ESQs. For this a large sample of logs describing search query customer behavior was used. This data set was obtained from a live enterprise product that publishes repair documents for automobiles. Graph embeddings through an implementation method called node2Vec and vector cosine similarity is the chosen discovery method for the ESQs. The conclusion of the experiment is that while usable search expansion queries are discovered, extra human intervention or further automatic selection is necessary to filter the valuable cases from the large number of found cases, even working within a strict similarity threshold.El proceso de recuperación de información (IR) de los sistemas de búsqueda centrados en consultas se ha vuelto un elemento fundamental para la experiencia del cliente en cualquier producto que almacene datos digitales. La exactitud y completitud de los resultados resulta de gran interés y es uno de los principales indicadores clave del negocio. Expandir la consulta original con términos relacionados es una potente herramienta para incrementar el retorno. Aunque con ciertas consideraciones, las consultas de búsqueda equivalentes pueden ser detectadas utilizando las mismas herramientas que para el descubrimiento de sinónimos, algo que resulta provechoso dado lo prolífico que es este campo del 'Natural Language Processing' (NLP por sus siglas en inglés). La motivación principal del proyecto es la detección de estas consultas por medio de las herramientas propias del NLP. Para esto se utilizó un gran conjunto de datos detallando el comportamiento de usuarios al utilizar sistemas de búsqueda. El conjunto de datos fue extraído del sistema de búsqueda de un producto empresarial que publica documentos de reparación de automóviles. Se seleccionó el método conocido como node2Vec donde se generan grafos embebidos sumada a la similitud dada por el coseno de los vectores para hallar las consultas equivalentes. La conclusión del experimento es que si bien se encontraron consultas equivalentes útiles aún es necesario una intervención de expertos o mejorar la selectividad para una mejor discriminación de las consultas valiosas dentro del gran número de equivalencias encontradas, incluso al utilizar un umbral muy estricto de similitud.El procés de recuperació d'informació (IR) dels sistemes de recerca centrats en consultes s'ha tornat un element fonamental per a l'experiència de client en qualsevol producte que emmagatzemi dades digitals. L'exactitud i completesa dels resultats resulta de gran interès i és un dels principals indicadors clau del negoci. Expandir la consulta original amb termes relacionats és una potent eina per incrementar el retorn. Encara que amb certes consideracions, les consultes de cerca equivalents poden ser detectades utilitzant les mateixes eines que per al descobriment de sinònims, alguna cosa que resulta profitós donat el prolífic que és aquest camp 'Natural Language Processing' (PNL per les sigles en anglès). La motivació principal del projecte és la detecció d'aquestes consultes per mitjà de les eines pròpies de l'NLP. Per això es va utilitzar un gran conjunt de dades detallant el comportament d'usuaris a l'utilitzar sistemes de cerca. El conjunt de dades va ser extret del sistema de recerca d'un producte empresarial que publica documents de reparació d'automòbils. Es va seleccionar el mètode conegut com node2Vec on es generen grafs encastats sumada a la similitud donada pel cosinus dels vectors per trobar les consultes equivalents. La conclusió de l'experiment és que si bé es van trobar consultes equivalents útils encara cal una intervenció d'experts o millorar la selectivitat per a una millor discriminació de les consultes valuoses dins el gran nombre d'equivalències trobades, fins i tot a l'utilitzar un llindar molt estricte de similitud.Universitat Oberta de Catalunya (UOC)Bouayad-Agha, Nadjet202020202020info:eu-repo/semantics/masterThesisapplication/pdfapplication/pdfhttp://hdl.handle.net/10609/121326reponame:O2, repositorio institucional de la UOCinstname:Universitat Oberta de Catalunya (UOC)InglésCC BY-NC-NDhttp://creativecommons.org/licenses/by-nc-nd/3.0/es/info:eu-repo/semantics/openAccessoai:openaccess.uoc.edu:10609/1213262026-05-28T12:42:01Z
score 15,300719

Registros relacionados