Comparative analysis of open source large language models

Treballs finals del Màster de Fonaments de Ciència de Dades, Facultat de matemàtiques, Universitat de Barcelona. Curs: 2023-2024. Tutor: Daniel Ortiz Martínez

Detalles Bibliográficos
Autor: Fayos i Pérez, Victor
Tipo de recurso: tesis de maestría
Fecha de publicación:2024
País:España
Institución:Universidad de Barcelona
Repositorio:Dipòsit Digital de la UB
OAI Identifier:oai:diposit.ub.edu:2445/215162
Acceso en línea:https://hdl.handle.net/2445/215162
Access Level:acceso abierto
Palabra clave:Tractament del llenguatge natural (Informàtica)
Sistemes informàtics interactius
Bots (Programes d'ordinador)
Treballs de fi de màster
Natural language processing (Computer science)
Interactive computer systems
Internet bots (Computer software)
Master's thesis
id ES_7f97c7ca6caaf90175cf7fd97f68665c
oai_identifier_str oai:diposit.ub.edu:2445/215162
network_acronym_str ES
network_name_str España
repository_id_str
spelling Comparative analysis of open source large language modelsFayos i Pérez, VictorTractament del llenguatge natural (Informàtica)Sistemes informàtics interactiusBots (Programes d'ordinador)Treballs de fi de màsterNatural language processing (Computer science)Interactive computer systemsInternet bots (Computer software)Master's thesisTreballs finals del Màster de Fonaments de Ciència de Dades, Facultat de matemàtiques, Universitat de Barcelona. Curs: 2023-2024. Tutor: Daniel Ortiz Martínez[en] This study investigates the potential of using smaller, locally hosted language models (LLMs) to perform specific tasks traditionally handled by large LLMs, such as OpenAI’s Chat-GPT 3.5. With the growing integration of LLMs in corporate environments, concerns over costs, data privacy, and security have become prominent. By focusing on question answering and text summarization tasks, we compare the performance of several smaller models, including Flan T5 XXL, Phi 3 Mini, and Yi 1.5, against Chat-GPT 3.5. As the two experiments show, one on question answering and the second one on text summarization, this tasks can be done by the tested models at the same level than the state of the art Chat-GPT 3.5. Concluding that depending the use intended for the LLM one of the different models could best fit as the variety in the response structure and verbosity highly depends on the model selected.Ortiz Martínez, DanielArpírez Vega, Julio César2024info:eu-repo/semantics/masterThesisapplication/pdfhttps://hdl.handle.net/2445/215162Màster Oficial - Fonaments de la Ciència de Dadesreponame:Dipòsit Digital de la UBinstname:Universidad de BarcelonaIngléscc-by-nc-nd (c) Victor Fayos i Pérez, 2024codi: GPL (c) Victor Fayos i Pérez, 2024http://creativecommons.org/licenses/by-nc-nd/3.0/es/http://www.gnu.org/licenses/gpl-3.0.ca.htmlinfo:eu-repo/semantics/openAccessoai:diposit.ub.edu:2445/2151622026-05-27T06:46:51Z
dc.title.none.fl_str_mv Comparative analysis of open source large language models
title Comparative analysis of open source large language models
spellingShingle Comparative analysis of open source large language models
Fayos i Pérez, Victor
Tractament del llenguatge natural (Informàtica)
Sistemes informàtics interactius
Bots (Programes d'ordinador)
Treballs de fi de màster
Natural language processing (Computer science)
Interactive computer systems
Internet bots (Computer software)
Master's thesis
title_short Comparative analysis of open source large language models
title_full Comparative analysis of open source large language models
title_fullStr Comparative analysis of open source large language models
title_full_unstemmed Comparative analysis of open source large language models
title_sort Comparative analysis of open source large language models
dc.creator.none.fl_str_mv Fayos i Pérez, Victor
author Fayos i Pérez, Victor
author_facet Fayos i Pérez, Victor
author_role author
dc.contributor.none.fl_str_mv Ortiz Martínez, Daniel
Arpírez Vega, Julio César
dc.subject.none.fl_str_mv Tractament del llenguatge natural (Informàtica)
Sistemes informàtics interactius
Bots (Programes d'ordinador)
Treballs de fi de màster
Natural language processing (Computer science)
Interactive computer systems
Internet bots (Computer software)
Master's thesis
topic Tractament del llenguatge natural (Informàtica)
Sistemes informàtics interactius
Bots (Programes d'ordinador)
Treballs de fi de màster
Natural language processing (Computer science)
Interactive computer systems
Internet bots (Computer software)
Master's thesis
description Treballs finals del Màster de Fonaments de Ciència de Dades, Facultat de matemàtiques, Universitat de Barcelona. Curs: 2023-2024. Tutor: Daniel Ortiz Martínez
publishDate 2024
dc.date.none.fl_str_mv 2024
dc.type.none.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
dc.identifier.none.fl_str_mv https://hdl.handle.net/2445/215162
url https://hdl.handle.net/2445/215162
dc.language.none.fl_str_mv Inglés
language_invalid_str_mv Inglés
dc.rights.none.fl_str_mv cc-by-nc-nd (c) Victor Fayos i Pérez, 2024
codi: GPL (c) Victor Fayos i Pérez, 2024
http://creativecommons.org/licenses/by-nc-nd/3.0/es/
http://www.gnu.org/licenses/gpl-3.0.ca.html
info:eu-repo/semantics/openAccess
rights_invalid_str_mv cc-by-nc-nd (c) Victor Fayos i Pérez, 2024
codi: GPL (c) Victor Fayos i Pérez, 2024
http://creativecommons.org/licenses/by-nc-nd/3.0/es/
http://www.gnu.org/licenses/gpl-3.0.ca.html
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv Màster Oficial - Fonaments de la Ciència de Dades
reponame:Dipòsit Digital de la UB
instname:Universidad de Barcelona
instname_str Universidad de Barcelona
reponame_str Dipòsit Digital de la UB
collection Dipòsit Digital de la UB
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869411836053422080
score 15,811543