¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023

Introducción: La inteligencia artificial (IA) está generando nuevas controversias, oportunidades y riesgos en la educación médica. Este estudio evalúa la capacidad de las versiones de inteligencia artificial (IA) ChatGPT-3 y GPT-4 para responder a las preguntas del examen de acceso a la formación mé...

Descripción completa

Detalles Bibliográficos
Autores: Cerame del Campo, Álvaro, Juaneda, Juan, Estrella Porter, Pablo, Puente, Lucía de la, Navarro, Joaquín, García, Eva, Sánchez, Domingo A., Carrasco, Juan Pablo
Tipo de recurso: artículo
Fecha de publicación:2024
País:España
Institución:Universidad de Murcia
Repositorio:DIGITUM. Depósito Digital Institucional de la Universidad de Murcia
OAI Identifier:oai:digitum.um.es:10201/144121
Acceso en línea:https://doi.org/10.6018/edumed.604091
http://hdl.handle.net/10201/144121
Access Level:acceso abierto
Palabra clave:Inteligencia artificial
Médicos residentes
MIR
Educación Médica
GPT4
ChatGPT-3
Resident physician
Artificial intelligence
Medical education
CDU::6 - Ciencias aplicadas::61 - Medicina
id ES_35cc57687eb8d7a824d1d94bfdf83bee
oai_identifier_str oai:digitum.um.es:10201/144121
network_acronym_str ES
network_name_str España
repository_id_str
spelling ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023Is GPT-4 capable of passing MIR 2023? Comparisonbetween GPT-4 and ChatGPT-3 in the MIR 2022 and 2023examsCerame del Campo, ÁlvaroJuaneda, JuanEstrella Porter, PabloPuente, Lucía de laNavarro, JoaquínGarcía, EvaSánchez, Domingo A.Carrasco, Juan PabloInteligencia artificialMédicos residentesMIREducación MédicaGPT4ChatGPT-3Resident physicianArtificial intelligenceChatGPT-3GPT4Medical educationMIRCDU::6 - Ciencias aplicadas::61 - MedicinaIntroducción: La inteligencia artificial (IA) está generando nuevas controversias, oportunidades y riesgos en la educación médica. Este estudio evalúa la capacidad de las versiones de inteligencia artificial (IA) ChatGPT-3 y GPT-4 para responder a las preguntas del examen de acceso a la formación médica especializada MIR en España, comparando el rendimiento entre las convocatorias de 2022 y 2023. Metodología: Se realizó un estudio descriptivo transversal, utilizando GPT-4 para responder a las210 preguntas del examen MIR 2023, comparando los resultados con los de ChatGPT-3 en el examen MIR 2022. Se utilizó análisis estadístico para determinar el porcentaje de acierto en función de la especialidad, tipo de pregunta y contenido de la misma. Resultados: GPT-4 consiguió 173 aciertos de un total de 210 preguntas, rendimiento superior al deChatGPT-3, que obtuvo 108 aciertos en el examen de la convocatoria anterior. Se observó una mejora notable en especialidades como Reumatología, Pediatría, Geriatría y Oncología, aunque algunos campos como Neumología y Oftalmología mostraron menos progreso o incluso resultados inferiores. Conclusión: GPT-4 demostró un mejor rendimiento en comparación con ChatGPT-3, indicando avances en el procesamiento y análisis de datos por parte de la IA, así como en su comprensión contextual y aplicación de conocimientos médicos. Sin embargo, se enfatiza la importancia de reconocer las limitaciones de la IA y la necesidad de un enfoque crítico en su uso en educación médicartificial intelligence (AI) is generating new controversies, opportunities andchallenges in medical education. This study evaluates the ability of artificial intelligence (AI)versions ChatGPT-3 and GPT-4 to answer MIR exam questions of the entrance exam in thespecialized training in Spain, comparing performance between the 2022 and 2023 exams.Methodology: A descriptive cross-sectional study was conducted, using GPT-4 to answer the 210questions of the MIR 2023 exam, comparing the results with those of ChatGPT-3 in the MIR 2022exam. Statistical analysis was used to determine the percentage of correct answers according tospeciality, type of question, and question content.Results: GPT-4 achieved 173 correct answers out of 210 questions, a higher performance thanChatGPT-3, which obtained 108 correct answers in the previous exam. A marked improvementwas observed in specialties such as Rheumatology, Paediatrics, Geriatrics and Oncology, althoughsome fields such as Pneumology and Ophthalmology showed less progress or even lower results.Conclusion: GPT-4 demonstrated better performance compared to ChatGPT-3, indicatingadvances in AI data processing and analysis, as well as in its contextual understanding andapplication of medical knowledge. However, the article emphasizes the importance of recognisingthe limitations of AI and the need for a critical approach in medical educationUniversidad de Murcia. Servicio de publicaciones202420242024info:eu-repo/semantics/articleapplication/pdf10application/pdfapplication/pdfhttps://doi.org/10.6018/edumed.604091http://hdl.handle.net/10201/144121reponame:DIGITUM. Depósito Digital Institucional de la Universidad de Murciainstname:Universidad de MurciaEspañolInglésSin financiación externa a la Universidadinfo:eu-repo/semantics/openAccessAttribution-NonCommercial-NoDerivatives 4.0 Internacionalhttp://creativecommons.org/licenses/by-nc-nd/4.0/oai:digitum.um.es:10201/1441212026-05-27T12:40:41Z
dc.title.none.fl_str_mv ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
Is GPT-4 capable of passing MIR 2023? Comparisonbetween GPT-4 and ChatGPT-3 in the MIR 2022 and 2023exams
title ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
spellingShingle ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
Cerame del Campo, Álvaro
Inteligencia artificial
Médicos residentes
MIR
Educación Médica
GPT4
ChatGPT-3
Resident physician
Artificial intelligence
ChatGPT-3
GPT4
Medical education
MIR
CDU::6 - Ciencias aplicadas::61 - Medicina
title_short ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
title_full ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
title_fullStr ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
title_full_unstemmed ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
title_sort ¿Es capaz GPT-4 de aprobar el MIR 2023? Comparativa entreGPT-4 y ChatGPT-3 en los exámenes MIR 2022 y 2023
dc.creator.none.fl_str_mv Cerame del Campo, Álvaro
Juaneda, Juan
Estrella Porter, Pablo
Puente, Lucía de la
Navarro, Joaquín
García, Eva
Sánchez, Domingo A.
Carrasco, Juan Pablo
author Cerame del Campo, Álvaro
author_facet Cerame del Campo, Álvaro
Juaneda, Juan
Estrella Porter, Pablo
Puente, Lucía de la
Navarro, Joaquín
García, Eva
Sánchez, Domingo A.
Carrasco, Juan Pablo
author_role author
author2 Juaneda, Juan
Estrella Porter, Pablo
Puente, Lucía de la
Navarro, Joaquín
García, Eva
Sánchez, Domingo A.
Carrasco, Juan Pablo
author2_role author
author
author
author
author
author
author
dc.subject.none.fl_str_mv Inteligencia artificial
Médicos residentes
MIR
Educación Médica
GPT4
ChatGPT-3
Resident physician
Artificial intelligence
ChatGPT-3
GPT4
Medical education
MIR
CDU::6 - Ciencias aplicadas::61 - Medicina
topic Inteligencia artificial
Médicos residentes
MIR
Educación Médica
GPT4
ChatGPT-3
Resident physician
Artificial intelligence
ChatGPT-3
GPT4
Medical education
MIR
CDU::6 - Ciencias aplicadas::61 - Medicina
description Introducción: La inteligencia artificial (IA) está generando nuevas controversias, oportunidades y riesgos en la educación médica. Este estudio evalúa la capacidad de las versiones de inteligencia artificial (IA) ChatGPT-3 y GPT-4 para responder a las preguntas del examen de acceso a la formación médica especializada MIR en España, comparando el rendimiento entre las convocatorias de 2022 y 2023. Metodología: Se realizó un estudio descriptivo transversal, utilizando GPT-4 para responder a las210 preguntas del examen MIR 2023, comparando los resultados con los de ChatGPT-3 en el examen MIR 2022. Se utilizó análisis estadístico para determinar el porcentaje de acierto en función de la especialidad, tipo de pregunta y contenido de la misma. Resultados: GPT-4 consiguió 173 aciertos de un total de 210 preguntas, rendimiento superior al deChatGPT-3, que obtuvo 108 aciertos en el examen de la convocatoria anterior. Se observó una mejora notable en especialidades como Reumatología, Pediatría, Geriatría y Oncología, aunque algunos campos como Neumología y Oftalmología mostraron menos progreso o incluso resultados inferiores. Conclusión: GPT-4 demostró un mejor rendimiento en comparación con ChatGPT-3, indicando avances en el procesamiento y análisis de datos por parte de la IA, así como en su comprensión contextual y aplicación de conocimientos médicos. Sin embargo, se enfatiza la importancia de reconocer las limitaciones de la IA y la necesidad de un enfoque crítico en su uso en educación médica
publishDate 2024
dc.date.none.fl_str_mv 2024
2024
2024
dc.type.none.fl_str_mv info:eu-repo/semantics/article
format article
dc.identifier.none.fl_str_mv https://doi.org/10.6018/edumed.604091
http://hdl.handle.net/10201/144121
url https://doi.org/10.6018/edumed.604091
http://hdl.handle.net/10201/144121
dc.language.none.fl_str_mv Español
Inglés
language_invalid_str_mv Español
Inglés
dc.relation.none.fl_str_mv Sin financiación externa a la Universidad
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
Attribution-NonCommercial-NoDerivatives 4.0 Internacional
http://creativecommons.org/licenses/by-nc-nd/4.0/
eu_rights_str_mv openAccess
rights_invalid_str_mv Attribution-NonCommercial-NoDerivatives 4.0 Internacional
http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.format.none.fl_str_mv application/pdf
10
application/pdf
application/pdf
dc.publisher.none.fl_str_mv Universidad de Murcia. Servicio de publicaciones
publisher.none.fl_str_mv Universidad de Murcia. Servicio de publicaciones
dc.source.none.fl_str_mv reponame:DIGITUM. Depósito Digital Institucional de la Universidad de Murcia
instname:Universidad de Murcia
instname_str Universidad de Murcia
reponame_str DIGITUM. Depósito Digital Institucional de la Universidad de Murcia
collection DIGITUM. Depósito Digital Institucional de la Universidad de Murcia
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869405911672422400
score 15.812429

Similares en LA Referencia