2026-06-07T19:15:54Zhttps://docta.ucm.es/rest/oai/request

oai:docta.ucm.es:20.500.14352/1371542026-06-03T23:51:48Zcom_20.500.14352_14col_20.500.14352_15

Evaluación académica con inteligencia artificial : comparación entre docentes y ChatGPT en Trabajos de Fin de Máster Academic assessment with artificial intelligence : comparison between teachers and ChatGPT in Master's Theses Eusebio Hermira, Sonia Cuberos Vicente, María del Rocío Doquin De Saint Preu, Anna Este estudio se enmarca en el Proyecto I+D «Tecnología y Formación pro Máster (TFproM): formación avanzada para optimizar trabajos de Máster con retroalimentación digital supervisada» (acrónimo TfproM, ref. PR17/24-31946) financiado por Comunidad de Madrid y la Universidad Complutense de Madrid para el fomento de la investigación y la transferencia de tecnología (2023- 2026). RESUMEN: La expansión de la inteligencia artificial ha reconfigurado los modos de enseñar, aprender y evaluar, planteando nuevos retos. Este estudio examina la correspondencia entre las evaluaciones realizadas por docentes universitarios y las generadas por un sistema de inteligencia artificial (ChatGPT) en el contexto de Trabajos de Fin de Máster. Se adopta una metodología mixta, cuantitativa y cualitativa. A partir del análisis de 45 trabajos evaluados por ambos agentes utilizando una rúbrica común, se analizan las diferencias. Los resultados muestran una correlación global moderada y estadísticamente significativa entre ambas formas de evaluación, aunque se detectan discrepancias en los ítems relacionados con la estructura formal y la redacción académica, donde la IA tiende a ser más rigurosa. El análisis cualitativo revela diferencias sustanciales en el enfoque y el contenido de los comentarios: mientras que los docentes priorizan la profundidad conceptual y ofrecen retroalimentación contextualizada, la IA se enfoca en aspectos formales con observaciones más genéricas. Estos hallazgos sugieren que la IA puede ser una herramienta útil en procesos evaluativos, siempre que se complemente con el juicio pedagógico humano. Se discuten las implicaciones de estos resultados para el diseño de sistemas de evaluación mixtos y la formación docente en el uso de tecnologías emergentes. ABSTRACT: The increasing use of artificial intelligence in education has transformed the way we teach, learn and assess, creating new challenges for academic assessment processes. This study examines the correspondence between academic assessments carried out by university teachers and those generated by an artificial intelligence system (ChatGPT) in the context of Master's Theses. Based on an analysis of 45 master’s theses evaluated by both agents using a common 9-item rubric, this study analyses the differences in the scores awarded. The results reveal a moderate and statistically significant overall correlation between the two forms of assessment. However, discrepancies are evident in items related to formal structure and academic writing, where AI tends to be more rigorous. Qualitative analysis reveals substantial differences in the focus and content of the comments: teachers prioritise conceptual depth and offer contextualised feedback, whereas AI focuses on formal aspects and makes more generic observations. These findings suggest that, when complemented by human pedagogical judgement, AI can be a useful tool to support assessment processes. The implications of these results for the design of mixed assessment systems and teacher training in critically using emerging technologies are discussed. 2026-06-03T13:31:49Z 2026-06-03T13:31:49Z 2026 journal article Eusebio-Hermira, Sonia, et al. «Evaluación académica con inteligencia artificial : comparación entre docentes y ChatGPT en Trabajos de Fin de Máster». Revista de Investigación en Educación, vol. 24, n.º 2, 2026, pp. 309-26, https://doi.org/10.35869/reined.v24i2.6942. 1697-5200 10.35869/reined.v24i2.6942 https://hdl.handle.net/20.500.14352/137154 2172-3427 https://doi.org/10.35869/reined.v24i2.6942 https://revistas.uvigo.es/index.php/reined/article/view/6942 https://revistas.uvigo.es/index.php/reined/index https://revistas.uvigo.es/ spa info:eu-repo/grantAgreement/Comunidad de Madrid/Programa de Proyectos de I+D del Plan UCM 2024/PR17/24-31946/ES/Tecnología y Formación pro Máster (TFproM): formación avanzada para optimizar trabajos de Máster con retroalimentación digital supervisada/TFproM http://creativecommons.org/licenses/by-nc-nd/4.0/ open access Attribution-NonCommercial-NoDerivatives 4.0 International Universidad de Vigo