Análisis factorial multinivel aplicado a las encuestas de evaluación de la actividad docente universitaria

Abstract

A lo largo de las décadas, las encuestas estudiantiles o SET (Student Evaluations of Teaching, por sus siglas en inglés) han sido la principal herramienta para la evaluación docente, si bien su eficacia ha sido cuestionada debido a limitaciones teóricas, prácticas y posibles sesgos (Kreitzer y Sweet-Cushman, 2022). Esta tesis destaca la falta de claridad en la interpretación de los resultados y la desconexión entre la satisfacción estudiantil y la calidad de la enseñanza (Stark y Freishtat, 2014; Uttl et al., 2017). Un problema práctico y metodológico radica en el tratamiento de los datos, el cual habitualmente se realiza sin contemplar la naturaleza jerárquica o anidada de estos (Toland y De Ayala, 2005). Si bien existen propuestas de análisis multinivel más apropiadas (Rampichini et al., 2004), la realidad muestra que este tipo de procedimientos no se aplican, entre otras razones debido a dificultades técnicas o metodológicas. Situación que afecta a las estimaciones realizadas, así como a la comprensión de las propiedades psicométricas de los instrumentos utilizados...Over the decades, student surveys or SETs (Student Evaluations of Teaching) have been the main tool of teacher evaluation, but their effectiveness has been questioned due to theoretical and practical limitations and biases (Kreitzer y Sweet-Cushman, 2022). This thesis highlights the lack of clarity in the interpretation of results and the disconnection between student satisfaction and the quality of teaching (Stark y Freishtat, 2014; Uttl et al., 2017). A practical and methodological problem detected refers to the processing of data, which is usually carried out without considering the hierarchical or nested nature of the data (Toland y De Ayala, 2005). Although multilevel methodological solutions have been developed (Rampichini et al., 2004), reality shows that this type of procedure is not used, among other reasons, due to technical or methodological difficulties, situation that affects the estimates made, as well as the understanding of the psychometric properties of the instruments used...