Validación de contenido de un guion de entrevista sobre el uso de la evaluación docente en instituciones de educación superior
Resumen
El uso de la evaluación docente con fines de mejora es una cuestión que se debate, especialmente cuando la orientación predominante está dirigida a la toma de decisiones administrativas. Este estudio tuvo como propósito recopilar evidencia que respalde la validez de contenido de un guion de entrevista diseñado para examinar cómo el profesorado de educación superior utiliza la evaluación docente. Por medio de un enfoque descriptivo no experimental, se validó el guion de entrevista mediante el juicio de cinco expertos. El consenso entre los especialistas se determinó con el coeficiente V de Aiken, estableciendo 0.50 como punto de corte, obteniendo puntuaciones promedio de 0.74 para Claridad, 0.90 para Coherencia y 0.86 para Relevancia. Además, los jueces sugirieron cambios en la redacción, la inclusión o eliminación de preguntas. Se ajustaron diez preguntas y se añadieron ocho nuevas, lo que respalda la validez de contenido del guion y su adopción para investigar el uso de la evaluación docente en educación superior.
Descargas
Citas
American Educational Research Association [AERA], American Psychological Association [APA] y National Council on Measurement in Education [NCME]. (2018). Estándares para pruebas educativas y psicológicas (M. Lieve, trad.). American Educational Research Association [AERA].
Arbesú, M. y García Garduño, J. (2017). La evaluación docente en jaque: La visión de los funcionarios universitarios. Revista Iberoamericana de Evaluación Educativa, 10(2), 171-185. https://doi.org/10.15366/riee2017.10.2.009
Berk, R. (2018). Start spreading the news: Use multiple sources of evidence to evaluate teaching. The Journal of Faculty Development, 32(1), 73-81. https://www.schreyerinstitute.psu.edu/pdf/UseMultipleSourcesSRs_Berk_JFacDev1-11-2018.pdf
Brinkmann, S. (2023). Qualitative Interviewing: Conversational Knowledge Through Research Interviews (2.ª ed.). Oxford University Press. https://doi.org/10.1093/oso/9780197648186.001.0001
Brinkmann, S. y Kvale, S. (2015). InterViews: Learning the Craft of Qualitative Research Interviewing (3rd ed.). SAGE Publications.
Darwin, S. (2017). What contemporary work are student ratings actually doing in higher education? Studies in Educational Evaluation, 54, 13-21.
https://doi.org/10.1016/j.stueduc.2016.08.002
Debroy, A., Ingole, A. y Mudey, A. (2019). Teachers' perceptions on student evaluation of teaching as a tool for faculty development and quality assurance in medical education. Journal of Education and Health Promotion, 8(218), 1-7. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC6905290
Dervenis, C., Fitsilis, P. y Iatrellis, O. (2022). A review of research on teacher competencies in higher education. Quality Assurance in Education, 30(2), 199-220. https://doi.org/10.1108/QAE-08-2021-0126
Díaz Barriga, F. (2022). Evaluación de la docencia: más allá de un entramado técnico-instrumental. En M. I., Arbesú (coord.), Evaluación de la docencia universitaria. Experiencias transcurridas y retos por enfrentar (pp. 132-178). Newton Edición y Tecnología Educativa.
Elizalde, L., Olvera, B. y Bezies, P. (2017). Metaevaluación: herramien¬ta para la valoración integral del proceso evaluativo docente de la UAEH. En E.
Luna y M. Rueda (eds.), Experiencias de evaluación de la docencia en Iberoamérica (pp. 257-278). UABC. https://ompeditorial.uabc.mx/index.php/deu/catalog/book/38
Escobar, J. y Cuervo, A. (2008). Validez de contenido y juicio de expertos: Una aproximación a su utilización. Avances en Medición, 6(1), 27-36. https://gc.scalahed.com/recursos/files/r161r/w25645w/Juicio_de_expertos_u4.pdf
Flodén, J. (2017). The impact of student feedback on teaching in higher education. Assessment & Evaluation in Higher Education, 42(7), 1054-1068. https://doi.org/10.1080/02602938.2016.1224997
García Garduño, J. (2022). La investigación sobre evaluación docente: incertitudes, cuestionamientos y alternativas a su empleo. En M. I., Arbesú (coord.), Evaluación de la docencia universitaria (pp. 94-131). Newton Edición y Tecnología Educativa.
Gómez, L. y Valdés, M. (2019). La evaluación del desempeño docente en la educación superior. Propósitos y Representaciones, 7(2), 479-515. http://dx.doi.org/10.20511/pyr2019.v7n2.255
Harrison, R., Meyer, L., Rawstorne, P., Razee, H., Chitkara, U., Mears, S. y Balasooriya, C. (2022). Evaluating and enhancing quality in higher education teaching practice: A meta-review. Studies in Higher Education, 47(1), 80-96. https://doi.org/10.1080/03075079.2020.1730315
Hazi, H. (2022). Reconsidering the dual purposes of teacher evaluation. Teachers and Teaching, 28(7), 811-825. https://doi.org/10.1080/13540602.2022.2103533
Hernández, A. y Luna, E. (2023). Meta-evaluation of the teaching evaluation system of a Mexican public university. Education Policy Analysis Archives, 31. https://doi.org/10.14507/epaa.31.7501
Ibarra-Piza, S., Segredo-Santamaría, S., Juárez-Hernández, L. y Tobón, S. (2018). Estudio de validez de contenido y confiabilidad de un instrumento para evaluar la metodología socioformativa en el diseño de cursos. Revista Espacios, 39(53), 1-10. https://www.revistaespacios.com/cited2017/cited2017-24.html
Lohman, L. (2021). Evaluation of university teaching as sound performance appraisal. Studies in Educational Evaluation, 70, 1-11. https://doi.org/10.1016/j.stueduc.2021.101008
Luna, E. y Rueda, M. (2021). Contribuciones de la Red Iberoamericana de Investigadores sobre la Evaluación de la Docencia (RIIED). En N. Fernández, M. Nosiglia, C. Pérez y M. Rueda (Eds.), Evaluación, desarrollo, innovación y futuro de la docencia universitaria. De la Red Iberoamericana de Investigadores en Evaluación de la Docencia (pp. 18-71). Editorial Fedun.
Merino Soto, C. (2023). Coeficientes V de Aiken: diferencias en los juicios de validez de contenido. MHSalud, 20(1), 23-32. https://doi.org/10.15359/mhs.20-1.3
Moscoso, M. y Merino Soto, C. (2017). Construcción y validez de contenido del Inventario de Mindfulness y Ecuanimidad: Una perspectiva iberoamericana. Mindfulness & Compassion, 2(1), 9-16. http://dx.doi.org/10.1016/j.mincom.2017.01.001
Mula Falcón, J., Cruz González, C. y Caballero, K. (2021). Los sistemas de evaluación docente y su impacto en el profesorado universitario: una revisión sistemática. Revista de Docencia Universitaria, 19(1), 112–129. https://doi.org/10.4995/redu.2021.15841
Muñiz, J. (2019). Diez pasos para la construcción de un test. Psicothema, 31(1), 7-16. https://www.psicothema.com/pdf/4508.pdf
Newton, G., Poung, K., Laila, A., Bye, Z., Bettger, W., Cottenie, K., Dawson, J., Graether, S., Jacobs, S., Murrant, C. y Zettel, J. (2019). Perception of biology instructors on using student evaluations to inform their teaching. International Journal of Higher Education, 8(1), 133-147. https://doi.org/10.5430/ijhe.v8n1p133
Nyimbili, F. y Nyimbili, L. (2024). Types of purposive sampling techniques with their examples and application in qualitative research studies. British Journal of Multidisciplinary and Advanced Studies, 5(1), 90–99. https://doi.org/10.37745/bjmas.2022.0419
Ory, J. C. (2000). Teaching evaluation: Past, present, and future. New Directions for Teaching and Learning, 2000(83), 13–18. https://doi.org/10.1002/tl.8302
Padilla-Hernández, A., Gámiz-Sánchez, V. y Romero-López, M. (2019). Validación del contenido de un guion de entrevista sobre la competencia digital docente en Educación Superior. Revista Ibérica de Sistemas y Tecnologías de Información, (32), 1-16. https://dialnet.unirioja.es/servlet/articulo?codigo=7037058
Penfield, R. y Giacobbi, P. (2004). Applying a score confidence interval to Aiken's item content-relevance index, Measurement in Physical Education and Exercise Science, 8(4), 213-225. https://doi.org/10.1207/s15327841mpee0804_3
Prieto, J., Guede-Cid, R., Cid-Cid, A. I. y Leguey, S. (2023). Major increases in teachers’ performance evaluations: Evidence from student evaluation of teaching surveys. Tuning Journal for Higher Education, 10(2), 105-125. https://doi.org/10.18543/tjhe.2299
Ramos, L. y Rueda, M. (2020). Rasgos distintivos de las evaluaciones formativas para el desempeño docente. Perfiles Educativos, 42(169), 144-159. https://doi.org/10.22201/iisue.24486167e.2020.169.59287
Reyes, E., Luna, E. y Caso, J. (2020). Evidencias de validez del Cuestionario de Evaluación de la Competencia Docente Universitaria. Perfiles Educativos, 42(169), 106-122. https://doi.org/10.22201/iisue.24486167e.2020.169.58931
Sánchez-Guardiola, C., Aguaded, E. y Rodríguez-Sabiote, C. (2021). Content validation of a semi-structured interview to analyze the management of suffering. International Journal of Environmental Research and Public Health, 18(21), 1-24. https://doi.org/10.3390/ijerph182111393
Santos del Real, A. (2012). Evaluación docente. Educación química, 23(2), 200-204. https://www.scielo.org.mx/scielo.php?script=sci_arttext&pid=S0187-893X2012000200005
Spooren, P. (2021). Improving the quality of teaching. En M. Shah, J. Richardson, A. Pabel, y B. Oliver (Eds.), Assessing and Enhancing Student Experience in Higher Education (pp. 159-190). Springer International Publishing.
Ulker, N. (2021). How can student evaluations lead to improvement of teaching quality? A cross-national analysis. Research in Post-Compulsory Education, 26(1), 19-37. https://doi.org/10.1080/13596748.2021.1873406
Esta obra está bajo licencia internacional Creative Commons Reconocimiento 4.0.
Con el propósito de promover el desarrollo y divulgación de la investigación en educación en América Latina, en La Revista Iberoamericana para la Investigación y el Desarrollo Educativo (RIDE) se adhirió a la Iniciativa de Acceso Abierto de Budapest, por lo que se identifica como una publicación de acceso abierto. Esto significa que cualquier usuario puede leer el texto completo de los artículos, imprimirlos, descargarlos, copiarlos, enlazarlos, distribuirlos y usar los contenidos para otros fines. Las licencias Creative Cummons, permiten especificar los derechos de uso de una revista de acceso abierto disponible en Internet de tal manera que los usuarios conocen las reglas de publicación.
Los autores/as que publiquen en esta revista aceptan las siguientes condiciones:
Los autores/as conservan los derechos de autor y ceden a la revista el derecho de la primera publicación, con el trabajo registrado con la licencia de atribución de Creative Commons, que permite a terceros utilizar lo publicado siempre que mencionen la autoría del trabajo y a la primera publicación en esta revista.
Los autores/as pueden realizar otros acuerdos contractuales independientes y adicionales para la distribución no exclusiva de la versión del artículo publicado en esta revista (p. ej., incluirlo en un repositorio institucional o publicarlo en un libro) siempre que indiquen claramente que el trabajo se publicó por primera vez en esta revista.
Se permite y recomienda a los autores/as a publicar su trabajo en Internet (por ejemplo en páginas institucionales o personales) antes y durante el proceso de revisión y publicación, ya que puede conducir a intercambios productivos y a una mayor y más rápida difusión del trabajo publicado
