Revisa de Estudios Pedagógicos Contemporáneos

Assessing Teachers' Competence in Artificial Intelligence and Critical Thinking: Development and Validation of the AIFOR-Crit and AIPRE-Crit Questionnaires

Authors

DOI:

https://doi.org/10.5281/zenodo.21249390

Keywords:

Artificial intelligence, Critical thinking, Training, Teachers, Educational technology

Abstract

This study designs and validates two questionnaires to assess teachers’ perceptions and competence in integrating artificial intelligence (AI) and critical thinking (CT) within the teaching and learning processes. They were conducted among teachers with (N=210) and without (N=169) training in AI (AIFOR-Crit and AIPRE-Crit, respectively). Building on a robust theoretical foundation and expert judgement, exploratory and confirmatory factor analyses were conducted. The instruments comprise two and four interpretable dimensions, respectively, which are consistent with the theoretical framework. The findings support their use for the self-assessment of educational practices involving AI and CT, as well as for identifying training needs and conducting comparative educational research in Spanish-speaking contexts.

Downloads

Download data is not yet available.

Author Biographies

  • Rubén Madrigal-Cerezo, Universidad Camilo José Cela; UNIE Universidad. España.

    Director of Placements and lecturer at the Faculty of Education at UNIE University. 

    PhD candidate in Educational Sciences. Camilo José Cela University.

  • Natalia Lara Nieto-Márquez, Universidad Camilo José Cela, España.

    Doctora en Educación, con mención Industrial, por la Universidad Camilo José Cela, donde obtuvo el Premio Extraordinario de Doctorado. Desarrolla su actividad docente en diversos programas de posgrado, entre los que destacan el Máster en Formación del Profesorado y el Máster en Dirección, Innovación y Liderazgo en Centros Educativos. Su investigación se centra en la tecnología educativa, la inteligencia artificial aplicada a la educación, la investigación sobre experiencia de usuario (UX Research), el aprendizaje autorregulado, la metodología de investigación y las metodologías activas, especialmente el aprendizaje basado en juegos y la gamificación. Ha participado en proyectos de investigación sobre inteligencia artificial en educación, como el proyecto WISE, y es autora de publicaciones recientes sobre diseño instruccional, preparación institucional para la integración de la inteligencia artificial en centros educativos y desarrollo de competencias docentes para su implementación en los procesos de enseñanza y aprendizaje.

  • Diana Cembreros Castaño, Universidad Camilo José Cela, España.

    Licenciada en Filología Inglesa y Máster en Lingüística Inglesa, Nuevas Aplicaciones y Comunicación Internacional por la Universidad Complutense de Madrid. Es doctora en Educación y desarrolla su actividad docente en el Máster en Formación del Profesorado y en diferentes titulaciones de grado, donde imparte asignaturas relacionadas con la lengua inglesa, la didáctica de las lenguas extranjeras y la tecnología educativa. Su principal línea de investigación se centra en la lingüística computacional y sus aplicaciones en el ámbito educativo, con especial interés en el uso de la inteligencia artificial para la enseñanza y el aprendizaje de lenguas. Su producción científica reciente aborda cuestiones vinculadas a la preparación de los centros educativos para la incorporación de la inteligencia artificial, el desarrollo de modelos de lenguaje aplicados a la predicción de preguntas en pruebas de acceso a la universidad, los sistemas de identificación automática de cognados entre el inglés y el español, y la formación del profesorado para la integración de la inteligencia artificial en los procesos de enseñanza y aprendizaje.

References

Bernal-Garzón, E. (2020). Aportes a la consolidación del conectivismo como enfoque pedagógico para el desarrollo de procesos de aprendizaje. Revista Innova Educación, 2(3), 394-412. https://doi.org/10.35622/j.rie.2020.03.002

Bisquerra, R. (2019). Metodología de la investigación educativa (6.a ed.). La Muralla.

Bruner, J. (1996). The culture of education. Harvard university press.

Castro-Martín, B., Escribano Barreno, C., Silva-Lorente, I., & Cid-García, H. (2025). Análisis de las concepciones sobre el proceso de evaluación de la enseñanza y el aprendizaje en el profesorado español. European Public & Social Innovation Review, 10, 1-19. https://doi.org/10.31637/epsir-2025-497

Chiu, T. K. F. (2024). The impact of Generative AI (GenAI) on practices, policies and research direction in education: A case of ChatGPT and Midjourney. Interactive Learning Environments, 32(10), 6187-6203. https://doi.org/10.1080/10494820.2023.2253861

Chiu, T. K. F., Çoban, M., Sanusi, I. T., & Ayanwale, M. A. (2025). Validating student AI competency self-efficacy (SAICS) scale and its framework. Educational Technology Research and Development, 73(4), 2785-2807. https://doi.org/10.1007/s11423-025-10512-y

Choi, Y. (2025). Integrating ChatGPT into the design of 5E-Based earth science lessons. Education Sciences, 15(7), 815. https://doi.org/10.3390/educsci15070815

Cosgrove, J., & Cachia, R. (2025). DigComp 3.0 European Digital Competence Framework. Publications Office of the European Union. https://doi.org/10.2797/7270983

Dange, J.K., & Siddaraju, J. (2020). Role of teacher training program in enhancing quality education. International Journal of Education, Culture and Society, 5(6), 137. https://doi.org/10.11648/j.ijecs.20200506.14

Decreto 65/2022, de 20 de julio, del Consejo de Gobierno, por el que se establecen para la Comunidad de Madrid la ordenación y el currículo de la Educación Secundaria Obligatoria, 176 1 (2022). https://www.bocm.es/eli/es-md/d/2022/07/20/65/con

Delval, J. (2001). Hoy todos son constructivistas. Educere, 5 (15), 353-359. http://www.redalyc.org/articulo.oa?id=35651520

Dewey, J. (2007). Cómo pensamos. La relación entre pensamiento reflexivo y proceso educativo (M. A. Galmarini, Trad.). Paidós.

Díaz-Suárez, V., Martín-Paciente, M., & Travieso-González, C. M. (2025). Exploring the impact of digital platforms on teaching practices: Insights into competence development and openness to active methodologies. Applied System Innovation, 8(3), 64. https://doi.org/10.3390/asi8030064

Dumitru, D., & Halpern, D. F. (2023). Critical thinking: Creating job-proof skills for the future of work. Journal of Intelligence, 11(10), 194. https://doi.org/10.3390/jintelligence11100194

Ennis, R. (1991). Critical thinking: A streamlined conception. Teaching Philosophy, 14(4), 5-24. https://doi.org/10.1057/9781137378057_2

Escobar-Pérez, J., & Cuervo-Martínez, Á. (2008). Validez de contenido y juicio de expertos: Una aproximación a su utilización. Avances en Medición, 6, 27-36. https://gc.scalahed.com/recursos/files/r161r/w25645w/Juicio_de_expertos_u4.pdf

European Commission: European Education and Culture Executive Agency. (2025). The structure of European education systems. Publications Office of the European Union. https://doi.org/10.2797/7270983

Facione, P. (2007). Pensamiento Crítico: ¿Qué es y por qué es importante? Insight assessment, 23(1), 22-56. https://short.do/wEiWyH

Gabarda Méndez, V., Pardo Baldoví, M. I., Sánchez Cruz, M., & Marín Suelves, D. (2025). El docente digital: Influencia de la formación inicial y permanente en la competencia digital docente. IJERI: International Journal of Educational Research and Innovation, (23), 1-13. https://doi.org/10.46661/ijeri.10769

Galindo-Domínguez, H., Bezanilla, M.-J., Campo, L., Fernández-Nogueira, D. y Poblete, M. (2023). A teachers’ based approach to assessing the perception of critical thinking in Education university students based on their age and gender. Frontiers in Education, 8, 1127705. https://doi.org/10.3389/feduc.2023.1127705

Graça, V., Quadros-Flores, P., & Ramos, A. (2021). The challenges of initial teacher training. International Journal of Emerging Technologies in Learning (iJET), 16(18), 85. https://doi.org/10.3991/ijet.v16i18.24237

Guevara, J. (2024). Desarrollo de competencias digitales docentes y su trascendencia en los procesos educativos. Chakiñan, Revista de ciencias sociales y humanidades, (24), 97-109. https://doi.org/10.37135/chk.002.24.05

Hernández Suárez, C. A. (2016). Competencias TIC para el desarrollo profesional docente en educación básica. Praxis & Saber, 7(14), 41. https://doi.org/10.19053/22160159.5217

Holmes, W., Porayska-Pomsta, K., Holstein, K., Sutherland, E., Baker, T., Shum, S. B., Santos, O. C., Rodrigo, M. T., Cukurova, M., Bittencourt, I. I., &

Koedinger, K. R. (2022). Ethics of AI in education: Towards a community-wide framework. International Journal of Artificial Intelligence in Education, 32(3), 504-526. https://doi.org/10.1007/s40593-021-00239-1

Hong, H., Vate-U-Lan, P., & Viriyavejakul, C. (2025). Cognitive Offload Instruction with Generative AI: A Quasi‑Experimental Study on Critical Thinking Gains in English Writing. Forum for Linguistic Studies, 7(7), 325–334. https://doi.org/10.30564/fls.v7i7.10072

Instituto Nacional de Tecnologías Educativas y de Formación del Profesorado. (2025). Repositorio de recursos. https://n9.cl/v0ke1

Kılıçkaya, F., & Kic-Drgas, J. (2025). Pre-service language teachers’ experiences and perceptions of integrating generative AI in practicum-based lesson study. Humanities and Social Sciences Communications, 12(1), 1478. https://doi.org/10.1057/s41599-025-05715-w

Miao, F., & Cukurova, M. (2025). Marco de competencias para docentes en materia de IA. UNESCO. https://doi.org/10.54675/AQKZ9414

Moşteanu, N. R. (2022). Improving quality of online teaching Finance and Business Management using artificial intelligence and backward design. Quality - Access to Success, 23(187). https://doi.org/10.47750/QAS/23.187.01

Murillo-Ligorred, V., Ramos-Vallecillo, N., Covaleda, I., & Fayos, L. (2023). Knowledge, integration and scope of deepfakes in arts education: The development of critical thinking in postgraduate students in Primary Education and Master’s Degree in Secondary Education. Education Sciences, 13(11), 1073. https://doi.org/10.3390/educsci13111073

Organización de las Naciones Unidas para la Educación, la Ciencia y la Cultura. (2023). Currículos de IA para la enseñanza preescolar, primaria y secundaria: Un mapeo de los currículos de IA aprobados por los gobiernos. https://unesdoc.unesco.org/ark:/48223/pf0000380602_spa

Pallejà, I., Aguayo-Mauri, S., Fonseca, D., Iglesias, A., & Canaleta, X. (2026). Technological profiles of primary and secondary school teachers: A data-driven approach to AI training design. Universal Access in the Information Society, 25(2), 46. https://doi.org/10.1007/s10209-026-01313-y

Paul, R., & Elder, L. (2019). A guide for educators to critical thinking competency standards: Standards, principles, performance indicators, and outcomes with a critical thinking master rubric. The Foundation for Critical Thinking.

Real Decreto 217/2022, de 29 de marzo, por el que se establece la ordenación y las enseñanzas mínimas de la Educación Secundaria Obligatoria (2022). https://www.boe.es/buscar/act.php?id=BOE-A-2022-4975

Revuelta, E. M., Guijarro, A. R., & Fuentes, G. V. (2024). Analysis and perception of comics journalism for critical thinking development in university students of Communication. Palabra Clave, 27(3), e2733. https://doi.org/10.5294/pacla.2024.27.3.3

Rivas, S. F., & Saiz, C. (2012). Validación y propiedades psicométricas de la prueba de pensamiento crítico PENCRISAL. Revista Electrónica de Metodología Aplicada, 17(1), 18-34. https://hdl.handle.net/10366/157532

Rodríguez, N. C., Lorenzo-Rial, M.-A., & Rodríguez, U. P. (2022). Competencia digital docente para crear contenidos: Autopercepción del profesorado en formación didáctico-científica de Galicia (España). Educação e Pesquisa, 48, e243510. https://doi.org/10.1590/s1678-4634202248243510

Sánchez-Ruiz, L. M., Moll-López, S., Nuñez-Pérez, A., Moraño-Fernández, J. A., & Vega-Fleitas, E. (2023). ChatGPT challenges blended learning methodologies in engineering education: A case study in mathematics. Applied Sciences (Switzerland), 13(10), 6039. https://doi.org/10.3390/app13106039

Siemens, G. (2005). Connectivism: A learning theory for the digital age. International Journal of Instructional Technology and Distance Learning, 2(1), 3–10. https://www.itdl.org/Journal/Jan_05/Jan_05.pdf

Sireci, S., & Faulkner-Bond, M. (2014). Validity evidence based on test content. Psicothema, 1(26), 100-107. https://doi.org/10.7334/psicothema2013.256

Stigliano, D., & Gentile, D. (2013). La enseñanza desde los enfoques cognitivistas. Seis aportes metodológicos para la construcción de buenos aprendizajes. Metodología de la Ciencia, 4(1), 2-22. https://altior-edunube.com/wp-content/uploads/2023/04/l7.pdf

Stryker, C., & Kavlakoglu, E. (2024). ¿Qué es la inteligencia artificial (IA)? https://www.ibm.com/es-es/think/topics/artificial-intelligence

Tegero, M., & Mabini, J. (2025). AI chatbot simulations in teacher training: Core teaching competencies developed through virtual practice. Journal of Teaching and Learning, 19(4). https://doi.org/10.22329/jtl.v19i4.10087

Tsopra, R., Peiffer-Smadja, N., Charlier, C., Campeotto, F., Lemogne, C., Ruszniewski, P., Vivien, B., & Burgun, A. (2023). Putting undergraduate medical students in AI-CDSS designers’ shoes: An innovative teaching method to develop digital health critical thinking. International Journal of Medical Informatics, 171, 104980. https://doi.org/10.1016/j.ijmedinf.2022.104980

Vendrell-Morancho, M., & Fernández-Díaz, M. J. (2024). Diseño y validación de CritiTest, un instrumento para evaluar el pensamiento crítico en estudiantes universitarios. Revista de Investigación en Educación, 22(3), 586-603. https://doi.org/10.35869/reined.v22i3.5767

Vermunt, J. D., & Verloop, N. (1999). Congruence and friction between learning and teaching. Learning and Instruction, 9(3), 257-280. https://doi.org/10.1016/S0959-4752(98)00028-0

Zagami, J. (2025). Virtual maker spaces: Enhancing student engagement through extended reality in the Co-creation of learning spaces. Computers & Education: X Reality, 7, 100115. https://doi.org/10.1016/j.cexr.2025.100115

Zambonino Torres, S. C., Cisneros Basurto, W. E., Vega Padilla, F. R., Ruiz-Ruiz, I. N., & Erazo Molina, P. M. (2025). Digital skills and sustainability in teacher training: The use of ai for continuous improvement. Data and Metadata, 4, 207. https://doi.org/10.56294/dm2025207

Downloads

Published

2026-07-07

Issue

Vol. 2 No. 2 (2026)

Section

Investigaciones científicas

License

Copyright (c) 2026 Rubén Madrigal-Cerezo, Dra. Natalia Lara Nieto-Márquez, Dra. Diana Cembreros Castaño (Autor/a)

Creative Commons License

This work is licensed under a Creative Commons Attribution 4.0 International License.

This journal provides immediate open access to all its content, following the principle that making research freely available to the public fosters a wider global exchange of knowledge. In line with this commitment, the articles published in the Revista de Estudios Pedagógicos Contemporáneos are licensed under a Creative Commons CC BY 4.0 — Attribution International License, which allows sharing and adaptation of the content, provided appropriate credit is given to the authors and the journal.

How to Cite

Madrigal-Cerezo, R., Lara Nieto-Márquez, N., & Cembreros Castaño, D. (2026). Assessing Teachers’ Competence in Artificial Intelligence and Critical Thinking: Development and Validation of the AIFOR-Crit and AIPRE-Crit Questionnaires. The Journal of Contemporary Pedagogical Studies , 2(2), 1-21. https://doi.org/10.5281/zenodo.21249390

Similar Articles

1-10 of 25

You may also start an advanced similarity search for this article.