Development and validation of a questionnaire to assess students’ perceptions of EMI degree programmes

Abstract

Given the growing popularity of English-taught degree programs in higher education and the need to evaluate their effectiveness, this study aimed to develop and validate a questionnaire to assess students’ perceptions of such programmes. Specifically, four scales were constructed to measure perceptions of students’ language development, academic achievement, use of English in class, and teaching quality. The questionnaire was administered to a sample of 256 students enrolled in different English-taught degree programmes at Spanish universities. Confirmatory factor analysis (CFA) was employed to assess the psychometric properties of the scales. After refinement, the four scales demonstrated strong fit indices and solid discriminant validity. Unlike previous studies that often lack explicit reporting of instrument validity, our research provides a reliable and valid tool for researchers to explore students' perceptions of EMI, for lecturers to improve their teaching practices, and for policymakers to inform and evaluate educational reforms.

Dada la creciente popularidad de los programas de grado impartidos en inglés en la educación superior y la necesidad de evaluar su eficacia, este estudio tuvo como objetivo desarrollar y validar un cuestionario para evaluar las percepciones de los estudiantes sobre dichos programas. Específicamente, se construyeron cuatro escalas para medir las percepciones de los estudiantes sobre el desarrollo del idioma, el rendimiento académico, el uso del inglés en clase y la calidad de la enseñanza. El cuestionario se aplicó a una muestra de 256 estudiantes matriculados en diferentes programas de grado impartidos en inglés en universidades españolas. Se empleó un análisis factorial confirmatorio para evaluar las propiedades psicométricas de las escalas. Tras un proceso de refinamiento, las cuatro escalas demostraron índices de ajuste sólidos y una válida discriminación entre constructos. A diferencia de estudios previos que a menudo carecen de un reporte explícito sobre la validez de los instrumentos, nuestra investigación proporciona una herramienta confiable y válida para que los investigadores exploren las percepciones de los estudiantes sobre estos programas, los docentes mejoren sus prácticas de enseñanza y los responsables de políticas informen y evalúen reformas educativas.