Carla - Tema 4

En la materia de “As linguas estranxeiras no contexto español e internacional" en el tema "O ensino-aprendizaxe e certificación de linguas estranxeiras polas institucións internacionais” realizamos una breve investigación sobre distintas instituciones internacionales encargadas de la evaluación y certificación de los niveles de dominio de lenguas. Dentro de esta lista encontramos instituciones como Alte, Ealta, ETS, Eaquals, Cercles y Acles, entre otras. En nuestro caso investigamos la institución Educational Testing Service (ETS).

Fuente: ETS

Educational Testing Service es la mayor organización privada de evaluación sin ánimo de lucro. Tiene su sede en Nueva Jersey y más de 200 filiales por todo el mundo. Gran parte de las pruebas y libros son de su propiedad, como es el caso de TOEFL, TOEIC, HiSET, PRAXIS… El objetivo de esta institución es promover evaluaciones fiables, válidas y justas, además de promover la investigación centrada en la educación de lenguas y el desarrollo profesional. Esta institución tiene clientes de todo tipo, desde individuos hasta instituciones educativas y agencias gubernamentales, además de colaborar con un gran número de empresas e instituciones centradas en la elaboración de material y recursos educativos. Esta institución está encargada del desarrollo, la administración y la calificación de más de 50 millones de exámenes cada año (Seminarium Certificación, 2021, pár. 12).

Como mencionamos anteriormente, además de encargarse de las pruebas educativas, ETS también desarrolla métodos para proteger y optimizar la enseñanza de lenguas extranjeras, así como la propia evaluación, ofreciendo desde cursos dirigidos a responsables de evaluar las pruebas como a docentes y formadores.

Como hemos mencionado anteriormente, una de las múltiples responsabilidades de esta institución es la realización de cuestiones en una de las pruebas más conocidas a nivel europeo: PISA (Programme for International Student Assessment). También son responsables del conocido como PIAAC (Programme for the International Assessment of Adult Competencies), no obstante, nos centraremos en el primero. ETS es responsable de desarrollo de los marcos para lectura, matemáticas y ciencias, al igual que la gestión, supervisión, desarrollo de los instrumentos, escalamientos y análisis (OCDE, 2017, pág. 24).

El objetivo de estos informes es que “los ciudadanos sean capaces de aunar su conocimiento básico y aplicado”. (Ministerio de educación y formación profesional, 2021, pár. 1). A través de un proceso evaluativo centrado en las competencias del alumnado y separado en varias partes como son la competencia de lectura, las matemáticas y las ciencias naturales, los informes PISA examinan a estudiantes de educación secundaria y evalúan sus competencias con pruebas independientes al currículum de los centros educativos, con la intención de adaptarse a los países donde se realizan las pruebas. Desde su comienzo, la evaluación de los informes PISA ya recibía ciertas críticas sobre su metodología evaluativa, por no resultar competente en múltiples aspectos esenciales, o los contenidos de las pruebas.

Durante nuestra investigación, dimos con un artículo creado por Gérard Bonnet (2006, pág. 91) en el que se cuestiona si PISA se adapta a las singularidades lingüísticas y culturales en las evaluaciones internaciones de las competencias del alumnado. Este estudio ( realizado con los informes PISA correspondientes a los años 2000 y 2003 y a las espera al propio del año de publicación del artículo, 2006) describe las dificultades relacionadas con los objetivos y metodologías que se presentan en la evaluación comparativa de las competencias. “La sensibilidad de las evaluaciones en el contexto cultural está reforzada en PISA por el hecho de que lo esencial de los métodos estadísticos utilizados (…) presuponen que la hipótesis de unidimensionalidad que los sustenta sea real.” (Bonnet, 2006, pág. 99).

Al tratarse de un mismo texto y un conjunto de preguntas traducidas a distintas lenguas que habitualmente tiene suficiente relación como para que no sea necesario una modificación notoria. “Sin embargo, en términos de comparación internacional, esta equivalencia tiene un precio (la reducción del contenido o la eliminación pura y simple de algunas preguntas) que nos conduce a no valorar más que algunas capacidades «universales» en detrimento de otras competencias o formas de medir que corresponden más a los objetivos de tal o cual sistema educativo.” (Bonnet, 2006, pág. 98). Se debe tener en cuenta que la influencia del ambiente cultural y escolar son esenciales, al igual que varios aspectos como los contenidos de las enseñanzas, las modalidades de estas y las modalidades de evaluación (Bonnet, 2006, pág. 98).

Otras autorías hacen alusión a que el modelo intenta homogeneizar los procesos de aprendizaje y que su función pretende “el constatar el grado de logro de lo obtenido, para poder aprobar o reprobar, promocionar o repetir.” (Careaga, 2001, pág. 347).” En 2009, David Durán Gisbert creó la guía GAPpisa, una guía que tiene como objetivo analizar las pruebas evaluativas del informe PISA, examinando los distintos criterios de su evaluación al igual que su formato y su adaptación entre países. “Cambiar los instrumentos de evaluación no es suficiente, y en orden a realizar en cambio más sustancial debemos analizar cómo estos primeros pasos afectan a la propia identidad docente del profesor. Es necesario en futuros estudios profundizar y analizar cómo esta participación cambia su posicionamiento conceptual, estratégico y actitudinal en el momento de evaluar” (Mejías Macías, Monereo Font, 2018, pág. 89).

¿Creéis que la evaluación de los informes PISA está correctamente orientada hacia los objetivos que se propone? ¿Deberían plantearse un cambio en el método e instrumentos de evaluación de competencias para los próximas pruebas? ¿Creéis que, una vez que se instale por completo la ley LOMLOE, habrá mejores resultados?

Referencias bibliográficas

Careaga, A. (2001) La evaluación como herramienta de transformación de la práctica docente. Educere. 5(15). 345-352. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: Redalyc.La evaluación como herramienta de transformación de la práctica docente]

Ministerio de educación y formación profesional. (2021) PISA. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: https://www.educacionyfp.gob.es/inee/evaluaciones-internacionales/pisa.html]

ETS (2022). Educational Testing Service. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: https://www.ets.org/]

Gerard Bonnet (2006) Tener presentes las singularidades lingüísticas y culturales en las evaluaciones internacionales de las competencias de los alumnos: ¿una nueva dimensión para PISA? Revista de Educación. 91-109. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: http://iestorre.com/mochila/sec/monograficos_sec/ccbb_ceppriego/normativa/pisa/PISA%202006,%20analisis.pdf#page=74]

Mejías Macías, E., Monereo Font, C. (2018). Transformar a avaliaçao a través do PISA: O projeto Gappisa. Politicas de Avaliaçao. Currículo e qualidades: diálogos sobre o Pisa. 69-90. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: https://www.researchgate.net/publication/327593375_Transformar_a_avaliacao_a_traves_do_PISA_O_projeto_Gappisa_Transformar_la_evaluacion_gracias_a_PISA_El_proyecto_Gappisa]

OCDE (2017) Marco de evaluación de análisis de PISA para el desarrollo: lectura, matemáticas y ciencias. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: https://www.oecd.org/pisa/aboutpisa/ebook%20-%20PISA-D%20Framework_PRELIMINARY%20version_SPANISH.pdf]

Seminarium certificación. (2021). Educational Testing Service publica los datos mundiales de las pruebas TOEIC® Listening and Reading 2014. [Fecha de consulta: 21 de diciembre de 2021. Disponible en: https://www.seminariumcertificacion.com/educational-testing-service-publica-los-datos-mundiales-de-las-pruebas-toeic-listening-and-reading-2014/]