El empleo de las estadísticas de evaluación del aprendizaje: ¿Qué nos estamos perdiendo?

Escrito el 16 Abr 19 por Ieva Raudonyte
Evaluación de conocimientos
Investigación en educación

 

Las evaluaciones del aprendizaje son una de las innovaciones más prometedoras (y más baratas) a la hora de medir la calidad de la educación. No obstante, las estadísticas sobre aprendizaje suelen estar ausentes en las conversaciones sobre políticas educativas, o se quedan olvidadas, cogiendo polvo en las estanterías. Al mismo tiempo han proliferado los estudios acerca de la importancia de las estadísticas de aprendizaje a la hora de diseñar e implantar estas políticas. ¿Dónde está el eslabón perdido aquí? ¿Por qué se desdeña tan a menudo toda esta riqueza de información?

Creemos que una interacción entre los diferentes actores educativos y quienes asumen la toma de decisiones (incluyendo a quienes componen unidades de planificación, a los equipos de evaluación internacionales y nacionales, a los socios para el desarrollo y, hasta cierto punto, a las organizaciones de la sociedad civil) pueden proporcionarnos algunas respuestas. Investigaciones recientes de la IIEP-UNESCO en Gambia y Guinea han mostrado que esta podría ser la línea adecuada de investigación. No obstante, no todo es tan sencillo.

¿Cómo se pueden aprehender y entender realmente las sutiles interacciones que influyen en los diferentes actores a la hora de tomar decisiones? Los factores relativos a la política económica, o, en otras palabras, a las relaciones dinámicas, de poder y, en ocasiones, a las agendas divergentes de las diferentes personas y entidades interesadas, son extremadamente complejos de analizar.

¿Por qué es importante seguir hablado acerca del uso de las estadísticas de aprendizaje?

«Invertir en educación sin evaluar el aprendizaje es como pagar por un producto que no puedes ver […] Las evaluaciones del aprendizaje se cuentan entre las innovaciones más baratas de la reforma educativa […] Una evaluación nacional puede costar entre 200.000 dólares y 1 millón de dólares. Esto suele representar en torno al 0,3% del presupuesto educativo de los países» [Instituto de estadística de la UNESCO (UIS), 2018: 8.]

La disponibilidad y el uso eficaz de las estadísticas de aprendizaje es esencial para diagnosticar el estado de salud del sector educativo, para diseñar estrategias adecuadas, para rastrear las exclusiones ocultas y promover un compromiso político más potente, así como para evaluar los avances del sistema (Banco Mundial, 2018; Ficha informativa UIS nº 46, 2017). Cuando se usan con eficacia, las estadísticas de aprendizaje pueden potencialmente reducir los costes de la ineficacia en un 5%, según la ficha informativa de la UIS. 

Se dirá que todo esto ya lo sabíamos. Es verdad que se ha publicado mucho sobre la importancia de las estadísticas de aprendizaje. Sin embargo, aún carecemos de un conocimiento sistemático de por qué las estadísticas de aprendizaje siguen estando infrautilizadas. 

Un nuevo proyecto de investigación busca el eslabón perdido en el empleo de las estadísticas evaluativas

IIEP-UNESCO acaba de terminar la fase piloto de un nuevo proyecto de investigación sobre el empleo de las estadísticas de evaluación e Gambia y Guinea. Aunque aún es demasiado temprano como para presentar resultados, las conclusiones preliminares nos indican que estamos haciendo las preguntas adecuadas y que la interacción entre los distintos actores es clave.

¿Por qué en esos países?

Gambia ha hecho un progreso considerable en el empleo de sus estadísticas de evaluación. Se han convertido en parte de la «rutina habitual» dentro de las operaciones del Ministerio de Educación, en tanto en los niveles central como en los descentralizados. Una de las condiciones principales que ha posibilitado esta situación ha sido un apoyo político potente y desde los niveles más altos.

«El equipo de gestión principal era la fuerza y el empuje que nos guiaba y eso lo hacía todo mucho más fácil. Si quienes gestionan están ahí, ofreciendo todas las oportunidades, todo el apoyo posible y animando, creo, con toda sinceridad, que entonces uno se esfuerza por cumplir... El equipo gestor ha sido el impulso motor y quien ha construido la capacitación.»
Funcionario del Ministerio de Educación primaria y secundaria, Gambia.

Además, unos canales eficaces de comunicación formal e informal permitieron que una variedad de agentes implicados pudieran fácilmente compartir estadísticas para diversos fines.

En Guinea, no obstante, el escenario es completamente diferente. Las causas últimas de la situación actual se pueden achacar en buena medida a las interacciones entre los actores implicados. Las dificultades de comunicación entre el Ministerio y la unidad responsable de la producción estadística, junto con el escepticismo generalizado sobre el modo en el que funciona dicha unidad, han tenido como resultado un uso limitado de los datos sobre aprendizaje. Aunque esto último pueda también explicarse por una falta de capacitación, por una dependencia financiera de las agendas de las entidades donantes y por otros obstáculos, las dinámicas entre los actores son la clave de una mejor comprensión de los factores que permiten y las barreras que impiden el uso eficaz de las estadísticas de aprendizaje en este contexto.

La economía política: ¿realmente podemos desembrollar esta cuestión?

Como parte de este proyecto de investigación vamos a explorar factores que es posible que influyan en el empleo de las estadísticas, pero que son más difíciles de calibrar, como el impacto de las agendas divergentes y las relaciones de poder entre los diferentes actores, así como los procesos de elaboración de políticas que a menudo son caóticos.

¿Cómo se investigan estos elementos cuando las preguntas más interesantes no pueden preguntarse ni responderse directamente? ¿Cómo se investiga algo tan intangible? El desafío al que nos enfrentamos es el de contabilizar y hacer explícito algo que está ocurriendo detrás del escenario.

El desafío principal es formular preguntas que atiendas a estos elementos, que son difíciles de captar. Los métodos participativos de la investigación cualitativa, que incluyen entrevistas y observaciones parecen ser los más prometedores pero, ¿serán suficientes para hacerse una idea correcta de la situación concreta de los diferentes actores interesados? 

Nuestros equipos de investigación se están reuniendo con todos los agentes interesados, dentro de sus posibilidades, haciéndoles preguntas que no solamente indagarán en el empleo de las estadísticas de aprendizaje sino también en el empleo en general de las pruebas y sobre su actual cultura de planificación. Compartiremos las ideas sobre nuestra metodología investigadora que puedan ser útiles para otros actores que estén trabajando sobre este tema.

Nuestro equipo está trabajando con países que, en la actualidad, están tratando de mejorar la aplicación de sus estadísticas de evaluación del aprendizaje a los procesos de planificación, por lo tanto los productos de la investigación tienen una aplicación directa en los ministerios de educación. Esperamos que el resultado sea el poder proporcionar recomendaciones sobre las maneras más provechosas en la que los países puede usar las estadísticas de aprendizaje.

Si desea conocer más sobre el proyecto, le rogamos que consulte la página web del IIEP donde encontrará las últimas actualizaciones o que se ponga en contacto con las personas que forman el equipo investigador. 

Añadir a favoritos