Encontrar una plataforma de creación de ítems que encaje en un ecosistema de evaluación existente
En Suiza, la principal responsabilidad en materia de educación y cultura recae en los cantones, los estados miembros de la Confederación Suiza. Los 26 ministros de educación cantonales forman juntos un organismo administrativo, la Conferencia Suiza de Ministros Cantonales de Educación (EDK), que coordina las políticas educativas y culturales a nivel nacional.
Para supervisar y garantizar una aplicación coherente de las normas educativas en todos los cantones, la EDK administra pruebas nacionales de rendimiento de los alumnos para los grados 2, 6 y 9 en matemáticas, ciencias naturales, lenguas nacionales (alemán, francés e italiano) y lenguas extranjeras a una muestra seleccionada de alumnos. Sin embargo, los cantones se encargan de medir el rendimiento individual de los alumnos. Para ello, algunos cantones albergan sus propios bancos de ítems y administran sus propias pruebas a todos los alumnos de su jurisdicción. Sin embargo, para los cantones que no disponen de estos recursos, resulta beneficioso un banco de ítems compartido.
DESAFÍO
Búsqueda y selección de un sistema que funcione bien en un entorno multilingüe y descentralizado
La estandarización de las evaluaciones es un reto único en Suiza, debido a las cuatro lenguas oficiales y a la necesidad de coordinación entre 26 cantones. EDK ha comprobado que los sistemas de evaluación en línea patentados son muy restrictivos, lo que dificulta y encarece la personalización. La apertura, la flexibilidad y la capacidad de personalización sin costes ocultos son importantes para EDK a la hora de avanzar en su plan para un sistema de seguimiento de la educación escolar obligatoria.
Sus objetivos son:
- Disponer de una herramienta para crear elementos de prueba y supervisar la aplicación de los estándares de aprendizaje a nivel nacional
- Desarrollar un banco de artículos que pueda ser compartido
- Ponerlo a disposición de los 26 cantones
- Disponer de un sistema de código abierto que sea compatible con los sistemas existentes, incluidos los propietarios
Solución
TAO, una plataforma de evaluación de código abierto de nivel comercial
Cuando EDK empezó a buscar una solución para las pruebas estandarizadas, se fijó primero en los países europeos con experiencia en las pruebas de rendimiento de los alumnos. Entre ellos, Luxemburgo era uno de los más avanzados, ya que había pasado a realizar pruebas por ordenador. Allí descubrieron por primera vez a TAO como una posible solución de código abierto. Tras un cuidadoso análisis, EDK eligió TAO por varias razones:
- El código abierto les liberó de las restricciones de los costosos sistemas propietarios.
- TAO ofrecía la posibilidad de incluir tipos de artículos complejos, además del QTI estándar, lo que permite crear artículos avanzados.
- La OCDE (Organización para la Cooperación y el Desarrollo Económico) había seleccionado a TAO para llevar a cabo PISA, el Programa para la Evaluación Internacional de los Estudiantes, un estudio mundial para comparar el nivel de competencia de los estudiantes en matemáticas, ciencias y lectura. Esto dio a EDK la confianza de que TAO es un sistema estable capaz de gestionar despliegues a gran escala.
- El equipo de la OAT es multilingüe y, por lo tanto, puede comunicarse eficazmente con las partes interesadas de todos los cantones, que tienen diferentes preferencias lingüísticas.
Resultados
Implantación de la solución para las pruebas en línea
En el momento de escribir este artículo, EDK está creando el banco de ítems, que ya ha probado sobre el terreno en algunas escuelas. Se está trabajando para realizar una prueba piloto de mayor envergadura en 2015, y una gran evaluación de 25.000 examinados en 2016, lo que les permitirá hacer comparaciones entre cantones, según los estándares de aprendizaje nacionales implementados en 2011. En 2017, esperan evaluar el sexto grado en las lenguas nacionales de Suiza (alemán, francés e italiano), así como en las lenguas extranjeras.
"Con una plataforma de código abierto como TAO, somos libres de hacer nuestra propia personalización, porque podemos controlar el código fuente. Esto supuso un gran alivio, ya que los sistemas propietarios son muy restrictivos. Cuanto más se personalice un sistema propietario, más dependeremos de él. Afortunadamente, con TAO hemos encontrado una solución abierta y flexible para el futuro. Es un gran paso en la dirección correcta para garantizar una aplicación coherente y nacional de nuestros estándares de aprendizaje".
- Dra. Vera Husfeldt, Jefa de la División de Desarrollo de la Calidad en el EDK desde 2012.
