El contenido de las evaluaciones puede parecer una simple recopilación de preguntas, pero representa años de esfuerzo institucional, que incluyen la experiencia de los educadores, el etiquetado de metadatos y el historial de informes. Para los organismos públicos y los grandes sistemas educativos, ese trabajo constituye un activo importante, equiparable a cualquier otra forma de propiedad intelectual.
Y, sin embargo, la mayoría de las organizaciones no se plantean seriamente la durabilidad de estos activos hasta que se ven obligadas a hacerlo. Cuando los contratos llegan a su fin o se imponen desde arriba iniciativas de modernización en la nube, los educadores suelen darse cuenta de que su biblioteca de contenidos de evaluación, que tanto les ha costado crear, no se puede trasladar sin un esfuerzo y un tiempo considerables.
En este artículo, voy a presentar un marco de referencia para reflexionar sobre cómo garantizar el control a largo plazo del contenido de las evaluaciones antes de tener que buscar a toda prisa una solución de última hora.
Principales conclusiones
- El contenido de las evaluaciones es propiedad intelectual. Los bancos de preguntas, los esquemas de evaluación, las rúbricas de calificación y los datos de los informes constituyen inversiones a largo plazo y no deben tratarse como datos desechables.
- La dependencia de un proveedor no es un problema técnico, sino un fallo de gobernanza que se produce cuando las decisiones de adquisición no tienen en cuenta la propiedad de los datos, los derechos de exportación o la compatibilidad con los estándares.
- Exportar archivos no es lo mismo que conservar el contenido. La verdadera portabilidad implica conservar los metadatos estructurados, la lógica de puntuación y la continuidad de los informes.
- Los estándares abiertos, como el estándar QTI, reducen el riesgo de migración. Las plataformas basadas en marcos de interoperabilidad ofrecen a las instituciones la flexibilidad necesaria para trasladar, reutilizar e integrar contenidos entre distintos sistemas.
Proteja su inversión
La creación de bancos de preguntas puede llevar años de trabajo iterativo, en el que participan desde diseñadores de planes de estudios hasta psicometristas y educadores. Se perfeccionan a partir de los resultados de pruebas anteriores y, a menudo, se les asignan metadatos para facilitar su vinculación con estándares de aprendizaje específicos, niveles de dificultad o categorías de evaluación.
El contenido de la evaluación también incluye modelos de calificación, que pueden ir desde sencillas rúbricas hasta complejos algoritmos adaptativos. Aunque rara vez son perfectos, han ido evolucionando a lo largo de años de pruebas, debates, revisiones y ajustes. Además, los historiales de las pruebas ofrecen a los centros educativos una forma de hacer un seguimiento del rendimiento a lo largo del tiempo, lo que garantiza que respondan de manera eficaz a las lagunas en los conocimientos de los alumnos y apliquen las mejoras pedagógicas que realmente importan.
Más allá del valor que estos activos representan para un sistema, también son importantes para las personas que los han creado. Cuando una migración deteriora o destruye el contenido de las evaluaciones, tienen que empezar desde cero, lo que deja una huella permanente en la moral del equipo y en la confianza de la institución. La confianza puede tardar años en construirse, pero puede perderse casi al instante.
Por lo tanto, para proteger la inversión de tu organización en contenidos de evaluación, debes considerarlos como un activo a largo plazo. Al igual que con cualquier otro activo, solo podrás conservarlos si los proteges, por lo que es necesario evaluar cualquier migración debe evaluarse en cuanto a su capacidad para preservar el contenido de las evaluaciones.
Qué significa realmente conservar el contenido de las evaluaciones
Existe la idea errónea de que, si una plataforma permite exportar archivos, el contenido es transferible. Sin embargo, eso solo es cierto en parte. Una copia de seguridad en formato CSV o XML del texto de las preguntas es mejor que nada, pero elimina prácticamente toda la estructura del contenido de la evaluación.
La verdadera conservación implica que, cuando el contenido de una evaluación se transfiere de un sistema a otro, tanto el texto como la estructura permanecen intactos. Esto incluye los metadatos, la lógica de puntuación, las relaciones entre los ítems y el historial de informes, y en el caso de los ítems mejorados con tecnología, también incluye el código.
Si eliminas estas capas durante la exportación, lo único que estás haciendo es trasladar el material en bruto. Como consecuencia, se pierde el conocimiento institucional, que luego hay que reconstruir manualmente, a menudo por parte de alguien que ya ha dedicado mucho tiempo a elaborar estas preguntas.
A menudo, este es uno de los costes ocultos que conlleva abandonar un sistema de gestión del aprendizaje (LMS) al finalizar un contrato: no solo se pierde el acceso a la plataforma, sino también todos los recursos que el equipo ha desarrollado para ella. Las consecuencias son negativas tanto para el presupuesto como para la moral del equipo.
Si estás valorando seriamente la posibilidad de realizar una migración, ten en cuenta que muchas plataformas «admiten la exportación», pero en realidad no ofrecen una portabilidad estructurada. Si tu equipo ha dedicado mucho tiempo a perfeccionar la alineación con los estándares, la ramificación adaptativa o las rúbricas, quizá te interese analizar los detalles para asegurarte de que todo ese esfuerzo no se pierda al pasar a un nuevo sistema.
Un marco para la elección de software de evaluación portátil
La migración de contenidos de evaluación supone tanto un reto de gestión como técnico. Esto significa que las decisiones más importantes se toman incluso antes de que la migración dé comienzo. A continuación se exponen los principios fundamentales que hay que tener en cuenta durante la contratación, la negociación de contratos y la selección de la plataforma para garantizar la protección de sus contenidos.
Establecer una titularidad significativa de los datos
La propiedad de los datos puede parecer sencilla, pero en la práctica suele ser ambigua. Por ejemplo, muchos contratos con proveedores otorgan a las instituciones una propiedad nominal, pero restringen lo que realmente se puede hacer con el contenido. Para ejercer una propiedad significativa sobre los datos, se necesitan derechos explícitos de exportación en formatos estándar, acceso al historial de versiones y a los registros de auditoría, así como la capacidad de recuperar el contenido en cualquier momento.
En esencia, no deberías tener que pedir permiso para acceder a algo que te pertenece. Si tienes que esperar a que expire un contrato para poder disponer de tu contenido o tus archivos, entonces eres dueño de tus derechos en teoría, pero no en la práctica.
Prioriza la seguridad y el cumplimiento normativo
Los datos de evaluación, y en particular los archivos, suelen contener información confidencial: expedientes académicos de los alumnos, información de carácter personal (PII) y contenidos con importantes repercusiones tanto para las personas como para las instituciones. Para cumplir con los compromisos de su institución en materia de privacidad de los alumnos, cumplimiento normativo y auditabilidad, el software debe contar con medidas de seguridad verificables que protejan los datos.
Estas medidas de seguridad incluyen el cifrado de los datos tanto durante su transmisión como en reposo, así como el cumplimiento de la FERPA, el RGPD o sus equivalentes regionales. Además, es fundamental disponer de una documentación clara sobre la cadena de custodia a efectos de auditoría. Las plataformas que ofrecen opciones de exportación seguras y basadas en estándares facilitan enormemente el mantenimiento y la verificación de este nivel de cumplimiento durante los periodos de transición.
Evaluar las integraciones nativas
Otro coste oculto de la migración es la alteración de los sistemas técnicos asociados que dan soporte a la docencia y a la elaboración de informes. Las plataformas de evaluación suelen estar integradas con una gran variedad de herramientas, entre las que se incluyen sistemas de gestión del aprendizaje (LMS), sistemas de información sobre el alumnado, paneles de control para la elaboración de informes y herramientas de gestión de listas de alumnos. Esto puede dificultar la separación y extracción del contenido de evaluación de los sistemas asociados.
Dicho esto, las plataformas basadas en estándares abiertos como LTI (Interoperabilidad de Herramientas de Aprendizaje) y OneRoster facilitan el mantenimiento de las conexiones durante las transiciones, lo que ahorra tiempo y trabajo a los equipos.
Reconocer y evitar la dependencia de un proveedor
La dependencia de un proveedor no se produce de la noche a la mañana, sobre todo porque la mayoría de las instituciones dependen de decenas o cientos de servicios especializados. Pero a medida que esos servicios se van acumulando, se acaba creando una especie de «deuda de dependencia» que luego impide adoptar soluciones mejores cuando surgen.
Para evitarlo, es necesario conocer cómo se exportan los formatos de datos, si las integraciones personalizadas funcionan en distintos ecosistemas y si es posible reconstruir las estructuras de contenido fuera de la plataforma de un proveedor; además, hay que tener en cuenta las condiciones contractuales.
Dado que hay tantos factores en juego, a menudo lo más eficaz es elegir plataformas que consideren la portabilidad como un principio de diseño. Al fin y al cabo, si el diseño de una plataforma hace que extraer tu propio contenido resulte complicado y lleve mucho tiempo, eso es una señal de alarma.
Cómo los estándares abiertos facilitan la migración de contenidos
Los estándares abiertos son la base de la infraestructura que hace posible la migración de contenidos de evaluación a gran escala. Sin ellos, cada cambio de plataforma se convierte en un proyecto de ingeniería a medida, lo cual resulta costoso y arriesgado. Al fin y al cabo, te deja a merced del proveedor del que intentas prescindir.
El estándar QTI, desarrollado y mantenido por el Consorcio 1EdTech, una organización global sin ánimo de lucro que desarrolla y certifica estándares abiertos, es el estándar más utilizado para el intercambio de contenidos de evaluación, incluyendo tanto el texto como la estructura. Funciona definiendo un formato común para los ítems, las pruebas, las reglas de puntuación y los metadatos, lo que facilita el traslado de contenidos entre herramientas de autoría, bancos de ítems, sistemas de distribución y software de análisis.
Cuando el contenido se crea y se almacena utilizando el estándar QTI de forma nativa, en lugar de convertirse al exportarlo, la fidelidad de la transferencia (es decir, la conservación del formato y la estructura) es considerablemente mayor. Pero los estándares no se limitan a los formatos de archivo. Los marcos de interoperabilidad como LTI y OneRoster también regulan la forma en que las plataformas se comunican entre sí.
Al estandarizar la forma en que los sistemas de gestión del aprendizaje (LMS), las herramientas de generación de informes y las soluciones de gestión de horarios comparten información, crean un ecosistema en el que las instituciones pueden combinar las mejores soluciones disponibles en lugar de verse obligadas a utilizar la oferta de un único proveedor.
Si estás evaluando plataformas, pregunta si la compatibilidad con los estándares está avalada por la certificación 1EdTech. Sin esta certificación, tendrás que examinar minuciosamente la documentación técnica para verificar que la solución ofrece realmente la flexibilidad e interoperabilidad.
Preparación para la migración de contenidos de evaluación durante el proceso de contratación
La migración del contenido de evaluación no es algo en lo que la mayoría de la gente piense hasta que se ve obligada a hacerlo. Pero para entonces, muchas de las decisiones que determinan si una transición será fluida o tediosa ya se han tomado. En muchos casos, se toman años antes, durante el proceso de adquisición.
Buscar estándares abiertos no tiene por qué aislarte de las plataformas, sino que sirve para mejorar la calidad de tus opciones, al garantizar que los proveedores que evalúas hayan diseñado sus soluciones pensando en la flexibilidad a largo plazo. En definitiva, el almacenamiento de contenidos basado en estándares, la propiedad transparente de los datos, la capacidad de exportación estructurada y la interoperabilidad real son lo que garantiza que seas el verdadero propietario de tus datos.
Si está planeando una evaluación de plataformas, una migración a la nube o una iniciativa de modernización, incluya la portabilidad entre sus requisitos desde el primer momento. La plataforma de código abierto y nativa de QTI de TAO está diseñada para garantizar que su contenido, sus datos y su inversión sigan bajo su control.
Solicite una demostración para obtener más información sobre cómo un enfoque abierto y basado en estándares puede proteger su programa de evaluación a largo plazo.
Preguntas frecuentes
¿Qué es la migración de contenidos de evaluación?
La migración de contenidos de evaluación es el proceso de trasladar preguntas, pruebas, reglas de calificación, metadatos y datos de informes de una plataforma de evaluación a otra. Si se lleva a cabo correctamente, se conserva la estructura y la usabilidad de los contenidos. Si se realiza de forma deficiente, se echa por la borda años de inversión institucional al migrar únicamente el texto, en lugar de los contenidos estructurados.
¿Cómo se garantiza la integridad de los datos durante la migración de una plataforma?
Utilice plataformas que admitan formatos de exportación basados en estándares, como el estándar QTI, que conserva los metadatos y la lógica de puntuación junto con el contenido de las preguntas. También es importante validar el contenido exportado antes y después de la migración, y asegurarse de que los contratos garanticen los derechos de exportación de forma estructurada y útil.
¿Qué es la dependencia de un proveedor en el sector de la tecnología educativa?
La dependencia de un proveedor se produce cuando los proveedores de software hacen que dejar de utilizar su software resulte muy complicado o costoso. Aunque puede ser difícil de detectar, la dependencia de un proveedor puede aumentar considerablemente los costes a largo plazo, ya que impide que las organizaciones elijan las soluciones que realmente mejor se adaptan a sus necesidades.
¿Qué son los estándares abiertos en el ámbito de la tecnología educativa?
Los estándares abiertos garantizan que los sistemas educativos sean los verdaderos propietarios de los contenidos que desarrollan, al ofrecer acceso, portabilidad e interoperabilidad entre plataformas y sistemas. Desarrollados y verificados por el consorcio sin ánimo de lucro 1EdTech Consortium, los estándares abiertos reducen los costes y facilitan la oferta de experiencias de aprendizaje digital para todos.