Le contenu des évaluations peut ressembler à un simple ensemble de questions, mais il est le fruit d'années d'efforts institutionnels, notamment de l'expertise des enseignants, du balisage des métadonnées et de l'historique des rapports. Pour les organismes publics et les grands systèmes éducatifs, ce travail constitue un atout majeur, au même titre que toute autre forme de propriété intellectuelle.
Et pourtant, la plupart des organisations ne se préoccupent sérieusement de la pérennité de ces ressources que lorsqu’elles y sont contraintes. Lorsque les contrats arrivent à échéance ou que des initiatives de modernisation vers le cloud sont imposées par la direction, les enseignants se rendent souvent compte que leur bibliothèque de contenus d’évaluation, constituée à grand-peine, ne peut être transférée sans y consacrer beaucoup de temps et d’efforts.
Dans cet article, je vais vous présenter un cadre de réflexion pour vous aider à préserver votre contrôle à long terme sur le contenu des évaluations avant de vous retrouver à chercher une solution de dernière minute.
Principaux points à retenir
- Le contenu des évaluations relève de la propriété intellectuelle. Les banques de questions, les plans d'évaluation, les grilles d'évaluation et les données de rapport constituent des investissements à long terme et ne doivent pas être considérés comme des données jetables.
- La dépendance vis-à-vis d'un fournisseur n'est pas un problème technique ; il s'agit d'une défaillance de gouvernance qui survient lorsque les décisions d'achat ne tiennent pas compte de la propriété des données, des droits d'exportation ou de la conformité aux normes.
- Exporter des fichiers n'équivaut pas à préserver le contenu. Une véritable portabilité implique de conserver les métadonnées structurées, la logique de notation et la continuité des rapports.
- Les normes ouvertes, telles que la norme QTI, réduisent les risques liés à la migration. Les plateformes conçues autour de cadres d'interopérabilité offrent aux établissements la flexibilité nécessaire pour déplacer, réutiliser et intégrer du contenu d'un système à l'autre.
Protéger votre investissement
La constitution de banques d'items peut nécessiter des années de travail itératif, impliquant tous les acteurs concernés, des concepteurs de programmes aux psychométriciens en passant par les enseignants. Ces banques sont affinées en fonction des résultats obtenus lors des tests précédents et sont souvent associées à des métadonnées afin de faciliter leur mise en correspondance avec des normes d'apprentissage spécifiques, des niveaux de difficulté ou des catégories de reporting.
Le contenu des évaluations comprend également des modèles de notation, qui peuvent aller de simples grilles d'évaluation à des algorithmes adaptatifs complexes. Bien qu'ils soient rarement parfaits, ils ont évolué au fil des années grâce à des tests, des discussions, des analyses et des ajustements. De plus, l'historique des évaluations permet aux établissements scolaires de suivre les performances au fil du temps, ce qui leur garantit de répondre efficacement aux lacunes dans les connaissances des élèves et d'apporter les améliorations pédagogiques qui comptent.
Au-delà de la valeur que ces ressources représentent pour un système, elles revêtent également une importance particulière pour ceux qui les ont créées. Lorsqu’une migration altère ou détruit le contenu des évaluations, ces personnes doivent repartir de zéro, ce qui affecte durablement le moral de l’équipe et la confiance dans l’institution. Il faut parfois des années pour instaurer la confiance, mais celle-ci peut se perdre en un clin d’œil.
Ainsi, pour protéger l'investissement de votre organisation dans les contenus d'évaluation, vous devez les considérer comme un capital à long terme. Comme pour tout actif, vous ne pourrez les conserver que si vous les protégez ; c'est pourquoi toute migration doit être évaluée en fonction de sa capacité à préserver le contenu des évaluations.
Ce que signifie réellement la conservation du contenu des évaluations
On croit souvent à tort que si une plateforme permet d'exporter des fichiers, le contenu est alors transférable. Or, ce n'est que partiellement vrai. Un fichier CSV ou XML contenant le texte des questions, c'est mieux que rien, mais cela efface pratiquement toute la structure du contenu de l'évaluation.
Une véritable conservation signifie que, lorsque le contenu d'une évaluation est transféré d'un système à un autre, tant le texte que la structure restent intacts. Cela inclut les métadonnées, la logique de notation, les relations entre les items et l'historique des rapports, ainsi que, pour les les items assistés par la technologie, cela inclut également le code.
Si vous supprimez ces couches lors de l'exportation, vous ne faites que transférer des données brutes. Vous perdez ainsi un savoir-faire institutionnel qu'il faudra reconstituer manuellement, souvent par une personne qui a déjà consacré beaucoup de temps à l'élaboration de ces questions.
C'est souvent l'un des coûts cachés liés à l'abandon d'un système de gestion de l'apprentissage (LMS) à l'expiration d'un contrat : vous ne perdez pas seulement l'accès à la plateforme, mais aussi toutes les ressources que votre équipe a développées pour celle-ci. Les conséquences sont néfastes tant pour le budget que pour le moral de l'équipe.
Si vous envisagez sérieusement une migration, sachez que de nombreuses plateformes « prennent en charge l'exportation », mais qu'elles n'offrent pas pour autant une véritable portabilité structurée. Si votre équipe a consacré beaucoup de temps à peaufiner l'alignement sur les normes, la ramification adaptative ou les grilles d'évaluation, vous devriez peut-être examiner les détails de près afin de vous assurer que tout ce travail ne sera pas réduit à néant lors du passage à un nouveau système.
Un cadre pour le choix d'un logiciel d'évaluation portable
La migration des contenus d'évaluation relève autant de la gouvernance que de la technique. Cela signifie que les décisions les plus importantes sont prises avant même que la migration ne commence. Voici les grands principes à garder à l'esprit lors de la passation de marché, de la négociation des contrats et du choix de la plateforme afin de garantir la protection de vos contenus.
Mettre en place une gestion responsable des données
La question de la propriété des données peut sembler simple, mais elle est souvent ambiguë dans la pratique. Par exemple, de nombreux contrats conclus avec des fournisseurs accordent aux établissements une propriété purement formelle, tout en limitant ce qu’ils peuvent réellement faire avec leur contenu. Pour exercer une véritable propriété sur les données, il faut disposer de droits d’exportation explicites dans des formats standard, d’un accès à l’historique des versions et aux pistes d’audit, ainsi que de la possibilité de récupérer le contenu à tout moment.
En substance, vous ne devriez pas avoir à demander la permission pour accéder à quelque chose qui vous appartient. Si vous devez attendre l'expiration d'un contrat avant de pouvoir récupérer votre contenu ou vos archives, cela signifie que vous détenez vos droits en théorie, mais pas dans la pratique.
Donner la priorité à la sécurité et à la conformité
Les données d'évaluation, et en particulier les archives, contiennent souvent des informations sensibles : dossiers sur les résultats des étudiants, informations permettant d'identifier une personne (PII) et contenus ayant des implications cruciales tant pour les individus que pour les établissements. Pour respecter les engagements de votre établissement en matière de protection de la vie privée des étudiants, de conformité réglementaire et de traçabilité, les logiciels doivent être dotés de mesures de sécurité vérifiables afin de protéger les données.
Ces mesures de sécurité comprennent le chiffrement des données en transit et au repos, ainsi que la conformité aux normes FERPA, RGPD ou à leurs équivalents régionaux. Une documentation claire de la chaîne de traçabilité est également essentielle à des fins d'audit. Les plateformes qui offrent des options d'exportation sécurisées et conformes aux normes facilitent considérablement le maintien et la vérification de ce niveau de conformité pendant les périodes de transition.
Évaluer les intégrations natives
Un autre coût caché de la migration réside dans la perturbation des systèmes techniques connexes qui soutiennent l'enseignement et la production de rapports. Les plateformes d'évaluation sont généralement intégrées à toute une série d'autres outils, notamment les systèmes de gestion de l'apprentissage (LMS), les systèmes d'information sur les étudiants, les tableaux de bord de reporting et les outils de gestion des effectifs. Il peut donc s'avérer difficile de dissocier et d'extraire le contenu d'évaluation des systèmes connexes.
Cela dit, les plateformes reposant sur des normes ouvertes telles que LTI (Learning Tools Interoperability) et OneRoster facilitent le maintien des connexions lors des transitions, ce qui permet aux équipes de gagner du temps et d'éviter les tâches fastidieuses.
Identifier et éviter la dépendance vis-à-vis d'un fournisseur
La dépendance vis-à-vis d'un fournisseur ne s'installe pas du jour au lendemain, d'autant plus que la plupart des institutions s'appuient sur des dizaines, voire des centaines de services spécialisés. Mais à mesure que ces services s'accumulent, on finit par créer une sorte de « dette de dépendance » qui empêche ensuite d'adopter de meilleures solutions lorsqu'elles se présentent.
Pour éviter cela, il faut savoir comment les formats de données sont exportés, si les intégrations personnalisées fonctionnent d'un écosystème à l'autre et s'il est possible de recréer des structures de contenu en dehors de la plateforme d'un fournisseur — sans oublier les clauses contractuelles à prendre en compte.
Étant donné que cela implique de nombreux aspects, il est souvent plus efficace de choisir des plateformes qui font de la portabilité un principe de conception. Après tout, si la conception d'une plateforme rend l'extraction de votre propre contenu difficile et fastidieuse, c'est un signal d'alarme.
Comment les normes ouvertes facilitent la migration de contenu
Les normes ouvertes constituent le fondement de l'infrastructure qui permet de migrer à grande échelle les contenus d'évaluation. Sans elles, chaque transition entre plateformes se transforme en un projet d'ingénierie sur mesure, à la fois coûteux et risqué. Après tout, cela vous place à la merci du fournisseur dont vous essayez de vous affranchir.
La norme QTI, développé et géré par le Consortium 1EdTech, une organisation mondiale à but non lucratif qui élabore et certifie des normes ouvertes, est la norme la plus largement utilisée pour l'échange de contenus d'évaluation, qu'il s'agisse de texte ou de structure. Elle définit un format commun pour les items, les tests, les règles de notation et les métadonnées, ce qui facilite le transfert de contenu entre les outils de création, les banques d'items, les systèmes de diffusion et les logiciels d'analyse.
Lorsque le contenu est créé et stocké en utilisant nativement la norme QTI, plutôt que d'être converti lors de l'exportation, la fidélité du transfert (c'est-à-dire la préservation de la mise en forme et de la structure) est nettement supérieure. Mais les normes ne concernent pas uniquement les formats de fichiers. Des cadres d'interopérabilité tels que LTI et OneRoster régissent également la manière dont les plateformes communiquent entre elles.
En normalisant la manière dont les systèmes de gestion de l'apprentissage (LMS), les outils de reporting et les solutions de gestion des effectifs partagent les informations, ils créent un écosystème dans lequel les établissements peuvent assembler les meilleures solutions disponibles plutôt que d'être prisonniers de l'offre d'un seul fournisseur.
Si vous êtes en train d'évaluer différentes plateformes, demandez si la prise en charge des normes est attestée par la certification 1EdTech. Sans cette certification, vous devrez éplucher la documentation technique pour vérifier que la solution offre bien la flexibilité et l'interopérabilité.
Préparer la migration du contenu des évaluations lors de la passation de marchés
La migration du contenu des évaluations n'est pas une question à laquelle la plupart des gens pensent avant d'y être contraints. Mais à ce moment-là, bon nombre des décisions qui déterminent si la transition se fera en douceur ou sera laborieuse ont déjà été prises. Dans de nombreux cas, elles sont prises des années plus tôt, pendant le processus d'approvisionnement.
Le fait de privilégier les normes ouvertes ne vise pas à vous exclure de certaines plateformes, mais à améliorer la qualité de vos choix en vous assurant que les fournisseurs que vous évaluez ont conçu leurs solutions dans une optique de flexibilité à long terme. En fin de compte, c’est le stockage de contenu conforme aux normes, la propriété transparente des données, la possibilité d’exportation structurée et une véritable interopérabilité qui garantissent que vous êtes réellement propriétaire de vos données.
Si vous envisagez d'évaluer une plateforme, de migrer vers le cloud ou de lancer un projet de modernisation, intégrez la portabilité dès le départ dans vos spécifications. La plateforme open source et native QTI de TAO est conçue pour vous garantir que votre contenu, vos données et votre investissement restent sous votre contrôle.
Prenez rendez-vous pour une démonstration pour en savoir plus sur la manière dont une approche ouverte et basée sur des normes peut protéger votre programme d'évaluation à long terme.
FAQ
Qu'est-ce que la migration du contenu des évaluations ?
La migration de contenu d'évaluation consiste à transférer des éléments, des tests, des règles de notation, des métadonnées et des données de rapport d'une plateforme d'évaluation vers une autre. Lorsqu'elle est bien menée, elle préserve la structure et la facilité d'utilisation du contenu. Lorsqu'elle est mal menée, elle réduit à néant des années d'investissement de l'établissement en ne migrant que du texte, et non du contenu structuré.
Comment garantissez-vous l'intégrité des données lors d'une migration de plateforme ?
Utilisez des plateformes prenant en charge des formats d'exportation basés sur des normes, comme la norme QTI, qui préservent les métadonnées et la logique de notation en plus du contenu des questions. Il est également important de valider le contenu exporté avant et après la migration, et de s'assurer que les contrats garantissent les droits d'exportation de manière exploitable et structurée.
Qu'est-ce que la dépendance vis-à-vis d'un fournisseur dans le secteur des technologies éducatives ?
On parle de « dépendance vis-à-vis d'un fournisseur » lorsque les éditeurs de logiciels font en sorte qu'il soit très difficile, voire coûteux, de cesser d'utiliser leurs logiciels. Bien qu'elle puisse être difficile à détecter, cette dépendance peut augmenter considérablement les coûts à long terme en empêchant les organisations de choisir les solutions qui répondent réellement le mieux à leurs besoins.
Qu'entend-on par « normes ouvertes » dans le domaine des technologies éducatives ?
Les normes ouvertes garantissent que les systèmes scolaires sont véritablement propriétaires des contenus qu'ils développent, en assurant l'accès, la portabilité et l'interopérabilité entre les différentes plateformes et systèmes. Élaborées et validées par le consortium à but non lucratif 1EdTech, ces normes ouvertes permettent de réduire les coûts et facilitent la mise à disposition d'expériences d'apprentissage numériques pour tous.