IA générative, ChatGPT et implications pour la création de tests

Enseignante debout dans une salle de classe, souriant aux élèves assis à leur bureau avec des ordinateurs portables.

Le Chat GPT a pris d'assaut le monde de l'éducation, les éducateurs s'efforçant de gérer les problèmes de tricherie à l'aide de l'IA générative. Les inquiétudes concernant l'utilisation du programme par les étudiants pour générer des dissertations semblables à celles des humains, de courtes réponses construites et, dans certains cas, une pensée analytique, ont poussé les enseignants à condamner largement le programme. Cependant, une fois que la poussière est retombée sur l'opinion publique concernant le Chat GPT, il est clair qu'il présente des avantages et qu'il est là pour durer.

Les outils tels que l'IA générative ont le pouvoir de changer le paysage de l'éducation et peuvent s'avérer être un atout pour les éducateurs et les étudiants. L'utilisation de l'IA générative pour créer des lectures nivelées, développer des incitations à l'écriture et même générer des questions d'évaluation pourrait faciliter la vie des éducateurs tout en améliorant les résultats de l'apprentissage des élèves. 

Comment les outils d'IA peuvent-ils être utilisés dans l'évaluation ?

Les outils d'IA tels que Chat GPT peuvent être utilisés par les auteurs d'évaluations de différentes manières, en fonction des besoins spécifiques de l'évaluation. En voici quelques exemples :

Générer des questions de test : Chat GPT et d'autres logiciels d'IA générative peuvent être utilisés pour générer des questions de test pour une variété de sujets et de niveaux de difficulté. Les auteurs d'évaluations peuvent saisir des questions ou des sujets, et Chat GPT peut utiliser ses capacités de génération de langage pour produire des questions qui évaluent la compréhension et les connaissances des étudiants.

Noter les réponses : L'IA peut être utilisée pour noter les réponses ouvertes des étudiants. En entraînant l'IA sur un ensemble de réponses qui ont déjà été notées par des correcteurs humains, elle peut apprendre à attribuer des notes aux nouvelles réponses en fonction de leur similitude avec l'ensemble d'entraînement.

Création de questions d'évaluation adaptative : Chat GPT peut être utilisé pour créer des expériences d'évaluation adaptative qui ajustent la difficulté des questions en fonction des réponses des élèves. En analysant les réponses des élèves en temps réel, Chat GPT peut générer des questions dont le niveau de difficulté est adapté à chaque élève.

Fournir un retour d'information : Chat GPT peut être utilisé pour fournir un retour d'information plus rapide aux étudiants sur leurs réponses. En analysant le contenu et la structure des réponses des élèves, Chat GPT peut fournir un feedback spécifique, informatif et exploitable.

L'intérêt de l'IA générative pour la création de questions d'évaluation

L'élaboration de questions d'examen est une tâche longue et fastidieuse pour les éducateurs. Il peut être difficile de créer suffisamment de questions pour tester les étudiants et la création d'une banque de questions pour un examen prend du temps par rapport à d'autres tâches telles que la planification, la connexion avec les étudiants et le développement d'un contenu de qualité. L'utilisation de l'IA générative pour créer des questions d'évaluation est une option que les éducateurs et les créateurs de tests peuvent utiliser pour gagner du temps et être plus efficaces. 

Voici quelques exemples de l'utilité de l'IA générative lors de la création de questions d'évaluation : 

Créer facilement des quantités massives de contenu 

Le plus grand avantage de l'utilisation de Chat GPT pour générer des questions d'évaluation est peut-être la rapidité avec laquelle il peut créer des quantités massives de questions. En tant qu'éducateur, vous pouvez donner à Chat GPT une copie d'un document sur lequel vous travaillez et lui demander de générer des questions. et lui demander de générer des questions sur le sujet. Vous pouvez également spécifier le nombre de questions que vous souhaitez et leur niveau. De cette manière, un enseignant ou un créateur de test peut développer des centaines de questions en quelques minutes, une tâche qui prendrait normalement du temps, des efforts ou de l'argent pour être accomplie à une si grande échelle.

L'IA générative n'est pas parfaite et certaines questions peuvent ne pas correspondre aux attentes du créateur du test. Lorsque l'on utilise le Chat GPT pour générer des questions d'évaluation, il est toujours nécessaire qu'un humain examine et modifie les questions qui ne conviennent pas. Le processus d'édition des questions est cependant généralement plus rapide que la génération de questions à partir de zéro. 

Randomisation des questions de l'examen

La randomisation des questions d'un test consiste à utiliser une banque de questions ou plusieurs banques de questions de manière aléatoire lors de la conception d'un test. Traditionnellement, ce processus était réalisé manuellement, un enseignant créant deux ou trois versions d'un test en déplaçant les questions. Cela prenait énormément de temps, mais avec les logiciels de test modernes tels que TAO testingles éducateurs peuvent insérer des questions de manière transparente dans la plateforme et cette dernière peut randomiser l'ordre dans lequel les questions sont données dans un test. Outre la randomisation des questions, les plateformes de test numériques peuvent également randomiser les sélections de réponses.

Tout cela permet d'améliorer la validité et la fiabilité des tests, de réduire la tricherie et d'améliorer l'intégrité générale des tests. Bien que le Chat GPT puisse générer différentes formes d'un test, cela demande un effort personnel pour copier, coller et imprimer différentes versions du test. L'utilisation d'une plateforme de test, comme TAO testing, permet d'accélérer ce processus et d'héberger l'ensemble du processus, de l'élaboration du test à la notation, en un seul endroit. 

Exemples de types de questions

Chat GPT peut élaborer des questions pour une grande variété d'évaluations ou de besoins, notamment 

  • Questions basées sur des faits : Questions basées sur des informations factuelles. Par exemple, "Quelle est la plus grosse planète de notre système solaire ?".
  • Questions conceptuelles : Questions liées à la compréhension de concepts et de principes. Par exemple, "Quelle est la différence entre le temps et le climat ?"
  • Questions analytiques : Questions conçues pour analyser et interpréter les informations. Par exemple, "Quelles sont les causes potentielles de la crise actuelle du changement climatique ?".
  • Questions de réflexion critique : Questions permettant d'évaluer les informations et de porter un jugement. Par exemple, "Pensez-vous que les médias sociaux ont un impact positif ou négatif sur la société ? Expliquez votre réponse."
  • Questions créatives : Questions conçues pour générer des idées uniques et innovantes. Par exemple, "Quelles sont les solutions possibles pour réduire les déchets plastiques dans nos océans ?".
  • Questions basées sur un scénario : Il s'agit de questions qui présentent un scénario hypothétique et demandent à l'étudiant d'y répondre. Par exemple, "Vous êtes le PDG d'une entreprise qui a été accusée de pratiques contraires à l'éthique. Comment géreriez-vous la situation ?"

Considérer la psychométrie : Validité et fiabilité avec Chat GPT

La psychométrie est un aspect essentiel de la création de questions d'évaluation efficaces, car elle implique la conception de questions fiables, valides et équitables pour tous les participants aux tests. Les questions générées par l'IA doivent encore être évaluées en fonction des principes psychométriques afin de s'assurer qu'elles répondent aux normes nécessaires.

L'un des moyens de concilier le contenu généré par l'IA et la psychométrie est d'incorporer un examen humain et un contrôle de la qualité dans le processus d'évaluation. Des experts humains dans le domaine concerné et des psychométriciens peuvent évaluer la validité, la fiabilité et l'équité des questions générées. Ils peuvent également s'assurer que les questions correspondent aux résultats d'apprentissage prévus et qu'elles sont adaptées au public visé.

Une autre façon de garantir la qualité du contenu généré par l'IA est d'utiliser des algorithmes d'apprentissage automatique spécialement conçus pour optimiser les propriétés psychométriques, tels que les modèles de théorie de la réponse à l'item (TRI). Ces modèles permettent d'identifier les items trop difficiles ou trop faciles et d'ajuster la difficulté de l'item en fonction des réponses des participants au test, afin de s'assurer que les scores reflètent bien les capacités du participant.

La ligne de fond

Chat GPT offre un immense potentiel d'utilisation de l'IA pour la génération de banques d'éléments de test, ce qui permet aux créateurs de tests d'économiser du temps, de l'argent et des efforts. L'utilisation de l'IA générative pour développer des tests en classe est un moyen d'aider les éducateurs à créer des tests avec de nombreux niveaux différents sans avoir à passer des heures à retravailler les différentes questions. 

Lorsqu'il est associé à une plateforme de test en ligne, telle que TAO l'élaboration des tests peut être hautement personnalisée pour répondre aux besoins des apprenants individuels tout en améliorant l'intégrité des tests grâce à la randomisation des questions. Tout cela conduit à une expérience de test qui va au cœur de ce que l'évaluation est conçue pour faire, informer les éducateurs sur le niveau de l'élève, les étapes à suivre et la façon d'améliorer les résultats de l'apprentissage pour les élèves.