Que vous soyez un éducateur ou un employeur, il est crucial de vous assurer que vous mesurez et testez les bonnes compétences et réalisations d'une manière éthique, précise et significative. Si vous voulez vous assurer que vos étudiants sont bien informés et préparés, ou si vous voulez vous assurer qu'un employé ou un membre du personnel potentiel est capable d'accomplir des tâches spécifiques, vous devez leur fournir le bon contenu d'examen ou d'évaluation.
Pour qu'un examen ou une évaluation puisse remplir son objectif sans biais, il doit mesurer ce qu'il est censé mesurer de manière objective. En d'autres termes, vos tests doivent être valides et fiables.
Qu'est-ce que la validité d'un examen ?
La validité de l'évaluation renseigne sur l'exactitude et la fiabilité des résultats de l'examen. Afin de pouvoir utiliser les résultats en toute confiance et de manière éthique, vous devez vous assurer de la validité et la fiabilité de l'examen.
La validité signifie qu'un test mesure ce qu'il est censé mesurer et ne comporte pas de questions biaisées, non éthiques ou non pertinentes. La validité est spécifiquement liée au contenu du test et à ce qu'il est censé mesurer.
La fiabilité, quant à elle, concerne la constance avec laquelle un test produit des résultats stables. Par exemple, si un groupe d'élèves passe un test pour mesurer la littératie numérique et que les résultats montrent une maîtrise, mais qu'ils refont le test et échouent, il peut y avoir des incohérences dans les questions du test. L'évaluation produit des résultats peu fiables. En d'autres termes, les résultats de vos tests doivent être reproductibles et cohérents, ce qui signifie que vous devez pouvoir tester un groupe ou une personne deux fois et obtenir les mêmes résultats ou des résultats proches.
Quatre façons d'améliorer la validité et la fiabilité des évaluations
Heureusement, il existe des moyens de concevoir le contenu des tests pour s'assurer qu'il est précis, valide et fiable. Gardez à l'esprit ces éléments fondamentaux au fur et à mesure que vous avancez dans les quatre étapes clés :
- Validité du contenu - sachez ce que vous voulez mesurer et assurez-vous que le test ne s'en écarte pas ;
- Validité des critères - évaluer dans quelle mesure votre test mesure le contenu ;
- Validité de structure - vérifier que le test mesure effectivement le bon contenu ou s'il mesure autre chose ;
- Fiabilité - assurez-vous que le test est reproductible et qu'il peut donner des résultats cohérents si le même groupe ou la même personne devait refaire le test dans un court laps de temps.
Les conseils ci-dessous peuvent vous guider dans la création de vos examens ou évaluations afin de vous assurer que leur contenu est valide et fiable.
1. Identifier le but du test en fixant des objectifs SMART
Avant de commencer à élaborer des questions pour votre test, vous devez définir clairement l'objet et les objectifs de l'examen ou de l'évaluation. Vous pouvez le faire en établissant des objectifs SMART. SMART est l'abréviation de :
- Spécifique ;
- Mesurable ;
- Réalisable ;
- Pertinent ;
- Limité dans le temps.
Comme vous pouvez le constater, les objectifs SMART incluent certains des composants clés de la validité des tests : mesurabilité et pertinence. Si vous créez des objectifs de test SMART qui incluent des résultats mesurables et pertinents, cela vous aidera à garantir que les résultats de votre test pourront être reproduits. Cela vous guidera lors de la création des questions du test.
En cours de route, vous pouvez vous rendre compte que les questions que vous avez trouvées ne sont pas valides ou fiables. Vous pouvez différencier ces questions en vous reportant à vos objectifs SMART. Il s'agit notamment d'identifier les spécificités du test et ce que vous voulez mesurer, comme le contenu ou les critères.
Gardez à l'esprit les destinataires du test et la façon dont ils peuvent percevoir certaines langues. Déléguez également le nombre de questions que vous souhaitez inclure ou la durée du test afin d'obtenir les résultats les plus précis sans submerger les répondants. En établissant ces éléments à l'avance et en définissant clairement vos objectifs, vous pouvez créer un test plus valide.
2. Mesurer les bonnes compétences
Lorsque vous concevez un nouveau test, il est également important de vous assurer que vous savez quelles compétences ou capacités vous devez tester en fonction de la situation. Par exemple, si vous donnez un cours d'informatique, vous devez vous assurer que votre examen comporte les bonnes questions pour déterminer si vos élèves ont acquis ou non les compétences dont ils auront besoin pour être considérés comme compétents en informatique.
Ou encore, si vous recrutez quelqu'un pour un poste de direction dans le domaine des TI, vous devez vous assurer qu'il possède les bonnes compétences matérielles et immatérielles pour le poste. Votre évaluation doit comporter des questions qui testent avec précision les compétences au-delà des exigences fondamentales du poste. Incluez des questions qui évaluent les compétences de communication, l'empathie et l'autodiscipline. De même, si vous êtes un éducateur qui propose un examen, vous devez examiner attentivement le contenu du cours et les compétences que les étudiants doivent avoir acquises afin de vous assurer que votre examen évalue correctement ces compétences.
3. Priorité à l'accessibilité, l'équité et l'objectivité
Lorsqu'il s'agit de fournir une évaluation, il est également important de veiller à ce que le contenu du test soit aussi impartial que possible. Cela signifie qu'il doit être accessible et équitable. Par exemple, si vous vérifiez si une personne possède les compétences requises pour devenir programmeur informatique, mais que vous posez des questions sur sa race, son lieu de résidence ou son handicap physique, vous incluez des questions qui risquent de fausser les résultats du test et de les rendre discriminatoires. Une personne pourrait ainsi être exclue ou échouer pour de mauvaises raisons, voire des raisons illégales. Si une personne est de couleur ou se déplace en fauteuil roulant, par exemple, cela n'a rien à voir avec le fait qu'elle soit ou non un bon programmeur informatique.
Il est également crucial de faire attention au contenu du test pour s'assurer qu'il n'exclut pas involontairement des groupes de personnes. Par exemple, une évaluation objective dans l'enseignement supérieur tiendra compte de certains étudiants qui ont besoin d'aménagements ou qui ont des styles d'apprentissage différents. Il n'est pas juste de créer un test sans tenir compte des étudiants handicapés, d'autant plus qu'environ un tiers seulement des étudiants handicapés informent leur université. des étudiants handicapés informent leur université. Plutôt que de supposer que ceux qui passent votre test vivent sans handicap, efforcez-vous de rendre chaque question accessible à tous. Utilisez un langage inclusif, des termes simples le cas échéant, des adaptations pour les lecteurs d'écran et tout ce que vous pouvez imaginer pour aider tout le monde à accéder à votre examen et à le passer de manière égale.
4. Effectuer une analyse et un examen de l'essai
Enfin, après avoir créé votre test, vous devez procéder à une révision et à une analyse avant de le distribuer à vos étudiants ou à vos futurs employés. Pour ce faire, vous pouvez demander à des collègues ou à d'autres experts de jeter un coup d'œil à votre test. Le fait que d'autres personnes examinent votre test peut vous aider à repérer des problèmes que vous n'auriez peut-être pas détectés vous-même.
Il existe également des programmes permettant d'analyser les questions pour s'assurer qu'elles sont valides et fiables. Si une question ne convient pas ou n'est pas pertinente, le programme la signalera comme devant être supprimée ou, éventuellement, reformulée pour être plus pertinente.
- —
La création d'examens et d'évaluations plus valides et plus fiables est essentielle pour le développement des étudiants et des travailleurs. Si vous ne testez pas les bons éléments avec précision, cela peut avoir des répercussions négatives sur votre entreprise et vos employés ou entraver le développement éducatif des étudiants. Il est également important de revoir et d'actualiser régulièrement vos tests en fonction de l'évolution des besoins, ainsi que de vous montrer coopératif et de fournir un retour d'information après le test.
