Une évaluation peut contenir un mélange d'éléments qui doivent être notés automatiquement et d'éléments qui nécessitent une intervention humaine (et même les interactions individuelles au sein d'un élément de test peuvent être mélangées). Certaines questions peuvent être de simples questions à choix multiples qui peuvent être notées automatiquement dans le TAO, tandis que d'autres sont des questions ouvertes qui nécessitent un correcteur humain pour les noter. L'industrie de l'évaluation devenant de plus en plus numérisée, les institutions ont besoin d'un moyen rationalisé et sécurisé de mesurer et de stocker les évaluations de tous types, y compris celles qui contiennent des sections à réponse ouverte.
TAO Grader, le logiciel de notation des réponses ouvertes de TAO, permet aux enseignants et aux autres experts en la matière de noter manuellement les tests qui ont été configurés dans la plateforme TAO, offrant une solution plus efficace pour la notation des réponses ouvertes et des questions à développement. Avec TAO Grader, les réponses écrites filtrent dans les outils de rapport de TAO sous un format électronique, plutôt que sous forme de scan numérique. Il est donc beaucoup plus facile d'attribuer des notes, de déplacer et de partager les fichiers de réponses aux tests, de désigner des correcteurs internes qui effectuent la première passe de notation et d'assigner des réviseurs pour confirmer ou infirmer ces notes.
Bien que la notation automatique élimine le travail de notation pour de nombreux types de questions d'évaluation, comme les questions à choix multiples ou les questions à trous, certaines sections du test peuvent encore nécessiter des réponses écrites, qui doivent ensuite être notées par un enseignant ou un expert en la matière. De nombreuses complications peuvent survenir lors de la notation manuelle de dissertations et d'autres types de questions à réponse ouverte sans moteur de notation manuelle. Il peut s'agir de difficultés à déchiffrer l'écriture, de difficultés à stocker les résultats et de problèmes lors de la numérisation de ces sections d'évaluation écrite dans une solution de rapport d'évaluation.
TAO Grader résout ces problèmes en fournissant aux éducateurs une approche simplifiée et intuitive pour accéder aux questions à réponse ouverte et les noter en ligne. Cela élimine efficacement la nécessité d'imprimer, de noter et de stocker à la main de gros volumes d'évaluations sur papier.
Un avantage crucial d'un système de notation manuel est la possibilité d'attribuer et de noter les réponses en équipe. TAO permet la notation asynchrone en équipe, réduisant ainsi les coûts opérationnels liés à l'impression, l'organisation et la notation manuelle des examens. Non seulement la notation en équipe allège la charge de travail des correcteurs et raccourcit le temps de retour des résultats, mais elle permet également à des experts en la matière de participer à la notation et élimine efficacement les préjugés entre correcteurs et candidats.
Par exemple, les groupes de correcteurs du TAO peuvent se voir attribuer au hasard des questions à noter, soit sur la base d'une catégorie de sujets, soit sur la base de groupes de candidats définis par l'utilisateur. Dans les deux cas, les noms des candidats sont masqués pour permettre une notation objective et impartiale.
Les examens à fort enjeu et à grande échelle, comme l'ACT ou le SAT aux États-Unis et les examens de maturité ou de baccalauréat en Europe, sont organisés en sections par matières ou résultats d'apprentissage spécifiques. La notation de questions d'évaluation ouvertes dans différentes matières, ou de compétences au sein d'une même matière, exige souvent que les correcteurs aient une expertise spécifique dans ces domaines.
Dans ce cas, les systèmes de notation manuelle comme TAO Grader qui vous permettent de catégoriser les questions d'évaluation et d'assigner des correcteurs par sujet, plutôt que pour l'ensemble du test, peuvent conduire à une notation plus efficace, plus rapide et plus rationnelle. Cette fonctionnalité peut également contribuer à simplifier les flux de travail de notation, en garantissant que les bons experts en la matière notent les questions de test appropriées.
L'organisation du projet et la file d'attente de TAO Grader pour la notation des réponses ouvertes sont adaptées aussi bien aux programmes d'évaluation à petite échelle et à faible enjeu qu'aux programmes d'évaluation nationaux à enjeu élevé. En tant que solution prête à l'emploi, le correcteur de réponses ouvertes de TAO est entièrement intégré à la plateforme TAO et offre des flux de travail rationalisés et de bout en bout pour organiser, stocker et partager les résultats et les données des élèves. Il s'agit d'une solution multilingue, qui peut être facilement étendue pour prendre en charge de nouvelles fonctionnalités linguistiques.
Les grilles d'évaluation sont des outils efficaces pour noter de manière cohérente les réponses ouvertes, et jouent un rôle clé dans l'évaluation en ligne. Les rubriques sont des outils de notation conçus pour décrire ou classer les niveaux de performance des participants à un test en fonction d'un certain nombre de critères. En définissant des critères spécifiques dans une rubrique, les éducateurs sont en mesure de communiquer les objectifs d'apprentissage et le niveau de maîtrise sur lesquels ils évalueront les participants aux tests. Parmi les autres avantages de la notation par rubrique des réponses ouvertes dans le cadre d'une évaluation en ligne, citons les suivants :
- Mise en place d'un mécanisme de notation impartial et uniforme
- Faciliter une évaluation plus rapide pour les éducateurs et un retour d'information pour les participants aux tests.
- Améliorer la communication avec les participants aux tests en définissant clairement les attentes en matière de notation.
- Inspirer la pensée critique
Le logiciel de notation manuelle de TAO fournit une solution intégrée pour joindre des rubriques numériques PDF afin de faciliter la notation des réponses aux tests écrits. Les étudiants sont en mesure de comprendre les attentes du test et la manière dont ils seront évalués, tandis que les enseignants reçoivent les réponses reçues immédiatement après leur soumission et disposent d'un ensemble cohérent de directives à noter par rapport à un retour plus rapide.
Avec TAO Grader, les utilisateurs qui effectuent les tâches de notation et de re-notation sont appelés respectivement Scorers et Reviewers. Après avoir affecté des catégories de sujets aux questions d'évaluation, vous pouvez affecter des groupes de correcteurs et de réviseurs désignés à des éléments ou des sections de test. Les flux de travail permettent ensuite à ces utilisateurs de visualiser et d'exécuter leurs tâches de notation de manière rationnelle et efficace.
Les noms des participants aux tests sont masqués pendant la notation afin d'éliminer les préjugés des correcteurs. En outre, la désignation d'un examinateur chargé de confirmer ou de contester la note attribuée par le correcteur initial garantit une approche objective lorsque la notation en double aveugle est nécessaire.
Le logiciel de notation des réponses ouvertes TAO comprend une fonction qui permet aux autres utilisateurs du projet de notation de "noter l'évaluateur", c'est-à-dire de noter différents évaluateurs en fonction de leurs capacités de notation. Par exemple, vous pouvez avoir un évaluateur qui note systématiquement plus ou moins bien qu'un examinateur pour certaines questions ou catégories de sujets. Dans ce cas, il est utile d'évaluer cet utilisateur et de modifier ou de supprimer ses projets de notation. Dans le cas d'une évaluation à enjeux élevés, il est essentiel que les évaluateurs soient contrôlés et qu'ils soient à la hauteur afin de ne pas interférer avec les progrès des élèves en attribuant des notes inférieures ou supérieures à celles qui sont justifiées.
Une solution moderne et facile à utiliser pour les utilisateurs qui ne sont pas férus de technologie peut aider les correcteurs à effectuer leurs tâches de notation à distance. Les éducateurs d'aujourd'hui recherchent une certaine flexibilité dans l'utilisation de leurs solutions EdTech, en exploitant plusieurs appareils et navigateurs. La possibilité de noter les évaluations sur une tablette ou un ordinateur portable permet de noter les réponses à distance tout en fournissant un retour rapide aux étudiants.
L'accessibilité est toujours une préoccupation majeure dans l'évaluation en ligne, mais elle est trop souvent négligée. Conformément aux exigences d'accessibilité WCAG 2.1 AA et aux directives de la section 508, les solutions d'évaluation en ligne de TAO sont conçues pour l'accessibilité dès le départ afin de garantir l'accès à tous les aspects du cycle de test. L'interface utilisateur web de TAO Online Manual Scoring Professional est intrinsèquement accessible, et peut être utilisée avec un lecteur d'écran pour les utilisateurs souffrant de déficiences visuelles.
Pour en savoir plus sur l'accessibilité de TAO , cliquez ici.
Parfois, il est nécessaire d'attribuer des notes distinctes à différents aspects d'une réponse, ce qui signifie que plusieurs notes sont nécessaires pour un seul élément. C'est ce qu'on appelle la notation multi-traits. Dans le TAO, désigner la notation multi-traits signifie qu'un item a plus d'un résultat qui doit être noté manuellement. Par exemple, une question de dissertation peut prendre en compte des traits tels que la "précision grammaticale" et le "choix des mots", qui s'appliquent aux mêmes questions, mais nécessitent des scores différents.
Un système de notation en ligne robuste doit prendre en charge les questions à réponse ouverte dans plusieurs langues afin de faciliter différents types d'évaluations, comme celles qui testent la maîtrise de l'écriture. Le logiciel de notation manuelle en ligne de TAO est multilingue dès le départ, conçu pour prendre en charge la notation des questions à réponse ouverte dans différentes langues.
