Configuration des éléments pour la notation manuelle dans le portail TAO

Par défaut, un participant au test reçoit un point par interaction entièrement correcte. Cependant, dans certains cas, l'auteur d'un test peut avoir besoin de configurer manuellement des éléments individuels pour d'autres méthodes de notation (par exemple, notation manuelle par un évaluateur ou attribution d'un crédit partiel).

Dans le portail du TAO, les correcteurs pourront voir quelles évaluations doivent être notées à partir de la page de suivi d'une session. Dès qu'un candidat a soumis un test et que la notation automatique de tous les éléments pertinents a été effectuée, le bouton Noter pour un candidat individuel déclenchera le processus. Pour plus d'informations sur la notation manuelle, voir la documentation sur TAO Grader.

Pour s'assurer que les réponses des participants au test sont traitées correctement, les éléments de test concernés doivent être configurés pour une notation manuelle lors de la création de l'élément. Pour ce faire, suivez les étapes ci-dessous.

1. 1. Indiquez que l'item doit être noté manuellement.
      Cliquez sur Déclarations de résultats dans le Réponse Panneau des propriétés à droite de l'élément. Le(s) résultat(s) de votre élément s'affiche(nt), comme dans l'image ci-dessous. Les résultats sont définis par l'utilisateur. Par défaut, SCORE et MAXSCORE sont automatiquement ajoutés, car ils font partie de la norme QTI. En cliquant sur l'icône de modification à droite d'un résultat, les valeurs qui lui sont associées s'affichent. Dans l'exemple ci-dessous, le premier résultat personnalisé (créé par l'utilisateur) listé pour cet élément du test (c'est-à-dire le premier aspect de la réponse qui doit être noté) est le MOTCHOICE. La première valeur est Interprétation - le nom du résultat. Il s'agit du nom qui sera affiché à la personne chargée de la notation manuelle. Dans l'exemple ci-dessous, il s'agit de Choix des mots.

      

      Dans le menu déroulant sous External Scored (Notation externe), sélectionnez Human (Humain).
      Cette valeur indique le type de notation nécessaire pour ce résultat particulier (dans ce cas, la notation par un humain).
      

   2. Ajouter une description des critères de notation.

      Le correcteur manuel doit savoir quel système de notation utiliser pour l'item (ou le résultat) en question. Ce système est présenté sous la forme d'une grille d'évaluation qui contient les critères de notation que vous souhaitez utiliser et qui est accessible via un lien vers un fichier PDF hébergé.

      Dans la case intitulée Interprétation longue, ajoutez un lien vers le fichier PDF hébergé qui contient la grille d'évaluation. Le correcteur y accèdera ultérieurement.

   3. Définir l'étendue du score.

      Saisissez l'intervalle (par exemple, 1-4) dans la case intitulée Valeur.

      Il est possible de définir différentes plages, à condition de respecter les règles suivantes : le minimum et le maximum doivent être définis en utilisant uniquement des nombres entiers. Le maximum ne doit pas être négatif et doit être supérieur au minimum.

      Note :Pour que les réponses d'un élément soient marquées pour une notation manuelle, il doit y avoir une fourchette de notation valide sous Valeur et humain doit être sélectionné dans la case ExternalScored.

      Note :Si un item a plus d'un résultat (c'est-à-dire si différents aspects d'une réponse se voient attribuer des scores distincts, ce qui signifie que plusieurs scores sont nécessaires pour un item), la méthode de notation doit être configurée pour chacun d'entre eux. C'est ce qu'on appelle la "notation multi-traits " sur la plateforme de notation manuelle. Dans l'exemple de l'image ci-dessus, deux autres aspects de cet élément de test sont visibles : Compréhension et Mécanique.

   4. Définissez la catégorie de sujet de votre article.

      La catégorie de sujet d'un élément doit être définie. Cela permet de s'assurer qu'il est attribué à un évaluateur approprié dans les cas où les évaluateurs sont assignés sur la base de la catégorie de sujet des éléments.

      Cela se fait dans les propriétés de la section de test en question (cela peut également être défini pour des items individuels - c'est-à-dire que chaque item peut être classé différemment, dans les propriétés de l'item). Voir l'image ci-dessous pour un exemple.
      Cliquez sur l'icône Propriétés de la partie du test que vous souhaitez définir (les cognes en haut, ou les cognes à côté de la partie du test, de la section ou de l'item). Dans le panneau des propriétés situé à droite, cliquez sur Catégories. Saisissez la catégorie de sujet dont vous avez besoin pour le test, la section ou l'élément en cours. Chaque catégorie de sujet doit commencer par "x-tao-scoring" et se terminer par le sujet, qui peut être n'importe quoi. Les catégories possibles sont x-tao-scoring-english, x-tao-scoring-math, ou x-tao-scoring-biology, par exemple.

      TAO Grader uniquement : L'affectation des correcteurs en fonction de la catégorie de matière n'est qu'une des deux options possibles. Voir le chapitre Création d'un projet de notation dans la section TAO Grader pour plus de détails sur les stratégies d'affectation disponibles.

      

   5. Afficher et noter les éléments configurés pour la notation manuelle. Une fois que les participants au test ont terminé une évaluation, les évaluateurs pourront visualiser et noter les éléments pour la notation manuelle à partir de la page d'aperçu de la session. Pour plus d'informations, voir la documentation sur TAO Grader.