TAOポータルで手動採点用の項目を設定する

デフォルトでは、受験者は完全に正解したインタラクション 1 つにつき 1 ポイントを受け取ります。しかし、テスト作成者が個々の項目を手動で設定し、別の採点方法(採点者が手動で採点する、部分点を与えるなど)を設定する必要がある場合もあります。

TAO ポータルでは、採点者はセッションのモニタリングページから、採点が必要な評価を表示することができます。受験者がテストを提出し、関連する項目の自動採点が実施されるとすぐに、個々の受験者の採点ボタンがプロセスを開始します。手動採点の詳細については、TAO Graderのドキュメントを参照してください。

受験者の回答が正しく処理されるようにするには、項目の作成時に、該当するテスト項目を手動採点用に設定する必要があります。以下の手順に従ってください。

    1. 手動採点が必要な項目としてラベルを貼る。
      クリックすると 成果宣言 の中にある。 レスポンス プロパティパネル をクリックします。下の画像のように、アイテムの結果が表示されます。結果はユーザーによって定義されます。デフォルトでは、SCOREとMAXSCOREはQTI標準の一部であるため、自動的に追加されます。結果の右側にある編集アイコンをクリックすると、その結果に関連する値が表示されます。下の例では、このテスト項目 (つまり、採点が必要な回答の最初の側面) の最初のカスタム結果 (ユーザが作成) は WORDCHOICE です。最初の値は 解釈 - 結果の名前。これは手動採点を行う人に表示される名前です。以下の例では 言葉の選択.

      新しい項目を作成する際に、TAOで手動採点を行うための項目結果宣言を設定する。
      TAOの項目に成果宣言を追加する

      External Scored」のドロップダウンメニューで、「 Human」を選択する
      この値は、この特定の結果に必要な採点のタイプ(この場合、人間による採点)を示します。

    2. 採点基準の説明を加える。

      マニュアル採点者は、問題の項目 (または結果) に対してどのような採点システムを使用するかを知る必要があります。これは採用したい採点基準を含むルーブリックの形で示され、ホストされているPDFファイルへのリンクからアクセスできます。

      Long Interpretationと書かれたボックスに、採点基準を含むPDFファイルへのリンクを追加します。これは後で採点者がアクセスします。

    3. スコアの範囲を定義する。

      Valueと書かれたボックスに範囲(例:1~4)を入力する。

      以下のルールが守られている限り、異なる範囲を定義することは可能である:最小値と最大値の両方を、整数だけを使用して定義すべきである。最大値は負であってはならず、最小値より大きくなければならない。

      注:項目の回答に手動採点のフラグを立てるには、「値」の下に有効なスコアの範囲があり、「外部採点」ボックスで「人間」が選択されている必要があります。

      注:1つの項目に複数の結果がある場合(すなわち、回答の異なる側面に別々のスコアが与えられる場合、つまり1つの項目に複数のスコアが必要な場合)、それぞれのスコアリングメソッドを設定する必要があります。これはマニュアル採点プラットフォームでは「マルチ特性採点」と表現されます。上の画像の例では、このテスト項目の他の2つの側面が表示されています:理解」と「力学」です。

    4. アイテムの主題カテゴリを定義します。

      項目の主題カテゴリを定義する必要がある。これは、採点者が項目の科目カテゴリに基づいて割り当てられる場合に、適切な採点者にその項目が送られるようにするためである。

      これは、問題のテストセクションの プロパティで行います(個々の項目に対して定義することもできます。)例として、下の画像をご覧ください。
      定義したいテストエリアのプロパティアイコン(上部の歯車、またはテストパート、セクション、アイテムの横にある歯車)をクリックします。右側のプロパティパネルで、「Categories」をクリックします。現在のテスト、セクション、または項目に必要な科目カテゴリを入力します。各科目カテゴリは「x-tao-scoring」で始まり、科目で終わる必要があります。例えば、x-tao-scoring-english、x-tao-scoring-math、x-tao-scoring-biologyなどがあります。

      TAOグレーダーのみ:科目カテゴリに従って採点者を割り当てることは2つのオプションのうちの1つです。利用可能な割り当て戦略の詳細についてはTAOグレーダーのセクションの採点プロジェクトを作成する章をご覧ください。

      手動採点が必要な問題に対する採点者のカテゴリなど、項目レベルのテストプロパティを設定する。
      得点者のカテゴリーを入力する
    5. 手動採点用に設定された項目の表示と採点。受験者が評価を完了すると、採点者はセッションの概要ページから手動採点用の項目を表示し、採点することができます。詳細については、TAOグレーダーのドキュメントを参照してください。