正誤問題（真偽問題）は、最も一般的に用いられる評価問題形式の一つです。その単純さゆえに、作成が迅速で実施も容易ですが、その単純さは一見すると誤解を招きやすいものです。作成は一見簡単そうに見えますが、評価結果の質を低下させる恐れのある落とし穴がいくつか存在します。
しかし、適切に設計されていれば、正誤問題は知識や理解度を評価するための効率的かつ効果的な手段となり得ます。本記事では、正誤問題が効果的な理由、最も適している場面、避けるべきよくある落とし穴、そしてより優れた評価問題を作成するための実践的な戦略について探っていきます。
正誤問題の理解
正誤問題とは、学習者がその記述が正しいか間違っているかを判断する単一の記述からなる問題です。各記述にはあらかじめ定められた正解があるため、採点は客観的であり、採点者の主観に左右されません。この点において、正誤問題は、複数の回答が正解となり得たり、採点において解釈が大きな役割を果たしたりする、意見に基づく問題や自由回答形式の問題とは一線を画しています。
自由回答形式の問題とは異なり、正誤問題では、通常、認識力や記憶力を評価するものであるため、学習者にその根拠を説明する必要はありません。このため、正誤問題は、基礎知識、事実の記憶、用語の理解、概念の認識、および正確な情報と一般的な誤解を区別する学習者の能力――つまり、答えが明確で曖昧さのない分野――を評価するために頻繁に用いられます。
正誤問題（真偽問題）は、通常、技能の習得度を測る主な手段としてではなく、評価問題の中で他の問題形式と併せて出題されることがほとんどです。適切に使用すれば、より複雑な知識や技能の示範に進む前に、重要な概念の理解度を確認するのに役立ちます。
「正誤問題」を活用するメリット
入念に作成された正誤問題には、評価設計者にとって次のような利点があります。
- 効率的な作成： 正誤問題（True-or-false）は、より複雑な問題形式に比べて作成に比較的時間がかからないため、評価問題の開発や大規模な問題バンクの構築において効率的な選択肢となります。
- 幅広い内容の網羅性： そのシンプルな形式により、アセスメント作成者は1つのアセスメント内で幅広い概念を網羅することができ、重要な知識や理解度を測定する機会を増やすことができます。
- 迅速かつ一貫性のある自動採点： 評価プラットフォームは回答を即座に採点できるため、手作業による採点時間を削減しつつ、学習者に即時のフィードバックを提供できます。また、自動採点により、同じ採点基準を用いて数百人あるいは数千人の学習者を評価する必要がある大規模な評価においても、正誤問題の実用性が高まります。
「正誤問題」の限界
正誤問題にはさまざまな利点がありますが、特定の学習目標に対して適切な問題形式であるかどうかを判断する際には、その限界についても考慮する必要があります。
推測は信頼性に影響を与える可能性がある
この問題形式の最も明らかな欠点の一つは、学習者が正解する確率が50％であるという点です。このため、単一の正誤問題だけでは、習得度を判断する根拠としては不十分です。正解は知識を反映している可能性もありますが、単なる当て推量によるものかもしれないため、学習者が実際にその内容を理解しているかどうかを判断するのは困難です。 このため、正誤問題は、学習成果を示す単独の根拠としてではなく、より広範な評価の一環として用いる場合に、通常最も効果的です。
複雑な思考を測定するのは難しい
また、正誤問題では高次思考を測定する能力にも限界があるため、応用、分析、評価、または統合といった分野にはあまり適していません。 ブルームの分類法によれば、これらの認知プロセスでは、学習者が知識を応用、分析、評価、あるいは創造することで、単なる想起の域を超えることが求められる。
正誤問題では、学習者に推論を示すのではなく、単一の記述を判断するよう求めるため、その答えの背後にある問題解決の過程を把握することはできません。正解であっても、受験者がなぜ正しく答えられたのかは明らかになりませんし、誤答であっても、その誤答につながった具体的な誤解が特定できない場合があります。
不適切な表現は、より大きな影響を及ぼす
正誤問題には、1つの文と2つの選択肢しか含まれていないため、学習者が問題の意図する意味を明確にする機会はほとんどありません。その結果、わずかな表現の違いが問題の解釈に大きな影響を与える可能性があり、この問題形式では正確な表現が特に重要となります。
質問の表現が不適切な場合、その妥当性、すなわち、その質問が意図した知識や技能をどの程度正確に測定できるかが低下する可能性があります。表現が曖昧であったり誤解を招くものであったりすると、学習者の回答が当該主題に関する知識を反映しているのか、それとも表現に対する解釈を反映しているのかを判断することが難しくなります。
正誤問題の説得力を弱めてしまうよくある間違い
問題作成におけるよくある間違いを認識することで、評価設計者は学習者の知識をより正確に反映した正誤問題を作成できるようになります。 問題作成ガイドラインに関する研究 では、曖昧な表現、当て推量、試験対策的な解答といった繰り返し指摘される問題が明らかになっており、慎重な問題設計の重要性が改めて強調されている。
曖昧な表現
曖昧な表現は、学習者が問題の意図を正しく理解することを困難にすることがあります。ある記述が合理的に複数の解釈が可能である場合、誤った回答は、その概念に関する知識の不足というよりも、表現に対する混乱を反映している可能性があります。
「弱点」： 正誤問題：従業員は重要なファイルを定期的にバックアップすべきである。
この言葉 は常に という表現には解釈の余地があり、学習者が方針を誤解したために間違えたのか、それとも期間の解釈が異なっていたために間違えたのかが不明確になります。
改善点： 正誤問題：従業員は、毎日の業務終了時に重要なファイルのバックアップを取るべきである。
具体的な時間枠を設けることで、学習者は、その内容を解釈することなく、社内方針に関する知識を実証することができます。 「定期的に」 」という言葉の意味を解釈する必要なく、企業方針に関する知識を証明できるようになります。
1つの質問に複数のアイデアが含まれている
正誤問題では、一度に一つの考えを評価すべきです。一つの文に複数の主張が含まれている場合、学習者はある部分は正しいと分かっていても、別の部分については確信が持てないことがあり、その結果、その正誤問題に対する回答を解釈することが難しくなります。
「弱点」： 正誤問題：実験室の職員は、安全ゴーグルを着用し、化学廃棄物は指定の容器に廃棄すべきである。
学習者は、ある手順は理解していても、もう一方の手順は理解していない場合があり、その結果、どの概念を理解しているのかを判断することができなくなる。
改善点：
- 正誤問題：実験室の職員は、有害な化学物質を取り扱う際、安全ゴーグルを着用すべきである。
- 正誤問題：化学廃棄物は指定の容器に入れて処分すべきである。
この2つの手順を分けることで、各問題で異なる概念を測定できるようになり、知識の不足箇所を特定しやすくなります。
絶対言語
次のような言葉、例えば 「いつも」、 決して、 すべて、および 「ない」 は、例外がしばしばあり得るため、意図せずしてその記述が誤りであることを示唆してしまう可能性があります。これにより、学習者は専門知識ではなく、表現のパターンに基づいて答えを判断してしまう可能性があります。
「弱点」： 正誤問題：従業員は、職場で発生した事案を常に直属の上司に報告すべきである。
改善点： 正誤問題：会社の方針により、従業員は職場での事案を所定の報告手順を通じて報告することが義務付けられています。
改良版では、絶対的な手がかりを排除し、学習者が知っておくべき具体的な方針に焦点を当てています。
効果的な正誤問題を作成するためのベストプラクティス
弱点となる問題を見極めることは、効果的な評価問題の作成においてほんの一部に過ぎません。質の高い正誤問題を作成するには、体系的な設計とレビューのプロセスも必要です。以下のベストプラクティスに基づいたワークフローに従うことで、評価問題作成者は質の高い正誤問題セクションを作成することができます。
- 各問題を学習目標と結びつける： すべての正誤問題については、特定の学習目標を評価できるよう作成する必要があります。学習目標から検討を始めることで、各設問が意図した知識や技能を測定し、評価全体の目的を確実に達成できるようになります。
- 明確かつ客観的な記述を1つ作成してください： 各項目は、意図された内容に基づいて「真」または「偽」と判断できる単一の記述を提示する必要があります。
- 虚偽の記述は、明らかな誤りではなく、もっともらしい誤解に基づいて作成する： 効果的な虚偽の記述は、学習者が現実的に抱きかねない誤りや誤解を反映しているべきである。これには、学習者が単に明らかに誤った情報を認識するだけでなく、その概念に対する理解を応用することが求められる。
- 配信前にすべての項目を確認してください： 各問題について、表現が曖昧ではないか、複数の概念が含まれていないか、意図しない手がかりがないか、また試験全体の他の問題との整合性が取れているかを確認してください。これにより、回答が問題作成上の欠陥ではなく、学習者の知識を反映したものとなるよう確保できます。
- 成績データに基づいて問題を試行・修正する： 学習者が各問題でどのような成績を収めているかを確認することで、分かりにくい問題、易しすぎる問題、あるいは意図した学習目標を適切に測定できていない問題が明らかになります。この情報を活用して今後の評価を改善することで、評価全体の質を高めることができます。
TAOのような評価プラットフォームを活用することで、チームは、評価全体を通じて、体系的な問題作成、レビュー、および品質保証のプロセスをより一貫して実施できるようになります。
「正誤問題」が、より広範な評価戦略にどのように組み込まれるか
正誤問題（True-or-false）は、より広範な評価戦略の一環として有用なツールですが、万能の解決策というわけではありません。教育機関は、測定しようとする学習目標や収集すべき証拠に基づいて、それを補完する問題形式を選択すべきです。 研究によると、 異なる問題形式を組み合わせることで、単一の形式に頼るよりも、学習者の理解状況をより包括的に把握できることが示唆されている。
正誤問題も、評価の構成に活用できます。多くの場合、評価の初期段階で、受験者が応用、分析、問題解決を要する課題に進む前に、前提となる知識を確認するために用いられます。これにより、基本的な理解が示される前に高次の思考力を評価してしまうことなく、後の問題が基礎的な概念に基づいて構成されるよう確保することができます。
戦略的に活用すれば、正誤問題も評価の効率化に寄与します。その簡潔な形式と自動採点機能により、基礎知識の大規模な評価に最適であり、教育機関は、学習者が推論力、応用力、あるいは複雑な問題解決能力を発揮することが求められる学習目標については、より詳細な記述式の問題形式を割り当てることができます。これにより、収集される評価結果の質を損なうことなく、評価の実施や採点に必要な時間とリソースを削減することが可能です。
より良い質問をより良い評価につなげる
正誤問題（True-or-false）は、適切に使用すればシンプルで効率的かつ効果的であるため、依然として最も広く用いられている評価問題形式の一つです。評価問題の作成者は、形式そのものに頼るのではなく、入念な問題作成、慎重な見直し、そして各学習目標に適した問題形式の選択に注力すべきです。
バランスのとれた評価戦略に組み込まれることで、適切に作成された正誤問題は、学習者の理解度を示す有意義な証拠となり、より信頼性の高い評価結果の得られを後押しします。
評価問題の作成プロセスを強化したいとお考えですか？その方法をご覧ください TAO Accelerateが が、組織が高品質なデジタルアセスメントを大規模に作成、提供、管理するのをどのように支援するかをご覧ください。
