ATPの技術に基づく評価に関するガイドラインのポイント

教室で高等教育の評価ツールを使用することを示す、コンピュータラボでコンピュータを使用する女性

世界中の学校や教育現場はデジタル化が進み、生徒や教師が利用できる多くのオンライン教育やデジタル学習プラットフォームが登場しています。このような新しく革新的な学習オプションに伴い、テクノロジーを利用した評価方法が、生徒の成長と達成度を測る上で公正かつ効果的であることを確認する必要が生じています。しかし、教室で行う鉛筆と紙による評価と、オンライン評価のベストプラクティスは同じではありません。 

このような理由から テスト出版社協会(ATP)は、デジタルアセスメントの設計、配信、採点など、オンラインアセスメントの導入と活用方法に関する詳細なガイドブックを開発しました。ATPは、デジタルアセスメントの設計、配信、採点など、オンラインアセスメントの導入と活用方法について、詳細なガイドブックを作成しました。ATPは、このガイドブックにおいて、テストのセキュリティ、妥当性、信頼性、公平性についてのガイドラインも提供しています。つまり、「テクノロジーに基づく評価のためのガイドライン」は、テスト管理者や学区の関係者がオンライン評価を開発する際の完璧な出発点を提供するものなのです。

何が含まれますか?

本ガイドは、デジタルアセスメントに関する様々なトピックや問題点を網羅したチャプターで構成されています。ガイドの各章は以下の通りです。 

  • テスト開発およびオーサリング(ゲーミフィケーションやテクノロジーを駆使した項目を含む)
  • テスト設計とアセンブリ(線形またはアダプティブ
  • 配信環境のテスト(Web、モバイル、オフライン、ロックダウンブラウザ、障害、相互運用性などを含む)
  • スコアリングオートメーションとテクノロジーアシスト
  • デジタルベースの結果報告
  • データ管理(保存、維持、完全性、統合)
  • 心理学的・技術的品質
  • テストの安全性
  • 技術に基づく評価におけるデータプライバシー
  • 公平性とアクセシビリティ
  • 翻訳を含むグローバルなテストへの配慮

各章は、その分野の専門家が執筆し、他の専門家がレビューすることで、ガイド内の情報が正確であり、業界全体のベストプラクティスを反映していることを保証しています。本ガイドは、高得点評価または総括的評価で使用されるように設計されていますが、特にテストデザインに関する原則は、以下にも適用することが可能です。 形成的評価にも適用できます。

キーテイクアウツ 

このガイドでは、多くの情報を整理する必要がありますが、5つの主要なトピックエリアが際立っています。これらは、技術的に強化された項目とゲームベースの評価、相互運用性、公平性とアクセシビリティ、採点、およびセキュリティに関する要点です。それぞれを考慮することで、教師またはテスト開発者は、テクノロジーを使った評価が、高いレベルのプライバシーとセキュリティを維持しながら、公平な方法で、測定したいものを測定できるようにすることができます。 

テクノロジーを駆使したアイテム&ゲームベースのアセスメント

学習効果を高めるためにテクノロジーを活用する最良の方法のひとつが ポータブル・カスタム・インタラクション(PCI.PCIは、学生がテスト内でゲームのようなシミュレーションと対話できるようにすることで、コンテキストや複数の結果で、学習を実証するための非常に大きな自由を提供します。

どのようなテスト項目を作成する場合でも、重要なのは、最終目標、つまり、その問題が何を測定し、学生に何を実証させるべきかを念頭に置いて始めることです。つまり、テクノロジーを駆使した問題(TEI)やゲームベースのアセスメントを使用する場合、測定される学習基準を考慮することから始め、学生がそのスキルの理解を実証できるように設計することが重要です。 その他、考慮すべき重要なガイドラインは以下の通りです。:

  • TEIが学生のデバイスで動作することを確認する - 学生がタブレット、ラップトップ、Chromebook、または他のデバイスで評価を受けるかもしれない、学生があまりスクロールせずにアイテムを表示できることを確認する。 
  • チュートリアルの提供 - 生徒は、評価を受けるのに忙しくならないように、始める前に技術の操作方法を理解する必要があります。そして、結果は、生徒がどれだけ技術を管理できたかではなく、何を知っているかを示しています。 
  • 構成要素の関連性分散(CIV)の削減 - テスト開発者は、可能な限り、コンテンツと生徒のスキルが前面に出るようにする必要があります。TEIは、簡単にアクセスでき、受験者を念頭に置いて開発されるべきです。 

相互運用性

学校が生徒を指導・評価する際に導入する、テクノロジーを駆使した評価ツールやプラットフォームは多種多様です。評価用ソフトウェアを開発する場合、ある場所から別の場所へのスムーズで安全な情報転送を保証するために、ソフトウェアは他のプラットフォームのソフトウェアにアクセスし、通信できる必要があります。 

教師にとっては、あるプラットフォームで評価を行い、生徒のスコアやデータを他のプラットフォームやそのために設計された成績表で分析することができることを意味します。このような相互運用性により、教育関係者は以下を実現することができます。 データを効果的に活用する。より魅力的な評価を開発し、生徒の成長にプラスの影響を与えることができます。

公平性とアクセシビリティ

多くの点で。 技術に基づく評価は、学生にとっての競争の場を均等にし、より公平に評価する機会を提供します。 より公正かつ公平に評価する機会を提供します。しかし、公正さとアクセシビリティに関して、以下のような重要な考慮事項があります。

  • ELLへの配慮 - 評価は、言語ベースのニーズを考慮し、プラットフォーム内で適切な便宜と修正を行う必要があります。デジタルテストの場合、これは画像ベースの指示に大きく依存したチュートリアルを提供するか、または評価を取る方法のための異なる翻訳を含むことを意味するかもしれません。 
  • メンタルヘルスの問題を抱える学生 - デジタルテストプラットフォームは、講師が簡単に実施でき、また学生がテスト中も活用しやすいアコモデーションを確保する必要があります。 
  • デジタルプラットフォームでの経験がない生徒 - すべての生徒がテクノロジーや評価へのテクノロジーの利用に関する専門知識を持っているわけではありません。教育者とテスト開発者は、学生が可能な限り真正面から教材に取り組めるように、テストをシンプルかつ直感的に設計する必要があります。 

スコアリング

テクノロジーに基づく評価の採点は、自動採点と人間による採点の2つに分けることができます。自動採点、またはAIによる採点の場合、テスト開発者は、評価の採点と生徒や家族へのスコアの伝達の両方に、厳格で徹底した品質管理プロセスを採用することが重要である。これは、ソフトウェアが正確なデータを提供するために、正解と不正解の項目を識別する必要があることを意味します。 

しかし、すべての項目が自動的に採点されるわけではなく、人間が採点する項目については、いくつかの注意点があります。

  • これらの項目には、常に明確に定義されたルーブリックが必要で、学生は何をすべきかを知ることができます。 
  • 採点者は、バイアスを回避し、テストの正確性を確保するために十分なトレーニングを受ける必要があります。 
  • 学生の回答を保存・表示するためのテクノロジー・プラットフォームは、ユーザーフレンドリーで直感的であるべきです。 

プライバシーとセキュリティ

機密性の高いテストデータを扱うことは、テスト開発者にとって大きな懸念事項です。多くのテストがオンラインやクラウドベースのインタラクションを介して提供されているため、データ侵害の可能性は高くなります。テストの完全性を維持するために、テスト開発者は違反を未然に防ぐよう行動し、テスト前およびテスト中に抑止戦略を採用し、不正行為やデータ漏洩に対する対応策を策定する必要があります。 

テストが収集した可能性のある個人を特定できる情報についても、同様に考慮することが重要です。高いレベルのプライバシーを維持するために堅牢なセキュリティシステムを導入することで、生徒のデータの安全性を確保することができます。このことは、単にベストプラクティスの問題ではなく、多くの場所で、政府が個人データの安全性を保つために努力していることから、法的要件にもなっています。 

なぜガイドが重要なのか? 

オンライン技術に基づく評価への移行により、教育関係者は、従来の試験方法と比較して、より短時間で生徒ができること、できないことを正確に把握することができるようになりました。しかし、オンラインテストは比較的新しいもので、いくつかの重要なニュアンスや違いが生じます。このため、ATPガイドラインはテスト開発者にとって重要な出発点であり、ベストプラクティスの基本を示し、最終的にはより効果的な評価、無駄な時間の削減、より正確なデータの取得につながるのです。 

オープンアセスメントテクノロジーは、オンライン学習用に設計された高品質のアセスメントを開発するのに役立つソフトウェアソリューションを提供しています。OATのソリューションがどのように生徒の評価を向上させるかについて、詳しくはこちらをご覧ください。 ここをクリック営業担当者までご連絡ください。