Auswahl einer Assessment-Authoring-Lösung

Assessment-Authoring-Plattform

Online-Assessments bieten neue Möglichkeiten, tiefere Einblicke in die Art und Weise zu gewinnen, wie Testteilnehmer Probleme lösen, und helfen dabei, die Feedbackschleife zwischen Lehren und Lernen zu schließen - sowohl im Klassenzimmer als auch im beruflichen Umfeld. Durch die Integration von Funktionen wie Multimedia, komplexer Testlogik und benutzerdefinierten Aufgaben können Sie ansprechende Tests erstellen, die über Multiple Choice hinausgehen und reale Szenarien oder das Lernen in einem Klassenzimmer nachahmen. Bei so vielen Optionen kann die Auswahl der richtigen Lösung für die Erstellung von Tests eine schwierige Aufgabe sein. Aber wenn Sie einen Rahmen dafür entwickeln, was Ihre Bewertung erreichen soll, werden die benötigten Funktionen deutlicher. Im Folgenden haben wir beschrieben, wie Sie bei der Auswahl einer Lösung vorgehen und auf welche Funktionen, auf die Sie achten sollten.

Auswahl der richtigen Plattform 

Welche Art von Test wollen Sie erstellen? Ist er formativ, summativ oder diagnostisch? Welche Kompetenzen müssen Sie messen? Welche Art von Aufgaben sollen die Testteilnehmer durchführen? Verschiedene Arten von Tests erfordern unterschiedliche Authoring-Funktionen. Während eine gute Multiple-Choice-Frage die Leistung für inhaltliches Wissen differenzieren kann, müssen die Testteilnehmer manchmal auf eine Art und Weise antworten, die komplexere Überlegungen erfordert. Wenn Sie zum Beispiel einen Test mit hoher Trennschärfe zwischen leistungsstarken und leistungsschwachen Testteilnehmern erstellen möchten, sollten Sie eine Plattform wählen, die Folgendes unterstützt Computeradaptive Tests. Wenn Sie sich diese Fragen stellen, bevor Sie mit der Recherche nach Assessment-Authoring-Plattformen beginnen, erhalten Sie ein besseres Verständnis für die Eigenschaften und Funktionalitäten die Sie von Ihrer Lösung benötigen.

Hauptmerkmale einer Lösung zur Erstellung digitaler Bewertungen

Sobald Sie definiert haben, welche Art von Test Sie erstellen und warum, können Sie Ihren Fokus auf das Wie einschränken. Selbst wenn Sie sich nicht zu 100 % sicher sind, welche Funktionalitäten Sie benötigen, können Sie mit Ihrer Recherche beginnen, indem Sie sich nach Plattformen zur Erstellung von Tests umsehen, die Folgendes bieten Flexibilität, Freiheit und Kontrolle bieten. Wir haben einen tieferen Blick auf einige dieser Plattformfunktionen geworfen und wie sie Ihnen als Testautor zugute kommen können.

Autor Einfache und fortgeschrittene Assessments

Ob Sie ein professioneller Testautor sind oder nicht, sollte Sie nicht davon abhalten, digitale Assessments zu erstellen. Die flexibelsten Assessment-Authoring-Plattformen ermöglichen es Ihnen, eine Reihe von Assessments und Aufgabentypen zu erstellen - von komplex und adaptiv bis hin zu einfachem Multiple Choice. 

Test Session Control

Müssen Sie Ihren Test in verschiedene Teile oder Unterabschnitte aufteilen? Haben diese Abschnitte unterschiedliche Zeitvorgaben oder erfordern unterschiedliche Werkzeuge? Je nach den Anforderungen Ihres Tests benötigen Sie möglicherweise weitere Einstellungen für die Testpräferenzen, die die Testsitzungen definieren und regulieren. Weitere Funktionen könnten sein: zufällige Auswahl von Aufgaben, Umordnung, Begrenzung der Anzahl der Versuche, Navigationseinstellungen und Testergebnisse (Bewertung).

Technology Enhanced Items & PCIs 

Eine Assessment-Authoring-Plattform, die alle QTI-Interaktioneneinschließlich Technology Enhanced Items (TEIs) unterstützt, gibt Ihnen die größte Freiheit, jede Art von Bewertung zu erstellen. TEIs sind komplexe Bewertungsaufgaben, die Fähigkeiten des 21. Jahrhunderts wie kritisches Denken, Problemlösung und Zusammenarbeit messen. Viele der standardisierten QTI-Interaktionen ermöglichen diese komplexeren computerunterstützten TEI-Interaktionen. Mit einer Bewertungsplattform, die den IMS QTI Portable Custom Interaction (PCI)-Standard unterstützt, können Testentwickler benutzerdefinierte TEIs erstellen, die Interoperabilität mit allen neuen oder bestehenden Technologiesystemen ermöglichen.

Linear- und Verzweigungstests

Traditionelle Beurteilungen sind weitgehend linear, wobei sich die Lernenden von Frage zu Frage durch eine Beurteilung bewegen, bis sie das Ende erreichen. Verzweigungstests hingegen bieten einen Lernkontext, indem sie Auswahlmöglichkeiten bieten, die zu verschiedenen Konsequenzen verzweigen und so das reale Leben imitieren. Als Testautor möchten Sie vielleicht sowohl lineare als auch verzweigende Tests erstellen, abhängig von den Kompetenzen, die Sie messen müssen, daher ist es wichtig, dass Sie die Option in Ihrer Plattform haben.  

Computer Adaptive Testing 

Wie bereits erwähnt, hilft eine Computer Adaptive Testing (CAT)-Lösung dabei, den Leistungsbereich eines Testteilnehmers zu ermitteln, indem die Schwierigkeit einer Frage (oder eines Testabschnitts) auf der Grundlage seiner früheren Antworten angepasst wird. CAT-Engines verwenden verschiedene Algorithmen, die auf der Item-Response-Theorie (IRT) oder anderen Faktoren, um die Beherrschung eines Themas zu bestimmen. Sie liefern außerdem sehr zuverlässige Daten schneller als traditionelle Assessments.

Der Nachteil von CAT besteht darin, dass ein größerer Pool von Items für die verschiedenen zu messenden Fähigkeiten erstellt werden muss. Dieser große Pool kann jedoch die Sicherheit des Tests erhöhen - die Testteilnehmer können sich nur schwer alle möglichen Fragen merken, die in ihrer jeweiligen Testsitzung enthalten sein könnten, genauso wie es schwierig ist, alle möglichen Fragen aus dem Aufgabenpool zu "stehlen".

Verwalten von QTI-Inhalten 

Als Testautor verbringen Sie wertvolle Zeit damit, einzigartige Items für Ihre Assessments zu erstellen. Dies ist eine Investition, die Sie nicht verlieren möchten. Allerdings erlauben proprietäre Lösungen allzu oft keinen nahtlosen Austausch von Inhalten und Daten von einer Plattform zur nächsten, so dass Sie vor die Wahl gestellt werden: bei einem Anbieter bleiben, der möglicherweise nicht für Sie funktioniert, für teure und zeitaufwändige Inhaltstransformationen bezahlen oder Ihre Arbeit aufgeben. Eine interoperable Bewertungsplattform (z. B. eine, die auf offenen QTI-Standards aufbaut) stellt sicher, dass Ihre Items und Inhalte leicht übertragbar und nicht in Ihrem System eingesperrt sind.

Die Möglichkeit, Ihre Inhalte einfach zu organisieren, ist ebenfalls ein wichtiger Faktor bei der Auswahl einer Plattform zur Erstellung von Bewertungen. Lösungen, die Metadaten-Tagging unterstützen, können Ihnen helfen, schnell durch Ihre Inhalte zu navigieren und reichhaltige Daten über die Bewertung in Bezug auf den Lernerfolg zu liefern. 

Digitale Bewertungswerkzeuge bereitstellen

Eine Assessment-Authoring-Plattform, die Folgendes unterstützt Barrierefreiheit und die Möglichkeit zur Einbindung von interaktive Bewertungswerkzeugewie z. B. ein Bildschirmlesegerät oder ein digitaler Taschenrechner, ermöglicht es Ihnen, ansprechende Bewertungen zu erstellen, die eine authentischere Lernerfahrung widerspiegeln und die Bedürfnisse einer größeren und vielfältigen Lerngruppe erfüllen.

Profi-Tipp: Plattformen zur Bereitstellung von Bewertungen sollten nicht nur die Erfolgskriterien der Web Content Accessibility Guidelines (WCAG) 2.1 AA unterstützen, sondern den Autoren auch die Möglichkeit geben, wichtige Inhalte für die Barrierefreiheit für die Testteilnehmer einzugeben. Einige zusätzliche Tools, die die Lernenden unterstützen, sind:

  • Video & Multimedia, einschließlich Alternativen wie Untertitel und Transkripte
  • Taschenrechner
  • Farbkontrast-Picker 
  • Markieren von Fragen zur späteren Überprüfung
  • Textmarker
  • Vergrößerung
  • Zeilenleser
  • Antworten abdecken 
  • Antworten ausschließen
  • Notizblock 
  • Vorlesen (Text-to-Speech)
  • Testkarten und Überprüfung

- — 

Da die Bildungstechnologie immer fortschrittlicher wird, wächst auch das Potenzial für Testautoren, ansprechende, realitätsnahe Tests zu erstellen. Indem Sie den Zweck Ihres Tests bestimmen und antizipieren, dass sich Ihre Anforderungen in der Zukunft unweigerlich ändern können, können Sie eine flexible Plattform für die Erstellung von Tests wählen, die sich mit Ihren Anforderungen weiterentwickelt. 

Erfahren Sie mehr über Assessment-Authoring-Plattformen