Suche nach einer Plattform zur Erstellung von Aufgaben, die in ein bestehendes Bewertungssystem passt
In der Schweiz liegt die Hauptverantwortung für Bildungs- und Kulturangelegenheiten bei den Kantonen, den Gliedstaaten der Schweizerischen Eidgenossenschaft. Die 26 kantonalen Erziehungsdirektoren bilden zusammen ein Verwaltungsorgan, die Schweizerische Konferenz der kantonalen Erziehungsdirektoren (EDK), die die Bildungs- und Kulturpolitik auf nationaler Ebene koordiniert.
Um eine einheitliche Umsetzung der Bildungsstandards in allen Kantonen zu überprüfen und sicherzustellen, führt die EDK in den Klassen 2, 6 und 9 landesweite Leistungstests in Mathematik, Naturwissenschaften, Landessprachen (Deutsch, Französisch und Italienisch) und Fremdsprachen bei einer ausgewählten Stichprobe von Schülerinnen und Schülern durch. Die Kantone sind jedoch für die Messung der individuellen Leistungen der Schülerinnen und Schüler zuständig. Zu diesem Zweck unterhalten einige Kantone ihre eigenen Aufgabenbanken und führen ihre eigenen Tests für alle Schüler in ihrem Zuständigkeitsbereich durch. Für jene Kantone, die nicht über diese Ressourcen verfügen, ist eine gemeinsame Aufgabenbank jedoch von Vorteil.
CHALLENGE
Recherche und Auswahl eines Systems, das in einer mehrsprachigen, dezentralen Umgebung gut funktioniert
Die Standardisierung von Assessments ist in der Schweiz aufgrund der vier Amtssprachen und der Notwendigkeit, sich über 26 Kantone hinweg zu koordinieren, eine besondere Herausforderung. Die EDK hat festgestellt, dass proprietäre Online-Assessment-Systeme sehr einschränkend sind und Anpassungen sowohl schwierig als auch teuer machen. Offenheit, Flexibilität und die Möglichkeit, Anpassungen ohne versteckte Kosten vorzunehmen, sind für die EDK wichtig, wenn sie mit ihrem Plan für ein Überwachungssystem für die obligatorische Schulbildung vorankommt.
Ihre Ziele umfassen:
- Ein Werkzeug zum Erstellen von Items zum Testen und Überwachen der Umsetzung der landesweiten Lernstandards zu haben
- Entwickeln einer Item-Bank, die gemeinsam genutzt werden kann
- Verfügbarmachung für alle 26 Kantone
- Ein Open-Source-System, das mit bestehenden, auch proprietären Systemen kompatibel ist
Lösung
TAO, eine kommerzielle Open-Source-Bewertungsplattform
Als die EDK begann, nach einer Lösung für standardisierte Tests zu suchen, schaute sie sich zuerst in europäischen Ländern um, die Erfahrung mit Leistungstests für Schüler hatten. Unter ihnen war Luxemburg eines der fortschrittlichsten, das bereits zu computerbasierten Tests übergegangen war. Dort entdeckten sie zum ersten Mal TAO als mögliche Open-Source-Lösung. Nach sorgfältiger Analyse entschied sich die EDK aus mehreren Gründen für TAO:
- Open Source hat sie von den Fesseln teurer proprietärer Systeme befreit.
- TAO bot die Möglichkeit, neben dem Standard-QTI auch komplexe Itemtypen einzubinden, was die Erstellung von erweiterten Items ermöglicht.
- Die OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung) hatte TAO für die Durchführung von PISA, dem Programme for International Student Assessment, ausgewählt, einer weltweiten Studie zum Vergleich der Leistungen von Schülern in Mathematik, Naturwissenschaften und Lesen. Dies gab der EDK das Vertrauen, dass TAO ein stabiles System ist, das in der Lage ist, große Einsätze zu bewältigen.
- Das BAT-Team ist mehrsprachig und konnte daher effektiv mit den Beteiligten in allen Kantonen kommunizieren, die unterschiedliche Sprachpräferenzen haben.
Ergebnisse
Implementieren der Lösung für Online-Tests
Zum Zeitpunkt des Verfassens dieses Artikels ist die EDK gerade dabei, die Item-Bank zu erstellen, die sie bereits in einigen Schulen getestet hat. Sie arbeitet auf einen größeren Pilotversuch im Jahr 2015 und eine große Prüfung mit 25.000 Testteilnehmern im Jahr 2016 hin, die es ihr ermöglichen wird, Vergleiche zwischen den Kantonen gemäß den 2011 eingeführten nationalen Lernstandards anzustellen. Im Jahr 2017 soll die Klasse 6 in den Schweizer Landessprachen (Deutsch, Französisch und Italienisch) sowie in den Fremdsprachen getestet werden.
"Mit einer Open-Source-Plattform wie TAO sind wir frei, eigene Anpassungen vorzunehmen, weil wir den Quellcode kontrollieren können. Das war eine große Erleichterung, da proprietäre Systeme sehr restriktiv sind. Je mehr ein proprietäres System angepasst wurde, desto mehr wären wir davon abhängig. Zum Glück haben wir mit TAO eine Lösung gefunden, die offen und flexibel für die Zukunft ist. Es ist ein großer Schritt in die richtige Richtung, um eine einheitliche, landesweite Umsetzung unserer Lernstandards zu gewährleisten."
- Dr. Vera Husfeldt, seit 2012 Leiterin des Bereichs Qualitätsentwicklung bei der EDK.
