Ein Schüler sieht einen Anmeldebildschirm und eine Prüfung. Hinter diesem Bildschirm stecken Jahre der Entwicklung, des Testens und der Koordination.
PISA 2025 verdeutlicht das Ausmaß dieser unsichtbaren Arbeit. Das Programm erreichte mehr als 760.000 Schüler in 91 Ländern und Volkswirtschaften. Die digitale Plattform des Programms unterstützte mehr als 900.000 Testdurchgänge in 54 Sprachen.
Diese Zahlen sind beeindruckend. Sie sind jedoch nicht das Wesentliche. Die größere Herausforderung bestand darin, verlässliche Erkenntnisse unter sehr unterschiedlichen technischen und pädagogischen Rahmenbedingungen zu gewinnen. Dazu bedurfte es mehr als nur einer Plattform, die hohen Datenverkehr bewältigen konnte. Es bedurfte eines Bereitstellungsmodells, das auf realen Bedingungen basierte.
Größe ist nicht nur eine Frage der Kapazität
Wenn Unternehmen über digitale Assessments in großem Maßstab sprechen, dreht sich die Diskussion oft zunächst um die Anzahl der gleichzeitigen Nutzer. Die Kapazität spielt zwar eine Rolle, ist aber nur ein Teil des Betriebsmodells.
Ein umfangreiches Bewertungsverfahren erfordert zudem eine Inhaltskontrolle, einen sicheren Zugriff, eine zuverlässige Erfassung der Antworten und klare Datenflüsse. Es benötigt Überwachungs- und Wiederherstellungsprozesse. Es muss geräte- und standortübergreifend funktionieren. Ist das Programm mehrsprachig, muss jede Version zudem wie vorgesehen funktionieren.
PISA 2025 brachte zusätzliche Komplexität mit sich. Das Programm umfasste adaptive Bewertungswege, interaktive digitale Aufgaben sowie Komponenten zum Sprechen und Zuhören. Zudem wurden Interaktionsdaten auf Ereignisebene erfasst.
Diese Funktionen können nicht als separate Funktionen genutzt werden. Sie müssen als ein einheitliches Bewertungsverfahren funktionieren.
Ein Programm bedeutete nicht, dass die Netzwerkbedingungen einheitlich waren
Die Schulen gingen nicht mit identischer Infrastruktur in die PISA-Studie 2025. Die Netzanbindung variierte je nach Standort. Das Gleiche galt für die Geräte und die technischen Kapazitäten vor Ort.
Ein Durchführungsmodell, das ausschließlich auf einem permanenten Internetzugang beruhte, hätte eine offensichtliche Schwachstelle dargestellt. Bei PISA 2025 kam eine zentralisierte Plattform zum Einsatz, die sowohl Online- als auch Offline-Sitzungen unterstützte.
Mehr als 800.000 Sitzungen wurden online durchgeführt. Mehr als 100.000 wurden offline absolviert.
Beide Wege waren Teil desselben Programms. Die Schüler konnten eine einheitliche Bewertung erhalten, ohne dass jede Schule auf die gleichen Netzwerkbedingungen angewiesen war.
Diese Unterscheidung ist wichtig. Die Standardisierung sollte die Bewertung absichern. Sie sollte nicht jeden Standort in ein unrealistisches technisches Modell zwängen.
Die Offline-Bereitstellung war Teil der Architektur
Offline-Prüfungen werden manchmal als vorübergehende Notlösung betrachtet. Bei einem solchen Umfang müssen sie als kontrollierter Bereitstellungsweg konzipiert werden.
Die Prüfung muss erstellt und sicher übertragen werden. Der Zugriff der Schüler muss kontrolliert bleiben. Die Antworten müssen zuverlässig gespeichert werden. Die ausgefüllten Daten müssen an die zentrale Umgebung zurückgesendet werden, ohne dass dabei die Zuordnung zum jeweiligen Schüler, zur jeweiligen Sitzung und zum jeweiligen Prüfungsformular verloren geht.
Jeder Schritt trägt zur Wahrung der Beweiskette bei.
Für die Verantwortlichen der Prüfungen lässt sich die allgemeine Erkenntnis einfach zusammenfassen: Die Ausfallsicherheit sollte bereits vor Beginn der Prüfung geplant werden. Es ist zu spät, eine Offline-Strategie zu entwickeln, wenn am Prüfungstag die Internetverbindung ausfällt.
54 Sprachen, ein Qualitätsstandard
Bei der mehrsprachigen Bewertung geht es um weit mehr als nur darum, einen Textblock durch einen anderen zu ersetzen.
Die Sprache kann die Textlänge, das Layout und die Navigation beeinflussen. Audioinhalte bringen neue Dateien und Anforderungen an die Wiedergabe mit sich. Interaktive Aufgaben müssen auch nach der Lokalisierung noch korrekt funktionieren. Vor allem aber müssen übersetzte Inhalte die Bedeutung und den Schwierigkeitsgrad der ursprünglichen Aufgabe beibehalten.
PISA 2025 wurde in 54 Sprachen durchgeführt. Das Konsortium verband sprachliche Fachkompetenz mit einer gemeinsamen technischen Infrastruktur, um diese Arbeit zu unterstützen.
Diese Verbindung zwischen Sprache und Technologie ist von entscheidender Bedeutung. Eine Übersetzung kann auf dem Papier zwar korrekt sein, aber dennoch versagen, wenn sie schlecht dargestellt, mit den falschen Medien kombiniert oder in eine Interaktion eingebettet wird, die nicht mehr wie beabsichtigt funktioniert.
Umfassendere Aufgaben führen zu aussagekräftigeren Belegen – und zu mehr Verantwortung
Digitale Leistungsbewertung kann mehr als nur die endgültige Antwort erfassen. Sie kann Simulationen, Multimedia-Elemente und interaktive Aufgaben umfassen. Außerdem lässt sich damit festhalten, wie die Schüler eine Aufgabe bearbeiten.
Das eröffnet Möglichkeiten für eine bessere Messung. Gleichzeitig steigt dadurch die Verantwortung, sorgfältig mit Daten umzugehen.
Das Programm muss wissen, dass die richtigen Inhalte die richtige Sitzung erreicht haben. Es muss die Antworten der Schüler speichern. Außerdem muss es genau protokollieren, was während der Durchführung geschehen ist.
Aus diesem Grund ist die Infrastruktur ein Bestandteil der Bewertungsqualität. Sind die Lieferdaten unvollständig, schwindet das Vertrauen in die daraus resultierenden Daten.
Offene Standards ermöglichen eine Steuerung in großem Maßstab
Im Rahmen seines Bewertungsökosystems wurden bei PISA 2025 die QTI- und LTI-Standards verwendet. Standards bieten eine einheitliche Möglichkeit, Bewertungsinhalte zu strukturieren und Systeme miteinander zu verknüpfen.
Das macht ein umfangreiches Programm zwar nicht einfacher, verringert aber die unnötige Abhängigkeit von proprietären Formaten und einmaligen Verbindungen.
Für Ministerien und Bewertungsorganisationen liegt der langfristige Nutzen in der Kontrolle. Großprogramme entwickeln sich weiter. Ihre Inhalte ändern sich. Auch ihre Anbieter und unterstützenden Systeme können sich ändern. Standards erleichtern die Anpassung des Ökosystems, ohne dass alles neu auf die Architektur eines einzelnen Anbieters aufgeschnitten werden muss.
Die Lehre für andere Bewertungsprogramme
Nur wenige Programme müssen in 91 Ländern tätig sein. Viele sehen sich denselben grundlegenden Herausforderungen in kleinerem Maßstab gegenüber.
Sie müssen Schulen mit uneinheitlicher Infrastruktur erreichen. Sie müssen die Sicherheit gewährleisten, ohne den Zugang zu behindern. Sie benötigen einheitliche Inhalte über alle Sprachen und Regionen hinweg. Sie benötigen Daten, auf die Führungskräfte vertrauen können.
PISA 2025 bietet einen praktischen Maßstab. Beginnen Sie mit den schwierigsten realistischen Einsatzbedingungen. Legen Sie fest, was unverändert bleiben muss. Ermitteln Sie, wo das Modell Flexibilität benötigt. Testen Sie anschließend die gesamte Kette, nicht nur die Plattform unter Last.
Die beste Infrastruktur ist nicht die, die den Nutzern auffällt. Es ist die Infrastruktur, die es den Studierenden ermöglicht, sich auf die Prüfung zu konzentrieren, während das Programm jeden Schritt im Hintergrund abdeckt.