Che cos’è il PISA e perché è importante al di là delle classifiche

Ogni ciclo PISA genera la stessa notizia. A poche ore dalla pubblicazione circola una classifica, i sistemi scolastici di alcuni paesi vengono dichiarati in ascesa o in declino, mentre la valutazione alla base dei dati rimane in gran parte non approfondita. I primi risultati del PISA 2025 sono attesi per l’8 settembre 2026 e probabilmente lo stesso schema si ripeterà.

Tuttavia, il PISA va ben oltre la semplice classifica. Dietro di esso si cela un programma concepito per garantire che un compito di scienze, redatto una sola volta, possa raggiungere i quindicenni in oltre 90 sistemi educativi, in 54 lingue e su hardware molto diversi tra loro, producendo comunque punteggi che abbiano lo stesso significato. Nulla di tutto ciò avviene automaticamente. Tale comparabilità deve essere integrata in ogni fase, dal campionamento e dalla progettazione delle domande alla traduzione, alla somministrazione e alla raccolta delle risposte.

Questo articolo va oltre le classifiche per spiegare cosa misura il PISA, in che modo la sua metodologia rende possibili i confronti internazionali e cosa è cambiato a seguito dell’adozione della modalità digitale. Esamina inoltre cosa potrà dirci il PISA 2025 e come potranno essere interpretati i suoi risultati una volta pubblicati.

Che cos’è il PISA?

Il Programma per la valutazione internazionale degli studenti (PISA) è gestito dall’Organizzazione per la cooperazione e lo sviluppo economico (OCSE). Si svolge ogni tre anni dal 2000 e il PISA 2025 rappresenta il suo nono ciclo

Il programma PISA valuta i quindicenni, un’età scelta perché coincide con la fase finale della scuola dell’obbligo nella maggior parte dei sistemi partecipanti. Si tratta di un’indagine campionaria piuttosto che di un censimento, pertanto ogni paese sottopone a test un campione selezionato statisticamente, concepito per rappresentare la popolazione più ampia dei quindicenni del proprio paese anziché l’intera coorte.

L’attuazione non è affidata esclusivamente all’OCSE. Un consiglio direttivo composto dai paesi partecipanti stabilisce le priorità, mentre un consorzio internazionale di appaltatori elabora e gestisce la valutazione secondo standard tecnici dettagliati. Questa ripartizione dei ruoli assume importanza in seguito, poiché la maggior parte dei meccanismi a garanzia della comparabilità è di competenza del consorzio.

Perché l’OCSE l’ha creato

Verso la fine degli anni '90, i governi erano in grado di confrontare gli input educativi senza troppe difficoltà. La spesa pro capite per studente, il numero di alunni per classe e le ore di insegnamento erano tutti dati ragionevolmente ben documentati. Ciò che risultava più difficile da confrontare, tuttavia, erano i risultati scolastici.

Gli esami nazionali valutano il livello di apprendimento degli studenti rispetto al programma scolastico nazionale, il che li rende particolarmente adatti a fini di rendicontazione interna, ma meno utili per i confronti internazionali. Un aumento del tasso di promossi in un paese non dice molto sul rendimento dei suoi studenti rispetto a quello degli studenti di un altro paese. Il programma PISA è stato creato proprio per colmare questa lacuna, fornendo dati concreti sui risultati che possano essere legittimamente confrontati tra i diversi sistemi educativi. 

Cosa misura effettivamente il PISA

Il programma PISA non è concepito per verificare se i quindicenni abbiano acquisito padronanza di un particolare programma scolastico nazionale. Valuta invece se siano in grado di applicare conoscenze e competenze in contesti reali e non familiari, anziché limitarsi a riprodurre ciò che è stato loro insegnato. Ecco perché il quadro di riferimento descrive ciò che misura come alfabetizzazione piuttosto che come livello di apprendimento.

L’alfabetizzazione scientifica, ad esempio, non consiste nel ricordare definizioni. Si tratta piuttosto di verificare se uno studente sia in grado di interpretare le prove, valutare un’affermazione e ragionare su una situazione che non ha mai incontrato in un libro di testo. Concentrandosi su conoscenze e competenze di ampia applicabilità piuttosto che sui singoli programmi scolastici nazionali, il PISA fornisce una base comune più equa per il confronto tra gli studenti dei diversi sistemi educativi, poiché nessun programma scolastico nazionale potrebbe da solo fungere da metro di valutazione adeguato per tutti i paesi partecipanti.

Ogni ciclo comprende lettura, matematica e scienze, con un’area trattata in modo approfondito. PISA 2025 pone le scienze al centro dell’attenzione, mentre la lettura e la matematica sono considerate aree secondarie. Due novità contraddistinguono questo ciclo:

Anche gli studenti, i dirigenti scolastici e, in alcuni sistemi, gli insegnanti e i genitori compilano dei questionari. Questi forniscono informazioni contestuali sul background degli studenti, sui loro atteggiamenti e sugli ambienti di apprendimento, rendendo i punteggi più interpretabili e consentendo ai ricercatori e ai responsabili politici di approfondire le differenze tra i vari sistemi educativi.

Come i governi utilizzano i risultati

I ministeri prendono sul serio il PISA, poiché fornisce dati che non possono ricavare dalle sole valutazioni nazionali. Tuttavia, è opportuno precisare cosa questi dati possano effettivamente dimostrare. Il PISA non indica a un governo quali politiche adottare. Si tratta di uno studio trasversale, che individua quindi correlazioni piuttosto che cause, e i sistemi educativi presentano differenze che nessun questionario è in grado di cogliere appieno.

Ciò che il PISA offre è davvero utile:

  • Dati comparabili a livello internazionale sui risultati degli studenti, misurati con lo stesso metodo in ogni sistema partecipante
  • I dati sulle tendenze nel corso dei cicli, che spesso forniscono informazioni più significative rispetto alla singola posizione in classifica
  • Informazioni contestuali su equità, benessere degli studenti, atteggiamenti e condizioni scolastiche
  • Indicazioni sui settori in cui un sistema potrebbe approfondire l'analisi utilizzando i propri dati nazionali

L’uso più giustificabile del PISA è quindi quello di stimolo per ulteriori approfondimenti, piuttosto che come diagnosi in sé e per sé. Un calo in un determinato ambito, o un divario crescente tra studenti avvantaggiati e svantaggiati, può spingere i responsabili politici a esaminare i dati nazionali per individuare i fattori che potrebbero contribuire a tale andamento. 

Perché la metodologia è più importante della classifica

Una classifica ha senso solo se i risultati su cui si basa sono realmente comparabili. Se in due paesi i campioni vengono selezionati in modo diverso, o se un compito tradotto risulta più difficile di quello originale, il divario tra quei paesi potrebbe riflettere il modo in cui è stata condotta la valutazione piuttosto che il rendimento degli studenti. 

Per questo motivo, il programma PISA integra la comparabilità nella propria metodologia in ogni fase della valutazione, dalla progettazione alla realizzazione fino all’interpretazione dei risultati. 

Campionamento: chi sostiene effettivamente la valutazione

Il programma PISA definisce in modo rigoroso la popolazione di riferimento. Gli studenti idonei hanno di età compresa tra i 15 anni e 3 mesi e i 16 anni e 2 mesi all’inizio della somministrazione dei test e iscritti alla classe 7 o a un livello superiore, in scuole pubbliche o private. I paesi presentano una base di campionamento, che viene convalidata dall’ente internazionale incaricato del campionamento prima che venga selezionato qualsiasi studente.

La selezione si svolge quindi in due fasi. Le scuole vengono estratte con una probabilità proporzionale al numero di studenti idonei, e all’interno di ciascuna scuola partecipante viene campionato un numero prestabilito di studenti. Le soglie di partecipazione sono esplicite: Almeno l’85% delle scuole inizialmente selezionate deve accettare di partecipare, oltre a un tasso minimo di partecipazione degli studenti. Le scuole di riserva possono essere utilizzate solo una volta raggiunta una soglia di partecipazione inferiore. 

Questi standard sono vincolanti e non semplicemente indicativi. I paesi che non li soddisfano vengono identificati nei risultati pubblicati e i relativi dati vengono contrassegnati; è opportuno verificare tali informazioni prima di mettere a confronto due sistemi qualsiasi. 

Lingua: una sola valutazione, molte versioni nazionali

La creazione di una versione finlandese o coreana di un’attività non costituisce una traduzione nel senso comune del termine. Il consorzio sviluppa versioni parallele in inglese e francese, e le linee guida di traduzione richiedono due traduzioni indipendenti, una per ciascuna versione di partenza, che vengono poi unite da un revisore esterno in un’unica versione nazionale.

I verificatori indipendenti confrontano poi tale versione con quelle originali, mentre i dati delle prove sul campo vengono utilizzati per valutare se sia stata effettivamente raggiunta l’equivalenza linguistica. L’adattamento è necessario anche nei casi in cui non sia richiesta alcuna traduzione, poiché un compito inserito in un contesto culturale non familiare può risultare più difficile per ragioni estranee alla scienza o alla matematica.

Validità e coerenza nella pratica

Il termine “validità” assume qui un significato specifico: ovvero che le inferenze tratte dai punteggi siano giustificate in relazione all’uso che se ne fa. Per i confronti internazionali, ciò dipende in parte dal fatto che la valutazione funzioni in modo coerente in tutti i paesi. Se un compito si presenta in modo diverso per studenti con lo stesso livello di abilità in due paesi, qualsiasi confronto tra di essi risulta compromesso. Il PISA ricorre quindi a un’analisi a livello di item dopo la fase di sperimentazione sul campo per identificare i compiti che si comportano in modo diverso e, se necessario, eliminarli dalla scalatura.

La coerenza riguarda le modalità di svolgimento e di valutazione del test. La somministrazione del test avviene entro un periodo di tempo prestabilito e segue un protocollo comune. Anche la codifica delle risposte aperte è regolata da regole condivise, con controlli di affidabilità tra i diversi codificatori. Gli standard tecnici PISA 2025 definiscono tali requisiti in materia di campionamento, traduzione, sicurezza, collaudo delle piattaforme e invio dei dati. 

Cosa è cambiato con la distribuzione digitale

Nel 2015 il programma PISA è passato alla somministrazione tramite computer, e questo cambiamento non si è limitato alla semplice sostituzione della carta. La somministrazione digitale ha ampliato l’ambito di misurazione della valutazione, introducendo al contempo una nuova serie di fattori che devono essere tenuti sotto controllo.

Progettazione adattiva e attività interattive

PISA 2025 estende la valutazione adattiva a più livelli a tutte e tre le competenze fondamentali. Anziché somministrare a ogni studente un questionario identico, la valutazione guida gli studenti attraverso una serie di compiti in base alle loro prestazioni precedenti. Ciò consente a PISA di misurare le capacità in modo più preciso lungo l’intero spettro delle prestazioni, in particolare agli estremi superiore e inferiore, senza richiedere a ogni studente di completare la stessa serie di domande.

Le attività interattive ampliano ulteriormente la gamma di aspetti misurabili. Nelle unità didattiche dedicate all’apprendimento nel mondo digitale, gli studenti operano all’interno di un ambiente simulato, consentendo alla piattaforma di rilevare non solo se giungono alla soluzione corretta, ma anche gli aspetti relativi al loro approccio al problema. Questo tipo di prove relative al processo non sarebbe possibile raccogliere attraverso una valutazione tradizionale su supporto cartaceo. 

L'accessibilità come requisito di comparabilità

L’accessibilità viene spesso classificata come una questione di conformità. In una valutazione internazionale, è anche una questione di misurazione: se uno studente non è in grado di utilizzare efficacemente l’interfaccia, il suo punteggio potrebbe riflettere l’ostacolo che ha incontrato piuttosto che la sua competenza. Ogni punteggio di questo tipo indebolisce il confronto che il programma è chiamato a sostenere. 

I requisiti pratici di accessibilità includono la compatibilità con le tecnologie assistive, la navigazione da tastiera, un contrasto cromatico sufficiente, la possibilità di ridimensionare il testo e una riproduzione audio affidabile per le componenti di ascolto e di sintesi vocale introdotte nel 2025. Anche le regole di inclusione ed esclusione sono importanti, poiché chi viene incluso o escluso da un campione modifica ciò che la media risultante descrive. Le piattaforme costruite per standard di accessibilità riconosciuti, come TAO, rendono più semplice applicare queste decisioni in modo coerente in contesti scolastici molto diversi tra loro. 

Coerenza tecnica

La distribuzione digitale è comparabile solo quando l’ambiente tecnico si comporta allo stesso modo ovunque. In pratica, ciò comprende quattro aspetti:

  • Erogazione coerente, in modo che un'attività appaia e si comporti in modo identico indipendentemente da dove o come venga somministrata
  • Comportamento prevedibile della piattaforma su tutta la gamma di dispositivi, browser e sistemi operativi effettivamente in uso nelle scuole
  • Gestione controllata dei dati, in modo che le risposte, i tempi e i registri delle interazioni vengano restituiti integri e associati allo studente e alla sessione corretti
  • Interoperabilità attraverso standard aperti quali il Question and Test Interoperability (QTI) , che garantisce la portabilità dei contenuti di valutazione senza vincolarli al formato di un unico fornitore

Cosa ci dice il PISA 2025 sulla valutazione internazionale

PISA 2025 è stato realizzato tramite un’unica piattaforma digitale gestita a livello centrale che supportava sia le sessioni online che quelle offline, una novità assoluta per il programma. Il consorzio, guidato dall’Australian Council for Educational Research (ACER) con la piattaforma TAO di Open Assessment Technologies, ha coinvolto 91 paesi ed economie e 54 lingue in oltre 900.000 sessioni di valutazione. Circa 100.000 di queste si sono svolte offline.

La portata della distribuzione offline è significativa. Considerare la connettività intermittente come un percorso di distribuzione previsto piuttosto che come una soluzione di ripiego in caso di emergenza ha permesso alle scuole con infrastrutture limitate di partecipare comunque allo stesso programma di valutazione. In questo senso, la funzionalità offline non è semplicemente una caratteristica tecnica, ma fa parte del modo in cui il PISA garantisce una partecipazione ampia e coerente. Il TAO ha pubblicato una descrizione più approfondita di ciò che comportava la distribuzione su quella scala.

La direzione da seguire è tuttavia chiara. PISA 2029 si concentrerà sulla lettura e aggiungerà l’alfabetizzazione mediatica e l’alfabetizzazione nell’intelligenza artificiale come ambito innovativo, il che richiederà alla piattaforma di valutazione uno sforzo maggiore, non minore. 

Come interpretare la prossima serie di risultati

Quando saranno disponibili i dati relativi al 2025, la classifica sarà la parte più semplice da riportare e quella meno informativa da leggere. L’andamento nel corso dei cicli, il divario tra gli studenti più bravi e quelli più deboli di un sistema, i dati contestuali alla base della media e gli standard di partecipazione che un paese ha o non ha soddisfatto contengono tutti maggiori informazioni rispetto alla semplice posizione in una tabella.

Nessuna di queste prove esisterebbe senza la metodologia su cui si basa. La comparabilità tra 91 sistemi e 54 lingue non è un effetto collaterale dell’esecuzione dello stesso test ovunque, ma è il risultato del corretto funzionamento di regole di campionamento, procedure di traduzione, standard tecnici e infrastrutture di distribuzione.

Alla scoperta di PISA 2025: oltre le classifiche

Segui la serie di webinar di TAO sul PISA 2025 per analisi approfondite dei risultati, prospettive regionali e implicazioni pratiche per i sistemi educativi. Scopri i prossimi webinar e prenota il tuo posto.

 

Scopri tutte le possibilità offerte da TAO