La valutazione digitale rappresenta un'enorme opportunità per modernizzare e ampliare la diffusione delle valutazioni. Dopo aver dedicato tempo e impegno alla scelta della piattaforma più adatta alle vostre esigenze di valutazione, il passo successivo è l'implementazione. Tuttavia, il successo della valutazione digitale dipende da ben più della piattaforma stessa.
Non solo l’implementazione iniziale deve procedere senza intoppi, ma l’ambiente tecnico nel suo complesso deve continuare a garantire un’erogazione affidabile man mano che il programma di valutazione si espande e matura. Ecco perché è importante valutare la propria prontezza per i test digitali prima che inizi l’erogazione delle valutazioni.
In questa guida esamineremo gli elementi chiave della preparazione e vedremo come valutare se il vostro sistema è pronto per il lancio e per le fasi successive.
I fondamenti tecnici per una corretta erogazione delle valutazioni digitali
Una piattaforma di valutazione digitale non opera in modo isolato. Ogni valutazione si basa su un ecosistema più ampio, costituito da varie funzionalità tecniche interdipendenti. Comprendere queste funzionalità è fondamentale per pianificare un’implementazione efficace e affidabile.
Dispositivi
Gli studenti sosterranno le prove su un dispositivo terminale, come un computer fisso, un portatile, un tablet o uno smartphone. Tramite l’interfaccia del dispositivo, gli studenti accedono alla prova stessa, interagiscono con le domande e inviano le loro risposte. Le funzionalità del dispositivo influenzeranno il modo in cui gli studenti potranno interagire con la prova e i tipi di domande che sarà possibile utilizzare.
Sistemi operativi
Ogni dispositivo utilizza un sistema operativo, come Windows, macOS, Chrome, iOS o Android. In qualità di ponte tra il software di valutazione e l'hardware (dispositivo) utilizzato per accedervi, il sistema operativo gestisce funzioni fondamentali quali la memoria, la sicurezza, l'accessibilità e la visualizzazione.
Browser
La maggior parte delle valutazioni digitali viene eseguita su un browser web, ovvero un programma che gestisce un'interfaccia online e la connessione a Internet.
Reti
Le reti consentono la trasmissione dei contenuti delle prove di valutazione, delle risposte degli studenti e dei dati di autenticazione degli utenti dai dispositivi alle piattaforme software. Nel caso di una distribuzione su larga scala, la rete può collegare migliaia di candidati alla piattaforma di valutazione.
Server e servizi cloud
I contenuti, i dati e le informazioni relative al punteggio sono solitamente ospitati “sul cloud”, ovvero su server remoti. Questi sistemi sono fondamentali per l’archiviazione e l’elaborazione di tutti i dati nel backend.
Servizi di supporto
Potrebbe inoltre essere necessario integrare nel proprio ecosistema diverse altre soluzioni software, oltre alla piattaforma di valutazione. Tra queste potrebbero figurare sistemi di gestione delle identità, sistemi di gestione dell’apprendimento, software di analisi dei dati, programmi per l’accessibilità o servizi di sorveglianza online.
Lacune comuni nell'infrastruttura digitale
Se i componenti dell’ecosistema non vengono testati o convalidati prima del lancio, piccoli inconvenienti possono trasformarsi in gravi problemi quando le valutazioni vengono effettuate su larga scala. Tra gli esempi più comuni figurano:
- Incoerenza dei dispositivi: Un sistema che consente agli studenti di utilizzare qualsiasi dispositivo preferiscano per accedere a una valutazione può diventare molto complesso. Tuttavia, anche quando un'organizzazione adotta un unico tipo di dispositivo, spesso la configurazione viene trascurata. Ad esempio, un distretto scolastico potrebbe dare per scontato che tutti i laptop siano configurati in modo identico, mentre in realtà, a causa dei diversi modelli o delle diverse impostazioni, alcuni dispositivi potrebbero non visualizzare correttamente determinati tipi di domande.
- Requisiti software poco chiari: Come nel caso dei dispositivi, se il software (ad esempio browser, versioni del sistema operativo o sistemi di sicurezza) non è compatibile, i test potrebbero incontrare problemi quali anomalie di visualizzazione, scarsa connettività o mancanza di accessibilità.
- Integrazioni trascurate: Non è sufficiente testare solo la piattaforma di valutazione se questa si affida ad altri sistemi per funzionare. Ad esempio, un errore in un soluzione di sorveglianza digitale potrebbe comportare che alcuni studenti non vengano monitorati o che i dati registrati non vengano trasferiti correttamente.
- Procedure di assistenza poco chiare: È necessario predisporre percorsi di assistenza per studenti e amministratori. Se il giorno dell’esame dovesse verificarsi un problema, tutti devono sapere chi contattare e come segnalare il problema ai livelli superiori. Ad esempio, se i candidati non riescono ad accedere o se una prova si blocca, potrebbero verificarsi ritardi se i sorveglianti non sanno se contattare il team IT della scuola, il fornitore della prova o il fornitore della piattaforma.
- Lacune in materia di accessibilità: Le valutazioni devono essere accessibili a tutti, compresi gli studenti con bisogni educativi speciali o disabilità (SEND). Problemi relativi ai sistemi di visualizzazione o audio, ad esempio, possono mettere alcuni studenti in una posizione di svantaggio.
Perché è fondamentale effettuare test proattivi di preparazione digitale
Data la varietà di problemi tecnici che possono insorgere, è importante verificare che il sistema sia pronto con largo anticipo rispetto alla prima valutazione. Un approccio proattivo aiuta a individuare e risolvere i problemi prima che possano compromettere lo svolgimento delle prove in tempo reale, riducendo così i costi imprevisti e lo stress sia per gli amministratori che per gli studenti.
La preparazione comprende due processi fondamentali:
Test diagnostici
I test diagnostici servono a individuare problemi specifici che potrebbero richiedere una correzione. Alcune piattaforme possono fornire strumenti diagnostici integrati; ad esempio, lo strumento diagnostico di TAO verifica la presenza di problemi comuni quali la compatibilità del browser, le prestazioni di rete, la capacità di connessione, la raggiungibilità degli endpoint e la disponibilità dell'audio.
Convalida
La validazione garantisce che la piattaforma e la valutazione soddisfino le esigenze degli studenti, del personale e del vostro team dirigenziale, testando l'intero flusso di lavoro — e non solo le singole parti — per assicurare che i sistemi funzionino senza intoppi e che i diversi soggetti interessati possano interagire con il test e i suoi risultati.
Ciò significa eseguire simulazioni realistiche dell'intero percorso del candidato, dall'accesso e dall'autenticazione fino all'assegnazione delle prove, al loro completamento, alla valutazione, al trasferimento dei dati e alla reportistica finale. Anche la verifica dei flussi di lavoro di supporto e dei potenziali errori può rappresentare una parte importante della validazione.
Un buon esempio dell’importanza di convalidare i sistemi di valutazione in condizioni realistiche ci viene dalla Svezia, dove le prove pratiche su larga scala hanno evidenziato problemi relativi agli accessi e alle prestazioni della rete prima dell’introduzione a livello nazionale. Di conseguenza, l’agenzia nazionale è passata temporaneamente agli esami cartacei fino alla risoluzione dei problemi. Sebbene ciò abbia comportato un certo disagio, l’individuazione di tali problemi durante la fase pilota ha evitato sconvolgimenti ancora maggiori durante le valutazioni effettive.
Creazione di una Framework per la preparazione ai test digitali quadro di riferimento
Sebbene gli aspetti specifici che vorrete testare possano dipendere dalla configurazione esatta del vostro sistema di valutazione, potreste voler prendere in considerazione quanto segue:
Stato di prontezza del dispositivo:
- Verificare che tutti i dispositivi approvati soddisfino i requisiti hardware e di sistema operativo previsti per la valutazione.
- Verificate che tutti i dispositivi funzionino correttamente e siano dotati dei componenti necessari, quali webcam, cuffie o microfoni.
- Assicurati che tutti i dispositivi siano in grado di avviare ed eseguire la valutazione.
Compatibilità con i browser:
- Verificare che i browser installati siano in grado di visualizzare correttamente i contenuti della valutazione, supportino tutti i tipi di domanda e abbiano le impostazioni corrette attivate.
Prestazioni della rete:
- Assicurati che la rete sia in grado di supportare il numero previsto di candidati senza un calo delle prestazioni.
- Verificare la larghezza di banda, la latenza e la stabilità della rete in condizioni di carico di picco realistiche.
Accesso agli endpoint e connettività:
- Verificare che tutti i candidati possano accedere alla valutazione senza che l'accesso venga bloccato da firewall, server proxy o filtri dei contenuti.
- Verificare che i candidati possano completare la valutazione senza ritardi o interruzioni.
Flussi di lavoro per l'erogazione delle valutazioni:
- Verificate l'intero percorso per assicurarvi che gli studenti ricevano la valutazione corretta, che le risposte vengano salvate durante tutto il processo e che gli invii avvengano senza errori.
- Assicurati di verificare i flussi di lavoro relativi all'accessibilità per i candidati con esigenze diverse. Ad esempio, controlla che le sovrapposizioni di testo vengano visualizzate correttamente o che la funzione di sintesi vocale funzioni correttamente.
Punteggio e rendicontazione:
- Verificare che i punteggi e i voti siano stati assegnati correttamente.
- Verificare che i risultati vengano visualizzati correttamente nei fogli di dati e nel software di reportistica.
Flussi di lavoro di supporto:
- Utilizza le simulazioni in tempo reale per assicurarti che i sorveglianti, gli amministratori e il personale di supporto tecnico siano in grado di risolvere rapidamente eventuali problemi.
- Verifica che anche il flusso di lavoro di supporto sia chiaro e utile per i candidati.
Convalida operativa:
- Effettuate una prova finale oppure valutate la possibilità di condurre una valutazione pilota che riproduca le condizioni reali, in modo da poter individuare e risolvere eventuali problemi prima del lancio.
Essere sempre pronti: capacità operativa continua
Man mano che i programmi di valutazione crescono e si evolvono, i dispositivi potrebbero essere aggiornati, i sistemi operativi potrebbero cambiare o le reti potrebbero essere riconfigurate. Al vostro ecosistema potrebbero essere aggiunte nuove integrazioni o funzionalità di sicurezza. Anche le modifiche ai programmi didattici potrebbero richiedere nuovi tipi di domande o stili di valutazione, rendendo necessari adeguamenti tecnici.
Anziché considerare la preparazione come un’attività una tantum, le organizzazioni mature la integrano quindi nelle operazioni di valutazione di routine. I test diagnostici e la convalida diventano parte integrante di ogni ciclo di valutazione, e le modifiche all’infrastruttura vengono esaminate prima dell’inizio delle finestre di test. I processi di supporto vengono documentati, testati regolarmente e aggiornati. Anche le simulazioni periodiche contribuiscono a garantire che l’esecuzione delle valutazioni rimanga affidabile, mentre gli audit di sicurezza e le analisi degli incidenti contribuiscono a mantenere un ambiente di valutazione sicuro.
La prontezza deve essere integrata anche nella governance, con una chiara attribuzione delle responsabilità in tutta l’organizzazione. I team IT, i responsabili delle valutazioni, gli amministratori e il personale di supporto devono comprendere i propri ruoli nel garantire che l’ambiente tecnico rimanga pronto per ogni finestra di valutazione. Man mano che i programmi si espandono, le valutazioni pilota aiutano a verificare che le reti siano in grado di gestire volumi maggiori e che i flussi di lavoro operativi — quali la sorveglianza e il trasferimento dei dati — funzionino come previsto. La fase pilota offre inoltre l’opportunità di definire piani di emergenza prima dell’implementazione su larga scala. Ciò contribuisce a mantenere nel tempo un sistema di valutazione flessibile e affidabile.
Dalla preparazione tecnica alla sicurezza operativa
Verificare che il sistema sia pronto per la valutazione digitale è fondamentale sia prima che dopo il lancio. I test diagnostici e la convalida del sistema possono darvi maggiore sicurezza nell’offrire una rigoroso e affidabile in grado di rilevare con precisione i progressi degli studenti, fornendovi i dati necessari, in qualità di dirigenti, per promuovere quei miglioramenti che cambiano la vita degli studenti.
Collaborare con TAO può fornirti gli strumenti necessari per progettare, testare e distribuire valutazioni digitali su larga scala, con il supporto di esperti che garantiscono il corretto svolgimento delle operazioni. Per saperne di più sulla collaborazione con TAO, prenota una demo con il team.