Le scuole e i distretti scolastici di tutto il mondo sono diventati sempre più digitalizzati, con molte opzioni di istruzione online e piattaforme di apprendimento digitale a disposizione di studenti e insegnanti. Queste nuove e innovative opzioni di apprendimento rendono necessario garantire che le pratiche di valutazione basate sulla tecnologia siano eque ed efficaci nel misurare la crescita e i risultati degli studenti. Tuttavia, le migliori pratiche per le valutazioni con carta e penna in classe e le valutazioni online non sono le stesse.
Questo è il motivo per cui l' Associazione degli editori di test (ATP) ha sviluppato una guida approfondita su come implementare e utilizzare le valutazioni online, compresa la progettazione, la somministrazione e la valutazione delle valutazioni digitali. L'ATP ha anche fornito linee guida sulla sicurezza, la validità, l'affidabilità e l'equità dei test nella guida. In breve, le Linee guida per la valutazione basata sulla tecnologia offrono il punto di partenza perfetto per gli amministratori dei test o i funzionari dei distretti scolastici quando sviluppano valutazioni online.
Cosa è incluso?
La guida è completa e comprende capitoli su una varietà di argomenti e questioni relative alle valutazioni digitali. I capitoli della guida includono:
- Sviluppo e creazione di test (compresi elementi di gamification e potenziati dalla tecnologia)
- Progettazione e assemblaggio del test: lineare o adattivo
- Ambienti di delivery dei test (inclusi web, mobile, offline, browser bloccati, interruzioni e interoperabilità)
- Punteggio: automatizzato e assistito dalla tecnologia
- Reportistica dei risultati in formato digitale
- Gestione dei dati (archiviazione, manutenzione, integrità, integrazione)
- Qualità psicometrica e tecnica
- Sicurezza dei test
- La privacy dei dati nella valutazione basata sulla tecnologia
- Equità e accessibilità
- Considerazioni relative ai test globali, compresa la traduzione
Ogni capitolo è stato redatto da un esperto del settore e revisionato da altri esperti per garantire che le informazioni contenute nella guida siano accurate e riflettano le migliori pratiche a livello industriale. La guida è stata concepita per essere utilizzata con valutazioni ad alto rischio o sommative, sebbene i principi, in particolare quelli relativi alla progettazione dei test, possano essere applicati anche alle valutazioni formative .
Punti chiave
Sebbene la guida contenga molte informazioni da esaminare, cinque aree tematiche chiave spiccano su tutte. Queste includono punti chiave relativi agli elementi potenziati dalla tecnologia e alla valutazione basata sul gioco, all'interoperabilità, all'equità e all'accessibilità, al punteggio e alla sicurezza. Considerando ciascuno di questi aspetti, un insegnante o uno sviluppatore di test può garantire che la propria valutazione basata sulla tecnologia misuri ciò che si desidera misurare, in modo equo, mantenendo al contempo un elevato livello di privacy e sicurezza.
Elementi potenziati dalla tecnologia e valutazione basata sul gioco
Uno dei modi migliori per utilizzare la tecnologia al fine di migliorare l'apprendimento è attraverso le Portable Custom Interactions o PCI. Le PCI offrono agli studenti un'enorme libertà di dimostrare il proprio apprendimento, nel contesto e con risultati multipli, consentendo loro di interagire con simulazioni simili a giochi all'interno di un test.
Quando si crea un elemento di valutazione, è fondamentale partire dall'obiettivo finale, ovvero ciò che la domanda dovrebbe misurare e consentire agli studenti di dimostrare. Ciò significa che quando si utilizzano elementi potenziati dalla tecnologia (TEI) o valutazioni basate sul gioco, è importante iniziare considerando lo standard di apprendimento che si intende misurare e progettare la valutazione in modo tale da consentire agli studenti di dimostrare la comprensione di tali competenze. Altre linee guida fondamentali da considerare includono:
- Assicurarsi che i TEI funzionino sui dispositivi degli studenti: gli studenti potrebbero sostenere la valutazione su un tablet, un laptop, un ChromeBook o un altro dispositivo, quindi assicurarsi che possano visualizzare gli elementi senza dover scorrere troppo.
- Fornire tutorial: gli studenti devono capire come usare la tecnologia prima di iniziare, così non si bloccano durante la valutazione e i risultati mostrano quello che sanno, non quanto sono bravi a usare la tecnologia.
- Ridurre la varianza irrilevante del costrutto o CIV: per quanto possibile, gli sviluppatori dei test devono garantire che il contenuto e le competenze degli studenti rimangano al centro dell'attenzione. I TEI devono essere facilmente accessibili e sviluppati tenendo conto dei candidati.
Interoperabilità
Esiste un'ampia varietà di strumenti e piattaforme di valutazione basati sulla tecnologia che le scuole implementano nell'insegnamento e nella valutazione degli studenti. Quando si sviluppa un software di valutazione, esso deve essere in grado di accedere e comunicare con software di altre piattaforme per garantire un trasferimento di informazioni fluido e sicuro da un luogo all'altro.
Per gli insegnanti, ciò significa che una valutazione può essere somministrata su una piattaforma e i punteggi o i dati degli studenti possono essere analizzati da altre piattaforme o registri progettati a tale scopo. Questa interoperabilità garantisce che gli educatori possano sfruttino i dati in modo efficace, sviluppare valutazioni più coinvolgenti e avere un impatto positivo sulla crescita degli studenti.
Equità e Accessibilità
Sotto molti aspetti, la valutazione basata sulla tecnologia livella il campo di gioco per gli studenti e crea l'opportunità di valutare in modo più giusto ed equo. Tuttavia, ci sono alcune considerazioni chiave relative all'equità e all'accessibilità, tra cui:
- Considerazioni relative all'ELL (English Language Learners, studenti che stanno imparando l'inglese): le valutazioni dovrebbero tenere conto delle esigenze linguistiche e prevedere adeguamenti e modifiche appropriati all'interno della piattaforma. Per i test digitali, ciò potrebbe significare fornire tutorial che fanno ampio ricorso a istruzioni basate su immagini o includere diverse traduzioni delle modalità di svolgimento della valutazione.
- Studenti con problemi di salute mentale: le piattaforme di test digitali devono garantire che gli adattamenti siano facilmente implementabili dai docenti e facili da utilizzare per gli studenti durante lo svolgimento del test.
- Studenti senza esperienza sulle piattaforme digitali: non tutti gli studenti hanno competenze tecnologiche e sanno usare la tecnologia per la valutazione. Gli educatori e gli sviluppatori di test devono assicurarsi che i test siano progettati in modo semplice e intuitivo, così che gli studenti possano interagire con il materiale nel modo più autentico possibile.
Scoring
La valutazione basata sulla tecnologia può essere suddivisa in due sezioni: valutazione automatizzata e valutazione umana. Per le valutazioni automatizzate, o valutate dall'IA, è fondamentale che gli sviluppatori dei test adottino un processo di controllo qualità rigoroso e approfondito sia per la valutazione dei test che per la comunicazione dei punteggi agli studenti e alle famiglie. Ciò significa che il software dovrebbe identificare le risposte corrette e quelle errate per fornire dati accurati.
Tuttavia, non tutti gli items possono essere valutati automaticamente; per gli items valutati da esseri umani, è necessario tenere presente alcuni aspetti:
- Questi elementi dovrebbero sempre avere una rubrica chiaramente definita, in modo che gli studenti sappiano cosa devono fare.
- I valutatori devono seguire una formazione adeguata per evitare pregiudizi e garantire l'accuratezza dei test.
- Le piattaforme tecnologiche per l'archiviazione e la visualizzazione delle risposte degli studenti devono essere intuitive e facili da usare.
Privacy e sicurezza
Lavorare con dati di test sensibili è una delle principali preoccupazioni per gli sviluppatori di test. Con molti test offerti online e tramite interazioni basate su cloud, il rischio di violazioni dei dati è elevato. Per mantenere l'integrità del test, gli sviluppatori devono agire per prevenire eventuali violazioni prima che si verifichino, adottare strategie deterrenti prima e durante i test e sviluppare un piano di risposta in caso di frodi o violazioni dei dati.
È altrettanto importante considerare anche le informazioni di identificazione personale che il test potrebbe aver raccolto. Disporre di un solido sistema di sicurezza per mantenere un elevato livello di privacy garantirà la protezione dei dati degli studenti. Ciò non è solo una questione di buone pratiche, ma in molti luoghi è anche un requisito legale, poiché i governi si impegnano a garantire la sicurezza dei dati personali.
Perché la guida è importante?
Il passaggio alla valutazione online basata sulla tecnologia ha consentito agli educatori di ottenere una visione più accurata di ciò che i loro studenti sono in grado di fare e non sono in grado di fare in un lasso di tempo più breve rispetto ai metodi di valutazione tradizionali. Tuttavia, i test online sono relativamente nuovi e presentano alcune sfumature e differenze importanti. Ecco perché queste linee guida ATP sono un punto di partenza importante per gli sviluppatori di test: forniscono una base di riferimento per le migliori pratiche, che alla fine portano a una valutazione più efficace, meno perdite di tempo e dati più accurati.
Open Assessment Technologies offre soluzioni software che possono aiutare a sviluppare valutazioni di alta qualità progettate per l'apprendimento online. Per saperne di più su come le soluzioni OAT possono migliorare le valutazioni dei vostri studenti, clicca qui e contattare un rappresentante commerciale.