Una valutazione può contenere una combinazione di elementi che vengono valutati automaticamente e elementi che richiedono l'intervento umano (e anche le singole interazioni all'interno di un elemento di prova possono essere miste). Alcune domande potrebbero essere semplici domande a scelta multipla che possono essere valutate automaticamente in TAO, mentre altre sono domande aperte che richiedono un valutatore umano per essere corrette. Con la crescente digitalizzazione del settore delle valutazioni, le istituzioni hanno bisogno di un modo semplificato e sicuro per misurare e archiviare tutti i tipi di valutazioni, comprese quelle che contengono sezioni a risposta aperta.
TAO Grader, il software di valutazione delle risposte aperte di TAO, consente agli insegnanti e ad altri esperti in materia (SME) di valutare manualmente i test che sono stati impostati nella piattaforma TAO, fornendo una soluzione più efficiente per la valutazione delle risposte aperte e delle domande a risposta aperta. Con TAO Grader, le risposte scritte vengono filtrate negli strumenti di reporting di TAO in formato elettronico, anziché come scansione digitale. Ciò rende molto più facile assegnare i punteggi, spostare e condividere i file delle risposte ai test, designare i valutatori interni che completano il primo passaggio di valutazione e assegnare i revisori per supportare o negare tali voti.
Sebbene il punteggio automatico elimini il lavoro di valutazione per molti tipi di domande di valutazione, come quelle a scelta multipla o con spazi vuoti da riempire, potrebbero esserci ancora sezioni del test che richiedono risposte scritte, che devono quindi essere valutate da un insegnante o da un esperto della materia. La valutazione manuale di saggi e altri tipi di domande a risposta aperta senza un motore di punteggio manuale può comportare molte complicazioni. Queste possono includere qualsiasi cosa, dalle difficoltà nel decifrare la grafia, alle sfide nell'archiviazione dei risultati e ai problemi durante la scansione di quelle sezioni di valutazione scritte in una soluzione di reporting della valutazione.
TAO Grader risolve queste sfide fornendo agli educatori un approccio semplificato e intuitivo per accedere e valutare online le domande a risposta aperta. Ciò elimina efficacemente la necessità di stampare, valutare e archiviare manualmente grandi volumi di valutazioni cartacee.
Un vantaggio fondamentale del sistema di valutazione manuale è la possibilità di assegnare e valutare le risposte in team. TAO consente la valutazione asincrona in team, riducendo il carico operativo richiesto per la stampa, l'organizzazione e la valutazione manuale degli esami. La valutazione in team non solo alleggerisce il carico di lavoro dei valutatori e riduce i tempi di comunicazione dei risultati, ma consente anche agli esperti in materia di partecipare alla valutazione, eliminando efficacemente i pregiudizi dei valutatori nei confronti dei candidati.
Ad esempio, ai gruppi di valutatori in TAO possono essere assegnate in modo casuale domande da valutare in base alla categoria di materia o in base a gruppi di candidati definiti dall'utente. In entrambi i casi, i nomi dei candidati sono nascosti alla vista dei valutatori per consentire una valutazione obiettiva e imparziale.
Gli esami ad alto rischio e su larga scala, come l'ACT o il SAT negli Stati Uniti e gli esami di maturità o di baccalaureato in Europa, sono organizzati in sezioni per materie specifiche o risultati di apprendimento. La valutazione di domande aperte in materie diverse, o competenze all'interno di una materia, richiede spesso che i valutatori abbiano competenze specifiche in tali argomenti.
In questo caso, i sistemi di valutazione manuale come TAO Grader, che consentono di classificare gli elementi di valutazione e assegnare i valutatori per materia, piuttosto che per l'intero test, possono portare a una valutazione più efficace, rapida e semplificata. Questa funzionalità può anche aiutare a semplificare i flussi di lavoro di valutazione, garantendo che gli esperti della materia giusta valutino le domande del test appropriate.
L'organizzazione dei progetti e la coda di valutazione delle risposte aperte di TAO Grader sono pensate sia per programmi di valutazione su piccola scala e a basso rischio, sia per programmi nazionali ad alto rischio. Essendo una soluzione pronta all'uso, il sistema di valutazione delle risposte aperte di TAO è completamente integrato nella piattaforma TAO e offre flussi di lavoro semplificati e completi per l'organizzazione, l'archiviazione e la condivisione dei risultati e dei dati degli studenti. Si tratta di una soluzione multilingue, che può essere facilmente estesa per supportare nuove funzionalità linguistiche.
Le rubriche sono strumenti efficaci per valutare in modo cOERente le risposte aperte e svolgono un ruolo fondamentale nella valutazione online. Le rubriche sono strumenti di valutazione progettati per descrivere o classificare i livelli di rendimento dei candidati sulla base di una serie di criteri. Definendo criteri specifici in una rubrica, gli educatori sono in grado di comunicare gli obiettivi di apprendimento e il livello di padronanza in base ai quali valuteranno i candidati. Ulteriori vantaggi della valutazione basata su rubriche delle risposte aperte nella valutazione online includono:
- Definizione di un meccanismo di valutazione imparziale e uniforme
- Facilitare una valutazione più rapida per gli educatori e un feedback per i candidati
- Migliorare la comunicazione con i candidati definendo chiaramente le aspettative di valutazione
- Ispirare il pensiero critico
Il software di valutazione manuale TAO offre una soluzione integrata per allegare rubriche digitali in formato PDF che facilitano la valutazione delle risposte scritte ai test. Gli studenti possono comprendere le aspettative del test e le modalità di valutazione, mentre gli insegnanti ricevono le risposte immediatamente dopo l'invio e dispongono di una serie di linee guida cOERenti su cui basare la valutazione, consentendo un feedback più rapido.
Con TAO Grader, gli utenti che svolgono attività di valutazione e ricontrollo dei punteggi sono denominati rispettivamente " valutatori" e "revisori". Dopo aver assegnato le categorie tematiche alle domande di valutazione, è possibile assegnare gruppi di valutatori e revisori designati a singoli elementi o sezioni del test. I flussi di lavoro consentono quindi a questi utenti di visualizzare e svolgere le loro attività di valutazione in modo semplificato ed efficiente.
I nomi dei singoli candidati vengono oscurati durante la valutazione per eliminare qualsiasi pregiudizio da parte dei valutatori. Inoltre, la designazione di un revisore incaricato di confermare o contestare la valutazione originale del valutatore garantisce un approccio ancora più obiettivo quando è necessaria una valutazione in doppio cieco.
Il software di valutazione delle risposte aperte TAO include una funzione che consente agli altri utenti del progetto di valutazione di "valutare il valutatore", ovvero di valutare le capacità di valutazione dei diversi valutatori. Ad esempio, potresti avere un valutatore che assegna costantemente voti più bassi o più alti rispetto a un revisore per determinate domande o categorie di argomenti. In questo caso, è utile valutare quell'utente e modificare o rimuovere i suoi progetti di valutazione. Soprattutto per le valutazioni ad alto rischio, è fondamentale che i valutatori siano controllati e all'altezza, in modo da non interferire con i progressi degli studenti assegnando punteggi inferiori o superiori a quelli giustificati.
Una soluzione moderna e facile da usare per gli utenti meno esperti di tecnologia può aiutare i valutatori a completare le attività di valutazione da remoto. Gli educatori moderni di oggi cercano flessibilità nella gestione delle loro soluzioni EdTech, sfruttando più dispositivi e browser. La possibilità di valutare le prove su un tablet o un laptop consente di correggere le risposte da remoto e fornire comunque un feedback rapido agli studenti.
L'accessibilità è sempre una priorità assoluta nella valutazione online, ma troppo spesso viene trascurata. In conformità con i requisiti di accessibilità WCAG 2.1 AA e le linee guida della Sezione 508, le soluzioni di valutazione online di TAO sono progettate fin dall'inizio per garantire l'accessibilità in tutti gli aspetti del ciclo di test. L'interfaccia utente basata sul web di TAO online Manual Scoring Professional è intrinsecamente accessibile e può essere utilizzata con uno screen reader dagli utenti con disabilità visive.
Per saperne di più sull'accessibilità di TAO, clicca qui.
A volte, diversi aspetti di una risposta devono essere valutati con punteggi separati, il che significa che per una singola domanda sono necessari più punteggi. Questo sistema è denominato " valutazione multi-tratto". In TAO, designare una valutazione multi-tratto significa che una domanda ha più di un risultato che deve essere valutato manualmente. Ad esempio, una domanda a risposta aperta potrebbe prendere in considerazione tratti come "accuratezza grammaticale" e "scelta delle parole", che si applicano alle stesse domande, ma richiedono punteggi diversi.
Un sistema di valutazione online affidabile deve supportare domande a risposta aperta in più lingue per facilitare diversi tipi di valutazioni, come quelle che testano la fluidità nella scrittura. Il software di valutazione manuale online di TAO è multilingue fin dall'inizio, progettato per supportare la valutazione delle risposte aperte in diverse lingue.