For lærere og testutviklere er forbedring av eksamensintegritet en kontinuerlig prosess. Etter hvert som ny teknologi blir tilgjengelig, blir strategier som tilfeldiggjøring av testspørsmål mer verdifulle for å sikre at eksamener er rettferdige og juksing minimeres. Dette er spesielt viktig når eksamener gis asynkront, der én student tar en prøve før en annen student.
Selv om det kan være umulig å stoppe juksing helt og garantere eksamensintegritet, har nettbaserte testplattformer gjort denne prosessen enklere for lærere og testutviklere. Tradisjonelt sett var det et ork for lærere å tilby randomiserte testspørsmål. De måtte ta spørsmålene de hadde og gi 2 eller 3 forskjellige kopier av en eksamen sammen med 2 eller 3 forskjellige svarnøkler. Det var tungvint å rette disse spørsmålene, og det var lett å gjøre feil i karaktersettingen. Med digitalisert testing kan lærere gjøre alt dette med et klikk på en knapp, noe som sikrer en rettferdig og likeverdig testopplevelse for alle elever, samtidig som de gir autentisk tilbakemelding til læreren.
Hva er randomisering av testspørsmål?
Randomisering av testspørsmål er en prosess der spørsmål i en test presenteres i tilfeldig rekkefølge for å minimere muligheten for juks og forbedre testvaliditeten . Det innebærer bruk av teknologi for å omorganisere rekkefølgen på spørsmål og svaralternativer slik at ingen tester er like. Randomiseringsprosessen sikrer at hver testdeltaker får en unik test som har samme vanskelighetsgrad som de andre.
Fordelene med tilfeldig bruk av testspørsmål inkluderer økt sikkerhet, ettersom det gjør det vanskelig for studentene å kopiere fra hverandre, og bedre testpålitelighet , ettersom det reduserer effekten av teststrategier. Tilfeldig bruk av testspørsmål brukes ofte i databasert testing, der spørsmål presenteres for studentene i tilfeldig rekkefølge. Det kan imidlertid også brukes i papirbaserte tester ved å lage flere versjoner av testen, hver med ulik spørsmålsrekkefølge.
Hvordan oppnås randomisering av testspørsmål med EdTech?
Randomisering av testspørsmål kan oppnås gjennom ulike EdTech-verktøy og -plattformer, inkludert TAO fra Open Assessment Technologies , som tilbyr funksjonen for å randomisere spørsmål. Disse verktøyene bruker algoritmer for å generere tilfeldige sekvenser av spørsmål og svaralternativer, noe som sikrer at hver student får en unik test.
En tilnærming til tilfeldighetsbestemmelse av testspørsmål er å lage en spørsmålsbank som inneholder et stort antall spørsmål som dekker alle emnene i testen. Plattformalgoritmen velger et tilfeldig sett med spørsmål fra banken for å lage en unik test for hver elev, og lar også testforfattere feste spesifikke spørsmål som de ønsker at alle elever skal motta. Denne tilnærmingen sikrer at vanskelighetsgraden på testen er den samme for alle elever, og at hver elev har lik sjanse til å lykkes.
En annen tilnærming er å bruke item response theory (IRT) for å bestemme vanskelighetsgraden for hvert spørsmål, og deretter bruke IRT-poengsummene til å generere en test med tilsvarende vanskelighetsgrader. Denne tilnærmingen er mer kompleks, men kan gi større presisjon i testkonstruksjonen.
I tillegg til å randomisere testspørsmål, tilbyr noen plattformer også muligheten til å randomisere rekkefølgen på svaralternativene for flervalg, gap-match, rekkefølge, match, inline choice og assosierte interaksjoner, noe som ytterligere øker vanskelighetsgraden på juks. Alt dette bidrar til å øke nøyaktigheten til en test og gi et reelt innblikk i hva studentene kan gjøre.
Hvordan kan randomiserte testspørsmål forbedre integriteten til eksamener?
Å forbedre integriteten til eksamener er sentralt for å sikre at eksamener gir gyldige og pålitelige data som lærere kan bruke i undervisningen. Grunnen til at vi i utgangspunktet gjennomfører tester og eksamener er å gi lærere en idé om hvor elevene er og hva elevene kan gjøre. Hvis elever tar en eksamen med løs sikkerhet og lav pålitelighet og validitet, vil det ikke gi oss et nøyaktig bilde av elevens evner.
To måter det er gunstig å forbedre integriteten til eksamener på, er at det bidrar til å forhindre juks og forbedrer nøyaktigheten av testresultatene.
Forhindre juks
Randomisering av testspørsmål og andre strategier som forbedrer integriteten til eksamener, som spørsmålsbanker, begrensning av tilbakemeldinger og blanding av spørsmålstyper , bidrar alle til å forhindre juks. Dette gjelder spesielt for eksamener som gis asynkront , inkludert store nasjonale eksamener med høy innsats. Med disse testene kan studentene dele svar og tilbakemeldinger med andre studenter mellom testtidspunktene. Ved å randomisere spørsmål og trekke fra forskjellige spørsmålsbanker tar imidlertid hver student en unik test.
Å ha en unik test gjør det utfordrende å jukse fordi studentene ikke bare kan kopiere en liste med bokstaver eller svar; de må faktisk kopiere hvert spørsmål fullstendig og deretter håpe at den andre testtakeren hadde den samme listen med spørsmål. All denne innsatsen for et potensielt dårlig resultat avskrekker mange studenter fra å forsøke å jukse.
En ulempe med denne metoden for å forhindre juks er at lærerne må ha en stor samling spørsmål å hente fra. Dette kan gjøre den egnet til større slutttester eller semestertester i stedet for raske innsjekkinger.
Gi nøyaktige resultater
En annen grunn til at det er gunstig å forbedre eksamensintegriteten er at det til syvende og sist gir mer nøyaktige resultater. Ved å fjerne jukseelementet fra ligningen får lærere et reelt innblikk i elevenes prestasjoner og vekst. I tillegg, etter hvert som spørsmålspoolen vokser og randomiseringen av testspørsmål øker, ser vi mer gyldige og pålitelige testdata.
Dette er kritisk fordi lærere bruker testdata i klassene sine til å bestemme elevgruppering, planlegge undervisning og bestemme hvilken vei de skal ta for elevene sine. Alt dette fører til økt læring, som er målet.
Merknad om adaptiv testing
Adaptiv testing kan virke lik randomiserte testspørsmål, men det er en viktig forskjell. Med adaptiv testing endres testen basert på hvordan en student svarer på et spørsmål, noe som leder studentene ned mange forskjellige veier med potensielt mange forskjellige utfall. Dette er forskjellig fra randomiserte spørsmål fordi spørsmålene med randomiserte spørsmål gis uten rim eller begrunnelse, de er tilfeldige. Hvordan en student svarer på ett spørsmål påvirker ikke det neste spørsmålet de blir vist.
En testutvikler kan velge å bruke randomisering av testspørsmål i forbindelse med adaptiv testing for å gi studentene en fullstendig tilpasset test som er utformet for å kartlegge deres ferdigheter og evner. Dette forbedrer testintegriteten betraktelig og gjør det usedvanlig utfordrende å jukse.
—
Som en digital test- og læringsplattform på nett lar TAO lærere fullstendig tilfeldige testelementer fra en hel elementbank. I tillegg kan lærere gjennom TAO velge å implementere omstokking av tester eller spørsmål, noe som forbedrer testintegriteten betraktelig, reduserer juks og gir lærere nøyaktige testdata om individuelle elever.
For å lære mer om hvordan åpne vurderingsteknologier og TAO kan forbedre eksamensintegriteten din og gi verdifull læring til studentene dine, klikk her .
