Enten du er lærer eller arbeidsgiver, er det avgjørende å sørge for at du måler og tester de riktige ferdighetene og prestasjonene på en etisk, nøyaktig og meningsfull måte. Hvis du vil sørge for at studentene dine er kunnskapsrike og forberedt, eller hvis du vil sørge for at en potensiell ansatt eller et medarbeider er i stand til å utføre spesifikke oppgaver, må du gi dem riktig eksamens- eller vurderingsinnhold.
For at en eksamen eller vurdering skal oppfylle sitt formål nøyaktig og uten skjevheter, må den måle det den skal måle objektivt. Med andre ord må testene dine være gyldige og pålitelige.
Hva er eksamensgyldighet?
Vurderingsvaliditet informerer nøyaktigheten og påliteligheten til eksamensresultatene. For å kunne bruke resultatene på en trygg og etisk måte, må du sikre eksamensvaliditeten og påliteligheten .
Validitet betyr at en test måler det den skal måle, og ikke inkluderer spørsmål som er partiske, uetiske eller irrelevante. Validitet er spesifikt knyttet til innholdet i testen og hva den er utformet for å måle.
Reliabilitet handler imidlertid om hvor konsistent en test er i å produsere stabile resultater. Hvis for eksempel en gruppe elever tar en test for å måle digital kompetanse og resultatene viser mestring, men de tester igjen og stryker, kan det være inkonsekvenser i testspørsmålene. Vurderingen gir upålitelige resultater. Med andre ord bør testresultatene dine være replikerbare og konsistente, noe som betyr at du bør kunne teste en gruppe eller en person to ganger og oppnå de samme eller nesten de samme resultatene.
Fire måter å forbedre vurderingsvaliditet og pålitelighet på
Heldigvis finnes det måter å designe testinnhold på for å sikre at det er nøyaktig, gyldig og pålitelig. Husk disse kjernekomponentene når du går videre til de fire hovedtrinnene:
- Innholdsvaliditet – vit hva du vil måle og sørg for at testen ikke avviker fra dette;
- Kriterievaliditet – vurder hvor godt testen din måler innholdet;
- Konstruksjonsvaliditet – sjekk at testen faktisk måler riktig innhold, eller om den måler noe annet;
- Pålitelighet – sørg for at testen er replikerbar og kan oppnå konsistente resultater hvis den samme gruppen eller personen skulle teste igjen innen kort tid.
Tipsene nedenfor kan hjelpe deg når du lager eksamener eller vurderinger for å sikre at de har gyldig og pålitelig innhold.
1. Identifiser testformålet ved å sette SMART-mål
Før du begynner å utvikle spørsmål til testen, må du tydelig definere formålet og målene med eksamen eller vurdering. Du kan gjøre dette ved å sette SMART-mål . SMART står for:
- Spesiell;
- Målbar;
- Oppnåelig;
- Relevant;
- Tidsbundet.
Som du kan se, inkluderer SMART-mål noen av nøkkelkomponentene i testvaliditet: målbarhet og relevans. Hvis du lager SMART-testmål som inkluderer målbare og relevante resultater, vil dette bidra til å sikre at testresultatene dine kan replikeres. Dette vil veilede deg når du lager testspørsmålene.
Underveis kan det hende du oppdager at spørsmålene du kommer opp med ikke er gyldige eller pålitelige. Du kan differensiere disse spørsmålene ved å gå tilbake til SMART-målene dine. Dette inkluderer å identifisere detaljene i testen og hva du ønsker å måle, for eksempel innhold eller kriterier.
Husk hvem testen er for og hvordan de kan oppfatte bestemte språk. Deleger også hvor mange spørsmål du vil inkludere eller hvor lang du vil at testen skal være for å oppnå mest mulig nøyaktige resultater uten å overvelde respondentene. Ved å etablere disse tingene på forhånd og tydelig definere målene dine, kan du lage en mer gyldig test.
2. Mål de riktige ferdighetene
Når du utformer en ny test, er det også viktig å sørge for at du vet hvilke ferdigheter eller evner du må teste avhengig av situasjonen. Hvis du for eksempel underviser i datakunnskaper, vil du sørge for at eksamen har de riktige spørsmålene som avgjør om elevene dine har lært ferdighetene de trenger for å bli ansett som digitalt kyndige.
Eller, hvis du ansetter noen til en lederstilling innen IT, må du sørge for at de har de riktige harde og myke ferdighetene for jobben . Vurderingen din må ha spørsmål som nøyaktig tester ferdigheter utover kjernekravene til rollen. Inkluder noen spørsmål som vurderer kommunikasjonsferdigheter, empati og selvdisiplin. På samme måte, hvis du er en lærer som holder en eksamen, bør du nøye vurdere hva kurset handler om og hvilke ferdigheter studentene bør ha lært for å sikre at eksamenen din nøyaktig tester disse ferdighetene.
3. Prioriter tilgjengelighet, rettferdighet og objektivitet
Når det gjelder å gi en vurdering, er det også viktig å sørge for at testinnholdet er så partisk som mulig. Dette betyr at det må være tilgjengelig og rettferdig. Hvis du for eksempel tester om noen har de rette ferdighetene til å være dataprogrammerer, men inkluderer spørsmål om rase, hvor de bor eller om de har en fysisk funksjonshemming, inkluderer du spørsmål som åpner for muligheten for at testresultatene blir partiske og diskriminerende. Dette kan føre til at noen blir ekskludert eller stryker av feil – eller til og med ulovlige – grunner. Hvis noen for eksempel er en farget person eller bruker rullestol, har det ingenting å gjøre med om de er en god dataprogrammerer eller ikke.
Det er også viktig å være oppmerksom på testinnholdet for å sørge for at det ikke utilsiktet ekskluderer noen grupper av mennesker. For eksempel vil en virkelig objektiv vurdering i høyere utdanning ta hensyn til noen studenter som trenger tilrettelegging eller har forskjellige læringsstiler. Det er ikke rettferdig å lage en test uten å ta studenter med funksjonsnedsettelser i tankene, spesielt siden bare omtrent en tredjedel av studentene med funksjonsnedsettelser informerer skolen sin . I stedet for å anta at de som tar testen din lever uten funksjonsnedsettelser, bør du strebe etter å gjøre hvert spørsmål tilgjengelig for alle. Bruk inkluderende språk, lekmannsuttrykk der det er aktuelt, tilrettelegging for skjermlesere og alt du kan tenke deg for å hjelpe alle med å få tilgang til og ta eksamen likt.
4. Gjennomfør en analyse og gjennomgang av testen
Til slutt, etter at du har laget testen din, bør du gjennomføre en gjennomgang og analyse før du distribuerer den til studentene dine eller potensielle ansatte. For å gjennomgå den kan du be kolleger eller andre eksperter om å se på den. Å få andre til å gjennomgå testen din kan hjelpe deg med å oppdage eventuelle problemer du kanskje ikke har oppdaget selv.
Det finnes også programmer du kan kjøre testen gjennom som kan analysere spørsmålene for å sikre at de er gyldige og pålitelige. Hvis et spørsmål ikke passer eller er irrelevant, vil programmet flagge det som at det må fjernes eller kanskje omformuleres slik at det blir mer relevant.
—
Å lage eksamener og vurderinger som er mer gyldige og pålitelige er viktig for både studentenes og arbeidsstyrkens vekst. Hvis du ikke tester nøyaktig for de riktige tingene, kan det påvirke bedriften din og dine ansatte negativt eller hindre studentenes utdanningsutvikling. Det er også viktig å regelmessig gjennomgå og oppdatere testene dine etter hvert som behovene endrer seg, samt å være støttende og gi tilbakemeldinger etter testen.
