Digital testing representerer en enorm mulighet til å modernisere og skalere vurderingsleveransen. Etter at du har lagt ned tid og krefter i å velge riktig plattform for dine vurderingsbehov, er neste trinn implementering. Men vellykket digital vurdering avhenger av mye mer enn selve plattformen.
Ikke bare må den første utrullingen gå knirkefritt, men det bredere tekniske miljøet må fortsette å støtte pålitelig levering etter hvert som vurderingsprogrammet skaleres og modnes. Derfor er det viktig å vurdere hvor beredskapsfulle du er for digital testing før leveringen av vurderingen starter.
I denne veiledningen går vi gjennom hovedkomponentene for beredskap, samt hvordan du vurderer om systemet ditt er forberedt for lanseringen og utover.
Det tekniske grunnlaget for vellykket digital vurderingslevering
En digital vurderingsplattform fungerer ikke isolert. Hver vurdering er avhengig av et bredere økosystem, bestående av ulike gjensidig avhengige tekniske funksjoner. Å forstå disse funksjonene er grunnleggende for å planlegge vellykket og pålitelig levering.
Enheter
Studentene tar testene sine på en endepunktsenhet, for eksempel en stasjonær datamaskin, bærbar PC, nettbrett eller mobil. Gjennom enhetens grensesnitt får studentene tilgang til selve vurderingen, samhandler med spørsmål og sender inn svarene sine. Enhetens funksjoner vil påvirke hvordan studentene kan samhandle med testen og hvilke spørsmålstyper som vil fungere.
Operativsystemer
Hver enhet kjører et operativsystem, for eksempel Windows, macOS, Chrome, iOS eller Android. Som en bro mellom vurderingsprogramvaren og maskinvaren (enheten) som brukes til å få tilgang til den, håndterer operativsystemet viktige funksjoner som minne, sikkerhet, tilgjengelighet og skjerm.
Nettlesere
De fleste digitale vurderinger kjøres i en nettleser – et program som administrerer et nettgrensesnitt og en nettforbindelse.
Nettverk
Nettverk muliggjør levering av vurderingsinnhold, studentsvar og brukerautentisering fra enheter til programvareplattformer. For levering i stor skala kan nettverket koble tusenvis av testtakere til vurderingsplattformen.
Servere og skytjenester
Innhold, data og poengsuminformasjon lagres vanligvis «i skyen», dvs. på eksterne servere. Disse systemene er avgjørende for lagring og behandling av alt på backend-systemet.
Støttetjenester
Du må kanskje også integrere flere andre programvarealternativer i økosystemet ditt, i tillegg til vurderingsplattformen din. Disse kan inkludere identitetsstyringssystemer, læringsplattformer, analyseprogramvare, tilgjengelighetsprogrammer eller nettbaserte tilsynstjenester.
Vanlige hull i digital infrastruktur
Hvis komponentene i økosystemet ikke testes eller valideres før lansering, kan små problemer bli store problemer når vurderinger leveres i stor skala. Vanlige eksempler inkluderer:
- Inkonsekvens i enheter: Et system som lar elevene bruke hvilken som helst enhet de foretrekker for å få tilgang til en vurdering, kan bli svært komplekst. Men selv når en organisasjon standardiserer på én enhetstype, blir konfigurasjonen ofte oversett. For eksempel kan et skoledistrikt anta at alle bærbare datamaskiner er konfigurert identisk, når varierende modeller eller innstillinger i realiteten betyr at noen enheter ikke kan vise bestemte spørsmålstyper riktig.
- Uklare programvarekrav: Som med enheter, hvis programvare (f.eks. nettlesere, operativsystemversjoner eller sikkerhetssystemer) er inkonsekvent, kan tester støte på problemer som skjermproblemer, dårlig tilkobling eller manglende tilgjengelighet.
- Oversett integrasjoner: Det er ikke nok å teste vurderingsplattformen alene hvis den er avhengig av andre systemer for å fungere. For eksempel kan en feil i en digital løsning for tilsyn bety at noen elever ikke overvåkes, eller at registrerte data ikke overføres riktig.
- Uklare støtteprosesser: Det bør finnes støttemuligheter for studenter og administratorer. Hvis noe går galt i løpet av dagen, må alle vite hvem de skal kontakte og hvordan de skal eskalere problemer. Hvis for eksempel kandidater ikke klarer å logge inn eller en vurdering fryser, kan det oppstå forsinkelser hvis eksamensvaktene er usikre på om de skal kontakte skolens IT-team, vurderingsleverandøren eller plattformleverandøren.
- Tilgjengelighetsmangler: Vurderinger må være tilgjengelige for alle , inkludert elever med spesielle opplæringsbehov eller funksjonsnedsettelser. Problemer med skjermer eller lydsystemer kan for eksempel bety at noen elever er vanskeligstilte.
Hvorfor proaktiv digital beredskapstesting er viktig
Gitt de mange tekniske problemene som kan oppstå, er det viktig å sjekke systemets beredskap i god tid før den første vurderingen. En proaktiv tilnærming bidrar til å identifisere og løse problemer før de forstyrrer live-testing, og reduserer dermed uventede kostnader og stress for både administratorer og studenter.
Beredskap innebærer to nøkkelprosesser:
Diagnostisk testing
Diagnostisk testing betyr å identifisere spesifikke problemer som kan trenge retting. Noen plattformer kan tilby innebygde diagnostiske verktøy. For eksempel sjekker TAOs diagnostiske verktøy for vanlige problemer som nettleserkompatibilitet, nettverksytelse, tilkoblingskapasitet, endepunkttilgjengelighet og lydklarhet.
Validering
Validering sikrer at plattformen og vurderingen oppfyller behovene til studenter, ansatte og ledergruppen din ved å teste hele arbeidsflyten – ikke bare komponentdeler – for å sikre at systemene kjører knirkefritt og at ulike interessenter kan samhandle med testen og resultatene.
Dette betyr å kjøre simuleringer i den virkelige verden av hele kandidatreisen, fra innlogging og autentisering til vurderingstildeling, fullføring, poengsetting, dataoverføring og sluttrapportering. Testing av støttearbeidsflyter og potensielle feil kan også være en viktig del av valideringen.
Et godt eksempel på viktigheten av å validere vurderingssystemer under realistiske forhold kommer fra Sverige , hvor storskala praksisvurderinger avdekket problemer med pålogginger og nettverksytelse før nasjonal utrulling. Som et resultat gikk det nasjonale byrået midlertidig over til papireksamener inntil problemene var løst. Selv om det var forstyrrende, unngikk identifiseringen av disse problemene i pilotfasen enda større uro under vurderinger i praksis.
Bygge et rammeverk for digital testberedskap
Selv om detaljene du vil teste kan avhenge av den nøyaktige konfigurasjonen av vurderingssystemet ditt, kan det være lurt å dekke følgende:
Enhetsberedskap:
- Bekreft at alle godkjente enheter oppfyller maskinvare- og operativsystemkravene for vurderingen.
- Sjekk at alle enheter fungerer og har de nødvendige komponentene, for eksempel webkameraer, hodetelefoner eller mikrofoner.
- Sørg for at alle enheter kan starte og kjøre vurderingen.
Nettleserkompatibilitet:
- Kontroller at installerte nettlesere kan vise vurderingsinnhold riktig, støtter alle spørsmålstyper og har de riktige innstillingene aktivert.
Nettverksytelse:
- Sørg for at nettverket kan støtte det forventede antallet kandidater uten at resultatene faller.
- Test båndbredde, latens og nettverksstabilitet under realistiske toppbelastninger.
Endepunktstilgang og tilkobling:
- Bekreft at alle kandidater har tilgang til vurderingen uten å bli blokkert av brannmurer, proxy-servere eller innholdsfiltre.
- Sjekk at kandidatene kan fullføre vurderingen uten forsinkelser eller avbrudd.
Arbeidsflyter for vurderingslevering:
- Test hele reisen for å sikre at studentene får riktig vurdering, at svarene lagres underveis og at innleveringene går gjennom uten feil.
- Sørg for å teste tilgjengelighetsarbeidsflyter for kandidater med ulike behov. For eksempel om tekstoverlegg vises riktig, eller om tekst-til-tale fungerer.
Poengsum og rapportering:
- Bekreft at poengsummer og karakterer brukes riktig.
- Sjekk at resultatene vises riktig i datablad og rapporteringsprogramvare.
Støttearbeidsflyter:
- Bruk gjennomganger i sanntid for å sørge for at eksamensvakter, administratorer og teknisk støttepersonell raskt kan løse eventuelle problemer.
- Sjekk at støttearbeidsflyten også er tydelig og nyttig for kandidatene.
Operasjonell validering:
- Gjennomfør en siste prøvekjøring eller vurder en pilotvurdering som gjenskaper liveforhold, slik at du kan finne og løse eventuelle problemer før oppskytning.
Holde seg klar: Kontinuerlig operativ evne
Etter hvert som vurderingsprogrammer vokser og utvikler seg, kan enheter oppgraderes, operativsystemer kan endres eller nettverk kan konfigureres på nytt. Nye integrasjoner eller sikkerhetsfunksjoner kan legges til økosystemet ditt. Endringer i læreplanen kan også kreve nye spørsmålstyper eller vurderingsstiler, noe som nødvendiggjør tekniske justeringer.
I stedet for å behandle beredskap som en engangsoppgave, integrerer modne organisasjoner det derfor i rutinemessige vurderingsoperasjoner. Diagnostisk testing og validering blir en del av hver vurderingssyklus, og endringer i infrastrukturen gjennomgås før testvinduer starter. Støtteprosesser dokumenteres, testes regelmessig og oppdateres. Regelmessige prøvekjøringer bidrar også til å sikre at vurderingsleveransen forblir pålitelig, mens sikkerhetsrevisjoner og hendelsesgjennomganger bidrar til å opprettholde et sikkert vurderingsmiljø.
Beredskap må også bygges inn i styringen, med tydelig eierskap på tvers av organisasjonen. IT-team, vurderingsledere, administratorer og støttepersonell bør forstå sine roller i å sikre at det tekniske miljøet forblir klart for hvert vurderingsvindu. Etter hvert som programmene utvides, bidrar pilotvurderinger til å bekrefte at nettverk kan håndtere større volumer og at driftsflyter – som overvåking og dataoverføring – fungerer som tiltenkt. Pilotering gir også en mulighet til å etablere beredskapsplaner før fullskala utrulling. Dette bidrar til å opprettholde et fleksibelt og pålitelig vurderingssystem over tid.
Fra teknisk forberedelse til driftssikkerhet
Det er avgjørende å teste systemets klarhet for digital vurdering både før og etter lansering. Diagnostisk testing og systemvalidering kan gi deg større trygghet i å levere et grundig og pålitelig vurderingsprogram som nøyaktig fanger opp elevenes fremgang, og gir deg dataene du trenger som leder for å drive forbedringene som forandrer elevenes liv.
Å samarbeide med TAO kan gi deg verktøyene du trenger for å designe, teste og levere digitale vurderinger i stor skala, med ekspertstøtte for å sikre at alt går knirkefritt. For å lære mer om å samarbeide med TAO, bestill en demonstrasjon med teamet.