En titt på testpsykometri med to TAO-psykometrikere

Vi satte oss ned med psykometrikerne våre – Hélène MAYER og Franck GISMONDI – for et intervju om deres rolle i TAO-teamet.

(Spørsmål) Kan du gi oss en definisjon av psykometri?

(Mayer & Gismondi) Psykometri er en disiplin som er utformet for å utvikle og analysere psykologiske og pedagogiske målinger. Den er dedikert til konstruksjon og bruk av tester, spørreskjemaer, personlighetsvurderinger…

(Q) Hva er fordelene med å lage en psykometrisk test?

(HM og FG)

  • Psykometriske tester er pålitelige når det gjelder evaluering. Derfor er deres vitenskapelige validering globalt anerkjent.
  • Vurderingen deres er objektiv, og affektive parametere forstyrrer ikke.
  • Alle testdeltakere tar testen sin under de samme forholdene.
  • Psykometri gjør det også mulig å bygge adaptive tester.

(Q) Hvilken rolle spiller du i utformingen av en psykometrisk test?

(HM og FG) Vi kan operere på forskjellige nivåer, f.eks.:

  • En test settes opp på ulike måter i henhold til dens formål (evaluering, diagnostikk, sertifisering, …). Vår rolle er å veilede eksperten på et domene i hans/hennes etablering av elementer.
  • Vi bestemmer en metode for at testen skal bli tatt under de samme forholdene for alle testdeltakere.
  • I følge psykometri må en test tas av et utvalg testdeltakere før den brukes. Dette gjør det mulig for oss å vurdere elementene og testen. Med noen statistiske metoder er vi faktisk i stand til å sikre at et element når målet sitt (for eksempel ved å måle det valgte emnet riktig). Elementer med dårlig statistikk må omformuleres, deres kronologiske rekkefølge kan endres, og om nødvendig kan noen av dem fjernes, mens andre foreslås som et erstatning.
  • Psykometrisk statistikk validerer selve testen gjennom en studie av referensielt utvalg, kalibrering, validitet, konstans og pålitelighet av testen.

(Q) Franck, du deltok i realiseringen av Aladdin-testen. [Se skjermbilder av Aladdin-testen nedenfor, eller importer den direkte til TAO-plattformen .] Kan du fortelle oss om ditt bidrag?

(FG) Jeg fokuserte på logikken i historien, jeg sjekket om elementene virkelig var i relasjon til utvalgsmålet (dvs. ungdommer).

Denne testen består av et rammeverk med ulike elementer som måler noen kunnskapsfelt, som sport og biologi. Jeg anbefalte at hvert element skulle representere ett enkelt felt, og at hvert element skulle variere i sin representasjon (for eksempel, i Aladdin utføres hvert element med et ulikt QTI-element).

For å gå videre, bør vi sjekke gyldigheten av denne testen med et utvalg av testdeltakere og sørge for at elementene måler de tiltenkte kunnskapsområdene. Hvis det ikke er tilfelle, kan de omformuleres og testes på nytt. Vi må sjekke at elementene gjør det mulig for oss å differensiere kompetansen til alle testdeltakerne (dvs. måle elementenes vanskelighetsgrad). Hvis to elementer fører til lignende resultater, betyr det at ett av dem bør fjernes. Det gir faktisk ikke testen merverdi, og det skiller ikke mellom de ulike nivåene til ulike testdeltakere.

 

Vi satte oss ned med psykometrikerne våre – Hélène MAYER og Franck GISMONDI – for et intervju om deres rolle i TAO-teamet.

(Spørsmål) Kan du gi oss en definisjon av psykometri?

(Mayer & Gismondi) Psykometri er en disiplin som er utformet for å utvikle og analysere psykologiske og pedagogiske målinger. Den er dedikert til konstruksjon og bruk av tester, spørreskjemaer, personlighetsvurderinger…

(Q) Hva er fordelene med å lage en psykometrisk test?

(HM og FG)

  • Psykometriske tester er pålitelige når det gjelder evaluering. Derfor er deres vitenskapelige validering globalt anerkjent.
  • Vurderingen deres er objektiv, og affektive parametere forstyrrer ikke.
  • Alle testdeltakere tar testen sin under de samme forholdene.
  • Psykometri gjør det også mulig å bygge adaptive tester.

(Q) Hvilken rolle spiller du i utformingen av en psykometrisk test?

(HM og FG) Vi kan operere på forskjellige nivåer, f.eks.:

  • En test settes opp på ulike måter i henhold til dens formål (evaluering, diagnostikk, sertifisering, …). Vår rolle er å veilede eksperten på et domene i hans/hennes etablering av elementer.
  • Vi bestemmer en metode for at testen skal bli tatt under de samme forholdene for alle testdeltakere.
  • I følge psykometri må en test tas av et utvalg testdeltakere før den brukes. Dette gjør det mulig for oss å vurdere elementene og testen. Med noen statistiske metoder er vi faktisk i stand til å sikre at et element når målet sitt (for eksempel ved å måle det valgte emnet riktig). Elementer med dårlig statistikk må omformuleres, deres kronologiske rekkefølge kan endres, og om nødvendig kan noen av dem fjernes, mens andre foreslås som et erstatning.
  • Psykometrisk statistikk validerer selve testen gjennom en studie av referensielt utvalg, kalibrering, validitet, konstans og pålitelighet av testen.

(Q) Franck, du deltok i realiseringen av Aladdin-testen. [Se skjermbilder av Aladdin-testen nedenfor, eller importer den direkte til TAO-plattformen .] Kan du fortelle oss om ditt bidrag?

(FG) Jeg fokuserte på logikken i historien, jeg sjekket om elementene virkelig var i relasjon til utvalgsmålet (dvs. ungdommer).

Denne testen består av et rammeverk med ulike elementer som måler noen kunnskapsfelt, som sport og biologi. Jeg anbefalte at hvert element skulle representere ett enkelt felt, og at hvert element skulle variere i sin representasjon (for eksempel, i Aladdin utføres hvert element med et ulikt QTI-element).

For å gå videre, bør vi sjekke gyldigheten av denne testen med et utvalg av testdeltakere og sørge for at elementene måler de tiltenkte kunnskapsområdene. Hvis det ikke er tilfelle, kan de omformuleres og testes på nytt. Vi må sjekke at elementene gjør det mulig for oss å differensiere kompetansen til alle testdeltakerne (dvs. måle elementenes vanskelighetsgrad). Hvis to elementer fører til lignende resultater, betyr det at ett av dem bør fjernes. Det gir faktisk ikke testen merverdi, og det skiller ikke mellom de ulike nivåene til ulike testdeltakere.