Nous avons rencontré nos psychométriciens - Hélène MAYER et Franck GISMONDI - pour une interview sur leur rôle au sein de l'équipe TAO.
(Question) Pouvez-vous nous donner une définition de la psychométrie ?
(Mayer & Gismondi) La psychométrie est une discipline visant à développer et à analyser les mesures psychologiques et éducatives. Elle est consacrée à la construction et à l'utilisation de tests, de questionnaires, d'évaluations de la personnalité...
(Q) Quels sont les avantages de la création d'un test psychométrique ?
(HM & FG)
- Les tests psychométriques sont fiables en termes d'évaluation. Leur validation scientifique est donc mondialement reconnue.
- Leur notation est objective et les paramètres affectifs n'interfèrent pas.
- Chaque candidat passe son test dans les mêmes conditions.
- La psychométrie permet également de construire des tests adaptatifs.
(Q) Quel rôle jouez-vous dans la construction d'un test psychométrique ?
(HM & FG) Nous pouvons opérer à différents niveaux, à savoir :
- Un test est mis en place de différentes manières en fonction de son objectif (évaluation, diagnostic, certification, ...) Notre rôle est d'accompagner l'expert d'un domaine dans sa création d'items.
- Nous déterminons une méthodologie pour que le test soit effectué dans les mêmes conditions pour tous les candidats.
- Selon la psychométrie, un test doit être passé par un échantillon de candidats avant d'être déployé. Cela nous permet d'évaluer les items et le test. En effet, avec certaines méthodes statistiques, nous sommes capables de nous assurer qu'un item atteint son but (par exemple, en mesurant correctement le sujet choisi). Les items ayant de mauvaises statistiques doivent être reformulés, leur ordre chronologique peut être modifié et, si nécessaire, certains d'entre eux peuvent être supprimés tandis que d'autres seront proposés comme substituts.
- Les statistiques psychométriques valident le test lui-même par une étude de l'échantillon référentiel, de l'étalonnage, de la validité, de la constance et de la fiabilité du test.
(Q) Franck, vous avez participé à la réalisation du test Aladin. [Voir ci-dessous les captures d'écran du test Aladin ou l'importer directement sur la plateforme TAO]. Pourriez-vous nous parler de votre contribution ?
(FG) Je me suis concentré sur la logique de l'histoire, j'ai vérifié si les éléments étaient vraiment en rapport avec la cible de l'échantillon (c'est-à-dire les jeunes).
Ce test consiste en un cadre avec différents items mesurant certains domaines de connaissance tels que le sport et la biologie. J'ai conseillé que chaque item représente un seul et unique domaine et que chaque item varie dans sa représentation (par exemple, dans Aladin, chaque item est réalisé avec un item QTI différent).
Pour aller de l'avant, nous devrions vérifier la validité de ce test auprès d'un échantillon de candidats et nous assurer que les items mesurent bien les domaines de connaissance visés. Si ce n'est pas le cas, ils pourront être reformulés et testés à nouveau. Il faudrait vérifier que les items permettent de différencier la compétence de tous les candidats au test (c'est-à-dire mesurer le niveau de difficulté des items). Si 2 items conduisent à des résultats similaires, cela signifie que l'un d'eux doit être supprimé. En effet, il n'apporte pas de valeur ajoutée au test et ne permet pas de différencier les différents niveaux des différents candidats au test."
Nous avons rencontré nos psychométriciens - Hélène MAYER et Franck GISMONDI - pour une interview sur leur rôle au sein de l'équipe TAO.
(Question) Pouvez-vous nous donner une définition de la psychométrie ?
(Mayer & Gismondi) La psychométrie est une discipline visant à développer et à analyser les mesures psychologiques et éducatives. Elle est consacrée à la construction et à l'utilisation de tests, de questionnaires, d'évaluations de la personnalité...
(Q) Quels sont les avantages de la création d'un test psychométrique ?
(HM & FG)
- Les tests psychométriques sont fiables en termes d'évaluation. Leur validation scientifique est donc mondialement reconnue.
- Leur notation est objective et les paramètres affectifs n'interfèrent pas.
- Chaque candidat passe son test dans les mêmes conditions.
- La psychométrie permet également de construire des tests adaptatifs.
(Q) Quel rôle jouez-vous dans la construction d'un test psychométrique ?
(HM & FG) Nous pouvons opérer à différents niveaux, à savoir :
- Un test est mis en place de différentes manières en fonction de son objectif (évaluation, diagnostic, certification, ...) Notre rôle est d'accompagner l'expert d'un domaine dans sa création d'items.
- Nous déterminons une méthodologie pour que le test soit effectué dans les mêmes conditions pour tous les candidats.
- Selon la psychométrie, un test doit être passé par un échantillon de candidats avant d'être déployé. Cela nous permet d'évaluer les items et le test. En effet, avec certaines méthodes statistiques, nous sommes capables de nous assurer qu'un item atteint son but (par exemple, en mesurant correctement le sujet choisi). Les items ayant de mauvaises statistiques doivent être reformulés, leur ordre chronologique peut être modifié et, si nécessaire, certains d'entre eux peuvent être supprimés tandis que d'autres seront proposés comme substituts.
- Les statistiques psychométriques valident le test lui-même par une étude de l'échantillon référentiel, de l'étalonnage, de la validité, de la constance et de la fiabilité du test.
(Q) Franck, vous avez participé à la réalisation du test Aladin. [Voir ci-dessous les captures d'écran du test Aladin ou l'importer directement sur la plateforme TAO]. Pourriez-vous nous parler de votre contribution ?
(FG) Je me suis concentré sur la logique de l'histoire, j'ai vérifié si les éléments étaient vraiment en rapport avec la cible de l'échantillon (c'est-à-dire les jeunes).
Ce test consiste en un cadre avec différents items mesurant certains domaines de connaissance tels que le sport et la biologie. J'ai conseillé que chaque item représente un seul et unique domaine et que chaque item varie dans sa représentation (par exemple, dans Aladin, chaque item est réalisé avec un item QTI différent).
Pour aller de l'avant, nous devrions vérifier la validité de ce test auprès d'un échantillon de candidats et nous assurer que les items mesurent bien les domaines de connaissance visés. Si ce n'est pas le cas, ils pourront être reformulés et testés à nouveau. Il faudrait vérifier que les items permettent de différencier la compétence de tous les candidats au test (c'est-à-dire mesurer le niveau de difficulté des items). Si 2 items conduisent à des résultats similaires, cela signifie que l'un d'eux doit être supprimé. En effet, il n'apporte pas de valeur ajoutée au test et ne permet pas de différencier les différents niveaux des différents candidats au test."
