Una mirada a la psicometría de las pruebas con dos psicómetras de la OAT

Nos sentamos con nuestros psicometristas -Hélène MAYER y Franck GISMONDI- para una entrevista sobre su función dentro del equipo de TAO.

(Pregunta) ¿Podría darnos una definición de psicometría?

(Mayer & Gismondi) La psicometría es una disciplina destinada a desarrollar y analizar mediciones psicológicas y educativas. Se dedica a la construcción y el uso de tests, cuestionarios, evaluaciones de personalidad...

(Q) ¿Cuáles son las ventajas de crear un test psicométrico?

(HM Y FG)

  • Los tests psicométricos son fiables en términos de evaluación. Por ello, su validación científica está reconocida a nivel mundial.
  • Su calificación es objetiva y los parámetros afectivos no interfieren.
  • Todos los examinadores realizan el examen en las mismas condiciones.
  • La psicometría también permite construir pruebas adaptativas.

(Q) ¿Qué papel desempeña usted en la elaboración de un test psicométrico?

(HM Y FG) Podemos operar a diferentes niveles, es decir

  • Un test se configura de varias maneras según su finalidad (evaluación, diagnóstico, certificación, ...) Nuestro papel es acompañar al experto de un dominio en su creación de ítems
  • Determinamos una metodología para que la prueba se realice en las mismas condiciones para todos los examinados
  • Según la psicometría, un test debe ser realizado por una muestra de personas antes de su aplicación. Esto nos permite evaluar los ítems y el test. De hecho, con algunos métodos estadísticos somos capaces de asegurar que un ítem alcanza su objetivo (por ejemplo, midiendo correctamente el tema elegido). Los ítems con malas estadísticas tienen que ser reformulados, su orden cronológico puede ser modificado y, si es necesario, algunos de ellos pueden ser eliminados mientras que otros serán propuestos como sustitutos.
  • Las estadísticas psicométricas validan el propio test mediante un estudio de la muestra referencial, la calibración, la validez, la constancia y la fiabilidad del test.

(P) Franck, has participado en la realización del test de Aladino. [A continuación encontrará capturas de pantalla de la prueba de Aladino o podrá importarla directamente en la plataforma TAO]. ¿Podría hablarnos de su contribución?

(FG) Me centré en la lógica de la historia, comprobé si los elementos estaban realmente en relación con el objetivo de la muestra (es decir, los jóvenes).

Esta prueba consiste en un marco con varios ítems que miden algunos campos de conocimiento como los deportes y la biología. Aconsejaba que cada ítem representara un único campo y que cada ítem variara en su representación (por ejemplo, en Aladino, cada ítem se realiza con un ítem QTI diferente).

Para seguir adelante, debemos comprobar la validez de esta prueba con una muestra de examinados y asegurarnos de que los ítems miden los campos de conocimiento previstos. Si no es así, habría que reformularlos y volver a probarlos. Habría que comprobar que los ítems permiten diferenciar la competencia de todos los examinados (es decir, medir el nivel de dificultad de los ítems). Si dos ítems conducen a resultados similares, significa que hay que eliminar uno. De hecho, no aporta valor añadido al test y no diferencia los distintos niveles de los examinados".

 

Nos sentamos con nuestros psicometristas -Hélène MAYER y Franck GISMONDI- para una entrevista sobre su función dentro del equipo de TAO.

(Pregunta) ¿Podría darnos una definición de psicometría?

(Mayer & Gismondi) La psicometría es una disciplina destinada a desarrollar y analizar mediciones psicológicas y educativas. Se dedica a la construcción y el uso de tests, cuestionarios, evaluaciones de personalidad...

(Q) ¿Cuáles son las ventajas de crear un test psicométrico?

(HM Y FG)

  • Los tests psicométricos son fiables en términos de evaluación. Por ello, su validación científica está reconocida a nivel mundial.
  • Su calificación es objetiva y los parámetros afectivos no interfieren.
  • Todos los examinadores realizan el examen en las mismas condiciones.
  • La psicometría también permite construir pruebas adaptativas.

(Q) ¿Qué papel desempeña usted en la elaboración de un test psicométrico?

(HM Y FG) Podemos operar a diferentes niveles, es decir

  • Un test se configura de varias maneras según su finalidad (evaluación, diagnóstico, certificación, ...) Nuestro papel es acompañar al experto de un dominio en su creación de ítems
  • Determinamos una metodología para que la prueba se realice en las mismas condiciones para todos los examinados
  • Según la psicometría, un test debe ser realizado por una muestra de personas antes de su aplicación. Esto nos permite evaluar los ítems y el test. De hecho, con algunos métodos estadísticos somos capaces de asegurar que un ítem alcanza su objetivo (por ejemplo, midiendo correctamente el tema elegido). Los ítems con malas estadísticas tienen que ser reformulados, su orden cronológico puede ser modificado y, si es necesario, algunos de ellos pueden ser eliminados mientras que otros serán propuestos como sustitutos.
  • Las estadísticas psicométricas validan el propio test mediante un estudio de la muestra referencial, la calibración, la validez, la constancia y la fiabilidad del test.

(P) Franck, has participado en la realización del test de Aladino. [A continuación encontrará capturas de pantalla de la prueba de Aladino o podrá importarla directamente en la plataforma TAO]. ¿Podría hablarnos de su contribución?

(FG) Me centré en la lógica de la historia, comprobé si los elementos estaban realmente en relación con el objetivo de la muestra (es decir, los jóvenes).

Esta prueba consiste en un marco con varios ítems que miden algunos campos de conocimiento como los deportes y la biología. Aconsejaba que cada ítem representara un único campo y que cada ítem variara en su representación (por ejemplo, en Aladino, cada ítem se realiza con un ítem QTI diferente).

Para seguir adelante, debemos comprobar la validez de esta prueba con una muestra de examinados y asegurarnos de que los ítems miden los campos de conocimiento previstos. Si no es así, habría que reformularlos y volver a probarlos. Habría que comprobar que los ítems permiten diferenciar la competencia de todos los examinados (es decir, medir el nivel de dificultad de los ítems). Si dos ítems conducen a resultados similares, significa que hay que eliminar uno. De hecho, no aporta valor añadido al test y no diferencia los distintos niveles de los examinados".