Configuración de ítems para puntuación manual en TAO Portal

Por defecto, un participante recibe un punto por cada interacción completamente correcta. Sin embargo, hay casos en los que el autor de la prueba puede necesitar configurar manualmente elementos individuales para métodos de puntuación alternativos (es decir, puntuación manual a completar por un calificador, o la concesión de crédito parcial).

En TAO Portal, los calificadores podrán ver qué evaluaciones necesitan calificación desde la página de seguimiento de una sesión. En cuanto un evaluado haya enviado una prueba y se haya llevado a cabo la calificación automática de cualquier elemento relevante, el botón Calificar de un evaluado individual activará el proceso. Para obtener más información sobre la calificación manual, consulte la documentación sobre TAO Grader.

Para garantizar que las respuestas de los examinandos se procesan correctamente, los ítems del test deben configurarse para la puntuación manual cuando se crea el ítem. Para ello, siga los pasos que se indican a continuación.

    1. Etiquete el ítem como uno que requiere calificación manual.
      Haga clic en Declaraciones de resultados en el Respuesta Panel de propiedades a la derecha del elemento. Aparecerá(n) el(los) resultado(s) de su elemento, como en la imagen siguiente. Los resultados son definidos por el usuario. Por defecto, SCORE y MAXSCORE se añaden automáticamente, ya que forman parte del estándar QTI.Al hacer clic en el icono de edición a la derecha de un resultado se abrirán los valores asociados a él. En el ejemplo siguiente, el primer resultado personalizado (creado por el usuario) que aparece para este ítem del test (es decir, el primer aspecto de la respuesta que debe puntuarse) es WORDCHOICE. El primer valor es Interpretación - el nombre del resultado. Este es el nombre que se mostrará a la persona que realice la puntuación manual. En el ejemplo siguiente, es Elección de palabras.

      Configuración de las declaraciones de resultados de los ítems para la puntuación manual en TAO al crear un nuevo ítem.
      Añadir declaraciones de resultados a artículos en TAO

      En el menú desplegable de Puntuación externa, seleccione Humano.
      Este valor indica el tipo de puntuación que se necesita para este resultado concreto (en este caso, puntuación por un humano).

    2. Añada una descripción de los criterios de puntuación.

      El evaluador manual necesita saber qué sistema de puntuación utilizar para el ítem (o resultado) en cuestión. Esto se muestra en forma de una rúbrica que contiene los criterios de puntuación que desea emplear, y a la que se accede mediante un enlace a un archivo PDF alojado.

      En la casilla Interpretación larga, añada un enlace al archivo PDF alojado que contiene la rúbrica de puntuación. El calificador podrá acceder a él más tarde.

    3. Defina el intervalo de puntuación.

      Introduzca el intervalo (por ejemplo, 1-4) en la casilla Valor.

      Es posible definir diferentes rangos, siempre que se respeten las siguientes reglas: deben definirse tanto el mínimo como el máximo, utilizando sólo números enteros. El máximo no debe ser negativo y debe ser mayor que el mínimo.

      Nota:Para que las respuestas de un ítem se marquen para su calificación manual, debe haber un intervalo de puntuación válido en Valor y se debe seleccionar humano en la casilla externoCalificado.

      Nota:Si un ítem tiene más de un resultado (es decir, si diferentes aspectos de una respuesta reciben puntuaciones separadas, lo que significa que se necesitan múltiples puntuaciones para un ítem), el método de puntuación debe configurarse para cada uno de ellos. Esto se describe como "puntuación multi-rasgo " en la plataforma de puntuación manual. En el ejemplo de la imagen anterior, se pueden ver otros dos aspectos de este ítem del test: Comprensión y Mecánica.

    4. Defina la categoría temática de su artículo.

      Es necesario definir la categoría temática de un ítem. De este modo se garantiza que se asigna a un calificador adecuado en los casos en que los calificadores se asignan en función de la categoría temática de los ítems.

      Esto se hace en las propiedades de la sección del test en cuestión (también puede definirse para ítems individuales - es decir, cada ítem puede clasificarse de forma diferente, en propiedades del ítem). Vea un ejemplo en la imagen siguiente.
      Haga clic en el icono Propiedades del área de la prueba que desee definir (los botones de la parte superior o los botones situados junto a la parte, sección o elemento de la prueba). En el panel de propiedades de la derecha, haga clic en Categorías. Introduzca la categoría temática que necesita para la prueba, sección o elemento actual. Cada categoría de materia debe comenzar con 'x-tao-scoring', y terminar con el tema, que puede ser cualquier cosa. Las categorías posibles son x-tao-scoring-english, x-tao-scoring-math, o x-tao-scoring-biology, por ejemplo.

      Sólo TAO Grader: La asignación de calificadores según la categoría de la asignatura es sólo una de las dos opciones. Consulte el capítulo Creación de un proyecto de calificación en la sección sobre TAO Grader para obtener información detallada sobre las estrategias de asignación disponibles.

      Configurar las propiedades de la prueba a nivel de ítem, como las categorías para los calificadores de las preguntas que requieren calificación manual.
      Introducción de categorías para los anotadores
    5. Ver y calificar ítems configurados para calificación manual. Una vez que los evaluados completen una evaluación, los calificadores podrán ver y calificar los ítems para calificación manual desde la página de resumen de la sesión. Para obtener más información, consulte la documentación sobre TAO Grader.