Tema 2: Construcción de tests y análisis de ítems.

Tema 2: Construcción de tests y análisis de ítems.

Las fases en la construcción de un test son las siguientes:

• Definición del constructo a medir
• Construcción provisional (redactar ítems): Siempre se generan más ítems de los que finalmente tiene el test.
• Aplicación a una muestra
• Análisis de ítems
• Estudio de la fiabilidad: Aquí no trabajamos con las puntuaciones de los ítems sino con todo el test. Si el test no es fiable no puede ser válido.
• Estudio de la validez.
• Interpretación de puntuaciones

Definición del constructo:

Lo primero que tengo que tener es claro cuáles son las dimensiones o componentes del rasgo que quiero medir y apoyarme en las teorías psicológicas, cuando tengo los constructos claros es cuando genero la tabla de especificaciones (las columnas son los contenidos y las filas son los objetivos instruccionales), las dos competencias típicas de estas tablas para tests de rendimiento optimo  son conocimiento y aplicación. Esta tabla ayuda a la validez de contenido.

Una vez que tengo hecha la definición del constructo el siguiente paso es la construcción o generación de ítems, para redactar los ítems es importante conocer las normas de redacción. Los componentes de los ítems son los siguientes:

• Enunciado: Debe contener toda la información que sea común a las opciones y la redacción tiene que ser clara. Los enunciados no deben ser muy cortos
• Opción correcta: Solo debe ser una. Los ítems deben estar ordenados de manera lógica.
• Opciones incorrectas o distractores que deben ser plausibles y discriminativas

Cuando en el enunciado repetimos palaras que solo aparecen en la opción correcta damos pistas de cuál es la opción correcta. Debemos evitar dar pistas tales como asociaciones por sonido similar y opciones idénticas o parecidas a términos del enunciado o con determinantes específicos como siempre, nunca, completamente…etc.

Las opciones deben ir en vertical puesto que facilitamos el proceso de comparación. Debemos evitar usar las opciones Ninguna de las anteriores, todas las anteriores y no lo sé. Todas las opciones deben tener una longitud similar.

Las consecuencias de violar las normas de redacción son:

• La violación de las normas afecta a la dificultad de los ítems
• Los ítems defectuosos son menos discriminativos
• Los ítems defectuosos perjudican mas a los estudiantes con más conocimientos

Directrices para la redacción de ítems:

• Los contenidos de los ítems deben ser una muestra representativa de lo que deseemos evaluar.
• La idea principal de lo que queremos preguntar debe estar en el enunciado.
• La sintaxis no debe oscurecer el contenido evaluado. Evitar el uso de negaciones y, si se usan, destacarlas.  
• Evitar la textualidad. Sólo evaluaremos reconocimiento no comprensión.
• Centrarse en un contenido simple.
• Anticipar la dificultad e incluir variedad.
• Evitar errores ortográficos y gramaticales.
• Evitar dar indicios sobre la solución (pistas semánticas, gramaticales, determinantes del tipo siempre, nunca….)
• Con dos distractores es suficiente.
•  Las opciones en vertical: facilita su lectura.
• Ordenar las opciones de modo coherente.
• Ninguna de las opciones debe destacar del resto: de longitud y lenguaje parecidos.
•  Evitar “todas las anteriores” y “ninguna de las anteriores”.
•  Repartir la opción correcta entre las distintas ubicaciones.
•  Pueden emplearse los errores más comunes en los  estudiantes o usar frases que son verdaderas para otras preguntas. Evitar alternativas “graciosas” o que no serían elegidas por nadie.

[pic 1]

En cuanto a la cuantificación de respuestas, se cuantifica de forma que una puntuación más alta en el ítem implique una puntuación mayor en el nivel de rasgo.

La cuantificación dicotómica implica que solo se pueden obtener dos puntuaciones en ese ítem pero ese ítem puede tener cuatro alternativas.

...