Diapositivas de apoyo al estudio del Tema 4 ("Test y Pruebas Objetivas") de la asignatura "Técnicas e Instrumentos para la Recogida de Información" (Grado en Pedagogía, UNED)
TÉCNICAS E INSTRUMENTOS - Tema 4: Test y Pruebas Objetivas
1. TÉCNICAS E INSTRUMENTOS PARA LA
RECOGIDA DE INFORMACIÓN
(Tema 4:Test y Pruebas Objetivas)
Asignatura Obligatoria (OB) de 2º curso
Grado en Pedagogía
2. Aprender el significado de los test y pruebas objetivas.
Conocer las etapas de construcción y aplicación de los
test o pruebas.
Conocer estrategias para confeccionar buenos ítems.
Saber construir test y pruebas objetivas en el contexto
educativo.
Objetivos
Tema 4 – Test y Pruebas Objetivas
3. 1. Introducción
Tema 4 – Test y Pruebas Objetivas
¿En qué se diferencian test y pruebas
objetivas?
Los test están dirigidos a la medida de aptitudes,
capacidades y/o habilidades.
Las pruebas objetivas están dirigidas a la medida de
conocimientos.
4. 2.Test
Tema 4 – Test y Pruebas Objetivas
Con el nombre de ‘test’ se engloba todo un conjunto de instrumentos que se
vienen utilizando en la investigación educativa con la intención de recoger
información sobre las aptitudes, capacidades y/o habilidades de los sujetos.
Características
de los test
Seguridad y precisión en la medida (fiabilidad)
Elección de una muestra de conductas representativas de la
aptitud o habilidad a medir (validez de contenido)
Comparación de conductas con un grupo normativo
(baremación)
Predicción o inferencia de conductas más generales e
importantes que las observadas en el test (validez predictiva)
5. 2.Test
Tema 4 – Test y Pruebas Objetivas
Con el nombre de ‘test’ se engloba todo un conjunto de instrumentos que se
vienen utilizando en la investigación educativa con la intención de recoger
información sobre las aptitudes, capacidades y/o habilidades de los sujetos.
Utilidades
de los test
Clasificar a los sujetos y grupos en diversas categorías
Analizar diferencias intra-grupos, inter-grupos, inter-
individuales o intra-individuales
Verificar hipótesis
Predecir comportamientos
Seleccionar individuos o grupos
6. 3. Pruebas objetivas
Tema 4 – Test y Pruebas Objetivas
Las pruebas objetivas están dirigidas a la
medida de conocimientos.
Cuando necesitamos evaluar el rendimiento
de los estudiantes con respecto a un
conjunto de conocimientos, en este caso se
debe preparar una prueba ‘ad hoc’, a la que
se denomina ‘prueba objetiva’
7. 4. Construcción de los test o pruebas
Tema 4 – Test y Pruebas Objetivas
1. Formular los objetivos de la prueba, o en su caso el constructo hipotético a medir
2. Definir la población objeto de la prueba
3. Muestreo de preguntas a partir de una tabla de especificaciones
4. Construcción de los ítems, de forma adecuada para lo que se quiere medir. Banco de ítems
5. Prueba piloto sobre una muestra pequeña de sujetos
6. Primer análisis de ítems y revisión de la prueba
7. Experimentación de la prueba sobre una muestra representativa de sujetos
8.Análisis de datos: cálculo de la validez, fiabilidad, análisis de ítems y baremación
9. Elaboración del manual de instrucciones (protocolo de aplicación)
La elaboración de test o pruebas pasa por las siguientes fases:
8. 4.1. Objetivos de los test o pruebas
Tema 4 – Test y Pruebas Objetivas
• Definición operativa del constructo psicológico a
medir en el caso de test
• Definición precisa del universo de conocimientos
en el caso de pruebas objetivas
Definir cuál es la variable de interés
Definir la población objetivo de la
prueba o test
Definir la utilidad perseguida con la
prueba o test
9. 4.2. Especificación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Contenido de
la prueba o
test
Formato de
los ítems
Número de
ítems
Características
métricas
esperadas
La herramienta más utilizada, sobre todo en el dominio cognitivo, es la llamada
tabla de especificaciones del test o prueba. Un posible modelo de tabla tiene:
en las columnas, las distintas áreas de contenidos relevantes del constructo; y en
las filas, las distintas operaciones cognitivas de la taxonomía de Bloom que pueden
operar sobre el constructo.
Suma Resta Multiplicación División Total
Conocimiento
Comprensión
Aplicación
Total
11. 4.2. Especificación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Contenido de
la prueba o
test
Formato de
los ítems
Número de
ítems
Características
métricas
esperadas
En el ámbito cognitivo…
Ítems de elección
[Para medir en las categorías inferiores de la
taxonomía de Bloom]
Múltiple
Binaria o alternativa
Emparejamiento
Ítems de construcción
[Para medir en las categorías superiores de
la taxonomía de Bloom]
De respuesta corta o completar
De respuesta extensa
12. 4.2. Especificación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Contenido de
la prueba o
test
Formato de
los ítems
Número de
ítems
Características
métricas
esperadas
En el ámbito no cognitivo…
(valores, personalidad, opiniones, actitudes, intereses…)
Ítems de
respuesta
abierta
Ítems de respuesta cerrada
Escalas de
categorías
Listas
13. 4.2. Especificación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Contenido de
la prueba o
test
Formato de
los ítems
Número de
ítems
Características
métricas
esperadas
Respecto a la longitud de la prueba debe tenerse en
cuenta: la tabla de especificaciones, para que estén
representadas todas las celdas (p.e. 2 ítems por celda); el
tiempo estimado de aplicación de la prueba (p.e. 1 minuto
por ítem); la fiabilidad estimada y deseada para la prueba.
14. 4.2. Especificación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Contenido de
la prueba o
test
Formato de
los ítems
Número de
ítems
Características
métricas
esperadas
Las características métricas deseadas marcarán
finalmente el reparto de los ítems porque si la prueba está
orientada para un nivel de conocimientos se debe saber el
nivel de dificultad de los ítems y la discriminación de los
mismos…
Pruebadedificultad
intermedia
15. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de los ítems…
La construcción de los ítems se debe realizar por
personas expertas en la temática y conocedoras
de la población diana. Se aconseja crear unas tres
veces más de ítems que los necesarios y cuando
menos el 25% más.
16. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de los ítems…
Reglas
generales
Lenguaje utilizado claro y sencillo (sin tecnicismos)
Evitar negaciones en los enunciados
Si se quieren respuestas concretas las preguntas deben ser concretas
Expresar una única idea por ítem
No incorporar términos morales (juicios de valor)
Evitar formular preguntas de doble efecto (que puedan implicar una doble
respuesta)
Evitar alternativas de respuesta del tipo “ninguna de las anteriores” o “todas las
anteriores”
Controlar la posición de la opción correcta (que no siga un patrón predecible)
Evitar dar pistas sobre la opción correcta
17. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de los ítems…
(en el ámbito no cognitivo)
Controlar los siguientes sesgos…
Deseabilidad
social
Responder aquello que
tenga mayor grado de
aceptación social
Aquiescencia
Responder
sistemáticamente siempre
de acuerdo o siempre en
desacuerdo
Respuesta
extrema
Responder siempre alguna
de las respuestas extremas
independientemente del
ítem respondido
18. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de la prueba…:
LAS INSTRUCCIONES
Las instrucciones de aplicación de la prueba
tendrán como objetivo la comprensión de la
mecánica de la misma para que no se produzca
ningún error por desconocimiento de ésta (…) Si
se necesita, vendrá ilustrada con algún ejemplo
aclaratorio y tendrá distinta redacción según se
realice la prueba por correo, web o de forma
presencial (más instrucciones en los formatos en
los que no hay un aplicador presente)
19. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de la prueba…:
FORMATO DE PRESENTACIÓN DE LA PRUEBA
Es importante el orden en que se incluyen las
preguntas en la prueba, ya que la secuencia de
los ítems puede influir en el rendimiento del
sujeto…
20. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de la prueba…:
FORMATO DE PRESENTACIÓN DE LA PRUEBA
Pautas
generales
Al inicio de la prueba: presentación solicitando colaboración
del sujeto y dándole a conocer los objetivos de la prueba.
Los ítems se ordenan de fácil a difícil, de general a particular,
de menos personales a más personales (comprometidas).
Los ítems se ordenan de forma lógica y se agrupan de
manera temática para evitar el desconcierto del sujeto.
Los datos del sujeto que se tomen como variables de análisis
(p.e. variables sociodemográficas) se sitúan al final.
Respecto del aspecto formal: evitar ítems cortados, gráficas
deslocalizadas o con poca resolución
21. 4.3. Confección de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Confección de la prueba…:
SISTEMA DE REGISTRO DE LAS RESPUESTAS
El registro de los resultados de la prueba se
puede realizar en el propio cuadernillo de la
prueba o en una hoja de registro preparada “ad
hoc”. Para utilizarse posteriormente la prueba es
aconsejable la segunda opción, aunque puede
representar cierta dificultad sobre todo si la
población objetivo es de corta edad.
22. 5.Aplicación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
La aplicación o administración de la prueba se puede
realizar de distintas maneras…
Colectiva
o
Individual
Prueba
escrita o
Prueba
en la web
Personal,
por
correo, o
por
teléfono
23. 6. Puntuación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Una vez construida y aplicada la prueba, para hacer operativo el
instrumento de medida se necesita…
a) Asignar puntuaciones a los ítems
24. 6. Puntuación de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Una vez construida y aplicada la prueba, para hacer operativo el
instrumento de medida se necesita…
b) Construir la puntuación de la prueba
La puntuación de la prueba habitualmente resulta de sumar las
puntuaciones de todos los ítems. Si el investigador desea ponderar
algunos ítems, la suma será ponderada según estos valores.
En las pruebas cognitivas de elección múltiple se puede dar el caso que
los sujetos contesten a los ítems por azar fórmula de corrección
25. 7. Interpretación de las puntuaciones de la prueba o test
Tema 4 – Test y Pruebas Objetivas
Una vez calculada la puntuación de un sujeto en la prueba se necesita referir dicha
puntuación o bien a un grupo normativo de referencia (norma) o bien a
un criterio (prueba criterial). En este tema sólo vemos la
interpretación normativa.
La puntuación respecto del grupo normativo puede
ser de tres tipos
Puntuaciones
cronológicas
P.e. Relación entre ‘edad
mental’ / ‘edad cronológica’
Puntuaciones
centiles
Porcentaje de sujetos del
grupo normativo que están
por debajo de la puntuación
del individuo
Puntuaciones
típicas
Se traduce la puntuación del
sujeto a una puntuación típica
(en función de la media y DT
del grupo normativo)