Construcción de un test psicológico: fases, formato de ítems y validez
Construcción de un test
1. Definir el constructo
Establecer su propósito (a quién va dirigido y para qué se utiliza) y definir el rasgo (búsqueda sobre el rasgo, revisión de tests similares y el marco teórico).
2. Identificar conductas que representen el constructo
Análisis de contenido, revisión de la investigación, incidentes críticos, observaciones, juicios de expertos.
3. Establecer las especificaciones del test
Preparar un plan o estrategia de representación de los contenidos del constructo en el test (cuántos ítems, de qué tipo).
4. Elaboración de ítems
Seleccionar un formato apropiado, verificar que el formato es el adecuado, seleccionar y entrenar a los redactores, escribir o redactar el ítem.
5. Revisión teórica de ítems
Formulación correcta de los ítems y puntuación, estudio del sesgo.
6. Ensayo piloto
Muestra pequeña representativa de la población destino, cálculo de índices psicométricos, observación de la reacción de los sujetos.
7. Aplicación a una muestra amplia
8. Análisis psicométrico de los ítems
9. Estudios de fiabilidad y validez
10. Normas de aplicación, puntuación e interpretación
Construcción del baremo del test.
Formato de respuesta
1. Respuesta cerrada
- a) Elección múltiple
- b) Verdadero-falso
- c) Emparejamiento
2. Respuesta abierta o elaborada
- a) Respuesta limitada
- b) Respuesta abierta corta
- c) Respuesta abierta extensa
Formato de ítems
- Las preguntas abiertas (el sujeto escribe directamente su respuesta).
- Ítems de respuesta cerrada (el sujeto responde eligiendo entre las distintas opciones propuestas, se conocen como escalas de valoración).
Elaboración de ítems de personalidad
1. Aquiescencia
Tendencia a estar de acuerdo con un ítem independientemente del contenido del mismo.
2. Deseabilidad social
La respuesta del sujeto no es sincera, sino que está mediatizada por lo que considera apropiado.
Inventarios de personalidad, actitudes e intereses
- Sí-No
- Sí-?-No
- V-F
- Escalas graduadas (frecuencia, intensidad, preferencias, lista de adjetivos bipolares)
Redactar buenas preguntas
Recomendaciones generales
- Escribir claro, simple, precisa y concisa.
- Cuidar el lenguaje.
- Expresar una única idea por ítem.
Recomendaciones específicas
- Redactar frases en tiempo presente.
- Evitar más de una interpretación.
- Evitar frases en las que estén todos de acuerdo o en desacuerdo.
- Frases cortas y simples.
- Evitar frases con: todos, siempre, nunca, deben.
- No usar: solo, poco, algunos.
- Evitar negaciones (no, nunca).
- Utilizar vocabulario comprensible.
Validez
La medida que realizamos con un test psicológico tiene que tener un significado determinado y tenemos que demostrar el significado que tiene, dado que nuestro interés es hacer inferencias sobre otras variables que nos interesan.
Validez
Se refiere a la adecuación, significación y utilidad de las inferencias específicas hechas a partir de las puntuaciones de los tests. La validez se entiende como un proceso unitario donde se validan las inferencias hechas por el test para propósitos específicos, no el test mismo. La validación incluye varios tipos de evidencia (contenido, criterio, constructo).
Benson
Recoge las aportaciones de autores como Loevinger, Nunnally, Cronbach y Messick.
Nunnally
Distingue:
1. Componente sustantivo
Especifica el dominio teórico del constructo y se definen operaciones en términos de variables observadas. El test constituye una muestra adecuada y representativa de los contenidos que se pretenden evaluar.
2. Componente estructural
Incluye relacionar los ítems con la estructura del constructo determinada en qué medida las variables observadas se relacionan unas con otras y con el constructo de interés. Una aproximación seria es estudiar la estructura factorial del test.
3. Componente externo
Si las medidas obtenidas del constructo o variable bajo estudio se relacionan según lo esperado con las medidas obtenidas de otros constructos.
Benson
Distingue:
1. Etapa sustantiva
Basada en la teoría, genera definiciones teóricas y empíricas, se recogen evidencias para garantizar el contenido del test.
- a) Poca relevancia: indica que el test puede contener variabilidad sistemática no relacionada con el constructo de interés.
- b) Infrarrepresentación: los ítems no cubren todos los aspectos del constructo.
- c) Sobrerrepresentación: los ítems miden aspectos que no están en el constructo.
2. Etapa estructural
Su objetivo es determinar cómo las variables observadas covarían entre ellas y cómo covarían con la estructura teórica establecida.
3. Etapa externa
Diferenciación entre grupos, correlaciones del test con otros tests y modelos de ecuaciones estructurales.
Etapas del proceso de validez de contenido
- Definición del constructo.
- Elaborar la tabla de especificaciones del test.
- Seleccionar un panel de expertos en el constructo.
- Establecer un marco estructurado para el emparejamiento entre ítems y objetivos del test.
- Evaluar el grado de congruencia ítems-objetivos.
Validez y TRI
1. Validez de contenido/sustantiva
En el propio proceso de construcción de un test.
2. Validez estructural/interna
En la comprobación de los supuestos de la TRI.
3. Validez externa
Aproximación general para ambos modelos MCT y TRI.
Validez y sesgo (DIF)
Importancia de evaluar los usos e interpretaciones de un test. Comprobación de que el test/ítem funcionan equitativamente (son invariantes) para distintos grupos de sujetos de una misma población.