¡Descarga PSICOMETRIA UNED y más Apuntes en PDF de Psicometría solo en Docsity!
TEMA 2: PRINCIPIOS BÁSICOS PARA LA CONSTRUCCIÓN
DE INSTRUMENTOS DE MEDICIÓN PSICOLÓGICA
1. LOS TESTS, ESCALAS, CUESTIONARIOS E INVENTARIOS
Test: cualquier instrumento de medición psicológica. Sobre todo se utiliza para hacer referencia a los instrumentos de medición de variables de tipo cognitivo: aptitudes, conocimientos, rendimiento, habilidades, etc., en los que las respuestas de los sujetos a cada uno de los elementos que los forman son correctas o incorrectas y la puntuación total en el test viene dada por la suma de todas las respuestas correctas obtenidas (bien suma directa o ponderada), dando lugar a una escala jerárquica o acumulativa.
Escala: instrumentos elaborados para medir variables no cognitivas: acitutdes, intereses, preferencias, opiniones, etc., y se caracterizan porque los sujetos han de responder eligiendo sobre una escala de categorías graduada y ordenada, aquella categoría que mejor represente su posición respecto a aquello que se está midiendo, no hay respuestas correctas o incorrectas, y la puntuación total de los sujetos en la escala será la suma de las puntuaciones asignadas a las categorías elegidas por los sujetos.
Cuestionarios: suelen estar formados a menudo por una serie de ítems o elementos que no están necesariamente relacionados unos con otros, cuyas opciones de respuesta no están ordenadas ni graduadas, que pueden ser puntuados e interpretados individualmente y en los que tampoco hay respuestas correctas o incorrectas. Son el instrumento generalmente utilizado cuando se quiere llevar a cabo una investigación mediante encuestas.
Inventario: instrumentos elaborados para medir variables de personalidad. Las respuestas de los sujetos a los ítems no son correctas o incorrectas, lo único que demuestran es la conformidad o no de los sujetos con los enunciados de los ítems.
2. LA FINALIDAD DEL TEST
- Variable objeto de estudio: qué se va a medir.
- Población a la que va dirigido.
- Utilización prevista: para qué se va a medir.
3. ESPECIFICACIÓN DE LAS CARACTERÍSTICAS DEL TEST
1. Contenido
Dominio de conductas: conjunto de conductas a través de las cuales se manifiesta.
Hay ocasiones en las que el constructo no está claramente definido. En este caso se recomienda:
a) Hacer un análisis del contenido del constructo: haciendo preguntas abiertas a los sujetos acerca del constructo y seleccionando las respuestas que aparecen con mayor frecuencia como relevantes para la definición del mismo. b) Revisar las investigaciones publicadas. c) Llevar a cabo un análisis de tareas. d) La observación directa por parte del constructo del test le permitirá identificar conductas relacionadas con el constructo a medir. e) Utilizar el juicio de expertos. f) Revisar los objetivos instruccionales o de programas de intervención.
En los tests de rendimiento y conocimientos y, sobre todo, en los tests referidos al criterio (TRC), en lugar de hablar de un dominio de conductas se hablará de un dominio de contenidos a evaluar y la especificación del mismo cobrará una importancia extraordinaria.
Categorización jerárquica de los procesos implicados:
- Conocimiento: recuerdo del material presentado.
- Comprensión: interpretación o extrapolación de un concepto de forma distinta a la originalmente presentada.
- Aplicación: resolución de problemas nuevos mediante la aplicación de principios familiares o generalizaciones.
- Análisis: descomposición de un problema en sus componentes elementales. Este proceso requiere reconocimiento de elementos múltiples y de las relaciones y/o principios de organización entre los elementos.
- Síntesis: combinar elementos a partir de una estructura original o resolver un problema que requiere la combinación secuencial de varios principios.
- Evaluación: empleo de criterios internos (generados por el sujeto) o externos para hacer juicios críticos.
Si a todos los procesos y a todas las áreas de contenido se les concede la misma importancia, será necesario cubrir todas las celdas de la matriz con el mismo número de ítems. Por el contrario, si se considera que no todas las áreas son igualmente importantes, ni todos los procesos, será necesario establecer una ponderación para poder establecer el número de ítems de cada casilla.
La especificación del contenido a la hora de construir un test de aptitudes tiende a ser menos específica puesto que está pensada para medir una característica más general y persistente de la persona.
Cuando lo que se quiere construir es un test (escala, cuestionario, inventario) para medir constructos de naturaleza no cognitiva: intereses, actitudes, temperamento, etc., las
El enunciado puede presentarse en forma interrogativa, enunciativa o como una frase truncada o incompleta.
La forma más directa y la más recomendable de solicitar una respuesta a los sujetos es la interrogativa.
La forma enunciativa es equivalente a la anterior y puede ser utilizada si el conjunto del ítem es coherente; es decir si el enunciado o base del ítem concuerda con las distintas alternativas y éstas son de contenido homogéneo y están bien redactadas.
Los ítems cuya base es una frase incompleta que continúa en alguna de las alternativas que se proponen suele utilizarse en tests educativos puesto que es fácil de construir a partir de frases en los textos.
En relación con la forma de redactar las alternativas, hay dos tipos de ítems: los que presentan una única respuesta correcta y aquellos en los que todas las alternativas son parcialmente correctas pero hay una que es más completa y la mejor respuesta de las presentadas. El primer tipo de ítems se suele utilizar cuando no hay ambigüedad acerca de la veracidad o falsedad de la respuesta, y el segundo cuando se pretenden evaluar procesos mentales complejos.
- Emparejamiento
Implica que el sujeto empareje los elementos de dos columnas de acuerdo a las instrucciones dadas en el enunciado. Está indicado para medir variables de tipo cognitivo y, sobre todo, conocimiento.
- Formato Cloze o incompleto
Se ofrece a los sujetos, por ejemplo, un párrafo o una frase en la que faltan algunas palabras y aparece un espacio en blanco en su lugar, a continuación, se ofrece una lista en la que se incluyen las palabras que faltan.
- Escalas de clasificación (rating scales)
Se presenta un enunciado y distintas alternativas de respuesta que están ordenadas de forma gradual en una serie de categorías a lo largo de un continuo. El sujeto debe responder eligiendo, de entre las alternativas propuestas, aquella que mejor refleje su postura o actitud personal ante el enunciado.
Dado que a los sujetos se les pide que emitan juicios de valor, puesto que han de mostrar su postura personal, a este tipo de escalas se las denomina escalas valorativas.
Las opciones son interdependientes y corresponden a categorías de respuesta ordenadas gradualmente.
Este tipo de formato no se utiliza en el ámbito cognitivo, ya que no implica respuestas correctas o incorrectas, sino para medir variables no cognitivas: actitudes, intereses, personalidad, etc.
Tienen la ventaja de que los sujetos expresan su postura de una manera más precisa que en los ítems de elección múltiple; pero tienen también sus inconvenientes; uno de ellos, muy importante, es que el significado de las distintas opciones de respuesta no es el mismo para todos los sujetos. Es frecuente que aparezcan sesgos en las respuestas; es decir, hay sujetos que tienden siempre a elegir las opciones extremas o, por el contrario, cuando hay un número impar de categorías algunos sujetos tienden a elegir la categoría central.
Cuando hay más de 7, los sujetos se sienten incapaces de diferenciar entre los significados de las categorías contiguas. En general, el tipo de formato más utilizado es el Likert. Osgood en su técnica Diferencial Semántico utilizó 7 categorías de respuesta.
- Listados (checklists)
Se trata también de una escala valorativa, en la que los sujetos han de mostrar su opinión respecto a algún hecho (idea, persona, objeto…) presentado en el enunciado.
No se utilizan para la medida de variables cognitivas. Las opciones de los listados no están ordenadas sino que son independientes entre sí. No hay respuestas correctas o incorrectas.
El número de alternativas de respuesta suele ser bastante grande (una lista) y no siempre es necesario elegir una única opción, es posible elegir varias opciones. Es un formato típico de los cuestionarios.
b) Ítems de construcción
Es el propio sujeto el que ha de elaborar su respuesta, respuesta abierta.
- Ítems de respuesta corta
A veces no son más que modificaciones de los ítems de elección múltiple pues el sujeto ha de elegir una única palabra; pero, en lugar de elegirla de entre una serie de alternativas que se le ofrecen, la tiene que construir él mismo; otras veces el sujeto tiene que responder con una frase.
-Ítems de respuesta extensa o de ensayo
A veces es preferible dar a los sujetos la oportunidad de que expresen con sus propias palabras sus conocimientos, experiencias, opiniones…
Este tipo de formato se utiliza para medir todo tipo de variables, pero tiene un inconveniente, las respuestas de los sujetos son más difíciles de analizar y valorar que las de los ítems de respuesta cerrada, puesto que el investigador tiene que codificarlas en una serie de categorías antes de comenzar el análisis.
Cuando la población a la que se dirige el test es pequeña se suelen utilizar tests con ítems de respuesta corta.
4. REDACCIÓN DE LOS ÍTEMS
Hay una serie de consideraciones que pueden ayudarnos en la tarea:
- Debe existir un alto grado de congruencia entre el ítem y el constructo piscológico que se quiere medir (validez de constructo).
- Los constructos deben estar claramente definidos.
- Hay que tratar de minimizar los errores de medida cometidos al medir el constructo con cada ítem.
- El formato de los ítems ha de ser adecuado para los objetivos del test.
- Los ítems deben reunir las características psicométricas más adecuadas en cada caso.
- Los ítems deben estar bien redactados.
- Los ítems deben satisfacer las consideraciones legales y técnicas pertinentes. Por ejemplo se deben evitar los plagios. 1. Recomendaciones generales
- Evitar la ambigüedad de los enunciados.
Una forma de hacerlo es redactándolos de forma clara.
Los enunciados cortos y directos también contribuyen a evitar la ambigüedad ya que la inclusión de palabras innecesarias complican la lectura y pueden provocar confusión en los sujetos.
- Evitar enunciados que provoquen respuestas sesgadas.
Se deben evitar los enunciados que puedan provocar una respuesta sesgada, entendiendo por respuesta sesgada aquella que es más probable que elijan los sujetos independientemente de su opinión.
- Expresar una única idea en el enunciado.
Es necesario evitar las dobles preguntas en un mismo enunciado ya que provocaría confusión en los sujetos y no sabrían qué respuesta emitir.
- Evitar las dobles negaciones en los enunciados.
En general es preferible no abusar de los enunciados negativos, pero lo que sí que hay que evitar es el uso de las dobles negaciones ya que provocan que los sujetos no sepan cual es la respuesta que representa su punto de vista u opinión.
**2. Recomendaciones para ítems de elección
- Dos alternativas: verdadero-falso**
- Estar absolutamente convencido de que el ítem es sin ninguna duda verdadero o falso.
- No utilizar frases que sean universalmente verdaderas o falsas.
- Evitar en el enunciado palabras que puedan, de alguna manera, inducir la respuesta correcta a los sujetos aunque no la conozcan.
- Situar a lo largo del test, de forma aleatoria, los ítems cuyo enunciado sea correcto; de esta manera se evitan patrones de respuesta reconocibles por los sujetos. - Elección múltiple
- Asegurarse de que el enunciado del ítem formula el problema con claridad.
- Incluir la mayor parte del texto en el enunciado para evitar repeticiones innecesarias en las opciones de respuesta.
- Incluir las distintas opciones de respuesta al final del enunciado.
- Asegurarse de que los distractores (alternativas incorrectas) son plausibles.
- Evitar opciones de respuesta como Ninguna de las anteriores, Todas las anteriores.
- Que sólo haya una opción correcta (o más correcta), a no ser que se indique lo contrario claramente en las instrucciones.
- Tratar de que todas las alternativas de respuesta tengan una longitud aproximadamente igual y con una construcción gramatical parecida.
- Aleatorizar la ubicación de la alternativa correcta.
- Hacer que todas las alternativas le parezcan igualmente atractivas a una persona no informada del problema al que alude el enunciado.
- Asegurarse de que cada alternativa concuerda gramaticalmente con el enunciado del ítem. Si el enunciado está en singular, asegurarse que cada alternativa está en singular. - Emparejamiento
- Asegurarse que tanto las premisas como las opciones de respuesta que hay que emparejar son homogéneas.
- Utilizar el formato adecuado: las premisas se deben presentar de forma aleatoria en una columna a la izquierda y en una columna paralela, situada a la derecha, se deben presentar las distintas alternativas de respuesta. Para facilitar la tarea del sujeto se debe dejar un espacio en blanco detrás de cada premisa numerada para poder situar la letra correspondiente a la alternativa de respuesta.
- El enunciado del ítem debe reflejar claramente la tarea que se espera del sujeto y la forma en que hay que llevar a cabo el emparejamiento. - Formato Cloze o incompleto
Es necesario que en el enunciado del ítem haya tantos espacios en blanco como alternativas de respuesta, y en caso de que esto no suceda habrá que hacerlo constar en las instrucciones.
- Indecisión o tendencia a seleccionar la alternativa central o neutra correspondiente a etiquetas como No sé, Ni de acuerdo ni en desacuerdo, Indiferente.
- Respuesta extrema o tendencia a elegir como respuesta las categorías de los extremos con independencia del contenido del ítem.
5. REVISIÓN CRÍTICA POR UN GRUPO DE EXPERTOS
Deformidad profesional: debido a su familiaridad con el tema, no ser consciente de que para los demás las cosas no están tan claras.
Una vez revisados los ítems y eliminados (o corregidos) aquellos que no fueran considerados idóneos, se puede construir la versión preliminar del test, la prueba piloto, con aquellos que han pasado este primer control de calidad.
6. CONFECCIÓN DE LA PRUEBA PILOTO
1. Las instrucciones de administración
- Como norma general, a la hora de redactar las instrucciones se debe evitar utilizar lenguajes ampulosos y amenazantes. No se deberá decir por ejemplo: esta prueba nos va a permitir conocer lo inteligente que es usted.
- En los tests de ejecución máxima, por ejemplo en las pruebas de aptitudes, se debe explicitar que los ítems son de dificultad variable, que hay algunos que resultarán muy difíciles para todos los sujetos, y que la prueba está pensada para que haya ejercicios que no puedan resolver. Si se incluye esta información en las instrucciones se reducirá la ansiedad de los sujetos cuando se enfrenten a este tipo de ítems.
- En los tests de velocidad, en los que el tiempo está limitado de manera que sólo muy pocos lleguen a completar la prueba, se deberá explicitar también en las instrucciones.
- Las instrucciones deben proporcionar uno o más ítems como ejemplo, para informar a los sujetos acerca de cómo deben resolver cada uno de ellos y la forma de elegir la solución correcta en caso de que la hubiera. A veces se incluyen también algunos ítems de práctica, sobre todo si se presume que la población a la que va dirigido el test no está familiarizada con este tipo de pruebas.
- Las instrucciones deben informar acerca de cómo distribuir el tiempo y qué hacer cuando no se conoce la respuesta a un ítem.
- Las instrucciones deben animar a los sujetos a responder a todas las preguntas y favorecer así su rendimiento, dado que la puntuación de los sujetos tiende a bajar considerablemente cuando se dejan muchas respuestas en blanco.
- Dado que muchas pruebas se corrigen hoy día mediante hoja de lectora óptica, o se aplican a través del ordenador, las instrucciones deben explicitar claramente la forma de responder en ellas. 2. Formato de presentación y de registro de las respuestas
- El formato de presentación debe ser claro y perfectamente legible por todos los sujetos, evitando que se puedan cometer errores involuntarios como por ejemplo saltarse una pregunta, confundir la casilla de respuesta, etc.
- Se deben solicitar al comienzo de la prueba los datos de identificación de las personas, su nombre, apellidos, datos de contacto, etc. o, en caso de aplicaciones en las que se requiere el anonimato de los que responden, una clave de identificación.
- A continuación se presentan las instrucciones para la realización de la prueba, siguiendo las pautas establecidas en el punto anterior.
- Después de las instrucciones se presentan los ítems:
En las pruebas diseñadas para medir variables cognitivas (conocimientos, aptitudes, destrezas…) es importante que los ítems estén ordenados en función de su nivel de dificultad.
En las pruebas de variables no cognitivas, en las que a veces se incluyen preguntas que pueden resultar embarazosas, es necesario cuidar que éstas no aparezcan al principio de la prueba ya que los sujetos pueden darla por terminada nada más empezar al negarse a contestar.
- Cuando un mismo test incluye ítems de varios formatos conviene que aparezcan agrupados los de un mismo formato para evitar provocar desconcierto en los sujetos.
- Hay que tratar de que los ítems sigan una ordenación lógica. Las preguntas referidas a un mismo tema deben situarse unas a continuación de otras de manera que los sujetos no tengan que ir saltando de un tema a otro.
7. APLICACIÓN DE LA PRUEBA PILOTO
Respecto a la forma de administración de la prueba hay varias posibilidades:
1. Colectiva- individual
Siempre que se pueda hay que tender a que la aplicación pueda hacerse de forma colectiva; no obstante hay algunos tests para adultos y niños que requieren aplicación individual (WAIS y WISC) y algunos manipulativos como La escala de Alexandre.
2. Oral
Se puede hacer de forma personal o bien por teléfono. La primera forma suele utilizarse, por ejemplo, con niños pequeños, con personas que no entienden bien el idioma o con analfabetos. La segunda en los estudios de encuestas.
- Cuando se penalizan los errores es porque se asume que el sujeto no conoce la respuesta correcta y que todas las alternativas del ítem le resultan igualmente atractivas. Entonces las respuestas incorrectas son respuestas dadas al azar. Donde:
Xc = puntuación corregida
A = número de aciertos
Aa = aciertos obtenidos al responder al azar
E = número de errores
K = número de alternativas de los ítems
La probabilidad de acierto por azar es P(A) = 1/K, siendo K el número de alternativas. La probabilidad de que elija cualquiera de las otras opciones, es decir, la probabilidad de que cometa un error es: P(E) = 1-1/K
Si llamamos Ra al número de respuestas aleatorias que emite el sujeto en el total del test, se puede establecer que el número de errores será igual a:
Es decir, será igual al número de respuestas aleatorias por la probabilidad de error.
El número de aciertos por azar será igual a:
Es decir, al número de respuestas aleatorias por la probabilidad de acertar por azar.
- Cuando se bonifican las omisiones se parte del supuesto de que el sujeto sólo ha respondido a las preguntas que conocía, no ha respondido al azar a ninguna pregunta y por lo tanto no hay errores.o
Dado que no hay errores, el número de respuestas al azar coincidirá con el número de omisiones (Ra=O), y el número de aciertos al azar será el producto del número de omisiones por la probabilidad de acertar por azar (Aa = O. 1/K = O/K).
Aunque también este procedimiento permitiría hacer comparaciones entre las puntuaciones de los alumnos, ambas puntuaciones estarían sobrevaloradas. No corresponderían al verdadero nivel de los sujetos, por lo tanto es más adecuado utilizar el primer procedimiento.
Cuando un mismo test está formado por ítems con distinto número de alternativas, para conocer cuál es la puntuación de cada sujeto será necesario ir aplicando la corrección del azar por partes; se agruparán los ítems en función del número de alternativas y se calculará la puntuación del sujeto en cada uno de los grupos. La puntuación final será la suma de las puntuaciones parciales obtenidas.
b) En pruebas no cognitivas
Hay que tener muy claro cuál es la dirección del continuo de la variable que se está midiendo. Si se trata de una variable de actitud, hay que conocer cuál es el extremo del continuo que marca una actitud favorable y cuál es el que marca una actitud desfavorable. Una vez aclarado este punto, es necesario decidir a qué extremo del continuo se le va a asignar el valor numérico más alto y, finalmente, tener cuidado de que en todos los ítems del test se siga la misma regla de asignación.
2. En los tests formados por ítems de construcción
El problema se va complicando a medida que las respuestas son más abiertas y extensas puesto que es más difícil controlar la subjetividad en la corrección. La persona que las corrija ha de emitir juicios valorativos acerca de la adecuación de las respuestas.
a) Método de la puntuación analítica
Este método requiere, en primer lugar, definir de forma inequívoca y aislar las dimensiones que se consideran importantes para la realización de la tarea a evaluar y, una vez establecidas las dimensiones que hay que considerar en la corrección de la prueba, es necesario establecer la forma de evaluarlas, definiendo claramente lo que se considera una respuesta adecuada o correcta en cada dimensión y estableciendo el número de respuestas correctas que se necesitan, en cada una de ellas, para poder decir que la tarea ha sido correctamente realizada.
b) Método de la puntuación holística
Se evalúa de manera global u holística la forma en que los sujetos han realizado la prueba, y la puntuación asignada, que podrá tomar distintos valores dentro de los límites establecidos de antemano, expresará la calidad global de su respuesta.
