Factores que afectan coeficientes de fiabilidad: Introducción, validez, longitud y medidas, Apuntes de Biología

¡Descarga Factores que afectan coeficientes de fiabilidad: Introducción, validez, longitud y medidas y más Apuntes en PDF de Biología solo en Docsity!

TEMA 4. FACTORES QUE INFLUYEN EN

LOS COEFICIENTES DE FIABILIDAD

1. Introducción al concepto de fiabilidad.

2. Ecuaciones para definir y calcular la fiabilidad.

3. Validez y fiabilidad

4. Validez y longitud

5. Formas usuales de generar medidas repetidas.

a. Test-retest.

b. Formas paralelas.

c. División en dos mitades.

6. Cálculo práctico de los coeficientes e índices de

fiabilidad.

7. Otras ecuaciones para el cálculo de la

fiabilidad.

ÍNDICE

 Un instrumento de medida es preciso cuando las medidas repetidas son semejantes, existiendo consistencia entre las

medidas.

 La consistencia o estabilidad de las puntuaciones se evalúa mediante el Coeficiente de Correlación lineal entre dos conjuntos de puntuaciones, consideradas como paralelas.

 La consistencia interna de las medidas se evalúa mediante correlaciones intra-test.

 El Índice de Fiabilidad expresa la correlación entre las

puntuaciones empíricas y sus correspondientes puntuaciones verdaderas. ρ (^) XV

 El Coeficiente de Fiabilidad indica la correlación entre dos

conjuntos de medidas observadas, bajo la condición de paralelismo. ρ (^2) XV

 La fiabilidad se da en el contexto de la TCT y

relaciona la medida X observada mediante el test con la puntuación verdadera V, que es inobservable.

 En este contexto, definimos la fiabilidad como

la variación relativa de la puntuación verdadera con respecto a la puntuación observada, calculada como la razón entre sus respectivas varianzas.

2. Ecuaciones para definir y calcular la fiabilidad

 Tanto ρXX´ como ρXV sólo pueden tomar valores positivos, acotados entre 0 y 1.

 No es posible que puedan tomar valores negativos ya que el cociente es entre dos varianzas positivas que necesariamente son valores positivos.

 No es posible que puedan tomar valores mayores que 1 ya que σ (^2) V ≤ σ (^2) X.

 Laausencia de fiabilidad se identifica con el valor ρXX´ = 0.

 Lafiabilidad perfecta se identifica con el valor ρXX´ = 1.

 Valores próximos a 0 = escasa fiabilidad.

 Valores próximos a 1 = elevada fiabilidad:

a. Valores e interpretación del Coeficiente e

Índice de fiabilidad

 En el cálculo del coeficiente de validez un aspecto de especial relevancia es el tratamiento del error.

 En el contexto de la TCT, las correlaciones entre las puntuaciones verdaderas del predictor (Vx) y del criterio (V (^) y ) serán mayores que las de sus correspondientes puntuaciones observadas.

 Esto implica que el coeficiente de validez empírico es menor que el que se obtendría si se dispusiese de las puntuaciones verdaderas, es decir, que el valor del coeficiente de validez empírico estáatenuado debido a los errores de medida.

 Para corregir esta atenuación se ha propuesto laecuación de corrección por atenuación.

 V (^) X ,VY   X,Y

XX Y Y

XY V (^) X VY  

  

 

.

.

.

.

Coeficientede fiabilidad criterio

Coeficientede fiabilidadtest

Coeficientedevalidezempírico

Coeficientedevalidez puntuacionesverdaderas

YY

XX

XY

V (^) XVY











 







3. Validez y fiabilidad

 Como consecuencia de esto se deduce que la validez de los test se puede mejorar aumentando la fiabilidad del test, del criterio o de ambos.

◦ Aumento de la fiabilidad tanto del test como del criterio.

◦ Aumento de la fiabilidad del test.

◦ Aumento de la fiabilidad del criterio.

2 2

11 2 2

1 1

11 22 Y Y

YY X X

XX

XY XY R

r R

r

r R



 





2 2

1 1

11 21 X X

XX

XY XY R

r

r R







22

11

11 12

Y Y

YY

XY XY

R

r

r R







R Coeficientede fiabilidadcriterio mejorado

r Coeficientede fiabilidadcriterioinicial

R Coeficientede fiabilidadtestmejorado

r Coeficientede fiabilidadtestinicial

R Coeficientedevalidezaumentado

r Coeficientedevalidezinicial

YY

YY

XX

XX

XY

XY





















22

11

2 2

1 1

22

11

.

.

.

.

.

 La modificación de la longitud de un test provoca cambios en su fiabilidad, por lo que también producirá cambios en su validez.

 El valor de la validez una vez que se ha modificado la longitud del test, se obtiene mediante las siguientes expresiones:

  (^) XX

XY XX XX

XY XY n r

r k

r k

r

r R  (^)    

  

 1 1 1

mod.

.

.

.

k Númerodevecesquese ificael test

r Coeficientede fiabilidadinicial

r Coeficientedevalidezinicial

R Coeficientedevalidezalaumentarkvecessulongitudtest

XX

XY

XY











4. Validez y longitud

 El valor del coeficiente de validez está acotado por el índice

de fiabilidad, cumpliéndose la siguiente desigualdad:

 El valor del coeficiente de validez nunca puede ser mayor que

el valor del índice de fiabilidad.

 Este hecho concluye que la falta de fiabilidad de un test afecta

a su validez en relación con un criterio.

 Debido a la simetría del coeficiente de correlación lineal, se

puede afirmar que no solamente la fiabilidad del predictor,

sino también la del criterio, afectan al valor de la validez, que

se ve atenuado debido a los errores de medida.

 (^) XY   XV

Acotación del valor del coeficiente de validez

 Las puntuaciones repetidas X y X´ se han obtenido aplicando el mismo test a los mismos sujetos y en las mismas condiciones en dos ocasiones diferentes separadas en el tiempo.

 Si las correlaciones entre ambas aplicaciones son elevadas y las condiciones de aplicación de la prueba en las dos ocasiones son esencialmente iguales, entonces consideraremos que la prueba

es FIABLE (estabilidad significativa).

 En este situación, un problema frecuente es el efecto

aprendizaje.

 A veces, es posible distanciar las aplicaciones en el tiempo atenuando este efecto.

4. Formas usuales de generar medidas repetidas

a. Test-Retest

 Se trata de un procedimiento para poner en relación las puntuaciones entre dos partes de un mismo test, actuando ambas como si fuesen paralelas.

 Existen diversos procedimientos para realizar la división de un test en dos partes, pero para su correcta realización hay que tener cómo se ha diseñado el test.

 Un procedimiento muy utilizado es el que separa, por un lado, los elementos que ocupan los lugares pares del test y, por otro, los que ocupan los lugares impares, para utilizarlos como formas paralelas (Método par-impar).

 Mediante el procedimiento par-impar los ítems que componen las dos partes en las que queda dividido el test tienen dificultad similar.

 La fiabilidad obtenida utilizando este procedimiento no se puede interpretar en el mismo sentido que con los procedimientos test-retest o formas paralelas.

c. División en dos mitades

 Ejemplo 3.  Las puntuaciones X y X' que se dan en la Tabla 3,1 se han obtenido como resultado al administrar dos pruebas supuestamente paralelas a siete sujetos que se asume que son una muestra representativa de la poblacion para la que se construye esa prueba. Las puntuaciones de X y X' varían entre 0 y 15 puntos. Se trata de calcular la fiabilidad de la prueba y de discutir los procedimientos así como los resultados.

4. Cálculo práctico de los coeficientes e índices

de fiabilidad

 El cálculo de fiabilidad por el procedimiento par-impar

puede realizarse haciendo uso de las fórmula de Rulon y

Flanagan-Gutman.

 Se procede relacionando cada ítem impar con su

correspondiente par, es decir, formado parejas (1,2),

 Conociendo todos los valores de las puntuación X de todos

los sujetos en todos los ítems del test, pondremos a prueba

la relación de todas las parejas de puntuaciónes.

 La notación de los ítems impares será X i y la de los pares X p.

5. Otras ecuaciones para el cálculo de la fiabilidad

 Ecuación del procedimiento Rulon:

X = Xp + Xi // Xp-i = Xp – Xi

 Para el cálculo de la fiabilidad mediante este

procedimiento operamos de la siguiente forma:

  (^)   2

2 (^2)     

   ^    (^) N

p i N

p i p i

Sujeto X p i p-i (p-i)^2 1 4 3 1 2 4 2 3 1 2 -1 1 Ʃx=7 Ʃp=4 Ʃi=3 Ʃp-i=1 Ʃ(p-i)^2 =



  2

2 ´ 1 x

p i xx  ^ 



  (^2)

2

´ 1 x

p i xx

  