ALGUNAS CLASIFICACIONES PREVIAS
Contenido
Ej. Máxima
Ej. Típica
Baremo
Ref. Criterio
Ref. Norma
Sesgos
Aciertos Azar
Deseabilidad Social
Halo
Puntuaciones
Centiles
Tipificadas
Notas
Tipo de Ítems
Correcta y distractores
Escala tipo Likert
Prepara tus exámenes
Prepara tus exámenes y mejora tus resultados gracias a la gran cantidad de recursos disponibles en Docsity
Consigue puntos base para descargar
Gana puntos ayudando a otros estudiantes o consíguelos activando un Plan Premium
Orientación Universidad
Prepara tus exámenes
Prepara tus exámenes y mejora tus resultados gracias a la gran cantidad de recursos disponibles en Docsity
Busca documentos
Prepara tus exámenes con los documentos que comparten otros estudiantes como tú en Docsity
Busca tu universidad
Encuentra los documentos específicos para los exámenes de tu universidad
Video Cursos
Estudia con lecciones y exámenes resueltos basados en los programas académicos de las mejores universidades
Quiz
Responde a preguntas de exámenes reales y pon a prueba tu preparación
Consigue puntos base para descargar
Gana puntos ayudando a otros estudiantes o consíguelos activando un Plan Premium
Comunidad
Pregúntale a la comunidad
Pide ayuda a la comunidad y resuelve tus dudas de estudio
Ebooks gratuitos
¡Nuestros e-books salva-estudiantes!
Descarga nuestras guías gratuitas sobre técnicas de estudio, métodos para controlar la ansiedad y consejos para la tesis preparadas por los tutores de Docsity
proceso construccion test, Exámenes de Psicometría
Asignatura: Psicometría, Profesor: Paco (F. Eleuterio) Sánchez García, Carrera: Psicología, Universidad: US
Tipo: Exámenes
2014/2015
1 / 21
Esta página no es visible en la vista previa
¡No te pierdas las partes importantes!
Documentos relacionados
Vista previa parcial del texto
¡Descarga proceso construccion test y más Exámenes en PDF de Psicometría solo en Docsity!
ALGUNAS CLASIFICACIONES PREVIAS
Contenido
Ej. Máxima
Ej. Típica
Baremo
Ref. Criterio
Ref. Norma
Sesgos
Aciertos Azar
Deseabilidad Social
Halo
Puntuaciones
Centiles
Tipificadas
Notas
Tipo de Ítems
Correcta y distractores
Escala tipo Likert
4.-PROCEDIMIENTO DE CONSTRUCCIÓN DE UNA PRUEBA O TEST Pasos Croker y Algina, 1986):
- Delimitación del objetivo para el que van a utilizarse las puntuaciones.
- Definición del constructo que se pretende medir con el test.
- Descripción general de los componentes del constructo.
- Diseño del test.
- Redacción de los ítems.
- (Consulta a expertos y estudio de campo)
- Análisis de la calidad de los ítems.
- Estudio de la fiabilidad del test.
- Estudio de la validez del test.
- Elaboración de las normas de aplicación, interpretación y baremación de las puntuaciones. Pasos Croker y Algina, 1986):
- Delimitación del objetivo para el que van a utilizarse las puntuaciones.
- Definición del constructo que se pretende medir con el test.
- Descripción general de los componentes del constructo.
- Diseño del test.
- Redacción de los ítems.
- (Consulta a expertos y estudio de campo)
- Análisis de la calidad de los ítems.
- Estudio de la fiabilidad del test.
- Estudio de la validez del test.
- Elaboración de las normas de aplicación, interpretación y baremación de las puntuaciones.
4.4.- Descripción general de los componentes del constructo
Ilustración 1.- Diagrama ilustrativo del proceso de derivación
de los objetivos específicos a partir de los objetivos generales
Tabla 1- cuadro de expecificaciones de un examen
de Psicometría
OBJETIVOS GENERALES/CONSTRUCTOS OBJETIVOS ESPECÍFICOS/INDICADORES
NIVEL DE PROCESAMIENTO
% (^) CONTENIDOS CN^1 CM^2 AP 3 TOTALES TOTALES
OBJETIVOS
DOCENTES
I- Saber el con
cepto y objeto
de estudio de
la Psicometría
II- Conocer,
comprender y
aplicar la Teo
ría Clásica de
los Tests.
15 35 50 Concepto y Objeto Teoría Clásica de los Tests Fiabilidad Validez Construcción de escalas Construcción de escalas Construcción de escalas^ Validez Validez Fiabilidad Fiabilidad Teoría Clásica de los Tests Teoría Clásica de los Tests Concepto y Objeto Concepto y Objeto 10 2 0 0 3 0 15 15 15 5 0 5 5 5 20
25 100 0 75 ---^ --- 100 10 45 0 40 15 0 75 0 45 0 70 45 50 25 25 40 25 0 0
0 45 10 100 100
15 100 50 0 75 75 20 100 100 100 100 100 100 100 100 --- --- ---^ ---- --- --- ---^ ---- --- --- ---^ ----
III- Conocer y
comprender
las Aplicacio
nes Psicomé
tricas.
4.5.- Diseño del test 4.5.1. Número de ítems 4.5.2.- Tipo de ítems y número de alternativas de respuesta 4.5.2.- Tipo de ítems y número de alternativas de respuesta 4.5.2.1.-Verdadero y Falso 4.5.2.2- Elección múltiple En tests de Ejecución Máxima 4.5.2.3.- Relacionar 4.5.2.4.- Completar, sustituir o corregir 4.5.2.5.- Respuesta corta 4.5.2.6.- Ensayo 4.5.2.7.- El verdadero ítem
- (^) errores más frecuentes para prevenir su repetición (Muñiz,1994, p. 208-209):
- (^) Que las alternativas de respuesta no resultan igualmente plausibles...
- (^) - Siempre que se pueda, conviene evitar los enunciados en forma negativa
- (^) - La longitud de las alternativas conviene que sea aproximadamente la misma
- (^) -Evitar las reiteraciones de texto innecesarias. p.e.:
- (^) Cuando se utilizan cifras en las alternativas es conveniente presentarlas ordenadas
- (^) Conviene evitar el uso como última alternativa de "todas las anteriores" 4.5.2.- Tipo de ítems y número de alternativas de respuesta 4.5.2.1.-Verdadero y Falso 4.5.2.2- Elección múltiple En tests de Ejecución Máxima 4.5.2.3.- Relacionar 4.5.2.4.- Completar, sustituir o corregir 4.5.2.5.- Respuesta corta 4.5.2.6.- Ensayo 4.5.2.7.- El verdadero ítem
- (^) errores más frecuentes para prevenir su repetición (Muñiz,1994, p. 208-209):
- (^) Que las alternativas de respuesta no resultan igualmente plausibles...
- (^) - Siempre que se pueda, conviene evitar los enunciados en forma negativa
- (^) - La longitud de las alternativas conviene que sea aproximadamente la misma
- (^) -Evitar las reiteraciones de texto innecesarias. p.e.:
- (^) Cuando se utilizan cifras en las alternativas es conveniente presentarlas ordenadas
- (^) Conviene evitar el uso como última alternativa de "todas las anteriores"
En tests de Ejecución Típica SI/NO, SI/NO/A VECES Escalas tipo Likert Alternativas de acuerdo Las alternativas de evaluación bueno-malo adecuado- inadecuado correcto- incorrecto Alternativas de frecuencia
4.5.3.- Cómo cuantificar las alternativas de respuesta. RESTANDO ERRORES^ RESTANDO ERRORES PD AT AA AA RA * Pa k Pa 1 E Ra * Pe Pe E Ra K K Pe 1 (^1) 1 K KE k K E Ra 1 1
1 K E K KE K AA NM N K E PD AT Nota K E PD AT 1 1
4.6.- Redacción de los ítems. 4.7.- Análisis de la calidad de los ítems. 4.7.1. El Juicio de expertos. Tabla 2. Hoja resumen de las señales de emparejamiento de los jueces entre objetivos e ítems (adaptada de Osterlind, 1989, p. 268) Marcas de emparejamiento entre ítems y objetivos Juez: Fecha: ÁREA de contenido: Primero lea detenidamente toda la lista de especificaciones de dominio y de ítems del test. Su marca es para señalar qué ítem del test es y cuál no es una medida de una de las especificaciones de dominio. Esto es, si Ud. cree reconocer dentro de un banco de ítems la representación en un ítem del test de la medida de una especificación de dominio, puede emparejarlo con una linea al objetivo correspondiente. Esto es, después de cada objetivo, escribir el/los ítems del test que crea miden dicho objetivo. En el caso de aquellos ítems que Vd. crea que no miden ninguna de las especificaciones de dominio disponibles, marcar sus números en el espacio disponible al final. Objetivo Emparejamiento de ítems del test 1 2 3 4 Ítems no emparejados: From R.K. Hambleton "Validating the test scores" (p.225) in R.A. Berk (ed), A Guide to Criterion-Referenced Test Construction , 1984, Baltimore: The Johns Hopkins University Press.
Tabla 2. Grado de congruencia ítem-objetivo (adaptada de Osterlind, 1989, p. 267)
Nombre
Instrucciones: Primero lea el objetivo número 1. Después, lea el primer ítem en el cuadernillo del test. Considere cuidadosamente el grado de
congruencia de este ítem con el dominio de habilidad. Evalúe la congruencia según las siguientes categorías:
A = Alto grado de congruencia
M = Grado medio de congruencia
B = Bajo grado de congruencia
Si Vd. quiere hacer algún comentario sobre la congruencia de ese ítem regístrelo en el lugar reservado para ello. Después de que haya
terminado con el primer ítem, proceda con el segundo ítem, e igualmente con todos los ítems siguientes, evaluándolos de igual forma.
Objetivo Nº 1
Uso de las técnicas matemáticas para solventar problemas de la vida real.
Evaluación Comentario
Ítem Nº 1
Ítem Nº 2
Ítem Nº 3
Ítem Nº 4
Ítem Nº 6
Ítem Nº 9
Objetivo Nº 2
Uso de las propiedades de figuras de dos o tres dimensiones para realizar cálculos geométricos.
Evaluación Comentario
Ítem Nº 3
Ítem Nº 5
Ítem Nº 8
Ítem Nº 10
Ítem Nº 11
**Según Yela (1980) CATEGORÍAS CENTIL DEL CONSTRUCTO % APROX. ÍNDICES DE DIFICULTAD ________________________________________________________________(PS)______________ MUY FÁCILES 0 - 10 10% 0.75 A 0. FÁCILES 10 – 30 20% 0.55 A 0. NORMALES 30 - 70 40% 0.45 A 0. DIFÍCILES 70 - 90 20% 0.25 A 0. MUY DIFÍCILES 90 - 100 10% 0.05 A 0. Según Garret (1968) CATEGORÍAS CENTÍL DEL CONSTRUCTO % APROX. ÍNDICES DE DIFICULTAD
FÁCILES 0 - 25 25% 0.75 A 0. MEDIOS 25 - 75 50% 0.26 A 0. DIFÍCILES 75 - 100 25% 0.05 A 0. Según Yela (1980) CATEGORÍAS CENTIL DEL CONSTRUCTO % APROX. ÍNDICES DE DIFICULTAD ________________________________________________________________(PS)______________ MUY FÁCILES 0 - 10 10% 0.75 A 0. FÁCILES 10 – 30 20% 0.55 A 0. NORMALES 30 - 70 40% 0.45 A 0. DIFÍCILES 70 - 90 20% 0.25 A 0. MUY DIFÍCILES 90 - 100 10% 0.05 A 0. Según Garret (1968) CATEGORÍAS CENTÍL DEL CONSTRUCTO % APROX. ÍNDICES DE DIFICULTAD
FÁCILES 0 - 25 25% 0.75 A 0. MEDIOS 25 - 75 50% 0.26 A 0. DIFÍCILES 75 - 100 25% 0.05 A 0. Distribución recomendada de niveles de dificultad de los ítems en un test referido a la norma**
Análisis de Alternativas incorrectas
Tabla 5. Análisis de las alternativas incorrectas
A L T E R N A T I V A S
A B C D E
Grupo Superior 5 15 17 10 0 100
Inferior 15 65 20 0 0 100
4.7.2.4. Análisis Factorial Exploratorio
Gráfico de Sedimentación
Criterios de validez paso a paso con Modelos Estructurales a) Parámetros “ πxv ” y, en general cualquier parámetro “ πjk ”, han de ser significativamente distintos de cero
( t>2 ). En el listado del programa AMOS este dato viene en la columna de CR de la tabla de parámetros
estimados significación de parámetros individuales ).
b) Ressiduales estandarizados no significativos y por lo tanto con valores “ t<2. (Ajustes correlacionales )
c) Indices globales de de ajuste (de la matriz de correlaciones o covarianzas) que se adapten a los siguientes
valores críticos:
- χ²/GL< 4
- Probabilidad asociada a H 0 > 0. - Otros índices de ajuste global del modelo: (^) - GFI o índice de bondad de ajuste: es un índice insensible al tamaño muestral, cuyos valores oscilan entre 0 y 1 - excepcionalmente, puede tener valores superiores a 1-, aunque sólo valores superiores a 0.9 suelen ser aceptables. (^) - AGFI : es el índice GFI ajustado en base a los grados de libertad del modelo, y por lo tanto prima el principio de parsimonia. Como en el caso anterior, sus valores oscilan entre 0 y 1 y valores superiores a 0.8 indican un buen ajuste del modelo a los datos. (^) - RMR estandarizado : es un promedio de residuales estandarizados entre S y Σ(θ). Valores menores que 0.06 indican un buen ajuste. (^) - RMSEA Es una medida derivada de la anterior pero está en función de los grados de libertad del modelo y por lo tanto prima el principio de parsimonia. Un valor de RMSEA igual o menor a 0.06 indica un buen ajuste, valores superiores a 0.08 representan un error de aproximación a los valores poblacionales. a) Parámetros “ πxv ” y, en general cualquier parámetro “ πjk ”, han de ser significativamente distintos de cero
( t>2 ). En el listado del programa AMOS este dato viene en la columna de CR de la tabla de parámetros
estimados significación de parámetros individuales ).
b) Ressiduales estandarizados no significativos y por lo tanto con valores “ t<2. (Ajustes correlacionales )
c) Indices globales de de ajuste (de la matriz de correlaciones o covarianzas) que se adapten a los siguientes
valores críticos:
- χ²/GL< 4
- Probabilidad asociada a H 0 > 0. - Otros índices de ajuste global del modelo: (^) - GFI o índice de bondad de ajuste: es un índice insensible al tamaño muestral, cuyos valores oscilan entre 0 y 1 - excepcionalmente, puede tener valores superiores a 1-, aunque sólo valores superiores a 0.9 suelen ser aceptables. (^) - AGFI : es el índice GFI ajustado en base a los grados de libertad del modelo, y por lo tanto prima el principio de parsimonia. Como en el caso anterior, sus valores oscilan entre 0 y 1 y valores superiores a 0.8 indican un buen ajuste del modelo a los datos. (^) - RMR estandarizado : es un promedio de residuales estandarizados entre S y Σ(θ). Valores menores que 0.06 indican un buen ajuste. (^) - RMSEA Es una medida derivada de la anterior pero está en función de los grados de libertad del modelo y por lo tanto prima el principio de parsimonia. Un valor de RMSEA igual o menor a 0.06 indica un buen ajuste, valores superiores a 0.08 representan un error de aproximación a los valores poblacionales.