Docsity
Docsity

Prepara tus exámenes
Prepara tus exámenes

Prepara tus exámenes y mejora tus resultados gracias a la gran cantidad de recursos disponibles en Docsity


Consigue puntos base para descargar
Consigue puntos base para descargar

Gana puntos ayudando a otros estudiantes o consíguelos activando un Plan Premium


Orientación Universidad
Orientación Universidad


Técnicas de Evaluación en Educación: Cuantitativas vs. Qualitativas, Guías, Proyectos, Investigaciones de Pedagogía

Una comparación detallada entre técnicas cuantitativas y qualitativas en la evaluación de programas educativos. El texto aborda el objetivo de obtener información de alta calidad, la clasificación de recursos tecnológicos, las técnicas cuantitativas y qualitativas, la calidad metodológica del instrumento de evaluación, las estrategias de observación y entrevistas, y el análisis de contenido. El documento también discute la importancia de la preparación y experiencia del entrevistador, la fuente de información centrada en responsables y gestores, y la utilidad de técnicas complementarias.

Tipo: Guías, Proyectos, Investigaciones

2012/2013

Subido el 07/06/2013

lauraalopez777
lauraalopez777 🇪🇸

4 documentos

1 / 6

Toggle sidebar

Esta página no es visible en la vista previa

¡No te pierdas las partes importantes!

bg1
TEMA 6 TECNICAS DE RECOGIDA DE INFORMACION
4.1. Introducción
Desde un punto de vista investigador, podríamos considerar el programa como un objeto de
investigación sobre el cuál efectuar una serie de comprobaciones que nos lleven a discriminar
cuáles son las verdaderas consecuencias que genera. (Símil con un químico podría estudiar la
naturaleza de un compuesto químico). Sin embargo, no es lo mismo, la evaluación representa un
tipo especial de trabajo dentro de la "investigación social".
Características diferenciadoras:
* Una evaluación supone plantearse un problema de investigación desde un punto de vista
"aplicado" (aplicar los avances de la ciencia básica).
* Intervienen diversidad de disciplinas (pedagogía, sociología, psicología, economía, etc) con sus
aportes metodológicos y avances científicos.
* La intervención de múltiples implicados con funciones diferenciadas. Existen referentes
individuales y referentes "grupales".
* Los resultados han de ser comunicados a los interesados, lo cual implica que se han de comunicar
de la forma más clara y menos tecnocrática posible.
El objetivo será siempre obtener la máxima información "coincidente" desde diversos informantes,
procedimientos de recogida de información y evaluadores que proporcionen información de
"calidad" que garantice la suficiente "cientificidad" de las conclusiones.
Por último, el carácter singular de cada programa (implicados, responsables, objetivos, etc.) nos
lleva a la construcción, en muchos de los casos, específica de una instrumentación que se ajuste a la
realidad puntual del programa.
Hemos clasificado los recursos tecnológicos más importantes en función del tipo de información
que producen. Así hablaremos de procedimientos que otorgan datos con significado estadístico
(métodos cuantitativos) y de técnicas que propician palabras organizadas en discursos con
contenido semántico (métodos cualitativos).
4.2. TECNICAS CUANTITATIVAS
Son las primeras fuentes empleadas en los trabajos de Tyler (1942) sobre programas educativos,
donde el objetivos principal era una evaluación de resultados.
Al hablar de técnicas cuantitativas, se hace referencia a técnicas de "medida" (un referente
numérico) de una determinada realidad social, sobre la cual establecer todos los análisis estadísticos
pertinentes y, por tanto, llegar a conclusiones formalizadas.
Dentro de esta perspectiva, hay un claro objetivo: la obtención de un "dato de calidad", es decir un
dato lo suficientemente preciso, válido y fiable que no dé lugar a posibles sesgos a la hora de
procesarlo formalmente. Lo cual requiere: diseño muy planificado, elección de muestra, y por
supuesto calidad metodológica del instrumento de evaluación.
Calidad metodológica del instrumento: La búsqueda de instrumentos lo más objetivos posibles
(cuidado con el sesgo de los participantes: porque lo han diseñado o lo han ejecutado o lo han
recibido). Una dificultad es el carácter singular del programa, que no suele permitir la utilización de
instrumentos de evaluación con garantías científicas probadas. No se puede sacrificar la "utilidad"
de la información por la "comodidad", es decir, datos con garantías de cientificidad, pero sin
referente claro a la realidad del programa, son difícilmente aprovechable. Habría que probarlo en
una muestra piloto.
Vamos a centrarnos en algunas técnicas clásicas en el ámbito de la "Evaluación Conductual" y en
evaluación de programas.
Cuadro 4.1 Técnicas cuantitativas: sujetos de evaluación y formas de aplicación
pf3
pf4
pf5

Vista previa parcial del texto

¡Descarga Técnicas de Evaluación en Educación: Cuantitativas vs. Qualitativas y más Guías, Proyectos, Investigaciones en PDF de Pedagogía solo en Docsity!

TEMA 6 TECNICAS DE RECOGIDA DE INFORMACION

4.1. Introducción Desde un punto de vista investigador, podríamos considerar el programa como un objeto de investigación sobre el cuál efectuar una serie de comprobaciones que nos lleven a discriminar cuáles son las verdaderas consecuencias que genera. (Símil con un químico podría estudiar la naturaleza de un compuesto químico). Sin embargo, no es lo mismo, la evaluación representa un tipo especial de trabajo dentro de la "investigación social". Características diferenciadoras:

  • Una evaluación supone plantearse un problema de investigación desde un punto de vista "aplicado" (aplicar los avances de la ciencia básica).
  • Intervienen diversidad de disciplinas (pedagogía, sociología, psicología, economía, etc) con sus aportes metodológicos y avances científicos.
  • La intervención de múltiples implicados con funciones diferenciadas. Existen referentes individuales y referentes "grupales".
  • Los resultados han de ser comunicados a los interesados, lo cual implica que se han de comunicar de la forma más clara y menos tecnocrática posible. El objetivo será siempre obtener la máxima información "coincidente" desde diversos informantes, procedimientos de recogida de información y evaluadores que proporcionen información de "calidad" que garantice la suficiente "cientificidad" de las conclusiones. Por último, el carácter singular de cada programa (implicados, responsables, objetivos, etc.) nos lleva a la construcción, en muchos de los casos, específica de una instrumentación que se ajuste a la realidad puntual del programa. Hemos clasificado los recursos tecnológicos más importantes en función del tipo de información que producen. Así hablaremos de procedimientos que otorgan datos con significado estadístico (métodos cuantitativos) y de técnicas que propician palabras organizadas en discursos con contenido semántico (métodos cualitativos). 4.2. TECNICAS CUANTITATIVAS Son las primeras fuentes empleadas en los trabajos de Tyler (1942) sobre programas educativos, donde el objetivos principal era una evaluación de resultados. Al hablar de técnicas cuantitativas, se hace referencia a técnicas de "medida" (un referente numérico) de una determinada realidad social, sobre la cual establecer todos los análisis estadísticos pertinentes y, por tanto, llegar a conclusiones formalizadas. Dentro de esta perspectiva, hay un claro objetivo: la obtención de un "dato de calidad", es decir un dato lo suficientemente preciso, válido y fiable que no dé lugar a posibles sesgos a la hora de procesarlo formalmente. Lo cual requiere: diseño muy planificado, elección de muestra, y por supuesto calidad metodológica del instrumento de evaluación. Calidad metodológica del instrumento: La búsqueda de instrumentos lo más objetivos posibles (cuidado con el sesgo de los participantes: porque lo han diseñado o lo han ejecutado o lo han recibido). Una dificultad es el carácter singular del programa, que no suele permitir la utilización de instrumentos de evaluación con garantías científicas probadas. No se puede sacrificar la "utilidad" de la información por la "comodidad", es decir, datos con garantías de cientificidad, pero sin referente claro a la realidad del programa, son difícilmente aprovechable. Habría que probarlo en una muestra piloto. Vamos a centrarnos en algunas técnicas clásicas en el ámbito de la "Evaluación Conductual" y en evaluación de programas. Cuadro 4.1 Técnicas cuantitativas: sujetos de evaluación y formas de aplicación

4.2.1. La entrevista estructurada Haremos referencia a la entrevista muy estructurada (recordar que existe un continuo en esta estructuración) tanto en el tipo de preguntas, como al tipo de respuestas, a la secuencia fija de preguntas, al registro y a la interpretación de los datos.

  • Objetivo: Recoger el máximo de "información útil" de la que pueda aportar la persona entrevistada.
  • A efectos prácticos, recomendable cuando se trata de saber si existe coincidencia entre los implicados, en cuando a la determinación de las necesidades a las que se pretende dar respuesta., a la naturaleza de los objetivos que se pretenden cumplir y a la pertinencia de los medios utilizados. También puede detectar posibles objetivos encubiertos.
  • Diferencia con la entrevista clínica: Ésta se utiliza para realizar un sondeo del problema personal. En nuestro caso, el rastreo de información será previo, a través de toda la documentación escrita sobre el programa y de la toma de contacto sobre el grupo de referencia del entevistado, que marcará las directrices sobre las que enfocar la entrevista.
  • Costo: (inconvenientes) Utilización de mucho tiempo (una persona por entrevistador). Nivel alto de preparación y experiencia en el entrevistador que asegure la no aparición de posibles sesgos en la recogida de información. Por eso es recomendable uno de los evaluadores, que está involucrado en todo el proceso (no recomendable encarga a entrevistador externo).
  • Beneficio: (ventajas) Exhaustividad de la información.
  • Fuente de información: Centrada en "responsables" (encargados de la toma de decisiones acerca de la continuidad, implantación, mejora o fin del programa) y "gestores" (implantadores del programa). Sería muy costosa a todos los implicados.
  • Aspectos a tener en cuenta: "Anatomía de la entrevista": duración de las verbalizaciones del entrevistador y entrevistado, refuerzos (verbales o no), manejo del contacto visual, latencias e interrupciones del discurso del entrevistado. También, el "rapport" o conexión positiva entre los dos que garantice la reducción de incertidumbre y cree una atmósfera agradable. Sin olvidar las garantías científicas: fiabilidad y validez.
  • Características peculiares en la Evaluación de Programas:
  • Formatos altamente estructurados. (Codificación respuestas) - Diseño de formato para cada programa, y para cada tipo de entrevistado. - Máxima información en mínimo tiempo. Economía de tiempo. 4.2.2. La encuesta Es el procedimiento más utilizado en sociología empírica y aplicada. Consiste en la formulación de preguntas a un número determinado de individuos que representa a un colectivo más amplio en la búsqueda de información generalizable a ese colectivo.
  • Objetivo: Recabar la opinión, sobre aspectos relacionados con el programa, de una muestra representativa de individuos pertenecientes a alguno de los grupos de implicados. Sobre todo, que muestren la distribución e intensidad de los efectos provocados por la implantación de las acciones contempladas en el programa.
  • Fuente de información: Usuarios. Generalización de las opiniones de los usuarios encuestados al grupo al cual pertenecen, sobre todo cuando al población no es posible abarcar. También, cuando el acceso vía-entrevista no ha sido posible, la encuesta resolvería los problemas de accesibilidad a otros grupos (responsables y gestores).
  • Beneficio: (ventajas) Ahorro de tiempo (se accede a un número mayor de personas con una menor inversión en tiempo y esfuerzo). No es necesario que el encuestador sea uno de los evaluadores (puede estar ajeno a la evaluación y al programa).
  • Costo (Inconvenientes): El encuestador ajeno puede introducir sesgos al presentar o recoger la información. Una forma de solucionarlo, a través de una doble estrategia: 1º. Entrenamiento previo (rol-playing), pocos encuestadores. 2º. Formato altamente estructurado. 4.2.3. El autoinforme

generado.

  • Estrategias: Dos posibilidades técnicas a considerar: a) La construcción, al diseñar la evaluación, de un sistema de indicadores específico asociado a los objetivos del programa. b) La selección de indicadores recogidos ya por organismos externos. Después, establecer un sistema de ponderación o "pesos" a cada indicador. Por ejemplo: si estamos evaluando un programa educativo, daremos más pesos a los indicadores educativos que a los sociales, económicos o de salud.
  • Requisitos de los indicadores:
  1. Independencia (utilización de cada indicador para sólo un objetivo) 2. Verificabilidad (posibilidad de la constatación empírica de los cambios que el programa vaya generando) 3. Validez (cada objetivo debe llevar asociado un indicador) 4. Accesibilidad (facilidad para su obtención)
  • Ventajas /Inconvenientes: Aunque parecen a simple vista los que ofrecen mayores garantías de objetividad, hay que ser críticos. La propia construcción del indicador o la ponderación de los mismos puede estar condicionada por la subjetividad del evaluador. Son insuficientes como único procedimiento de recogida de información, aunque representen una forma de resumir grandes porciones de la realidad en unos pocos datos objetivos. 4.2.6. Consulta de datos de archivo Relacionado con los indicadores. En términos muy reduccionistas, se podría argumentar, que de los datos de archivo se obtienen los indicadores.
  • Objetivo: Los datos de archivo pueden servir para extraer información acerca de cuál es la posición de los implicados en el programa antes de iniciar este (criterios para seleccionar usuarios, situación inicial de éstos...) y cómo una información inicial imprescindible para el conocimiento del mismo (antecedentes, objetivos, estructura, personal, temporalización, ...).
  • Utilidad en Ev. de prog: Estimación de la evaluabilidad del programa y para el grado o eficacia en el cumplimiento de objetivos. 4.3. TECNICAS CUALITATIVAS Técnicas introducidas con bastante posterioridad a las cuantitativas. Primeros informes en 1969, Glaser y Mech sobre programas de regulación de empleo en EEUU mediante observación participante. Los manuales sobre metodología cualitativa en evaluación de programas datan de finales de los 70 y primeros de los 80 (Guba, 1978 y Patton, 1980). Surge un tipo de evaluación llamado "naturalista", que quita importancia a la obtención de datos comparativos de cumplimiento de objetivos y lo da a la descripción de los contextos en los que se implanta el programa. Calidad metodológica: Interesan, no tanto los resultados, como las opiniones, vivencias y experiencias de los participantes en el programa. La evaluación del progreso podría ir modificando las acciones en función de las anteriores implantadas. Por lo tanto, había que buscar otras técnicas que indagaran en la subjetividad de los individuos. En la práctica, las evaluaciones cualitativas se restringen a programas locales, muy contextualizados, mientras que las cuantitativas son más ambiciosas en sus objetivos de alcance, programas de ámbito estatal y nacional. Sobre el diseño, este no puede ser determinado a priori, salvo en líneas generales, ya que la evaluación es un "proceso emergente", substancialmente impredecible, donde los implicados van descubriendo construcciones a lo largo del proceso. De entre la enorme variedad de técnicas que se han ido construyendo (otras: grupo central o entrevista de grupo, sondeo de problemas, técnica de grupo nominal, sistema IC de ideas clave, el campo de fuerza, matriz de decisiones, los guiones, los árboles de decisión, etc.) vamos a centrarnos en las más utilizadas y tienen su referente en técnicas cuantitativas antes mencionadas: Cuadro 4.2 Técnicas cuanlitativas: sujetos de evaluación y formas de aplicación 4.3.1. La entrevista abierta y el análisis de contenido Pueden aplicarse las características generales de la entrevista, pero con algunas diferencias:
  • Objetivo: Captación del discurso motivacional del entrevistado sin ningún tipo de cortapisa inicial, dejarle hablar con libertad (sin cuestionario). El entrevistador debe captar toda la información útil y reconducir el sentido de la entrevista. Reglas: ausencia de reglas fijas para su realización y conducta del entrevistador, y imposibilidad de generalización de resultados, por eso:
  • Fuentes de información: Estudio de casos extremos o típicos con la intención de reproducir ciertas situaciones sociales a partir del discurso (por ejemplo: Presidente de la Junta de Residencia de ancianos).
  • Técnicas de análisis: Análisis de contenido: Pretende tanto, describir los resultados de la interacción comunicativa (descripción "textual") como, la formulación de inferencias que posibiliten llegar a conclusiones de orden superior a partir de los elementos de la comunicación. El análisis de contenido se emplea también con grupos de discusión, observación participante, etc.
  • Calidad técnica: El proceso de análisis de contenido lleva unos pasos que garantizan esta calidad técnica:
  1. Las inferencias a realizar están marcadas por el marco teórico del que parta, en este caso, el entrevistador. (ejemplo: entrevistador en psicología, freudiano que conductista). No sólo se registra el discurso, sino también el contexto de comunicación, características formales de la interacción (mobiliario, vestimenta, hora del día, ) y por supuesto la situación del entrevistador frente al programa. Lo textual y lo extratextual, forma las "unidades de registro".
    1. El siguiente paso: la codificación, o categorización de las unidades de registro. Cinco requisitos básicos en la formulación del sistema de categorías: a) Contemplación de los objetivos de la evaluación; b) ser exhaustivo; c) definir categorías mutuamente excluyentes; d) definir categorías independientes; e) atender a un único principio de clasificación.
  2. Clasificar cada unidad de registro en una de las categorías del sistema. El evaluador ha de tener claro cuál es el criterio de clasificación.
  3. Proceder al análisis de la información. Cuantitativo (frecuencia de aparición de cada categoría) o cualitativo (presencia o ausencia de características de contenido a partir de las cuales hacer las inferencias). 4.3.2. La observación participante y la etnografía Los procedimientos etnográficos están considerados la principal herramienta de la Antropología. En una investigación etnográfica se atiende principalmente a la descripción y análisis, normalmente extensos, del entorno social que se estudia, con el fin de detallar el funcionamiento de un sistema social o de un determinado aspecto de éste.
  • Objetivo: Observación detallada de la implantación del programa en cada uno de los diferentes contextos en los que se aplica.
  • Estrategia: Este trabajo se basa en la observación, registro y análisis del comportamiento en tal contexto. El trabajo de campo requiere de un observador participante (agente de campo) que describe la dinámica del programa desde el punto de vista del participante.
  • Inconvenientes: El observador puede considerarse como un "espía" (definir las funciones y competencias del evaluador). Además puede ser considerado un agente distorsionador de la realidad. (Alternativa: medios técnicos de registro). Lleva mucho tiempo.
  • Ventajas: La Etnografía sirve de ayuda para el descubrimiento e integración de consecuencias para el cambio de los programas y puede sugerir posibilidades de mejora. 4.3.3. El socioanálisis: el uso de analizadores sociales Su objetivo es el conocimiento o análisis sociológico de grandes grupos sociales o incluso de la sociedad en general. La información sería del mismo rango que los indicadores sociales.
  • Objetivo: En evaluación de programas no se ha utilizado, puede ser útil para recabar información sobre los procesos que se están produciendo en los numerosos grupos implicados en la evaluación de un programa social en un determinado contexto.
  • Estrategia: La herramienta fundamental: el analizador social, o un fenómeno cuya presencia y actuación sirve de indicio para conocer el funcionamiento d las relaciones sociales existentes en un grupo. (ejemplo: el "esclavo" analizador de una sociedad griega o la "periferia" como analizador del "centro"). La labor del analista (evaluador) consistiría en un proceso de retroalimentación continua