Tema 1.

- LA INVESTIGACIN EVALUATIVA EN EDUCACIN SOCIAL

INVESTIGACIN EVALUATIVA
Los trminos investigacin y evaluacin aparecen entrelazados y algunas veces
confundidos. Weis (1991) nos indica que la investigacin evaluativa representa una
manera de aumentar la racionalidad de las dimensiones. Se basa en una informacin
objetiva acerca de los diversos campos objeto de anlisis, para tomar decisiones
bien fundamentadas en los mismos.
Mientras la investigacin se caracteriza por las notas de probar, extraer
conclusiones, no implicacin del investigador, verdad cientfica, generalizacin;
la evaluacin presenta como caractersticas mejorar, tomar decisiones, implicacin
del evaluador, valoracin del fenmeno, sin pretensiones de generalizacin.
Prima su consideracin como investigacin aplicada, centrada en la prctica, que a
travs de un proceso selectivo de recogida de informacin sobre un problema en el
contexto educativo facilita la toma de decisiones de mejora sobre el mismo.
Sin duda, el objetivo principal que debe cubrir la investigacin evaluativa
consistir en medir la eficacia de los programas, si las metas propuestas se han
alcanzado, pues ello contribuir de manera transcendental a la toma de decisiones
en el futuro.
EL PROCESO A SEGUIR EN LA INVESTIGACIN EDUCATIVA
Nevo, uno de los autores que mejor recoge y sintetiza esta propuesta general de
actuacin del investigador. Recoge los diferentes interrogantes que deben
plantearse los investigadores ante una determinada propuesta evaluativa:
Cmo se define la evaluacin?
Cules son las funciones de la evaluacin?
Qu tipo de informacin debe ser recogida?
Qu criterios deben ser utilizados para juzgar el mrito de un objeto?
A quin debe servir una evaluacin?
Cul es el proceso de realizacin de una evaluacin?
Qu mtodos de investigacin deben ser utilizados en la evaluacin?
Quin debe hacer la evaluacin?
Por qu estndares debe ser juzgada la evaluacin?

Las respuestas a estos interrogantes nos van a enmarcar la pauta de actuacin y la

propuesta general del modelo de evaluacin planteado.
De las opciones anteriores se desprende la existencia de tres momentos clave en el
proceso de la investigacin evaluativa: marco contextual, marco de la ejecucin o
puesta en marcha y marco de la valoracin de resultados.
FASES O MOMENTOS DE LA INVESTIGACIN EVALUATIVA
Marco contextual: fase de la investigacin evaluativa que nos permite realizar el
encuadre general de la propuesta investigadora. Es la recogida y registro de una
serie de informaciones tiles para la posterior toma de decisiones. Son datos sobre
el estudio y el mbito de actuacin de la investigacin para poder comparar los
resultados obtenidos. Los aspectos que integran esta fase son:
- Objetivos del trabajo. Lo que pretende alcanzar el equipo investigador mediante
la realizacin del trabajo prctico. Definiciones claras y concisas.
- Pautas de actuacin. Las actuaciones a desarrollar para la evaluacin de
programas e instituciones perfectamente definidas y enmarcadas en el contexto.
- Secuenciacin y temporalizacin del trabajo. Es necesario establecer la secuencia
en las actuaciones que para llevar a buen puerto el proceso investigador.
- Los sujetos intervinientes. Diferenciacin entre las personas que intervienen
como colaboradores del grupo investigador y aquellas que van a participar en el
estudio como muestra.
- Los clientes. Se hace alusin a la persona o grupo que encarga a realizacin del
trabajo.
Marco de la ejecucin o puesta en marcha: es la fase ms operativa de la propuesta
de investigacin. En ella se definen con precisin cules son los pasos a seguir en
el proceso de intervencin, la recoleccin y anlisis de los datos que nos
suministra la muestra (del proceso de actuacin y de los resultados alcanzados en
el mismo).
Se determinan:
- Plan de trabajo a seguir. Centrar la exposicin en la operativizacin de las
pautas de actuacin y en el plan de trabajo.
- Definicin operativa de variables. Es preciso que las relaciones entre variables
sean definidas e identificadas de forma precisa.
- Seleccin y elaboracin de instrumento de recogida de datos. En la seleccin es
necesario tener en cuenta sus caractersticas tcnicas, sus niveles de precisin,
la muestra, los rasgos definidos por el instrumento. La elaboracin resulta una
tarea ms compleja y larga, conviene realizar una aplicacin piloto.
- Proceso de recogida de datos. Cmo se procede a la recogida de datos y en qu
momentos se realiza.
- Anlisis y tratamiento de datos. Es precisa una depuracin de los datos
recogidos; se procede realizar un anlisis exhaustivo de los mismos.
Marco de la valoracin de resultados: ltima fase de la investigacin que viene
marcada por la aplicacin de los resultados alcanzados en el trabajo. Nos indica
cmo llevar a la prctica las aportaciones de la evaluacin. Nos ofrece una
valoracin objetiva y contextualizada de los resultados alcanzados en el trabajo
emprico para guiar la toma de decisiones de mejora sobre el proceso y el producto
alcanzado. (Ir ms all de lo que marcan los datos y proceder a la interpretacin
en el mbito de la actividad educativa). Los procesos en esta fase sern: -
Seleccin de criterios de valoracin. El investigador o evaluador debe tener
perfectamente claros los criterios con los que va a juzgar los datos.
- Anlisis minucioso de resultados. Se procede a un estudio detallado de los
criterios, conforme a los objetivos, para extraer tanto la informacin superficial
como la ms profunda. - Formulacin de juicios. Se procede al enjuiciamiento de los
resultados, implica la participacin activa del equipo investigador. - Toma de
decisiones. la validez de los resultados nos permite una toma de decisiones sobre
la propuesta planteada en la evaluacin. - Redaccin del informe. Para que llegue a
conocimiento de otras personas interesadas el correspondiente informe del trabajo
realizado y a travs de los resultados a los que se ha llegado.
MTODOS DE LA INVESTIGACIN EVALUATIVA
Por metodologa se entiende el estudio de los mtodos de investigacin, es decir,
se preocupa de comprender los procesos implicados en su puesta en prctica.
Describe, explica y justifica el mtodo de trabajo ms apropiado al problema que es
objeto de estudio y anlisis. Y el mtodo es el camino que debe seguir el
investigador para alcanzar un determinado fin.
Tradicionalmente se ha recurrido a dos propuestas de actuacin basadas en el
paradigma positivista y el interpretativo. ltimamente los investigadores se
decantan por el empleo conjunto.
PERSPECTIVA EXPERIMENTAL Y CUASI-EXPERIMENTAL.

Perspectiva experimental: su principal sea de identidad es el control de los

procesos y las variables extraas. El objetivo fundamental es la comprobacin
emprica de las hiptesis de causalidad establecidas con una triple finalidad:
aumentar el nivel de conocimientos, descubrir las explicaciones sobre los fenmenos
y confirmar la validez de las teoras cientficas.

Perspectiva cuasi-experimental: trabaja con escenarios naturales y no exige la

asignacin al azar de los sujetos. Sus puntos de partida no son tan estrictos como
la propuesta experimental.

PERSPECTIVA CUALITATIVA
Su preocupacin fundamental se dirige a comprender los programas de intervencin y
sus efectos en los participantes, dentro de un contexto de actuacin determinado.
Tambin denominado naturalista. En el estudio de los procesos implicados en la
puesta en prctica se preocupa de cmo ocurre el fenmeno. La informacin as
obtenida permite aventurar juicios de valor sobre el grado y la amplitud que el
programa o el centro est consiguiendo.
La complementariedad metodolgica
Segn Cook y Reichardt es cuando se refieren a la flexibilidad y a la adaptabilidad
de los mtodos a las situaciones objeto de estudio. Soltis opina que si la
investigacin educativa se concibe como emprica, interpretativa, normativa y
crtica, es lgico pensar que los problemas deben abordarse desde pticas
complementarias, para recoger la mayor riqueza, no desde posturas excluyentes y
raquticas.
El investigador puede elegir con libertad una mezcla de los atributos de ambos,
siempre que mantenga claramente definidos los objetivos de su investigacin y cubra
mejor las necesidades.
PROCEDIMIENTOS Y TCNICAS PARA LA RECOGIDA DE INFORMACIN Y DATOS
TCNICAS: aquellos medios que emplea el investigador o evaluador para registrar sus
observaciones o facilitar el tratamiento adecuado de la informacin. Es necesario
que las tcnicas seleccionadas o elaboradas en la investigacin evaluativa nos
puedan garantizar que los datos suministrados alcanzan una buena calidad, de forma
que la toma de decisiones derivada de la misma sea la ms adecuada a la realidad
objeto de estudio.
Tcnicas de enfoque cuantitativo: uno de los objetivos que se debe fijar el
investigador ser el conseguir un dato de calidad, es decir, un dato
suficientemente preciso, vlido y fiable que no induzca a error o sesgo en su
procesamiento formal.
- La entrevista: recogida directa de informacin que se basa en una relacin
personal entre entrevistador y entrevistado, mediante anotaciones y comentarios no
slo sobre lo que se busca directamente, sino tambin, sobre las circunstancias en
que estos hechos se producen. La entrevista estructurada es aquella que emplea un
protocolo previo de preguntas de alternativa fija o bien de varias alternativas de
respuesta. Su inconveniente se encuentra en la falta de flexibilidad.
- La encuesta: un repertorio de preguntas que se formulan a un grupo determinado de
sujetos que suelen representar a un colectivo ms amplio. Recoger la opinin y
valoracin de una muestra representativa. Este repertorio de preguntas y respuestas
aparecen reflejadas en el cuestionario, que intenta recoger toda la informacin
necesaria e importante para el problema que se investiga.
- Observacin sistemtica: el observador contempla la realidad sin actuar sobre
ella, registra hechos o fenmenos tal y como se estn produciendo en un momento
determinado. Debemos tener delimitado el campo de la observacin, seleccionando
puntos concretos, el guin de la observacin.
- Autoinformes: ayuda a recabar informacin ms profunda, sobre determinados
aspectos del programa, presenta un grado de especificacin que no alcanza la
encuesta, en cambio no se dirige a un nmero tan elevado de personas.
- Otras formas de recogida de informacin:
1 datos de archivo: pueden suministrar informacin sobre la posicin de los
implicados antes de iniciar la intervencin en alguna de las variables relevantes
del estudio, pueden ser oficiales y personales;
2 indicadores: nos permiten reflejar la evolucin y desarrollo de la realidad
social que estudiamos, pueden ser descriptivos y evaluativos o normativos.
Tcnicas de enfoque cualitativo: surgen como crtica a los modelos csicos de
evaluacin en que se haca especial incidencia sobre los resultados alcanzados. Se
resalta la importancia de la evolucin del proceso, que permitir aportar
modificaciones en el desarrollo de la intervencin educativa.
- La entrevista abierta o no estructurada: consiste en captar el mensaje del
entrevistado sin ningn filtro previo. Mayor liberta a la iniciativa tanto del
entrevistador como del entrevistado. La conversacin facilita y estimula una
expresin ms libre y con respuestas no determinadas de antemano, dado que las
preguntas que se formulan suelen ser de tipo abierto y el entrevistado debe
construir la respuesta. Requiere una mayor preparacin de los entrevistadores.
Entrevista focalizada: muy tcnica, se parte de un listado de tpicos sobre los
cuales se realiza la entrevista; entrevista clnica: se dirige al campo de las
motivaciones y sentimientos, tiene una finalidad eminentemente teraputica;
entrevista no dirigida: el problema de estudio acta como catalizador.
- Los grupos de discusin: permite acceder a imgenes colectivas y simblicas
cargadas de valor, que configuran actitudes, condicionan comportamientos y dan
lugar a estados de opinin ms o menos permanente. Entre 6 y 10 personas guiadas
por un moderador experto. La discusin que se genera suele ser relajada,
confortable y satisfactoria para los participantes, puesto que tienen la
oportunidad de exponer sus ideas y comentarios ante los dems.
- La observacin participante o activa: participacin directa del observador que
asume diferentes roles en la vida del grupo. El observador adems de ver lo que
est aconteciendo, lo siente y se integra en la situacin o en el desarrollo del
programa de intervencin. Para la recogida de informacin se recurre a los diarios,
notas de campo, el registro de incidentes crticos, las listas de control, etc. la
mejor forma sera mediante el empleo de los recursos audiovisuales.
- La tcnica Delphi: busca respuestas consensuadas de un grupo de expertos a una
serie de cuestiones especficas. Los sujetos que participan en el proceso de
trabajo, generando ideas y ofreciendo sus aportaciones, no se comunican verbalmente
entre s, por lo que desconocen la identidad de las opiniones expresadas, a
excepcin del investigador que coordina el grupo; as, se evita la influencia de
las respuestas e unos sujetos sobre otros.