Como una piedra en bruto que cobra forma y brillo por accin
de las manos, el ojo, el cerebro y las orientaciones creativas del escultor
que la elige, conoce y transforma, la evaluacin educativa pretende
iluminar las caras opacas de la vida institucional, dando protagonismo a
sus actores para que se apropien del espacio institucional, sean
partcipes de la elaboracin del texto que los identifique y estn en
mejores condiciones de transformar, desde sus perspectivas utpicas, el
contexto situacional en el que se reconocen.
S. Celman
RESUMEN:
MARCO REFERENCIAL
1
Profesora titular de la ctedra Evaluacin Educativa de la carrera de Ciencias de la Educacin, Universidad
Nacional de Entre Ros. Investigadora en temas educativos de evaluacin, poltica y gestin escolar.
1
Por otra parte, dentro del campo terico de la evaluacin, se consolidan reas de fuerte
confrontacin que ponen de manifiesto profundas diferencias conceptuales, metodolgicas
y tico-polticas al interior de la propia disciplina (House, 1995; lvarez Mndez, 2001).
Estamos viviendo un cambio de ciclo, una poca de fuertes crisis sociales, polticas y
culturales que afectan a los sistemas educativos y sus actores a travs de los lineamientos y
formas de implementacin de las reformas educativas de los 90 , que asumen
caractersticas peculiares en Amrica Latina. En este caso, nos interesa destacar los
sistemas de evaluacin de la calidad, con fuertes implicancias en el control2 y
diferenciacin de sujetos e instituciones.
Una de las formas en que esta tensin habr de resolverse tendr que ver con los
avances y retrocesos de lo pblico dentro del mbito de la educacin y con el perfil que, por
su mediacin, adopte la construccin de una nueva ciudadana.3
2
Llama la atencin la incorporacin al lenguaje de las organizaciones sociales en general y educativas en
particular, del trmino monitoreo , propio de los campos empresariales altamente informatizados.
3
Cantero, G., Celman, S y equipo: Reformas educativas y ciudadana . Informe final de investigacin,
Facultad de Ciencias de la Educacin, UNER, 2003.-
4
Lic. Susana Celman, La evaluacin democrtica: remando contra la corriente. . Jornadas Internacionales
de Investigacin sobre la Universidad. Universidad Nacional de Ro Cuarto 13 y 14 de junio de 2002.
2
han tenido a su cargo el protagonismo en la esfera de los aportes tericos con aquellos que
generaron las huellas en el terreno emprico de las instituciones. Tampoco son los mismos,
aquellos que representan el poder de instaurar mecanismos evaluativos con los que tienen la
responsabilidad de conducir los procesos educativos .
El interjuego entre las reglas, las recurrencias, las culturas y las estrategias que
regulan las acciones de los sujetos individuales y colectivos (Bourdieu, 1988) connotarn
las distintas intencionalidades que, en ciertos momentos de esta historia, se diferencian
claramente y, en otros, se articulan y concurren en forma conjunta, representadas,
generalmente, por diferentes actores y gestores .
En ambos casos, parecera aceptarse que estos objetos de evaluacin existen fuera
de la accin educativa, son algo sobre los cuales los actores del campo educativo concreto,
como sujetos sociales, no intervienen. Ajenos a ellos, los toman tal como son, para
someterlos, en este caso, a prcticas de evaluacin. Desde esta perspectiva, se entiende que
los interrogantes habituales de los docentes y alumnos remiten, con una elevada frecuencia
a preguntar cmo se va a realizar la evaluacin, restringiendo el problema a una cuestin
tcnico-metodolgica e instrumental.
3
caso y situacin particular, la presencia de los rasgos o atributos esenciales del objeto que
es evaluado. Presencia, ausencia o grado en que dichos rasgos se verifican, son la base
concreta para construir el juicio evaluativo que incluye una valoracin.
Estos ejemplos nos permiten precisar dos problemas: el primero, es que se excluye
del anlisis evaluativo que, tanto un plan de estudios cuanto la duracin de una carrera o un
diseo original de investigacin, son propuestas, proyectos, construcciones contextuadas y
orientadas intencionalmente en una cierta direccin y, por ello, representan una toma de
postura dentro de otras tericamente posibles, que involucran y definen a quienes lo
elaboraron. Y en segundo lugar, que lo propio de los proyectos educativos es que se
construyen en el campo de la prctica, en un juego dialctico con los ambientes concretos
de aprendizaje, donde, a partir de este encuentro, ambos cambian, se transforman: ni el
proyecto permanece idntico a como fue concebido ni el medio de aprendizaje mantiene
sus caractersticas iniciales. (Parlett y Hamilton, 1996). Por esto, los diseos experimentales
que suponen como condicin de validez el mantenimiento invariable del contexto
situacional donde se realiza el experimento para poder medir solo la accin de la variable
objeto de investigacin, son poco pertinentes al estudio de problemas educativos.
4
de la institucin, se consideran ms importantes y significativos para su conocimiento y
comprensin.
En ambos casos, estn operando las teoras implcitas que ponderan y sostienen las
opciones realizadas; se ponen de manifiesto creencias acerca de la relevancia de estos
aspectos, concepciones ticas, valoraciones en las que se expresa una filosofa, una
ideologa, una visin del mundo, toda una pedagoga implcita. La evaluacin acota y
selecciona la realidad valorada, se tenga o no conciencia de esa decisin, se expliciten o no
los criterios de la reduccin realizada. An en el caso de las pruebas psicomtricas, de un
test de inteligencia por ejemplo, estos instrumentos que se han elaborado con un especial
resguardo de los criterios de objetividad y confiabilidad, no miden, la inteligencia en
trminos absolutos, sino algunos comportamientos y procesos que a priori se han
seleccionado y se admiten como representantes de la misma.
Charles Hadji5, define a la evaluacin como una lectura orientada sobre el objeto a
evaluar. Se requiere, dice, tomar distancia de la realidad que se analiza para poder
pronunciarse sobre ella en un contexto decisional dominante. No existe una lectura directa
de la experiencia; hay siempre un proceso de interaccin entre el evaluador y la realidad a
evaluar. En funcin de las propiedades de esa realidad, el evaluador construye el referente,
es decir, aquello en funcin de lo cual se va a efectuar la evaluacin; aquello que le permite
pronunciarse sobre la realidad que evala, el lugar donde nos paramos para emitir el
juicio de valor. (Bertoni y otros, 1996)
Por otro lado, es importante destacar que el objeto no se establece solamente en las
primeras declaraciones y definiciones previas, sino que se constituye tambin a posteriori,
en la prctica concreta, procesual y dialctica de la evaluacin que, al construir
conocimiento sobre el objeto lo construye como tal. Al evaluar, vamos conociendo nuevas
facetas de ese objeto; el objeto se enriquece a medida que lo conocemos; el conocimiento
que vamos logrando sobre dicho objeto, abre nuevas perspectivas de indagacin.
5
Hadji, Ch (1992): L Evaluation dmystifie. Edit. ESF, Pars, France. En este libro, el autor desarrolla
importantes aportes en la lnea de la evaluacin formativa y educativa, sin descuidar aspectos metodolgicos
y ticos propios de las prcticas en instituciones pedaggicas.
5
educacin y ampliar nuestras perspectivas acerca de qu significa saber . Se dirige
especialmente a quienes viven y trabajan en las escuelas, como contribucin a iluminar su
experiencia educativa, como una ayuda a ver y comprender.
Sostiene este autor que. a semejanza del crtico de arte, que tiene por tarea ayudar a
otros a ver las cualidades que posee una obra de arte, la crtica educativa funciona como
una comadrona de la percepcin. La ayuda a nacer, despus la refina y la ayuda a ser ms
aguda .
Es esta idea de la mirada que construye su imagen del objeto al mismo tiempo que
se modifica en la accin de percibirlo, que le permite entrar al problema de la Objetividad y
subjetividad en la investigacin y evaluacin cualitativas. Trabaja los conceptos de Newell
(1986) de objetividad ontolgica y objetividad de procedimiento con la aspiracin, dice, de
poder convencer al lector de que la primera no puede, en principio, proporcionar lo que
esperamos y que la segunda proporciona menos de lo que pensamos. Intentar presentar
una sntesis de su argumentacin.
Qu se entiende habitualmente por objetividad? Ver las cosas tal como son,
conocerlas en su estado ontolgico. Buscamos, dice Eisner, la verificabilidad, tanto en la
percepcin como en el entendimiento. Deseamos ver lo que est realmente ah afuera. La
verificabilidad implica una relacin isomrfica entre afirmacin y realidad. Los griegos
aspiraban a alcanzar el saber cierto y verdadero. Por eso, su intento de diferenciar el saber
(epistme) de la creencia (doxa). Establecida la teora de la correspondencia entre saber y
verdad, conocer es descubrir las leyes que gobiernan el universo. Se va a la bsqueda de un
mundo objetivo, cognoscible objetivamente. La objetividad de procedimiento es la
aspiracin al desarrollo y utilizacin de un mtodo que elimine o aspire a eliminar la
incumbencia del juicio personal en la descripcin y valoracin de un estado de hechos. Uno
de los ejemplos presentado por el autor es el de las denominadas pruebas objetivas, donde,
una vez contestada la prueba, identificar las respuestas correctas o incorrectas no precisa de
interpretacin, tan es as que esta tarea as como la puntuacin, la puede realizar un escner
ptico. Se trata, entonces, de un caso de objetividad de procedimiento.
6
Hadji6 nos permite avanzar un paso ms en la consideracin de este tema. Afirma
que el evaluador no es un instrumento de medicin, es el actor de una comunicacin
social y reconoce la incidencia de las situaciones y los contextos sobre la evaluacin.
Acuerda con Cardinet (1991) en la elaboracin de un modelo que se aparta de la medicin,
caracterstico de los enfoques psicomtricos, para proponer una aproximacin sociolgica
al campo de la evaluacin educativa. Afirma que las performances cognitivas de los
sujetos son dependientes de las condiciones sociales en las que ellos se desarrollan, as
como las percepciones del evaluador de esas performances son igualmente
dependientes del contexto social. Lo que en una poca y en un medio se consideren
cuestiones dignas de ser estudiadas, conocidas y valoradas, as como los estndares y
referentes desde los cuales se las juzguen, se construyen a partir de las significaciones
culturales hegemnicas dentro de ese contexto.
Retomando la idea del proceso evaluativo como lectura guiada de la realidad, cabe
aclarar que, como en toda accin de conocimiento, no se trata solo de un acto individual.
El/los evaluadores son, al menos en parte y posiblemente al mismo tiempo, portadores y
creadores de modos de comprensin, sistemas de significacin que recuperan y
transforman lo heredado e internalizado social e institucionalmente en particulares
espacios y tiempos. La cultura incide en la creacin del objeto, dice Gimeno Sacristn7 y el
lenguaje es vehculo de transmisin de las representaciones y los valores, constituyndose
en fuente de poder y autoridad. Pero en este juego de cara y contracara, las palabras, las
significaciones son tambin recreadas por y desde la subjetividad del evaluador, como una
consecuencia de la relacin entre un sujeto particular y su medio, vehiculizada por un
determinado lenguaje apropiado y construido al mismo tiempo.
Entiendo que las prcticas nunca son la realizacin concreta y precisa de los principios
constitutivos de los cuerpos tericos, sino que son estos, precisamente, los que se van
estructurando y desestructurando, al menos en parte, en el transcurso y como resultado de
las experiencias de confrontacin emprica, al mismo tiempo que las ideas, conceptos y
criterios orientan las propuestas y los modos de accin particulares.
Lave, en el primer captulo del estupendo libro que publica con Chayklin8 sintetiza las
conclusiones de un congreso en el que culmin un trabajo de varios aos entre psiclogos,
socilogos y antroplogos de Suecia, Dinamarca, Finlandia, Francia, Suiza y los Estados
Unidos sobre lo que inicialmente denominaron el problema del contexto y luego se fue
definiendo alrededor del tema de la actividad socialmente situada: :
6
Op. Cit.
7
Op. Cit.
8
Chayclin, S y Lave J (2001): Estudiar las prcticas. Perspectivas sobre actividad y contexto. Edit.
Amorrortu. Bs. Aires.
7
2. El aprendizaje es parte integrante de la actividad en y para el mundo en todo
momento.
3. Lo que se aprende es siempre complejamente problemtico.
4. La adquisicin de conocimiento no es una simple cuestin de absorber
conocimiento. Por el contrario, las cosas que se suponen categoras naturales, como
cuerpos de conocimiento , aprendices y transmisin cultural , requieren
reconceptualizaciones como productos culturales y sociales.
En las tres experiencias, el proyecto de evaluacin se puso en prctica entre los aos
2000 y 2002.en facultades y/o carreras universitarias. En el primero, se organiz con miras
a evaluar la enseanza de grado; en el segundo y en el tercero, la intencin estuvo centrada
en la evaluacin curricular. Los objetivos generales de los proyectos coincidan en intentar
conocer qu estaba ocurriendo en cada uno de estos ncleos de la vida acadmica, para
posibilitar procesos de mejora.
8
su gnesis, sus relaciones con otros aspectos, su valor en el contexto general de la carrera,
sus aspectos constitutivos). La sntesis evaluativa de cada taller fue transcripta por los
observadores y devuelta a los participantes para su aprobacin y eventual modificacin. Las
conclusiones de estos talleres se trabajaron, luego, en reuniones con docentes y miembros
del equipo de gestin, a fin de ampliar perspectivas y triangular la informacin. Finalmente,
se elabor un documento que se elev a Consejo Directivo conteniendo la sntesis de la
evaluacin de los ncleos problemticos seleccionados y propuestas para su posible mejora.
9
En el momento de redactar este artculo, se estn tabulando y procesando los datos provenientes de dichos
cuestionarios.
9
tal tarea, como sujetos epistmicos plenos, es decir, con capacidad para decidir y participar
en el trabajo de constitucin del conocimiento. Creemos que una condicin de posibilidad
para que esto ocurra es que, a su vez, se los reconozca institucionalmente como sujetos
sociales con categora ciudadana, es decir con potencialidad y disposicin para pensar,
cuestionar e intervenir en lo pblico.
Al mismo tiempo. desde mi lugar, fue necesario explicitar el marco general a partir del
cual he construido un modo de comprender y proponer el trabajo en este campo. Entiendo
que no se trata de un saber y una accin de carcter tcnico. Es ms bien una forma de
asumir una praxis profesional, dentro de la cual, existen lmites innegociables, tericos y
ticos. En mi caso, los rasgos generales de la postura asumida son coincidentes con los que
hemos denominado Evaluacin educativa democrtica y participativa, mediante
procesos de construccin colegiada, con resguardo de la transparencia, consulta a
fuentes diversas y comunicacin de la informacin a los diferentes grupos. (Celman,
2002)
Retomando este concepto, entiendo que este lugar de asesor puede ser cumplido con
una u otra orientacin. Podra priorizarse en la evaluacin, su punto de vista profesional y
ser quien, desde ese lugar de saber-poder elabore un diseo que se corresponda con su
postura terico-metodolgica. De ese modo, el proyecto le pertenece, an cuando su
ejecucin pueda incluir algunas acciones descentralizadas (por ejemplo, que sean otros los
que apliquen algunos instrumentos, respondan a los mismos y/o tabulen la informacin
recogida). Pero en este caso lo sustantivo es que la racionalidad imperante con que se ha
estructurado y concebido, que lleva implcita su orientacin y finalidad, es propia del
evaluador y no de los sujetos de la comunidad universitaria.
10
No se trata de negar un saber terico y experiencial construido por pertenencia al
campo, que, posiblemente, lo diferencia de los que caracterizan a los miembros de la
institucin. Es ms, este conocimiento es necesario y, si no existe en esa universidad
personas o grupos que lo sustenten, se requerir su apoyo externo. El trabajo de la
Evaluacin Educativa Institucional involucra saberes especializados en este campo para
ayudar a encarar, con solvencia, un proyecto vlido. Pero esto solo no basta.
Creemos que el ncleo del problema radica en reconocernos como sujetos polticos que
interactan en instituciones sociales histricamente constituidas, conformando una praxis
siempre en interjuego con otros. Se trata, entonces, de construir o encontrar, remando
contra la corriente , los modos de crear un ambiente de estudio y de trabajo que permita
una interaccin muy particular y en el que se den ciertas condiciones que garanticen la
habilitacin de prcticas democrticas.
10
En trminos de Ardoino: el control deviene prcticamente normativo para informar del fenmeno o de la
accin a la cual se aplica; esta normativa es, de todas formas, lgica (identidad, conformidad,
compatibilidad, coherencia) y moral. Se pasa as, insensiblemente, de lo verdadero al bien o a lo bueno a
travs de la nocin de correccin .(Ardoino y Berger, 1989)
11
concepciones polticas respecto a la sociedad y el futuro. Esos debates y combates ponen
de manifiesto que la evaluacin forma parte importante de las estrategias polticas de la
universidades , de los Estados y de las sociedades, pero son aspectos de un universo mucho
ms amplio y complejo. La solucin de esos conflictos no puede estar slo en las
instituciones universitarias o slo en agencias de los gobiernos, como si fueran problemas
apenas tcnicos. Es verdad que los gobiernos necesitan instrumentos tcnicos que apoyen
sus decisiones poltico-administrativas. Pero, en definitiva, la universidad no puede dejar
de participar activamente de esos debates pblicos. Debe asumir pblicamente su
funcin crtica y, siempre en procesos de construccin colectiva, procurar obtener la
hegemona de sus concepciones y prcticas de evaluacin institucional, estando claro
que nadie tiene el patrimonio exclusivo de la verdad y que todo proceso es una
construccin .
12
BIBLIOGRAFA
LVAREZ MNDEZ, J.M. (2001): Evaluar para conocer, examinar para excluir.
Morata, Barcelona.
13