LA EVALUACIN INSTITUCIONAL:
CONCEPTO Y MTODO
NDICE
1.
2.
1.2
1.3
Consideraciones generales........................................................ 7
3.
EVALUACIN EXTERNA..................................................................... 20
4.
ACCIONES POST-EVALUACIN........................................................ 23
Concepto y Mtodo
I. LA EVALUACION DE LA CALIDAD
1.1. EVALUAR PARA QU Y POR QU?.
En los pases ms desarrollados, la evaluacin de la calidad de la educacin
universitaria se ha convertido no slo en una de las prioridades sino tambin en una
exigencia tanto para las propias universidades como para los gobiernos y las
administraciones pblicas.
En la dcada de los ochenta, varios sistemas universitarios occidentales, entre
los que se incluye Espaa, estrenaron nuevos marcos jurdicos caracterizados, entre
otras notas, por la autonoma de la universidad. Un argumento fundamental para esta
transformacin fue considerar la autonoma como un instrumento decisivo para el logro
de los objetivos de calidad y progreso de la educacin superior en dichos pases.
Se presume que la autonoma de la universidad permite la innovacin, incrementa
la eficiencia y eleva la efectividad. En consecuencia, de una racionalidad basada en el
control y la planificacin centralizada, con grandes corss de carcter burocrtico, se
fue pasando a otra que acenta el principio de autorregulacin.
En general la contrapartida exigida por los gobiernos ha sido la exigencia de una
rendicin de cuentas (Accountability) a fin de demostrar que las decisiones y las
acciones de la universidad estn dirigidas a la mejora de la calidad de la institucin.
A juicio de los evaluadores externos, el inequvoco inters de los gobiernos en la
exigencia de un sistema de evaluacin institucional es una clara expresin de la
creciente atencin a la dimensin extrnseca de la calidad, y a la vez puede ser un claro
sntoma de que los modernos sistemas de enseanza superior han entrado en la edad
del desencanto: la sociedad parece no estar dispuesta a seguir aceptando que las
universidades slo se autojustifiquen y desea conocer las actividades que desarrollan. A
travs de la evaluacin institucional es posible satisfacer dicha demanda
Junto a dichas razones pueden sealarse otros factores que justifican la
necesidad de desarrollar procesos de evaluacin:
Los costes se han disparado como consecuencia del nmero de personas que
realizan estudios universitarios y las restricciones econmicas fuerzan a una
mayor eficiencia.
Concepto y Mtodo
Concepto y Mtodo
Concepto y Mtodo
Concepto y Mtodo
f) Dimensin de la organizacin
La institucin posee la necesaria habilidad para desarrollar e implementar la
normativa para satisfacer los requisitos/la calidad educativa deseada. La organizacin
tiene que afrontar la demanda creciente de mayor calidad e individualizacin en el
producto o servicio que presta. Para dar respuesta a esta demanda, deber incrementar
la complejidad de las tareas que realizan sus miembros, reclamndose una mayor
cohesin de los mismos.
En la Universidad, muchos de sus cometidos tienen estas caractersticas (sobre
todo en universidades con cierto nivel de desarrollo): el trabajo en equipo,
mantenimiento de servicios, constante revisin de programas, reclaman una dinmica
institucional que difcilmente puede tener estndares prefijados de calidad. Por tanto, la
indefinicin y el carcter implcito, sern aspectos con los que habr que contar, por
ello la calidad de los procesos de toma de decisin se convierte en un referente de
especial significacin.
Autoestudios.
Indicadores de rendimiento.
Evaluacin institucional.
Concepto y Mtodo
La evaluacin institucional.La evaluacin institucional -con relacin a los mtodos sealados en el apartado
anterior- se caracteriza por atender, por una parte, a la eficacia y la eficiencia (considera
inputs y outputs) y por otra, atiende tambin los procesos. As mismo, ha de conjugar
las perspectivas intrnseca y extrnseca de la calidad de la educacin universitaria.
Por otra parte, la evaluacin institucional abarca a la totalidad de la institucin, si
bien puede afrontarse, en virtud de la magnitud y volumen de la institucin en fases
sucesivas aunque sin perder de vista que son notas distintivas de la misma su
globalidad (medios materiales y personales, funcionamiento, resultados...), la
implicacin de todos sus agentes y la atencin tanto al valor como al mrito de las
acciones que lleva a cabo la institucin.
Todo proceso de evaluacin institucional, tal y como se desarrolla en el contexto
europeo y propone el plan de la calidad de las universidades, se articula en dos grandes
fases: AUTOEVALUACION Y EVALUACIN EXTERNA, exigindose previamente la
existencia de una serie de datos estadsticos de gestin y para la gestin, es decir,
datos de carcter cuantitativo o cualitativo orientados a informar los juicios de valor
consubstanciales a todo proceso evaluativo.
Todo sistema de enseanza superior necesita contar con un sistema de
informacin que permita la comunicacin intra e intersistemas, siendo obligado el
consenso a la hora de determinar dicho sistema, as como es pertinente distinguir los
diferentes niveles de intercomunicacin: interno de una universidad, universidadsociedad, interuniversidades, universidad-gobierno, sistema universitario-sociedad e
intersistemas universitarios.
Un programa de evaluacin institucional de la calidad universitaria ha de cumplir
un doble objetivo:
Concepto y Mtodo
Concepto y Mtodo
Concepto y Mtodo
Autoevaluacin.
2.
Evaluacin Externa.
3.
La Autoevaluacin.
La autoevaluacin es un mecanismo a travs del cual la comunidad universitaria,
mediante un proceso de reflexin participativa, describe y valora su realidad. La
autoevaluacin es esencial para implicar a la comunidad universitaria en la mejora de la
calidad.
Para llevar a cabo la Autoevaluacin se requiere:
Gran motivacin interna para emprender una evaluacin con el objetivo claro de
mejorar la calidad.
Concepto y Mtodo
- Apoyarse en evidencias.
- Ha de tener un alto consenso de la comunidad que pertenece a la unidad
evaluada.
- Ha de explicitar las principales fortalezas y debilidades.
- Debe concluir con una propuesta detallada de acciones de mejora.
La evaluacin externa.
La segunda fase del proceso de evaluacin corre a cargo de un equipo externo a
la Universidad, nombrado por la Comisin de Coordinacin Tcnica del Plan de la
Calidad de las Universidades o la Agencia/Unidad de la Comunidad Autnoma. El
Comit de Evaluacin Externa se compone de 3 miembros: un acadmico de
reconocido prestigio en el rea evaluada pertenecientes a otra universidad que actuar
de Presidente-Coordinador; un profesional procedente del mundo de la empresa y un
vocal de apoyo conocedor de la metodologa de evaluacin.
El Comit de Evaluacin Externa, despus de analizar el Informe de
Autoevaluacin, realizar una visita de dos o tres das de duracin a la unidad evaluada,
se entrevistar con distintos colectivos y elaborar el Informe de Evaluacin Externa.
Este informe se remitir al Comit de Autoevaluacin (adems de al Consejo de
Coordinacin Universitaria o Agencia/Unidad de Calidad de la Comunidad Autnoma y
a la Unidad Tcnica de la Universidad evaluada) que, una vez analizado, incorporar las
recomendaciones y sugerencias al Informe Final de evaluacin de la unidad evaluada.
El Informe de Evaluacin Externa reunir las siguientes caractersticas:
Apoyarse en evidencias.
Concepto y Mtodo
Concepto y Mtodo
11
Concepto y Mtodo
2.3 INFORMES
Cada fase del proceso de evaluacin se concreta en la elaboracin de un
informe. El desarrollo del Plan de la Calidad de las Universidades prevee cinco informes
distintos en cada convocatoria:
Informe de Autoevaluacin.
El Informe de Autoevaluacin es la valoracin detallada de la calidad de la
titulacin o unidad evaluada, en los aspectos que se establecen en la Gua de
Evaluacin.
Los tipos de informacin en los que puede basarse el Informe de Autoevaluacin
son los siguientes:
12
Concepto y Mtodo
Concepto y Mtodo
Redaccin del borrador del Informe Final por parte del Comit de Autoevaluacin
(a partir del estudio del Informe de Autoevaluacin, del Informe de Evaluacin
Externa y de las propuestas de la comunidad).
14
Concepto y Mtodo
Rendicin de cuentas ante el rgano superior del desarrollo y resultados del Plan
de Evaluacin.
Reflexivo y crtico.
til y comprometido. Sirve para tomar decisiones que han de ser ejecutadas por
diferentes agentes.
15
Concepto y Mtodo
Concepto y Mtodo
Fundamentadas.
Deben guardar coherencia con las fortalezas y debilidades sealadas por lo que
es conveniente sealar la correspondencia entre los juicios de valor (puntos
fuertes y dbiles explicitados) y las propuestas de mejora.
17
Concepto y Mtodo
Para que el Informe tenga credibilidad las propuestas que contengan no han de
ser slo solicitudes de medios humanos y materiales sino que han de abarcar cambios
a dos niveles. Por un lado, implicarn cambios estructurales, organizativos y/o de
infraestructuras. Por otro, supondrn cambios internos y/o externos al centro.
Hay tambin una serie de aspectos importantes que debemos especificar en la
propuesta de mejora referidos a cada uno de los mbitos que se han evaluado:
Concepto y Mtodo
19
Concepto y Mtodo
20
Concepto y Mtodo
21
Concepto y Mtodo
Universidad, la cantidad de 600 euros netos a cada uno de los miembros del
Comit de Evaluacin Externa excepto al Presidente-Coordinador que se le
abonarn 900 euros netos como responsable de la redaccin y remisin del
Informe de Evaluacin Externa.
En caso de evaluaciones mltiples o unidades ampliadas, el pago deber
hacerse proporcional al nmero de informes presentados y requeridos posteriormente al
comit de evaluacin externa. La cantidad establecida para un informe, se incrementar
en el 30% por el segundo informe, en el 50 % por el tercer informe y en el 75% por el
cuarto informe.
22
Concepto y Mtodo
Constancia.
A modo de ejemplo, se propone una serie concatenada de acciones postevaluacin que cada Comit deber adaptar convenientemente.
En el primer semestre, despus de la aprobacin del Informe Final de la
Titulacin, debern emprenderse las siguientes fases:
Fase Inicial:
Diseminacin informativa del Informe Final a travs de una publicacin de
reuniones con agentes de la Titulacin o unidad evaluada, etc.
Fase 1
Constitucin del Comit o Comisin de Calidad de la Titulacin o unidad evaluada
que controle y evale los planes de mejora y sea el responsable del seguimiento.
Deber establecer un marco dinmico de funcionamiento interno.
Fase 2
Negociacin con la Universidad para transformar los planes de mejora en acciones
detalladas y especficas que se concreten en un documento que es ampliamente
difundido. Una de las mejores estrategias es la creacin de una Comisin Mixta
Rectorado-Titulacin o unidad evaluada de Seguimiento que establezca reuniones
prcticas
23
Concepto y Mtodo
Fase 3
Elaboracin de un plan detallado de seguimiento (post-evaluacin) que sirva como
gua al Comit de Calidad y a la Comisin Mixta.
Una vez completadas las fases anteriores, se implantar el plan detallado de
seguimiento. Es recomendable la elaboracin de informes semestrales de seguimiento
como documentos para su discusin en la Comisin Mixta propuesta. Para ello, se
recomienda la utilizacin de una hoja de seguimiento para cada accin de mejora (se
acompaa como anexo una propuesta al efecto).
Al cabo de dos-tres aos de aplicacin de los planes de mejora y su
seguimiento, es recomendable una revisin peridica por evaluadores externos, a ser
posible los que hayan actuado en la evaluacin de la Titulacin o unidad evaluada. Esta
revisin no incluye una visita, sino el examen de un documento simple descriptivo del
seguimiento utilizando como referencia el Informe Final de la Titulacin, y como
herramienta los informes semestrales de seguimiento. El informe externo (individual o
colectivo) deber contemplar estructuradamente los siguientes aspectos:
24