Analisis Del Ranking Che

Anlisis del ranking CHE
En el marco de un nuevo sistema de ranking para las universidades chilenas
Judith Scheele con la colaboracin de Jos Joaqun Brunner
Documento de Trabajo CPCE N 22 http://www.cpce.cl/ Enero, 2011
Director del Centro de Polticas Comparadas de Educacin, Universidad Diego Portales, Ph.D. en Sociologa.
Tabla de contenido
Introduccin .................................................................................................................................. 3 1 EXPLICACIN DEL MODELO DE RANKING DEL CHE .................................................................. 3 2 LA INVESTIGACIN EMPRICA DEL RANKING CHE .................................................................... 5 2.1 Datos objetivos ................................................................................................................... 6 2.2 Datos subjetivos ................................................................................................................. 8 3 LOS INDICADORES DE RANKING ............................................................................................. 10 3.1 Primer componente: estudiantes...................................................................................... 10 3.2 Segundo componente: resultados de estudio .................................................................. 12 3.3 Tercer componente: orientacin internacional ................................................................ 14 3.4 Cuarto componente: investigacin ................................................................................... 16 3.5 Quinto componente: enseanza y aprendizaje ................................................................ 18 3.6 Sexto componente: infraestructura .................................................................................. 23 3.7 Sptimo componente: orientacin profesional y mercado laboral .................................. 28 3.8 Octavo componente: aspectos generales ......................................................................... 32 3.9 Noveno componente: ubicacin y dems caractersticas de la institucin ...................... 33 4 LA SELECCIN DE LAS CATEGORAS DE RANKING .................................................................. 37 5 LA COMPARACIN A TRAVS DE TIEMPO .............................................................................. 39 6 LA PUBLICACIN DE LOS RESULTADOS .................................................................................. 42 6.1 Ranking conciso ................................................................................................................. 43 6.2 Mi ranking.......................................................................................................................... 45 6.3 Comparacin de universidades ......................................................................................... 46 6.4 Representacin grfica del desarrollo del nmero de matrculas .................................... 48 6.5 Ascensos y descensos ........................................................................................................ 48 Referencias .................................................................................................................................. 48
Introduccin
El ranking de universidades del Centro alemn para el Desarrollo de la Educacin Superior (CHE) constituye un importante modelo a seguir para pases en que el fenmeno de los rankings para la educacin superior est todava en paales. El CHE es comnmente elogiado debido a que utiliza una metodologa innovadora, la que le permite superar las limitaciones por las que muchas de las tablas de posiciones `tradicionales como el Americas Best Colleges Ranking de U.S. News & World Report y el Academic Ranking of World Universities de la Universidad Jiao Tong de Shanghi son criticadas. A diferencia de estos rankings, el CHE ofrece uno mucho ms dinmico, que otorga a los usuarios la posibilidad de personalizar su evaluacin de las universidades y, de esta forma, alinearla con sus preferencias individuales. Adems utiliza una gran variedad de indicadores, tanto objetivos (basados en observaciones) como subjetivos (basados en opiniones de los actores involucrados), de modo de incorporar en la evaluacin mltiples aspectos y no slo datos sobre investigacin, reputacin u otros indicadores que resultan populares entre los productores de rankings. El enfoque de CHE es amplio, y se funda en el objetivo de construir un ranking neutral y orientado a sus principales usuarios, es decir, los estudiantes que buscan una universidad idnea para llevar a cabo su formacin de educacin superior. Estos y otros aspectos del ranking CHE hacen que sea un modelo importante para el desarrollo de nuevos rankings de universidades, sobre todo para Chile, donde los pocos rankings que se producen todava estn en un estado de desarrollo inicial y cuentan con un bajo grado de reconocimiento. En el siguiente documento se explica detalladamente la metodologa del ranking CHE, con el fin de ser analizada y utilizada como marco para la creacin de un modelo de ranking ms dinmico para el caso chileno. Su descripcin se basa en aspectos tales como los mtodos de recoleccin de datos y los indicadores de evaluacin, explicando su funcin en el ranking y analizando la aplicabilidad universal de estos componentes teniendo en consideracin las caractersticas especficas del sistema educativo alemn. 1 De este modo, el documento contribuye al conocimiento sobre el ranking CHE y promueve la incorporacin de sus componentes en los rankings de universidades chilenas.
1. Explicacin del modelo de ranking del CHE

El ranking de universidades del CHE tiene un objetivo claro: proveer a los estudiantes de un mecanismo simple y transparente para la evaluacin y comparacin de los diferentes programas acadmicos, y as ayudarlos a encontrar una universidad adecuada a sus preferencias y capacidades. Al mismo tiempo, busca fomentar la transparencia en la oferta acadmica al recolectar y publicar datos sobre el desempeo de las universidades y las
1
Principalmente la existencia de fachhochschulen, pero tambin el sistema de admisin (para la mayora de las carreras no hay seleccin de estudiantes, el nico criterio de admisin es haber recibido una formacin secundaria a nivel preuniversitario), y la oferta de programas de estudio duales o semiacadmicos.
fachhochschulen. 2 Aunque considera a los estudiantes como sus principales usuarios, el ranking se presenta tambin como un instrumento de orientacin para las propias universidades, las que pueden usarlo para comparar su desempeo y reputacin con los de otras IES y determinar sus estrategias institucionales (Berghoff et.al., 2008: 5-6). Para la construccin del ranking del CHE se usa una metodologa diferente a la de la mayora de los rankings nacionales e internacionales. El CHE ha elegido este formato para centrarse en primer lugar en la entrega de informacin a los estudiantes, es decir, el ranking fue diseado para servir a los estudiantes y mantenerse a distancia de los intereses de terceros, principalmente del gobierno, los inversionistas y las IES. El hecho de que CHE sea una organizacin sin fines de lucro, independiente y no poltica lo ayuda a mantenerse fuera de los crculos de influencia del gobierno y el mercado. Adems de crear un ranking orientado hacia los estudiantes, el CHE busca con su modo de trabajo evitar las crticas ms comunes que circulan con respecto a los rankings de universidades. Al contrario de los rankings que seleccionan, ponderan y suman indicadores, el ranking CHE ofrece a los estudiantes la posibilidad de seleccionar indicadores y de asignarles importancia segn sus prioridades. Asimismo, a diferencia de los rankings con posiciones individuales, el CHE opta por un modelo de grupos categricos, por lo que slo las diferencias significativas entre las universidades se manifiestan en la escala. Estos mtodos son cuidadosamente elegidos por el CHE con el fin de crear un modelo de ranking ms fiable y adecuado para los usuarios (Soo y Dill, 2007: 5-6). El CHE se ha establecido, pues, como un ranking de universidades alternativo, basado en cuatro principios claves que lo distinguen de otros y que confrontan los principales problemas conceptuales de estos modelos de clasificacin. El ranking CHE es una evaluacin a nivel disciplinario (subject-level) y no a nivel institucional. Opta por este mtodo porque la calidad, el desempeo y las expectativas pueden variar significativamente entre los diferentes campos de estudio de una universidad y porque considera que una evaluacin a nivel institucional no proporciona informacin til para un estudiante que quiere estudiar una disciplina especfica. El ranking CHE es multidimensional, porque no busca construir una jerarqua nica de universidades en cada campo de estudio. El argumento que usa el CHE es que los distintos aspectos no pueden ser combinados efectivamente en una medicin agregada sin perder importancia y objetividad. Adems, sostiene que los estudiantes tienen diferentes prioridades en su eleccin de una universidad, por lo que deben disponer de la posibilidad de aplicar sus propios criterios de ranking. Por el contrario, los rankings universales hacen una seleccin permanente de
En Alemania las instituciones de educacin superior ms populares son las universidades tradicionales y las fachhochschulen (universidades de ciencia aplicada). Aunque estas ltimas son reconocidas como instituciones de educacin terciaria no universitaria (ETNU) son incorporadas en el CHE ranking junto a las universidades tradicionales. Considerada esta decisin del CHE, el presente documento no distingue entre universidades y fachhochschulen cuando refiere a `universidades.
indicadores, por lo que no pueden satisfacer las necesidades de todos los estudiantes y ms bien representan las prioridades de los productores del ranking. El ranking CHE combina diferentes perspectivas de desempeo. Determina el desempeo de las universidades por medio de datos objetivos sobre el rendimiento y las caractersticas de los programas acadmicos, pero tambin presenta la opinin de estudiantes y profesores que expresan su grado de satisfaccin con diversos aspectos del programa. En vez de una escala lineal de posiciones, el CHE distribuye las universidades para cada indicador en tres grupos de ranking: superior, intermedio e inferior. Dentro de estos tres grupos son clasificadas por orden alfabtico, pues no se distingue entre universidades al interior de una misma categora. El CHE usa esta forma de presentar los resultados argumentando que es ms fiable y apegada a la realidad que un ranking secuencial, porque se ha demostrado que las diferencias entre las universidades a menudo son marginales, mientras que las posiciones de ranking individuales sugieren una diferencia de calidad ms significativa (op. cit.: 6).
Por medio de estos cuatro principios claves evaluacin a nivel disciplinario; multidimensionalidad; incorporacin de diferentes perspectivas; y grupos de ranking el CHE busca una solucin para los problemas de precisin, subjetividad y arbitrariedad que generalmente se asocian a los rankings de universidades. Por lo tanto, constituye un modelo internacional importante para la introduccin o el mejoramiento de sistemas de ranking.
2. La investigacin emprica en el ranking CHE

Al contrario de lo que ocurre con la educacin primaria y secundaria (que cuentan con sistemas propios de evaluacin como SIMCE y PISA 3) hay muy pocas mediciones directas y exhaustivas de los resultados de aprendizaje en la educacin superior. Slo en algunos pases y en algunas carreras especficas los estudiantes son sometidos a exmenes por ejemplo, el examen nacional para estudiantes de medicina en Alemania , cuyos resultados son comparables entre universidades. Para la mayora de las carreras, sin embargo, la responsabilidad de la evaluacin de sus estudiantes recae en las instituciones, por lo que los mecanismos y los estndares de evaluacin difieren significativamente, y cualquier comparacin de los resultados se considera metodolgicamente invlida (Federkeil, 2008: 3). Los rankings de universidades deben basarse, pues, en datos indirectos sobre la calidad de la enseanza ofrecida, como la razn estudiantes/profesores, la calidad de la infraestructura y el nmero de publicaciones en revistas acadmicas internacionales. El ranking CHE utiliza una combinacin de datos objetivos que representan el desempeo de las universidades, y varias evaluaciones subjetivas hechas por estudiantes y
SIMCE: Sistema de Medicin de la Calidad de la Educacin; PISA: Programa para la Evaluacin Internacional de Estudiantes (Programme for International Student Assessment).
profesores. La mayor parte de la informacin proviene de encuestas, las que son divididas en cuatro categoras y distribuidas con anticipacin a los actores involucrados (Soo y Dill, 2007: 7): i) ii) iii) iv) Una encuesta a los departamentos (reas de conocimiento) Una encuesta a las universidades Una encuesta a los estudiantes del rea disciplinar Una encuesta a los profesores del rea disciplinar
A pesar de su carcter subjetivo y, en algunos casos, susceptibilidad a ser vulnerados, los resultados de las encuestas son usados como un importante indicador de la calidad, porque son obtenidos directamente de las universidades y representan las experiencias de los principales actores involucrados en la educacin superior, entre ellos el grupo al que el ranking est orientado: los estudiantes. La actualizacin de los datos se realiza en ciclos de tres aos; dado el gran nmero de disciplinas y departamentos que son evaluados, el CHE ha decidido dividirlos en tres grupos y cada ao los datos y resultados de uno de los grupos son actualizados. El CHE usa diferentes mtodos para obtener los datos objetivos y subjetivos debido al carcter de dichos datos. Los mtodos son explicados en los siguientes subcaptulos. 2.1 Datos objetivos Durante el verano previo a la publicacin del ranking, el CHE realiza una encuesta exhaustiva para obtener datos sobre el desempeo de los departamentos y el rendimiento acadmico de los estudiantes y profesores. El mtodo que usa el CHE es el envo de un cuestionario online a los departamentos a encuestar. Estos cuestionarios se concentran en obtener informacin objetiva sobre los estudiantes y graduados, los recursos humanos y econmicos, y los proyectos y resultados de investigacin. Los datos recibidos a partir de estas encuestas online son revisados por el CHE y luego reenviados a los departamentos y consejos directivos para una verificacin final. En general, la tasa de respuesta a las encuestas es alta; en el perodo (ciclo de ranking) 2006-2008 un 97% de los departamentos de las universidades tradicionales respondi. Para las fachhochschulen haba una tasa de respuesta de 92% (Berghoff et.al., 2008: 20-22). Sin embargo, las diferencias entre reas disciplinarias son significativas, con una respuesta de 100% de los departamentos de Informtica, Matemtica y Biologa (de las universidades) y slo un 87% en Ciencias Sociales y Polticas. Simultneamente a la encuesta online, un cuestionario es enviado a la administracin central de cada universidad para pedirle datos generales sobre la institucin, como por ejemplo los horarios de la biblioteca central, la matrcula y otros costos de estudio, la distribucin de los estudiantes entre disciplinas, las instalaciones deportivas, etc. (Soo y Dill, 2007: 7). Adems de las encuestas en que se piden datos directamente a las universidades y fachhochschulen, el CHE tambin obtiene datos por medio de terceros, principalmente instituciones de investigacin independientes. Varios de los indicadores que usa el CHE tienen que ver con el desempeo en investigacin (publicaciones en revistas acadmicas, citaciones,
premios de investigacin), y esta informacin es obtenida de los bancos de datos de instituciones como el Instituto para la Informacin Cientfica (ISI) y el Instituto para la Investigacin Cientfica Hamburgo (HWWA). El CHE considera el nmero de publicaciones en revistas acadmicas de reconocimiento internacional como un aspecto central; su argumento es que para la comunidad acadmica los resultados de investigaciones cientficas no son relevantes y fiables hasta que sean publicados y puedan ser discutidos y testeados por otros investigadores. As, por medio de un retrieval software se buscan las publicaciones en revistas acadmicas guardadas en los bancos de datos literarios del ISI y otras instituciones cientficas. Luego, el CHE realiza un anlisis bibliomtrico para obtener datos sobre la visibilidad y el xito receptivo de las publicaciones, por ejemplo por la cantidad de citaciones encontradas para la investigacin. Dado que el volumen de publicaciones y citaciones difiere considerablemente por rea de conocimiento, y los bancos de datos en general se concentran en las ciencias exactas, el CHE realiza diferentes tipos de anlisis. Para las Ciencias Exactas y Naturales el CHE se basa en el ndice Expandido de Citaciones Cientficas (SCI), un banco de datos internacional multidisciplinario, del que se extrae el nmero total de publicaciones de profesores e investigadores de la universidad en revistas de reconocimiento internacional, as como el nmero de citaciones por publicacin. El CHE compara los datos encontrados con el nmero de profesores y cientficos asociados a las universidades de modo de invalidar las ventajas de tamao de las universidades grandes. En su anlisis el CHE no considera la longitud de la publicacin, ni tampoco toma en cuenta la categora de las revistas (Berghoff et.al., 2008: 2930). Con respecto a las Ciencias Sociales y Econmicas el CHE utiliza otro mtodo, centrado especficamente en la visibilidad internacional de las investigaciones. La base para el anlisis bibliomtrico la conforman los bancos de dato SCI, SSCI (ndice de Citaciones en Ciencias Sociales) y A&HCI (ndice de Citaciones para el Arte y las Humanidades) de ISI, y en el caso de las Ciencias Econmicas tambin el banco de datos alemn WISOnet WIWI, una coleccin de bancos de datos con ms de 1,7 millones de referencias literarias en el campo de la economa. A diferencia de las publicaciones en las ciencias exactas, las publicaciones de investigaciones en las ciencias sociales y econmicas son ponderadas segn: la longitud del artculo (hasta 5 pginas 1 punto; 6-10 pginas 2 puntos; 11-20 pginas 3 puntos; 21-100 pginas 4 puntos; > 100 pginas 7 puntos); ii) el nmero de autores (1 autor = 1; 2 autores = 0,5; 3 autores = 0,33; 4 y ms autores = 0,25); iii) el tipo de publicacin (artculo acadmico, resea o carta); y iv) la categora de la revista (slo en el caso de las Ciencias Empresariales), basado en la clasificacin de revistas especializadas de la Asociacin Acadmica Alemana para las Ciencias Empresariales (VHB). Las publicaciones en revistas de categora A+ y A pesan el triple, mientras que las de categora B reciben doble puntaje. 4 i)
Para el ranking de revistas de la VHB ver: http://pbwi2www.uni-paderborn.de/WWW/VHB/VHBOnline.nsf/id/DE_7EZGCN_Alphabetische_uebersicht.
En las otras reas de conocimiento estudiadas por el CHE (Psicologa, Ciencias de la Educacin, Ingeniera, Lingstica y Ciencias Culturales) las publicaciones tambin son ponderadas, generalmente en base de la longitud del artculo y el nmero de autores (op. cit.: 24-30). En el marco del creciente inters por la investigacin emprica, el CHE realiza para disciplinas como las Ciencias Naturales, Ciencias Empresariales y Medicina, un registro del nmero de inventos desarrollados en cada universidad. Los datos sobre el desempeo de las instituciones en este campo, medido por el nmero de patentes solicitadas, son incorporados en los indicadores del ranking. Finalmente, el CHE utiliza datos entregados por instituciones de investigacin y estadstica, como la Oficina Federal de Estadstica (Destatis) de Alemania, u obtenidos a travs de los sitios Web de las universidades y fachhochschulen (op. cit.: 31). La fiabilidad de los datos es esencial para la credibilidad del ranking, por lo tanto, el CHE desarrolla varios procedimientos para el aseguramiento de la calidad en la metodologa. As, se utilizan instrumentos estadsticos para detectar casos outliers e irregularidades en los datos y, como mecanismo preliminar, se reenva toda la informacin recolectada a las universidades para que la revisen antes de que sea usada en el ranking. Asimismo, se han establecido consejos consultivos para cada disciplina, los que hacen recomendaciones con respecto a la metodologa y analizan la plausibilidad de los resultados (Soo y Dill, 2007: 9).
2.2 Datos subjetivos Adems de los datos objetivos el CHE utiliza datos subjetivos para determinar el desempeo de las universidades. El principal motivo del CHE para incluir estos datos, es entregar a los usuarios del ranking (los futuros estudiantes) informacin sobre el nivel de satisfaccin con la calidad de la enseanza de los propios estudiantes de la institucin. Los datos son obtenidos por medio de encuestas en que los alumnos evalan a la universidad en varios aspectos, tales como la organizacin y relevancia del programa de estudios, los servicios de asistencia y orientacin profesional, el ambiente de aprendizaje, la infraestructura y, en general, su satisfaccin con el programa. Tambin incluyen preguntas sobre las condiciones de sus viviendas (por ejemplo el arriendo, las instalaciones y servicios estudiantiles). Se trata de una encuesta online que se enva a todos los estudiantes del tercer al sptimo semestre del programa de bachelor y/o del quinto al dcimo (fachhochschulen) o al duodcimo (universidades) semestre de los programas antiguos. 5 Dado que el CHE no dispone de los datos de contacto de estudiantes, se envan los cuestionarios con la cooperacin de las secretaras y departamentos de matrcula de las universidades. Los estudiantes reciben una clave personal con la que acceden a la encuesta online, lo que garantiza la identidad de las personas que responden. El CHE slo acepta cuestionarios que son respondidos a travs del Internet, de otra manera no son incorporados en la base de datos del ranking (Berghoff et.al., 2008: 34).
Los programas de bachelor y master fueron introducidos con motivo de los acuerdos europeos establecidos en el marco del Proceso de Bolonia. Estos nuevos programas deben reemplazar gradualmente los programas de diplom que existan tradicionalmente en Alemania.
El mximo nmero de estudiantes por departamento que puede participar es 500, y en el caso de que haya ms estudiantes matriculados se realiza un sorteo aleatorio entre 500 estudiantes seleccionados arbitrariamente. Para resguardar la validez de los resultados se aceptan slo los cuestionarios completados por estudiantes `activos (en contraste con los estudiantes noactivos que se dedican a otras actividades pero que todava estn matriculados en el programa) y que han estudiado al menos dos semestres en la universidad. Asimismo, el CHE establece como criterio para incorporar en los resultados que se reciba un mnimo de 15 cuestionarios por disciplina. El porcentaje de estudiantes que responde la encuesta es considerablemente bajo; en el perodo de 2006-2008 un promedio de 21,3% de los estudiantes de universidades tradicionales y un 23% de los estudiantes de fachhochschulen respondi el cuestionario. Para controlar la fiabilidad de los datos el CHE inspecciona si el envo de las encuestas se ha realizado conforme las normas de la institucin, principalmente si los estudiantes no han sido influidos por sus profesores o encargados de las universidades, por ejemplo por peticiones de evaluar positivamente la propia institucin. El CHE niega publicar los resultados de un departamento cuando (op. cit.: 36): hay indicios de influencia sobre los estudiantes u otros incumplimientos con las normas del CHE; simultneamente se encuentra una clara divergencia de los resultados en comparacin con mediciones anteriores.
Los indicios de fraude son recogidos a travs de: bsquedas en Internet (por ejemplo en foros); denuncias del propio personal de la institucin; preguntas en el cuestionario (se pregunta a los estudiantes si han recibido instrucciones de sus profesores u otras autoridades de la institucin con respecto a la encuesta).
El CHE tambin realiza una encuesta entre graduados para obtener datos sobre la satisfaccin con la formacin recibida y la influencia de sta en la empleabilidad y la posicin laboral de los egresados. Los cuestionarios son enviados de forma anloga a travs de las universidades, pero tambin estn disponibles en Internet. El acceso se realiza a travs de una clave personal que asegura que slo participan los graduados seleccionados para responder la encuesta (en base a su institucin y ao de graduacin). Aunque los cuestionarios incluyen preguntas sobre la situacin laboral de los graduados, el CHE no incorpora estos resultados en el ranking porque se estima que estaran muy influenciados por otros factores como las condiciones econmicas regionales para ser considerados como mrito de la universidad. En Alemania la `cultura de egresados en las instituciones de educacin superior est muy poco desarrollada (en contraste con pases como los EE.UU. donde los egresados mantienen el vnculo con las universidades, principalmente a travs de donaciones), por lo que las IES a menudo no disponen de datos de contacto actualizados de sus graduados. Esto hace que la realizacin de encuestas entre graduados resulte ser bastante complicada. Para obtener
10
ms informacin sobre las experiencias y la carrera profesional de los estudiantes, el CHE promueve en las universidades el seguimiento de sus graduados y la actualizacin de los datos de contacto de estudiantes y egresados (op. cit.: 37). Adems de los resultados de encuestas de estudiantes y graduados, el CHE recopila datos sobre la reputacin de las universidades entre acadmicos. Con este motivo se enva un cuestionario a todos los profesores (excluyendo a profesores invitados, emritos, profesores honorficos y representantes educativos) contratados en una universidad o fachhochschule y especializados en una de las reas de conocimiento evaluadas en el ranking. En la encuesta se pregunta a los acadmicos por la reputacin de otras IES y departamentos de su disciplina en cuanto a investigacin acadmica, y enseanza y aprendizaje. Tambin incluye preguntas sobre las condiciones de trabajo, como la calidad de las instalaciones, la infraestructura, los recursos humanos y las relaciones con la administracin central. En el ciclo de ranking de 2006 a 2008 el CHE contact a unos 30.000 profesores, de los que casi la mitad respondi. Sin embargo, el porcentaje de respuesta difiere significativamente entre los departamentos, variando de un 10% a 100% (op. cit.: 32).
3 Los indicadores de ranking

La evaluacin y la posicin en el ranking de las universidades se determinan en base a indicadores, identificados por el CHE como los principales criterios en que los estudiantes basan su eleccin de universidad. El modelo de evaluacin seleccionado por el CHE consiste en nueve componentes: estudiantes; resultados de estudio; orientacin internacional; investigacin; enseanza y aprendizaje; infraestructura; orientacin profesional y mercado laboral; evaluacin de los estudiantes y reputacin entre acadmicos; ubicacin y dems caractersticas de la institucin. Estas categoras de ranking no slo incluyen indicadores evaluativos, es decir, mediciones relativas del desempeo en enseanza, aprendizaje e investigacin, sino tambin indicadores ms bien descriptivos de la ubicacin, la infraestructura y otras caractersticas de la universidad. En total, el CHE ha definido hasta 96 criterios de evaluacin que son regularmente revisados y ampliados con nuevos indicadores que aportan a la cobertura y la calidad del ranking. Para controlar la relevancia de los indicadores, el CHE invita a expertos de evaluacin, miembros de asociaciones profesionales y universitarias, y estudiantes y graduados a participar en debates en que se revisa el modelo de evaluacin y se comparan las necesidades de los estudiantes con los indicadores usados en los rankings (Soo y Dill, 2007: 7). En la siguiente lista se presentan los indicadores ordenados segn el componente al que pertenecen (Berghoff et.al., 2008: 38-64). 3.1 Primer componente: estudiantes Contiene informacin sobre el nmero y las caractersticas de los estudiantes, y los procedimientos de admisin de la institucin. Los indicadores son evaluados a nivel de
11
especialidades individuales, lo que quiere decir que expresan las diferencias entre los departamentos de una misma rea de conocimiento. Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking 6 Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Nmero total de estudiantes Se indica el nmero de estudiantes en cada curso y de todos los departamentos en la disciplina. Encuesta a departamentos n.a. Porcentaje de mujeres Se indica el porcentaje de estudiantes mujeres en base al nmero total de estudiantes de cada departamento. Encuesta a departamentos n.a. Nmero de estudiantes entrantes Se indica el nmero de estudiantes en el primer y el segundo semestre. Encuesta a departamentos n.a. Evolucin de la cantidad de estudiantes entrantes Se indica grficamente para cada departamento la evolucin en la cantidad de estudiantes entrantes (por ejemplo en dos ciclos de ranking). El objetivo es mostrar la evolucin de cada universidad en particular, no una comparacin del crecimiento de diferentes IES. Las cifras de aos posteriores son un ndice del ao inicial. Oficina Federal de Estadstica (Destatis) n.a.
Explicacin
Procedencia de los datos Organizacin en grupos de ranking
El Ranking CHE clasifica las universidades en grupos de ranking (de desempeo superior, intermedio o inferior) en vez de asignarles una posicin individual como hace la mayora de los rankings de universidades. Para la organizacin de las IES en los grupos de ranking se usa una metodologa especial que es explicada en el captulo 4.
12
Indicador Definicin Explicacin
Cuota de matrcula Se muestra la relacin entre el nmero de postulantes y la cantidad de plazas vacantes en la universidad El indicador informa sobre la demanda del programa acadmico y las posibilidades de obtener una plaza de estudio. Encuesta a departamentos n.a.
3.2 Segundo componente: resultados de estudio El componente de resultados de estudio proporciona informacin sobre el proceso y los resultados de la formacin recibida por los estudiantes de cada departamento y disciplina. Indicador Definicin Para Medicina y Odontologa: resultados del examen intermedio de mdicos en formacin Se muestra el porcentaje de preguntas correctamente respondidas del examen escrito nacional para estudiantes de medicina que se realiza al final de la fase pre-clnica de su formacin. El objetivo es mostrar el grado en que los estudiantes estn preparados para este examen intermedio basado en estndares nacionales. Instituto para la Formulacin de Exmenes en Medicina y Farmacologa (IMPP) Por cuartiles Para Medicina y Odontologa: resultados del 2 examen de mdicos en formacin Se muestra el porcentaje de preguntas correctamente respondidas del examen escrito nacional para estudiantes de medicina al final de la segunda fase de su formacin. El objetivo es mostrar el grado en que los estudiantes estn preparados para la segunda parte de este examen nacional. IMPP
Explicacin
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin
Explicacin
Procedencia de los datos
13
Organizacin en grupos de ranking Indicador Definicin
Por cuartiles Duracin de la formacin Se indica la duracin promedio de la formacin, o sea el nmero de aos (promedio) que los estudiantes necesitan para graduarse. Se toman en cuenta las diferencias entre las disciplinas respecto a los ttulos otorgados y en trminos del mnimo de aos establecido por carrera. Se calcula la duracin solamente cuando hay datos disponibles de por lo menos diez graduados de cuatro semestres distintos. Se proporciona informacin sobre la viabilidad efectiva del programa de estudios. IMPP Por cuartiles Duracin prevista de la formacin Se indica la duracin del programa de estudios estipulada por los reglamentos universitarios. Encuesta a departamentos n.a. Nmero de graduados Se muestra el nmero promedio de graduados por ao de los ltimos dos aos. Encuesta a departamentos n.a. Nmero de graduados dentro del plazo previsto para la formacin Se muestra el porcentaje de graduados que complet su formacin dentro del plazo previsto para el programa de estudios. Se proporciona informacin sobre la viabilidad efectiva del programa de estudios. Encuesta a departamentos
Explicacin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin
Explicacin Procedencia de los datos
14
n.a. Permanencia de los graduados (slo programas duales o semi-acadmicos 7) Se indica la permanencia promedio de los graduados, por ao y durante los dos ltimos aos, en las empresas donde realizaron sus prcticas (o, en caso de cambio, en la empresa en la que ingresaron al mercado laboral) Encuesta a las berufsakademien (institutos tcnicos que ofrecen programas duales) n.a. Documentacin de los resultados de estudios Se indica la manera en que la institucin, al final de la formacin de los estudiantes, guarda los resultados de estudios: diploma universitario, lista de notas, transcripcin de los archivos. Encuesta a departamentos n.a.
3.3 Tercer componente: orientacin internacional La orientacin internacional de las universidades se evala a nivel de los departamentos (dado que los datos suelen diferir por especialidad). Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Cursos en un idioma extranjero Se indica el porcentaje de cursos en un idioma extranjero en la oferta total de cursos de una carrera. Encuesta a departamentos n.a.
Los programas de estudios duales son programas semi-acadmicos que combinan conocimiento terico (a un nivel acadmico) con experiencia en la prctica. Generalmente implica que los estudiantes pasan gran parte de su tiempo de estudio realizando prcticas en una empresa asociada a la IES.
15
Indicador Definicin
Conocimiento de idiomas admisin
como exigencia de
Muchos programas universitarios con un enfoque internacional tienen como exigencia de admisin que los estudiantes tengan conocimiento de idiomas extranjeros. Encuesta a departamentos n.a. Estancia obligatoria en el extranjero Se indica si un intercambio u otra forma de estancia en el extranjero forma parte del programa de estudios, y si es obligatorio o solamente recomendado. En el caso de ser obligatorio, se indica adems la duracin mnima del intercambio. Encuesta a departamentos n.a. Perodo de prctica obligatorio en el extranjero Se indica si un perodo de prctica forma parte del programa de estudios, y si es obligatorio o solamente recomendado. En el caso de ser obligatorio, se indica adems la duracin mnima de la prctica. Encuesta a departamentos n.a. Porcentaje de estudiantes internacionales Se muestra el porcentaje de estudiantes internacionales del total de estudiantes matriculados en un programa de estudios. Encuesta a departamentos n.a. Profesores visitantes incoming Se muestra el nmero de profesores visitantes extranjeros que durante un ao acadmico trabaj en
16
el departamento. Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Encuesta a departamentos n.a. Profesores visitantes outgoing Se muestra el nmero de profesores que durante un ao acadmico trabaj como profesor visitante a una universidad extranjera. Encuesta a departamentos n.a. Universidades ms populares entre estudiantes de intercambio Se mencionan las universidades que son ms frecuentemente elegidas por los estudiantes de una disciplina para realizar su intercambio. Encuesta a departamentos n.a.
3.4 Cuarto componente: investigacin Indicador Definicin Fondos de terceros por acadmico/profesor Se calcula el promedio anual de fondos de terceros (industria, fundaciones etc.) obtenidos por los departamentos durante un perodo de tres aos (el perodo de investigacin) en proporcin con los acadmicos/profesores sin derecho a un fondo externo. Dado que los fondos difieren significativamente por disciplina y especialidad, este indicador slo sirve para hacer comparaciones dentro del rea de conocimiento. El CHE no publica una evaluacin cuando: no se disponen de datos sobre la procedencia de los fondos o sobre el nmero de profesores que recibe estos fondos; los datos entregados no corresponden al plazo establecido de tres aos; o cuando el nmero de acadmicos sin derecho a un fondo de terceros es menos que tres.
17
Encuesta a departamentos Por cuartiles Invenciones por acadmico/profesor Se trata especficamente de la investigacin aplicada. Para las Ciencias Fsicas y Naturales se muestra el nmero de invenciones registradas por la universidad en el perodo de investigacin en proporcin con el nmero total de acadmicos. Encuesta a universidades Por cuartiles Publicaciones cientficas por acadmico/profesor Las cifras de publicaciones en revistas acadmicas, ponderadas por medio del anlisis bibliomtrico para un perodo de tres aos, en proporcin con el nmero total de acadmicos. Encuesta a departamentos Por cuartiles Citaciones por publicacin Se indica la frecuencia con que las publicaciones son citadas en el perodo de investigacin. Encuesta a departamentos, bancos de datos de publicaciones Por cuartiles Doctorados por profesor Se indica el nmero de doctorados por ao en proporcin con el nmero total de profesores. Este indicador muestra la intensidad de investigacin en el rea de conocimiento y al mismo tiempo el grado en que el departamento promueve la formacin de una nueva generacin de acadmicos. Encuesta a departamentos Por cuartiles
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin
18
Indicador Definicin
Ttulos docentes por ao Para las disciplinas de Ingeniera, Ciencias de Idiomas y Culturas, Derechos, y Ciencias Sociales se muestra el nmero promedio de ttulos docentes otorgados por ao. Encuesta a departamentos n.a. Particularidades en investigacin Adems de las caractersticas arriba mencionadas, se describen particularidades de la investigacin realizada en la disciplina, as como la oferta de programas en reas de investigacin especiales. Encuesta a departamentos n.a. Reputacin en investigacin Para cada universidad se indica el porcentaje de profesores universitarios que a la pregunta Cules son las cinco universidades alemanas con mayor prestigio en la investigacin acadmica en su rea de conocimiento? mencion a esa universidad. El porcentaje se calcula en base al total de profesores que respondi el cuestionario. Encuesta a profesores n.a.
3.5 Quinto componente: enseanza y aprendizaje Incluye informacin sobre varios aspectos de la situacin de estudios, as como evaluaciones de estudiantes de la oferta de cursos y el ambiente de aprendizaje. Los indicadores son, salvo algunas excepciones, evaluados a nivel de departamentos. Hechos Indicador Definicin Estudiantes por profesor/acadmico El nmero de estudiantes por profesor/acadmico como expresin del apoyo y atencin a los
19
estudiantes. Este indicador se aplica slo en algunas disciplinas, dado que en la mayora de los departamentos las formas de enseanza y tutora son demasiado amplias para ser evaluadas slo en base al nmero de profesores. Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Encuesta a departamentos Por cuartiles Total de crditos de estudios Se indica para los programas de bachelor y master el total de crditos de estudios que se puede adquirir. Encuesta a departamentos n.a. Estructura del programa de estudios Se indica el tipo de programa de estudios, por ejemplo un programa presencial o en formato e-learning, un programa de magster consecutivo o no-consecutivo, etc. Encuesta a departamentos n.a. Cantidad de disciplinas dentro de un departamento Se indica si la carrera abarca una, dos o ms disciplinas y de qu combinacin de reas de conocimiento se trata (por ejemplo 50% sociologa y 50% ciencias polticas). Encuesta a departamentos n.a. Particularidades en la tutora de estudiantes Se describen las particularidades de los departamentos en relacin con la tutora u orientacin de los estudiantes. Encuesta a departamentos n.a.
20
Opiniones de los estudiantes En la encuesta se pide a los estudiantes evaluar diversos aspectos de la situacin de estudios usando una escala que va de 1 (muy bueno) a 6 (muy malo), lo que corresponde al modelo alemn de notas escolares, y luego los resultados se incorporan en ndices. Finalmente se comprueban las relaciones entre los diferentes aspectos por medio de un anlisis de fiabilidad. Indicador Definicin Apoyo y orientacin de los profesores Se muestra la opinin de los estudiantes sobre el apoyo que les entregan sus profesores. La evaluacin se base en: la accesibilidad, las horas de consulta por semana, la evaluacin de tareas y la tutora informal ofrecida por los profesores. Adems se pide de los estudiantes evaluar la relacin entre profesores y estudiantes. Encuesta a estudiantes Promedio e intervalos de confianza Tutora en la interaccin con pacientes (slo Medicina y Odontologa) La opinin de los estudiantes sobre la contribucin del profesorado en el desarrollo de habilidades para el contacto con pacientes. Encuesta a estudiantes Promedio e intervalos de confianza E-learning En el caso de que la institucin ofrezca programas de e-learning (enseanza virtual por internet), se pide a los estudiantes una opinin sobre la calidad de estos programas, principalmente en base al material que tienen a su disposicin a travs de internet y de las posibilidades de interaccin virtual con los profesores. Encuesta a estudiantes Promedio e intervalos de confianza Excursiones (slo Ciencias Geofsicas y Geografa) Se evala la calidad de las excursiones que forman parte del programa de estudios en cuanto a su
21
disponibilidad, organizacin y la tutora profesional de los encargados de la excursin. Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Encuesta a estudiantes Promedio e intervalos de confianza Oferta de programas de estudios Se muestra en un solo ndice la opinin de los estudiantes sobre varios aspectos de la oferta educativa, entre otros la profundidad y el alcance de los programas, la orientacin internacional, la relevancia interdisciplinaria, la transparencia del sistema de evaluacin, la enseanza didctica y la posibilidad de participar en investigacin acadmica. Asimismo se evalan aspectos caractersticos de la disciplina. Encuesta a estudiantes Promedio e intervalos de confianza Contacto entre estudiantes Se elabora un ndice con los resultados de una evaluacin del contacto y de la cooperacin con otros estudiantes. Encuesta a estudiantes Promedio e intervalos de confianza Formacin en metodologa (slo Sociologa) Se evala la calidad de la enseanza metodolgica para la investigacin emprica en temas sociales Encuesta a estudiantes Promedio e intervalos de confianza Organizacin del programa de estudios Los estudiantes evalan la sincronizacin del contenido del programa con las regulaciones universitarias y las exigencias de examen. Asimismo dan su opinin sobre la organizacin y el acceso a eventos obligatorios y la coordinacin general del
22
programa. Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Encuesta a estudiantes Promedio e intervalos de confianza Calidad de los tutores (slo Ciencia Jurdica) Los estudiantes de Ciencia Jurdica evalan la calidad de los tutores empleados por la universidad. Encuesta a estudiantes Promedio e intervalos de confianza Correspondencia entre la fase pre-clnica y clnica del programa de estudios (slo Medicina y Odontologa) El ndice se compone con los resultados de dos evaluaciones: de la correspondencia entre la fase preclnica y la fase clnica de la carrera, y de la relevancia del programa respecto a la prctica. Encuesta a estudiantes Promedio e intervalos de confianza Servicios y suministro de informacin Se evala la calidad de los servicios de asistencia e informacin de la institucin, por ejemplo el grado en que la secretara, los decanos, los consejos estudiantiles y los profesores estn dispuestos a proporcionar informacin sobre temas relevantes, como regulaciones de los exmenes y la asignacin de becas. Encuesta a estudiantes Promedio e intervalos de confianza Intercambios Los estudiantes evalan las posibilidades de intercambio, por ejemplo con respecto a la cantidad de plazas disponibles, la calidad de la institucin/el programa de intercambio, el apoyo econmico y administrativo para una estada en el extranjero, y el reconocimiento de crditos y ttulos.
23
Encuesta a estudiantes Promedio e intervalos de confianza
3.6 Sexto componente: infraestructura Este componente provee datos y opiniones sobre la infraestructura de la institucin. Los indicadores de evaluacin son aplicados a nivel de los departamentos. Hechos Indicador Definicin Suministro de instrumentos en la fase pre-clnica y clnica del programa (slo Odontologa) Se indica si los estudiantes tienen a su disposicin (gratis o por medio de un pago) los instrumentos odontolgicos necesarios para esta disciplina. Encuesta a departamentos n.a. Estudiantes por unidad de tratamiento El nmero de estudiantes por unidad de tratamiento odontolgica. Provee informacin sobre el equipamiento de la institucin y el grado de atencin y supervisin que reciben los estudiantes. Encuesta a departamentos Por cuartiles Cantidad de camas asignadas por 100 estudiantes (slo Medicina) La cantidad de camas en el hospital universitario que est a disposicin de los estudiantes de Medicina para la fase clnica del programa. Se indica el nmero de camas por cada 100 estudiantes. Encuesta a departamentos Por cuartiles Biblioteca horarios de apertura Los horarios de apertura semanales de la biblioteca en horas.
24
Instituto de estadsticas bibliotecarias Por cuartiles Biblioteca computadores Se indica el nmero de computadores con conexin a internet por cada 1000 estudiantes en todas las bibliotecas de la institucin. Instituto de estadsticas bibliotecarias Por cuartiles Biblioteca Gastos en libros y revistas Los gastos de la biblioteca en la adquisicin de libros y revistas (incluyendo revistas electrnicas) por disciplina. Instituto de estadsticas bibliotecarias Por cuartiles Laboratorios de idioma Para los departamentos de Ingls/Estudios Americanos y Estudios Romanos se describen brevemente los laboratorios de idioma del departamento y de la universidad en general. Encuesta a departamentos n.a. Particularidades de la infraestructura Los departamentos pueden mencionar brevemente si hay particularidades con respecto a la infraestructura. Encuesta a departamentos n.a.
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking
25
Opiniones de los estudiantes En la encuesta se pide a los estudiantes evaluar diversos aspectos de la infraestructura usando una escala que va de 1 (muy bueno) a 6 (muy malo). Los resultados se incorporan en forma de ndices. Indicador Definicin Lugares de trabajo Las opiniones de estudiantes sobre la calidad, la disponibilidad y el equipamiento tcnico de los lugares de trabajo estudiantiles. Encuesta a estudiantes Promedio e intervalos de confianza Medios audiovisuales Se evala por departamento la oferta de medios audiovisuales (CD-ROM, video etc.) Encuesta a estudiantes Promedio e intervalos de confianza Biblioteca Las opiniones de estudiantes sobre varios aspectos de la biblioteca: disponibilidad de la literatura necesaria para los cursos; variedad y actualidad de los libros y revistas acadmicas; posibilidades de investigacin literaria; asistencia a los usuarios; disponibilidad de computadores; y horarios de la biblioteca. Asimismo, se incluyen aspectos especficos de las diferentes disciplinas. Encuesta a estudiantes Promedio e intervalos de confianza Infraestructura IT Este ndice se compone de las opiniones sobre la calidad del material hardware y software de los computadores; la revisin y el mantenimiento de los computadores; la asistencia a los usuarios; los horarios de apertura; y la disponibilidad de computadores y lugares de trabajo inalmbricos.
26
Encuesta a estudiantes Promedio e intervalos de confianza Espacios de estudio Este ndice se compone de las opiniones de estudiantes sobre las aulas y salas de seminario de la institucin, especficamente el estado de las salas, la cantidad de plazas en comparacin con el nmero de estudiantes y el equipamiento tcnico. Encuesta a estudiantes Promedio e intervalos de confianza Laboratorios Para las Ciencias de la Ingeniera se evalan la disponibilidad de plazos en laboratorios y su estado; la disponibilidad de materiales; la supervisin durante las prcticas; y las instalaciones de informtica del laboratorio. Para las otras disciplinas se evalan el estado de los laboratorios; el equipamiento tcnico y la disponibilidad de plazos en proporcin con el nmero de estudiantes. Encuesta a estudiantes Promedio e intervalos de confianza Salas de prctica Los estudiantes evalan las salas de prctica con respecto a su estado; al equipamiento tcnico; y a la disponibilidad de plazas en proporcin al el nmero de estudiantes. Encuesta a estudiantes Promedio e intervalos de confianza Salas de tratamiento (slo Medicina y Odontologa) Se evalan el estado de los espacios, el equipamiento tcnico y la disponibilidad de plazas en proporcin al nmero de estudiantes. Encuesta a estudiantes
27
Promedio e intervalos de confianza Estudios de radio y televisin (slo Ciencias Comunicativas/Mediticas, Periodismo) Se compone el ndice en base a las opiniones sobre el estado de los estudios, el equipamiento tcnico y la disponibilidad de plazas en proporcin con el nmero de estudiantes. Encuesta a estudiantes Promedio e intervalos de confianza Laboratorios de idioma (slo Americanos y Estudios Romanos) Ingls/Estudios
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Opiniones de los graduados
Se evalan los laboratorios de idioma de la institucin. Encuesta a estudiantes Promedio e intervalos de confianza
En una encuesta enviada a graduados de las universidades, el CHE pide evaluar diversos aspectos de la institucin usando una escala que va de 1 (muy bueno) a 6 (muy malo). Los resultados se incorporan en ndices. Indicador Definicin Tutora Los graduados evalan la tutora que recibieron durante sus estudios de los profesores de la facultad y de su departamento en especfico. Encuesta a graduados Promedio e intervalos de confianza Organizacin y estructura del programa acadmico Las opiniones de los graduados sobre la organizacin y la estructura del programa de estudios. Encuesta a graduados Promedio e intervalos de confianza
28
Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking
Alcance y variedad de la oferta de estudios Se evalan las posibilidades y la variedad de los programas de estudios que ofrece la institucin. Encuesta a graduados Promedio e intervalos de confianza
3.7 Sptimo componente: orientacin profesional y mercado laboral Hechos Indicador Definicin Porcentaje de los cursos que son enseados por representantes del sector profesional Se muestra el porcentaje de los cursos que son enseados por profesores provenientes de la prctica (por ejemplo de la industria o el mundo empresarial). Encuesta a departamentos n.a. Consejo Consultivo del sector profesional Se indica si existe un Consejo Consultivo compuesto por representantes de la industria/sector profesional que participa en el diseo y el desarrollo del programa de estudios. Encuesta a departamentos n.a. Centro de orientacin profesional Se indica si a nivel del departamento, de la universidad, o en colaboracin con instituciones externas, existe un centro de orientacin profesional que prepare a los estudiantes y graduados para su insercin en el mercado laboral. Encuesta a departamentos n.a.
29
Indicador Definicin
Crditos para estudios de casos En los programas de bachelor de Ingeniera se promueve la empleabilidad de los estudiantes por medio de estudios de casos, seminarios, y proyectos de diseo. Se indica si la universidad otorga crditos de estudios para estas partes del programa. Encuesta a departamentos n.a. Fomento de la empleabilidad Se describen las polticas de la institucin para fomentar la empleabilidad de los graduados. Encuesta a departamentos n.a. Elementos de formacin prctica Se indican cules son los elementos de experiencia prctica que forman parte del programa de estudios y cul es su duracin mnima (por ejemplo semestres obligatorios de prctica). Encuesta a departamentos n.a. Fondos para la formacin prctica Se indica si a nivel del departamento, de la universidad, o en colaboracin con instituciones externas se ha creado un fondo de prcticas. Encuesta a universidades n.a.
Procedencia de los datos Organizacin en grupos de ranking Opiniones de los estudiantes
En la encuesta se pide a los estudiantes evaluar, usando una escala de 1 (muy bueno) a 6 (muy malo), diversos aspectos de la orientacin profesional recibida en su universidad. Los resultados se incorporan en ndices.
30
Indicador Definicin
Empleabilidad Los estudiantes evalan el grado en que el programa de estudios promueve la empleabilidad de los graduados, por ejemplo con la incorporacin de experiencia prctica en el programa, la cooperacin con el mundo profesional en la seleccin de temarios, y la educacin en habilidades profesionales. Encuesta a estudiantes Promedio e intervalos de confianza Habilidades prcticas (no todas las disciplinas) Se evalan varios elementos del programa acadmico con respecto al desarrollo de conocimiento prctico: la oferta de seminarios, proyectos y prcticas; la incorporacin de habilidades prcticas en el programa de estudios; la oferta de cursos enseados por representantes de la prctica; y la tutora durante la preparacin y realizacin de un perodo de prctica. Para la carrera docente se evala adems la enseanza de habilidades didcticas. Encuesta a estudiantes Promedio e intervalos de confianza Vnculo teora-prctica (slo programas duales) Los estudiantes de programas de estudios duales dan su opinin sobre la preparacin que reciben previo a un perodo de prctica; la organizacin de las prcticas; y la calidad de la supervisin que reciben de los profesores del departamento. Encuesta a estudiantes Promedio e intervalos de confianza
Opiniones de los graduados En una encuesta enviada a los graduados de las universidades se pide evaluar, usando una escala de 1 (muy bueno) a 6 (muy malo), diversos aspectos de la orientacin profesional y preparacin para el mercado laboral que forman parte de los programas de estudios. Los resultados se incorporan en ndices.
31
Indicador Definicin
Empleabilidad y habilidades prcticas Los graduados dan su opinin sobre el grado en que el programa de estudios contribuye a su empleabilidad y el desarrollo de habilidades prcticas para su insercin en el mercado laboral. Encuesta a graduados Promedio e intervalos de confianza Orientacin profesional Los graduados evalan el grado en que la formacin recibida los ha preparado para el mercado laboral. Se trata de la sensacin de los graduados, es decir, el grado en que al momento de graduarse se sintieron preparados para hacer la transicin al mundo profesional. Encuesta a graduados Promedio e intervalos de confianza Enseanza de conocimiento disciplinario Se evala la calidad de la enseanza con respecto a los conocimientos bsicos de la disciplina. Encuesta a graduados Promedio e intervalos de confianza Enseanza de habilidades de transferencia Se evala la calidad del programa con respecto a la enseanza de habilidades de transferencia, o sea la capacidad de aplicar lo aprendido a la prctica. Encuesta a graduados Promedio e intervalos de confianza Enseanza de habilidades de solucin de problemas Se evala el grado en que la formacin recibida ha contribuido al desarrollo de habilidades para la solucin de problemas y la capacidad analtica de los graduados.
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Explicacin
32
Encuesta a graduados Promedio e intervalos de confianza Enseanza de habilidades de aprendizaje/trabajo independiente Los graduados dan su opinin sobre el grado en que el programa de estudios fomenta la capacidad de aprender y trabajar independientemente. Encuesta a graduados Promedio e intervalos de confianza Enseanza de habilidades de trabajo en equipo Se evala el grado en que la formacin recibida ha fomentado la capacidad de los graduados de trabajar en equipo. Encuesta a graduados Promedio e intervalos de confianza
3.8 Octavo componente: aspectos generales Adems de los componentes arriba mencionados, el CHE incorpora en su modelo de evaluacin opiniones generales de estudiantes y profesores sobre las universidades y los programas de estudios que ofrecen. Indicador Definicin Evaluacin general de la situacin de estudios Se pide a los estudiantes dar una opinin sobre el programa y la situacin de estudios en su totalidad. No se trata de una combinacin de las opiniones sobre cada aspecto aparte, sino de una evaluacin general en base de la siguiente pregunta: Si usted toma en consideracin todos los aspectos sealados, cul sera su juicio general de la situacin de estudios en su rea de conocimiento en la universidad? Se pide a los estudiantes dar una nota de 1 (muy bien) a 6 (muy mal). Encuesta a estudiantes Promedio e intervalos de confianza
33
Indicador Definicin
Reputacin entre profesores Se pide a los profesores mencionar cinco universidades nacionales (para las fachhochschulen tres) que en base a la calidad de la enseanza recomendaran a los estudiantes que quieren seguir una carrera en su rea de conocimiento (no pueden elegir su propia institucin). Se indica para cada universidad el porcentaje de profesores que la ha mencionado en su lista. Como total se toma el nmero de profesores que ha respondido el cuestionario. Encuesta a profesores Al grupo superior pertenecen las universidades que son mencionadas por ms de un 25% de los profesores o en el caso de las fachhochschulen por un 15% de los profesores. En el grupo inferior caen las instituciones que no son mencionadas.
3.9 Noveno componente: ubicacin y dems caractersticas de la institucin La ubicacin se evala con indicadores como la infraestructura, el porcentaje de estudiantes, las viviendas disponibles para estudiantes y los gastos de residencia. Se describen todas las ciudades donde se encuentran instituciones de educacin superior o partes (sedes, facultades) de las instituciones evaluadas. Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Nmero de habitantes Se muestra el nmero de habitantes para indicar el tamao de la ciudad. Oficina Federal de Estadstica (Destatis) n.a. Porcentaje de estudiantes Se indica el porcentaje de estudiantes en la poblacin total de la ciudad. As se distinguen las denominadas ciudades estudiantiles o universitarias con una gran poblacin estudiantil entre sus habitantes. Informa sobre la presencia y la influencia de los estudiantes en la ciudad; por ejemplo, en relacin a la infraestructura, las formas de vivienda e instalaciones para el tiempo libre.
Explicacin
34
Clculo propio en base al nmero de estudiantes y habitantes de la ciudad n.a. Transporte Se muestra el porcentaje de estudiantes que llega a la universidad a pie, en auto, en bicicleta, o en transporte pblico. Auto incluye todos los vehculos motorizados privados. Dado que se acepta ms de una respuesta, los totales pueden superar al 100%. Encuesta a estudiantes n.a. Tipos de vivienda Se indica el porcentaje de estudiantes que vive con sus padres, en una vivienda particular, en una residencia estudiantil, o en una comunidad de habitantes. Vivienda particular incluye todo tipo de vivienda en que el estudiante no tenga que compartir su espacio vital con personas que no sean su pareja o hijo. Slo se consideran a los estudiantes que indican vivir en la ciudad donde se encuentra la universidad. Encuesta a estudiantes n.a. Arriendo de viviendas particulares Se informa sobre el arriendo promedio por metro cuadrado que se paga mensualmente por la vivienda y los gastos adicionales de gas, electricidad, etc. Slo se consideran los gastos de estudiantes que viven solos, con pareja/hijo o como parte de una comunidad en una vivienda arrendada en la ciudad donde se encuentra la universidad. Encuesta a estudiantes Por cuartiles
35
Indicador Definicin
Arriendo de residencias estudiantiles Se informa sobre el arriendo promedio mensual y los gastos adicionales que los estudiantes pagan por un espacio en una residencia estudiantil (de las redes estudiantiles regionales). Deutsches Studentenwerk (Asociacin de redes estudiantiles) n.a. Plazas de residencia ofrecidos por las redes estudiantiles Se muestra el nmero de habitaciones en residencias y otras formas de vivienda ofrecidas por la red estudiantil regional. Se provee adems el link del sitio web donde se puede conseguir ms informacin sobre la ciudad. Institutos de estadstica; Deutsches Studentenwerk; e investigacin propia en Internet n.a.
Las dems caractersticas incluyen aspectos como la antigedad y el tamao de las instituciones, las disciplinas predominantes, la oferta de servicios, y los gastos vinculados a la formacin en las respectivas universidades. Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Nmero de estudiantes Se indica por sede el nmero de estudiantes matriculados en la universidad. Anlisis especial de la Oficina Federal de Estadstica (Destatis) n.a. Disciplinas predominantes Se indica por sede y por rea de conocimiento el porcentaje de estudiantes matriculados para mostrar las diferencias en popularidad entre las disciplinas. Anlisis especial de la Oficina Federal de Estadstica (Destatis)
36
n.a. Contribucin semestral/Matrcula Se indica el valor de la contribucin semestral y, en el caso de las universidades privadas, de la matrcula que los estudiantes pagan por semestre, ao o por el curso completo. Se considera si el valor de la contribucin semestral (y eventualmente) matrcula para universidades pblicas se corresponde con las normas establecidas por el Gobierno. Encuesta a universidades n.a. Horarios del servicio central de informacin y asistencia Se muestran los horarios de apertura del servicio central de informacin y asistencia a los estudiantes. Encuesta a universidades n.a. Horarios de la biblioteca central Se muestran los horarios de apertura de la biblioteca central de la institucin. Encuesta a universidades n.a. Nmero de cursos deportivos con instructor Se indica el nmero de cursos deportivos con instructor por cada 1000 estudiantes. Se proporcionan links de sitios web para obtener ms informacin sobre la oferta de cursos y servicios deportivos de la institucin.
Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin
Encuesta a universidades n.a.
37
Indicador Definicin
Evaluacin de las instalaciones deportivas Los estudiantes evalan la variedad en la oferta de cursos y servicios deportivos y la calidad de los cursos deportivos en general. Encuesta a estudiantes Promedio e intervalos de confianza Ao de fundacin Proporciona informacin sobre la antigedad de la institucin. Sistema de informacin del Consejo de Rectores de Universidades Hochschulkompass n.a.
Se complementan los indicadores con los datos de contacto de las universidades y los sitios web donde es posible encontrar ms informacin sobre las instituciones.
4 La seleccin de los grupos de ranking

En vez de producir una tabla de posiciones tradicional, el CHE seala las diferencias en desempeo y calidad entre las universidades al organizarlas en tres grupos de ranking. Las universidades 8 con los mejores resultados son clasificadas en el grupo superior (top group), las con los peores resultados en el grupo inferior (bottom group), y las dems universidades forman el grupo intermedio (middle group). En el ranking los grupos son designados respectivamente con los colores verde, rojo y amarillo. No se hacen diferencias al interior de los grupos, lo que significa que una vez clasificadas en un grupo de ranking las universidades son organizadas por orden alfabtico. La clasificacin de las instituciones ocurre segn dos mtodos distintos: para los datos objetivos se usan cuartiles mientras que para los datos subjetivos los resultados de las encuestas de estudiantes y profesores se utiliza un modelo de promedios con intervalos de confianza (Federkeil, 2008: 4). Datos objetivos Para producir los rankings en base a indicadores objetivos (por ejemplo el nmero de estudiantes por profesor; publicaciones acadmicas; patentes) se ordenan las universidades en una lista descendente segn el puntaje que obtuvieron en la evaluacin que sirve para
Es necesario enfatizar que, en realidad, no se clasifican las universidades sino las facultades o departamentos que pertenecen a una disciplina evaluada.
8
38
dividir las universidades en tres grupos. Las instituciones que pertenecen al 25% con los mejores resultados (el primer cuartil) son clasificadas como grupo superior; luego, el 50% de instituciones que sigue en el ranking (el segundo y tercer cuartil) forma el grupo intermedio, y finalmente, las instituciones que se encuentran en el cuartil ms bajo (el 25% con los peores resultados) son clasificadas como grupo inferior. Cuando hay muy poca diferencia entre los resultados de universidades que se encuentran en la lnea divisoria de los cuartiles, el lmite no se establece exactamente en el 25% sino en el percentil que presente diferencias claras entre instituciones (discontinuidades de salto). En ese caso, todas las instituciones con resultados similares son clasificadas en el mejor grupo (Berghoff et.al., 2008: 65). Indicadores subjetivos Respecto a los indicadores subjetivos (por ejemplo la opinin de los estudiantes sobre la variedad de la oferta educativa o la calidad de la supervisin), el proceso de seleccin de los grupos consiste en una evaluacin de la diversidad de opiniones dentro de una facultad, en comparacin con el promedio del conjunto de facultades en esta rea de conocimiento. Despus de que se ha establecido para cada departamento el promedio de los puntajes otorgados en las encuestas (en base a una escala de 1 (muy bien) a 6 (muy mal)), se determina el intervalo de confianza. En el caso de los resultados de las encuestas de estudiantes se usa un intervalo de confianza de 95% basado en una hiptesis de dispersin normal. La amplitud del intervalo de confianza depende del nmero y de la heterogeneidad de las opiniones consideradas en el anlisis. Cuando el intervalo de confianza del departamento se encuentra por sobre el promedio de todos los departamentos en la disciplina, o sea cuando el intervalo no tiene ningn punto coincidente con el promedio general, se clasifica la institucin en el grupo superior. Al contrario, una universidad es clasificada en el grupo inferior cuando el intervalo de confianza est por debajo del promedio general. El grupo intermedio se constituye, pues, de las universidades cuyo intervalo coincide en un punto con el promedio, las que generalmente corresponden a los departamentos con un intervalo ms bien ancho (ibd.). Gracias a este mtodo de clasificacin en base a intervalos de confianza, se asegura que entre las instituciones del grupo superior y el grupo inferior realmente existan diferencias (estadsticamente) significativas. Asimismo, a diferencia de la clasificacin por cuartiles (que siempre implica un porcentaje fijo de instituciones por grupo) o la produccin de un `top 10, no se determina de antemano el tamao del grupo (superior), sino que ste depende del grado de heterogeneidad dentro y entre las reas de conocimiento evaluadas. Por ejemplo, para las disciplinas en que el promedio de las universidades individuales se encuentra cerca del promedio general o sea hay poca diferencia entre las universidades pero en que las opiniones expresadas por los estudiantes son muy heterogneas, el nmero de instituciones en el grupo superior e inferior es pequeo. Al utilizar este mtodo puede ocurrir que facultades que tienen promedios similares, pero intervalos de confianza distintos, y que se encuentran en el lmite entre dos grupos (superior/inferior e intermedio), sean clasificadas en diferentes grupos de ranking. Puede llegar a ocurrir tambin que la universidad con el mejor promedio termine en el grupo intermedio, mientras que su competidor con un peor promedio se clasifique en el grupo
39
superior. Aunque es un escenario poco comn, ciertamente no es imposible debido a las diferencias en los intervalos de confianza. El sistema de clasificacin que usa el CHE se concentra entonces no slo en los resultados promedio de las encuestas sino tambin en la homogeneidad de las opiniones de los estudiantes. La lgica detrs de este mtodo es que, en el caso de dos universidades con resultados similares, una evaluacin ms o menos homognea debera llevar a una mejor clasificacin que un promedio ligeramente mejor pero basado en opiniones muy diversas (y por lo tanto considerado poco confiable) (op.cit.: 66). Figura 4.1 Grupos de ranking: promedio e intervalos de confianza 1
Promedio IES 1 Promedio IES 4 Promedio general IES 1
Grupo intermedio
IES 2
Grupo superior
IES 3
Grupo intermedio
IES 1
Grupo inferior
Promedio IES 2 Promedio IES 3
Fuente: S. Berghoff et.al. (2008) CHE Hochschulranking: Vorgehensweise und Indikatoren, Arbeitspapier 106. Documento recuperado el 6 de octubre de 2009: http://www.che.de/downloads/Methoden_Hochschulranking_2008_AP106.pdf. p. 66.
5 La comparacin a travs del tiempo

Segn el reglamento del ranking CHE la evaluacin de las disciplinas individuales debe repetirse con regularidad para hacer visible cualquier cambio en el tiempo que influya en el ranking. Se trata de informar a los usuarios sobre cambios en la calidad de los programas acadmicos, como consecuencia de medidas tomadas por los departamentos para mejorar el desempeo en enseanza e investigacin por ejemplo por una reorganizacin del programa de estudios, inversiones en la infraestructura, o un aumento de la cantidad de horas de contacto entre estudiantes y profesores y eventualmente esfuerzos excepcionales de las instituciones. Asimismo, la realizacin de evaluaciones de continuidad ayuda a mostrar la efectividad real de las polticas y medidas que son propuestas para promover la calidad de la educacin. Aunque para la gran mayora de las disciplinas existe actualmente una forma de comparacin a travs del tiempo, hay algunos casos en que no es posible comparar los resultados del ranking con evaluaciones anteriores, por ejemplo en las reas de conocimiento
40
que son recientemente incorporadas en el sistema de clasificacin o que no permiten ser clasificadas en grupos de ranking (como la Bioqumica). En el caso de que se haya cambiado la metodologa, lo que principalmente afecta a los indicadores que abarcan un clculo de proporciones o logros como la cantidad de publicaciones o premios por profesor, tampoco es posible hacer una comparacin en el tiempo dado que los criterios de comparacin no son equivalentes. Adems de los diversos indicadores basados en datos objetivos, se comparan tambin las opiniones de estudiantes a travs del tiempo. Sin embargo, debido a cambios en la formulacin de las preguntas y otros aspectos procedimentales de las encuestas, no es posible someter todos los indicadores a una evaluacin comparativa. En el caso de los indicadores que cumplen con los criterios y que son reevaluados para mostrar el desarrollo de las respectivas universidades, la comparacin a travs del tiempo muestra para cada rea de conocimiento y departamento si en el plazo establecido hubo un cambio positivo o negativo y, en general, si la evolucin del desempeo en investigacin y enseanza es mejor o peor que el promedio nacional. Con respecto a la comparacin a travs del tiempo se identifican dos tipos de cambio, absoluto y relativo, que son representados en el ranking como: Cambio del grupo de ranking (cambio relativo) Divergencia de la tendencia general (cambio absoluto) Para que una institucin sea consignada como en ascenso o descenso es necesario que en la evaluacin se constaten ambos tipos de cambio. Cuadro 5.1 Ejemplo de la comparacin a travs del tiempo: ascensos y descensos Descenso
Ascenso
Cambio del grupo de ranking mejoramiento Divergencia de la tendencia Total mejor no divergencia peor 6 3 3 3 no cambio 5 17 3 25 5 4 4 9 degradacin
Total
8 25 7 40
De las 40 instituciones de educacin superior incluidas en el ejemplo, se observa para seis un cambio de grupo hacia arriba, o sea un mejoramiento, y para ocho una divergencia positiva de
41
la tendencia general. Nueve instituciones sufrieron una degradacin respecto a su grupo de ranking y siete mostraron un desarrollo peor que el promedio general. Sin embargo, para el perodo evaluado se observ slo para tres universidades un ascenso y para cuatro un descenso. Estas fueron las universidades que en el campo del respectivo indicador experimentaron tanto un cambio relativo como un cambio absoluto (Berghoff et.al., 2008: 689). Datos objetivos En el caso de los datos objetivos se calcula la divergencia de la tendencia general de una forma similar a la clasificacin en grupos de ranking, es decir por medio de cuartiles. Lo que muestra la divergencia es el grado de cambio que existe entre los resultados de la primera y la segunda evaluacin del departamento en comparacin con el desarrollo logrado en otras instituciones. Los resultados se dividen en cuartiles, con las instituciones con las mayores diferencias en los cuartiles extremos y el resto de las instituciones en el grupo intermedio. En base a esta divisin se define si el desarrollo de la universidad a travs del tiempo es mejor, peor o igual al promedio general. Como se sealaba, slo se anota un ascenso o descenso cuando el cambio absoluto tiene lugar en combinacin con un cambio en el grupo de ranking. Cuadro 5.2 Ejemplo de una comparacin a travs del tiempo: datos objetivos Indicador: doctorados por profesor Universidad Grupo de ranking 2005 Inferior Inferior Intermedio Intermedio Inferior Superior Intermedio Superior Intermedio Intermedio Superior Inferior Grupo de ranking 2008 Intermedio Superior Intermedio Superior Intermedio Superior Inferior Intermedio Intermedio Inferior Inferior Intermedio Divergencia de la tendencia general El cuartil superior El 50% intermedio El 50% intermedio El cuartil inferior Descenso Descenso Anotacin
1 2 3 4 5 6 12 13 14 15 16 17
Ascenso Ascenso Ascenso
42
Indicadores subjetivos Con respecto a las opiniones de los estudiantes, el clculo de la divergencia de la tendencia general se basa, igual que en el caso de los datos objetivos, en el mtodo de clasificacin respectivo para organizar las instituciones en grupos de ranking. Se compara el promedio de la primera y de la segunda evaluacin por departamento, para incorporar la diferencia entre las dos evaluaciones en un modelo de promedios e intervalos de confianza. La posicin de la institucin en el modelo depende del grado de divergencia con la evolucin representado por la diferencia entre los promedios de los aos evaluados del resto de los departamentos en el rea de conocimiento. La pauta para la clasificacin en los grupos de ranking es el intervalo de confianza de 95%. Este intervalo de confianza considera, adems del nmero de opiniones, su homogeneidad y la coherencia de los resultados encontrados en los dos aos de evaluacin. Figura 5.1 Ejemplo de una comparacin a travs del tiempo: datos subjetivos
IES 1 IES 2 Ascenso IES 3 IES 4 Descenso Intervalos de confianza Cambio IES 1 Cambio IES 4 Cambio IES 2 Cambio IES 3
Divergencia positiva
Variacin promedio en las opiniones (todos los departamentos) i i
Divergencia negativa
Como se puede deducir del esquema, el CHE indica ascensos y descensos slo para las instituciones que han experimentado un cambio en las opiniones de estudiantes que es claramente mayor a la variacin promedio y que muestran un alto grado de homogeneidad en las opiniones. En cambio, las instituciones con intervalos de confianza grandes que coinciden en un punto con el promedio general, no figuran en la lista de ascensos y descensos porque la
43
heterogeneidad de las opiniones hace que sus resultados sean menos seguros y, por lo tanto, la divergencia sea ms difcil de determinar.
6 La publicacin de los resultados

Con el objetivo de satisfacer las diversas necesidades de informacin de los usuarios del ranking, el CHE publica los resultados del ranking de diferentes maneras y con diferentes grados de detalle. Aunque los datos, la metodologa y el diseo del ranking son de responsabilidad exclusiva del CHE, la publicacin, el marketing, y la divulgacin de los resultados se realizan en cooperacin con una importante editorial nacional. Desde 2005 el socio editorial del ranking CHE es Die Zeit (anterior a ese ao fue publicado por Der Stern) que publica los resultados del ranking en tres formatos: un resumen en la publicacin regular de Die Zeit, un libro y un sitio Web interactivo. La versin online del ranking ofrece la informacin ms detallada, mientras que el libro provee datos a nivel de los programas acadmicos sobre algunos de los indicadores, y el resumen en Die Zeit presenta los resultados desde una perspectiva ms genrica. De este modo, se ofrece a los usuarios del ranking la oportunidad de elegir la forma de representacin de los resultados ms adecuada para sus necesidades respecto a la amplitud y el detalle de la informacin (Soo y Dill, 2007: 10). 6.1 Ranking conciso El libro ZEIT-Studienfhrer es publicado anualmente y contiene para cada disciplina una lista de universidades (en orden alfabtico) con sus resultados en cuatro o cinco de los indicadores ms importantes. La seleccin de estos indicadores difiere por disciplina, pero por lo general incluye la reputacin entre acadmicos, el desempeo en investigacin, la evaluacin del ambiente de estudio, la supervisin y asistencia a estudiantes, y la infraestructura (bibliotecas, laboratorios etc.). Asimismo, la versin en papel del ranking provee informacin adicional sobre las universidades y las diferentes reas de conocimiento. El libro se puede adquirir online a un precio de 6 ($ 4.611). 9 La representacin ms completa de los resultados del ranking se encuentra en el sitio web http://ranking.zeit.de, que ofrece varias opciones de ranking de forma gratuita y segn las preferencias del usuario. Los gastos de publicacin y marketing son cubiertos con fondos de publicidad y patrocinio por parte de terceros. Para las variantes personalizadas como Mi ranking y la comparacin entre universidades es necesario registrarse (gratuitamente), para que el CHE pueda guardar los resultados de las bsquedas y que los usuarios en visitas posteriores puedan recuperar esta informacin a travs de una cuenta personal. Las opciones de ranking comprenden, adems de las variantes personalizadas ya mencionados, un ranking conciso (Ranking kompakt) que, igual que la versin publicada en el libro ZEIT-Studienfhrer, se basa en una seleccin de cuatro a seis indicadores principales. Aunque estos indicadores se
Al cambio de noviembre de 2009.
44
repiten entre las disciplinas, son seleccionados individualmente en concordancia con el foco y las caractersticas especficas de cada rea de conocimiento. Cuadro 6.1 Ejemplo de los indicadores seleccionados por disciplina para el ranking conciso
Universidades Disciplina Indicadores Situacin de estudios en general (opiniones) Duracin de la carrera Ingls/Estudios Americanos Biblioteca (opiniones) Fondos de investigacin Reputacin de investigacin entre profesores (opiniones) Situacin de estudios en general (opiniones) Tutora y asistencia a estudiantes (opiniones) Biologa Laboratorios (opiniones) Publicaciones cientficas Reputacin de investigacin entre profesores (opiniones) Situacin de estudios en general (opiniones) Tutora y asistencia a estudiantes (opiniones) Biblioteca (opiniones) Fondos de investigacin Reputacin general entre profesores (opiniones) Informtica Medicina Disciplina Indicadores Situacin de estudios en general (opiniones) Estudiantes por profesor Instalaciones para practicar nmero de camas en la clnica Publicaciones cientficas Reputacin de investigacin entre profesores (opiniones) Fondos de investigacin Reputacin general entre profesores (opiniones) Situacin de estudios en general (opiniones) Tutora y asistencia a estudiantes (opiniones) Infraestructura IT Situacin de estudios en general (opiniones) Tutora y asistencia a estudiantes (opiniones) Biblioteca (opiniones) Fondos de investigacin Reputacin de investigacin entre profesores (opiniones)
Ciencias Empresariales
Ciencias Polticas/Sociales
Fachhochschulen Disciplina Informtica Tcnica Indicadores Situacin de estudios en general (opiniones) Disciplina Trabajo Social Indicadores Situacin de estudios en general (opiniones)
45
Tutora y asistencia a estudiantes (opiniones) Infraestructura IT (opiniones) Organizacin y tutora de prcticas (opiniones) Reputacin general entre profesores (opiniones)
Tutora y asistencia a estudiantes (opiniones) Organizacin y tutora de prcticas (opiniones) Biblioteca (opiniones) Reputacin general entre profesores (opiniones)
Fuente: S. Berghoff et.al. (2008) CHE Hochschulranking: Vorgehensweise und Indikatoren, Arbeitspapier 106. Documento recuperado el 6 de octubre de 2009: http://www.che.de/downloads/Methoden_Hochschulranking_2008_AP106.pdf. pp. 76-83.
En el caso del ranking conciso online se ofrece tambin la posibilidad de clasificar las universidades por cada indicador individual, sin embargo, conforme el principio bsico del CHE, no se otorgan posiciones de ranking individuales a las instituciones sino que son ordenadas alfabticamente dentro de los grupos de ranking (Berghoff et.al., 2008: 73). 6.2 Mi ranking En el sitio web del ranking CHE los usuarios registrados pueden producir de forma interactiva un ranking personal basado en sus propias preferencias con respecto a la eleccin de una universidad. A travs de la opcin Mi ranking se puede seleccionar hasta cinco criterios y determinar la importancia de cada indicador en el orden de clasificacin. Por medio de instrucciones se gua a los usuarios paso a paso en el proceso de creacin del ranking. Paso 1: Seleccin del tipo de institucin de educacin superior que debe aparecer en el ranking, universidades o fachhochschulen (universidades de ciencia aplicada), y eventualmente del tipo de programa (slo programas de estudios duales). Paso 2: Seleccin de mximo cinco indicadores Paso 3: Clasificacin: El orden de seleccin de los indicadores es decisivo para los resultados del ranking, dado que son ponderados segn la prioridad que el usuario adjudica a cada indicador. Se clasifican las universidades en base a la posicin de grupo de ranking (superior, intermedio o inferior) que consigue sucesivamente en el primer indicador, el segundo indicador, el tercer indicador, etctera. En el caso de que haya universidades que para cada uno de los indicadores seleccionados son clasificadas en los mismos grupos de ranking, se las ordena en orden alfabtico. Paso 4: Seleccin: Se ofrece al usuario la posibilidad de elegir para cada indicador si se muestran slo las instituciones de educacin superior con una anotacin en el grupo superior, las instituciones
46
clasificadas en el grupo superior e intermedio, o todas las instituciones independientemente de su grupo de ranking. El ranking no slo muestra el grupo de ranking sino tambin los resultados de las evaluaciones individuales de las universidades. Sin embargo, estos resultados no son ponderados o sumados para crear una tabla de posiciones, sino que, conforme al principio del CHE, se ordenan las universidades en base a los grupos de ranking y luego en orden alfabtico segn el nombre oficial de la institucin. 6.3 Comparacin de universidades Adems de la opcin de Mi ranking el sitio web ofrece a los usuarios una opcin que les da la posibilidad de comparar el desempeo y las caractersticas principales de algunas (hasta tres) instituciones de educacin superior en un rea de conocimiento y carrera especficas. Dado que se trata de una comparacin entre slo tres universidades y en un campo especfico, es importante que el usuario que elige esta funcin ya tenga ms o menos claro qu rea de conocimiento quiere estudiar y cules de las instituciones son de su inters (por ejemplo por razones econmicas o geogrficas). Primero, se pide al usuario seleccionar una carrera, despus de lo que aparece una lista con los departamentos de las instituciones que ofrecen un programa de estudios en esta disciplina, y de la cual se debe seleccionar un mnimo de dos y un mximo de tres departamentos. Para cada uno de estos departamentos se muestran los resultados de evaluacin, es decir los grupos de ranking en que clasifican, segn indicadores como el nmero de doctorados por profesor, la reputacin de investigacin, la supervisin y asistencia a estudiantes, y la infraestructura IT. Asimismo, se proporcionan y se comparan datos sobre el resto de la universidad y la ciudad en que la casa de estudios est ubicada (ibd.: 74-5). Cuadro 6.2 Ejemplo de una comparacin de universidades: carrera de Ciencias Sociales
Grupo superior Grupo intermedio Grupo inferior
Universidad / Departamento Nmero de estudiantes matriculados en la carrera Fondos de terceros por acadmico Doctorados por profesor Publicaciones internacionales por profesor
Universidad 1
Departamento de Ciencias Sociales 807 43,5 mil 0,8 0,9
Universidad 2
Departamento de Ciencias Sociales 975 178,9 mil 0,9 0,7
Universidad 3
Departamento de Ciencias de la Comunidad 1174 33,7 mil 0,6 0,3
47
Reputacin de investigacin Profesores visitantes outgoing Ttulos docentes al nivel profesional Centro de orientacin profesional Plazas de prcticas Consejo consultivo del sector profesional Reputacin de enseanza y estudios acadmicos Tutora de los profesores Contacto con los estudiantes Oferta de cursos Organizacin de la carrera Tutora durante el perodo de prcticas Evaluacin de la enseanza Formacin en metodologa E-learning Biblioteca Salas de clase Infraestructura IT Preparacin para el mercado laboral Situacin de estudios en general Posibilidades de intercambio
2,3 % 1 1,0 S, en el departamento y al nivel de la universidad central S, en el departamento No 1,5 %
36,2 % 0 1,3 S, al nivel de la universidad central S, al nivel de la universidad central No 30,9 %
7,7 % 0 2,7 S, en cooperacin con socios externos S, en cooperacin con socios externos No 10,3 %
3,2 2,5 3,5 3,7 3,7 3,7 2,8 2,9 2,6 3,6 2,2 3,4 3,6 3,4
2,5 2,2 3,1 3,1 3,8 3,2 2,6 2,5 2,3 3,1 2,4 3,2 3,4 2,4
3,2 2,8 3,2 3,7 3,9 3,9 3,2 3,5 2,7 4,2 3,3 4,1 3,5 3,3
48
Universidad Nmero de estudiantes en la sede respectiva Evaluacin de las instalaciones deportivas Fuente: http://ranking.zeit.de
Universidad 1
Universidad 2
Universidad 3
1,9
1,9
2,0
6.4 Representacin grfica del desarrollo del nmero de matrculas En base a la evaluacin especial Estadstica de la Educacin Superior de la Oficina Federal de Estadstica (Statistischen Bundesamt), se analiza la evolucin del nmero de matrculas de las universidades dentro de un plazo extenso, para presentar los resultados grficamente en la versin online del ranking. A travs de esta funcin los usuarios pueden comparar las matrculas de una universidad con las de otra institucin de educacin superior y/o con el promedio federal, para as formarse una idea del tamao y la evolucin en popularidad de la universidad. 6.5 Ascensos y descensos Adems de la presentacin de los ascensos y descensos en base a los indicadores individuales, se proporciona un esquema con los ascensos y descensos por disciplina, en que se muestran las universidades que han experimentado un ascenso o descenso en por lo menos tres indicadores de ranking (los que pueden ser evaluaciones de estudiantes o indicadores objetivos como el ratio profesores-estudiantes, o la duracin de la formacin). De este modo los usuarios pueden ver en un solo plano cules de las instituciones se han desarrollado mejor o peor que el resto de las instituciones.
Referencias
Berghoff, S. et.al. (2008) CHE Hochschulranking: Vorgehensweise und Indikatoren, Arbeitspapier 106. Documento recuperado el 6 de octubre de 2009: http://www.che.de/downloads/Methoden_Hochschulranking_2008_AP106.pdf. Federkeil, G. (2008) Graduate surveys as a measure in university rankings. Documento recuperado el 6 de octubre de 2009: http://www.oecd.org/dataoecd/4/16/41217828.pdf. Soo, M. y D. Dill (2007) The CHE University Ranking in Germany. Documento recuperado el 6 de octubre de 2009: http://www.unc.edu/ppaq/docs/CHE_formatted.pdf.
49
Para ms informacin y la versin online del ranking CHE vase el sitio web: http://ranking.zeit.de.

Analisis Del Ranking Che

Diunggah oleh

Informasi Dokumen

Hak Cipta

Format Tersedia

Bagikan dokumen Ini

Bagikan atau Tanam Dokumen

Opsi Berbagi

Apakah menurut Anda dokumen ini bermanfaat?

Apakah konten ini tidak pantas?

Hak Cipta:

Format Tersedia

Analisis Del Ranking Che

Diunggah oleh

Hak Cipta:

Format Tersedia

Anlisis del ranking CHE

En el marco de un nuevo sistema de ranking para las universidades chilenas

Judith Scheele con la colaboracin de Jos Joaqun Brunner

Documento de Trabajo CPCE N 22 http://www.cpce.cl/ Enero, 2011

1. Explicacin del modelo de ranking del CHE

2. La investigacin emprica en el ranking CHE

Para el ranking de revistas de la VHB ver: http://pbwi2www.uni-paderborn.de/WWW/VHB/VHBOnline.nsf/id/DE_7EZGCN_Alphabetische_uebersicht.

3 Los indicadores de ranking

Procedencia de los datos Organizacin en grupos de ranking

Indicador Definicin Explicacin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos

Organizacin en grupos de ranking Indicador Definicin

Explicacin Procedencia de los datos

Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Conocimiento de idiomas admisin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Encuesta a estudiantes Promedio e intervalos de confianza

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos

Organizacin en grupos de ranking Indicador Definicin

Indicador Definicin Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Opiniones de los estudiantes

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking Indicador Definicin

Procedencia de los datos Organizacin en grupos de ranking