UNIVERSIDAD DE CHILE FACULTAD DE ECONOMIA Y NEGOCIOS DEPARTAMENTO DE ECONOMA

EL EFECTO DE LOS CERTIFICADOS DE LA CALIDAD DOCENTE SOBRE LOS LOGROS ESCOLARES DE SUS ALUMNOS

Seminario para optar al Titulo de Ingeniero Comercial, Mencin Economa

Autor: Amanda Castillo Rodrguez Profesores Gua: Juan Pablo Valenzuela B. Patricia Medrano Vera

Santiago, Chile 2009

AGRADECIMIENTOS Al profesor gua Juan Pablo Valenzuela, por sus valiosos aportes y observaciones, pero sobre todo, a su buena disposicin y paciencia. Esta investigacin ha sido realizada con la colaboracin del proyecto Ncleo Milenio sobre la Condicin Docente del Centro de Investigacin Avanzada en Educacin de la Universidad de Chile y del Centro de Perfeccionamiento e Investigacin Pedaggica del Ministerio de Educacin.

ii

PALABRAS A LOS MAESTROS

Maestro, ensea con gracia, como peda Rod. Sin hacerte un retrico, procura dar un poco de belleza en tu leccin de todos los das (mira que Cristo no divorci la hermosa intensin de verdad del deseo de hermosura y gracia verbal). Narra con donaire; sabes que tu oficio, que es de ternura, te ha vedado ser seco de corazn: tambin te prohbe serlo de lenguaje. Aprende en el libro moderno y en el antiguo de donosuras del idioma y adquirelas siquiera en parte. En San Martn, tu Abraham, Bello, tu Carrera, sus biografas enardecern ms si conoces el adjetivo hermoso que pinta el carcter, el giro hbil que da movimiento al relato, el sustantivo transparente que nombra la virtud que nombra la virtud exacta (la verdadera excelencia). No te conformes con ser claro; s, si puedes, elegante en tu palabra. La sobriedad que t sabes condicin pedaggica de tu explicacin es don literario; la naturalidad, que tambin tu manual te recomienda, es refinamiento artstico; la viveza del relato te la da no slo tu entusiasmo, sino tu habilidad cientfica (consciente, con intencin artstica). Aprende esa sobriedad, esa naturalidad, esa viveza en Pascal, en Heine, en el Dante, no destierres ni a los escolares galanes de tu grave biblioteca. Hace bien una sonrisa Nadie se divorcia impunemente de la Belleza: ni el sacerdote, ni el propagandista, ni siquiera el mercader. El descuido de tu lenguaje envuelve cierto desprecio de los que te oyen. Cuando descuidas tu lenguaje, robas algo a la verdad que enseas: te robas el atractivo sobre los nios, le robas dignidad. Te equivocas al pensar que ellos no saben de eso. Como el rstico, como el payador, como el picapedrero que canta aires hermosos sobre la cantera, el nio entiende; tienen ambos el instinto, no la ciencia por cierto, de lo divino. Haz la prueba y te quedars maravillado. Lele uno de tantos cuentos insulsos de la pedagoga ordinaria que corren por all y lele despus el Cuento a Margarita, de Rubn. Cabe el arte dentro de tu escuela. Si decoras con Millet tu sala de clases, alegras a tus pequeos; sienten la dulzura de la Balada de Mignn en su clase de canto. No desprecies al nio, que es toda su vida, porque te desprecies y haz capaz tu escuela de todo lo grande que pasa o que ha pasado por el mundo. Hars as pedagoga augusta, no gris, no pobre, no infeliz pedagoga.

Antologa de Poesa Prosa (1997)

MAGISTERIO Y NIO GABRIELA MISTRAL

iii

NDICE

INTRODUCCIN CAPITULO I CONTEXTO CHILENO I. a) Sistema Educacional I. b) Sistema de Evaluacin Docente CAPITULO II REVISIN BIBLIOGRAFICA II. a) Evidencia internacional II. b) Evidencia para Chile CAPITULO III ESTIMACIONES

5 5 10

12

12 17

22

III. a) Datos III. b) Modelo III. c) Estadstica Descriptiva III. d) Resultados CONCLUSIN REFERENCIAS ANEXO

22 23 25 27 37 40 43

Autor: Amanda Castillo Rodrguez Profesores Gua: Juan Pablo Valenzuela B. Patricia Medrano Vera

RESUMEN
La educacin es un factor fundamental para el desarrollo del pas, por lo tanto es imprescindible conocer los determinantes del logro acadmico de los alumnos, entre ellos las caractersticas de la familia, de los establecimientos y de los profesores. En Chile existe desde el 2003 el sistema de Evaluacin Docente, que tiene como objetivo identificar el desempeo de los profesores, con la categorizacin que se le da segn est evaluacin a los profesores se puede ver la relacin que existe entre los certificados de la calidad docente y el rendimiento escolar de sus alumnos medido a travs de la prueba SIMCE. Est investigacin muestra la estimacin de los efectos de la certificacin de los docentes en los puntajes de la prueba SIMCE 2008, para los alumnos de 4 bsico de los establecimientos Municipales, encontrando una relacin positiva a partir de la categorizacin que se le da a los profesores segn la evaluacin Docente. Es decir que la certificacin estara siendo correcta al identificar el buen desempeo de los profesores.

INTRODUCCIN

Dentro del sistema educacional los profesores cumplen un rol fundamental en la formacin de los alumnos, por lo que contar con informacin acerca de su desempeo es de gran inters, tanto para investigadores como para diseadores de polticas educacionales. Esto es especialmente interesante en el contexto chileno, donde tanto el sector pblico como privado subvencionado, funcionan con un sistema de

financiamiento basado en un voucher per cpita, el que se paga al sostenedor propietario del establecimiento donde los padres decidan matricular a su hijo. Con el objetivo de minimizar las asimetras de informacin que se puedan dar al momento que los padres escojan la educacin de sus hijos, es deseable que existan sistemas de informacin que den cuenta del desempeo efectivo y las condiciones generales de las escuelas, nivel de logro de sus alumnos y nivel de desempeo de sus profesores, refirindose a la calidad de estos docentes 1.

A pesar de las evidentes bondades de contar con informacin sobre la calidad de los docentes, hubo bastante resistencia a la implementacin del Sistema de

Evaluacin Docente. Tras un proceso de negociacin y luego del acuerdo suscrito por el Ministerio de Educacin, la Asociacin Chilena de Municipalidades y el Colegio de Profesores de Chile, la Evaluacin Docente se pone en marcha en Agosto de 2003. El Sistema de Evaluacin Docente slo es aplicado al sector Municipal, y cuenta con diversos instrumentos como entrevistas y portafolios, que contribuyen al carcter formativo de la evaluacin, ya que su objetivo es mejorar las prcticas pedaggicas de los profesores y promover su desarrollo y formacin permanente.

Considerando que el objetivo central de para la educacin chilena es mejorar con equidad la calidad de la enseanza que se les proporciona a los estudiantes, parece primordial saber la relacin que existe entre los certificados de la calidad

docente sobre los logros escolares de sus alumnos, para la formulacin de polticas pblicas. Esto determina el foco de esta investigacin en que se intenta estimar, cmo
1

Anlisis Del Paradigma De La Educacin Obligatoria, Historia De La Educacin Obligatoria En Chile 1810-1997, Dr. Nelson Campos Villalobos, Ph. D..

-2-

afecta el desempeo de los maestros en el nivel del aprendizaje de sus alumnos. Para ello, se busca establecer una relacin entre la categora en que son evaluados los profesores en la Evaluacin Docente y el resultado que obtienen sus alumnos en la prueba SIMCE. Ambos sistemas de medicin son utilizados como proxies de calidad de los profesores y de la calidad del aprendizaje de los alumnos respectivamente.

La literatura seala que el efecto de la calidad de los docentes sobre sus alumnos es heterogneo, pero en general existe una relacin positiva (Hanushek et al., 2005). Asimismo, existe evidencia consistente acerca de que las caractersticas de las familias y los estudiantes son los factores ms relevantes que influyen significativamente en los resultados de sus logros. Por ejemplo, para los pases de la OECD (2006), existe una fuerte relacin positiva entre el nivel de logro de los alumnos en una prueba de ciencias y su situacin socioeconmica. Para Chile un estudio reciente de Mizala, Romaguera y Urquiola (2006), indican que un ranking de desempeo de los colegios chilenos es similar a realizar un ranking de los mismos colegios de acuerdo a su nivel socioeconmico promedio 2. Por lo tanto numerosos estudios, que utilizan los datos del SIMCE a nivel agregado, encuentran que las brechas entre colegios pblicos y privados solo se produce por diferencias socioeconmicas. (Larraaga 2004) 3. Entonces el aprendizaje del estudiante estar influenciado por los distintos profesores que afectan su desarrollo, su entorno familiar y en la sala de clases, pero adems existen situaciones de segregacin en cuanto a la distribucin de los maestros, es decir, que los profesores que tienen un mayor nivel socioeconmico tendern a educar a los alumnos que pertenecen a estratos ms altos; tambin puede existir segmentacin en la distribucin de los alumnos (Clotfelter, Ladd y Vigdor, 2006).

Los sistemas de evaluacin para los profesores, se ven como parte de las estrategias de reformas educacionales basadas en estndares, donde los mecanismos de accountability o de rendicin de cuentas son un elemento central, y dentro de sta el conocer el desempeo docente contribuye a la rendicin de cuentas y a la toma de
2

Mizala, Romaguera, Urquiola, 2006. "Socioeconomic status or noise? Tradeoffs in the generation of school quality information," Documentos de Trabajo 225, Centro de Economa Aplicada, Universidad de Chile. 3 Entre otros, Bravo, Contreras y Sanhueza (1999). Mizala y Romaguera (1998).

-3-

decisiones para la implementacin de polticas pblicas; se ve que la responsabilidad por los resultados es crucial para mejorar la educacin 4.

A partir del 2008 se han realizado las primeras estimaciones en Chile para analizar la relacin entre las capacidades individuales de los docentes y el desempeo en el aprendizaje de los estudiantes, por lo que el foco de este estudio es perfeccionar estas estimaciones sin resolver los problemas de seleccin de los docentes en los establecimientos- de tal forma de determinar, con mayor precisin, la relacin efectiva entre estas variables y la consistencia de los resultados encontrados previamente en la literatura nacional. Esto es posible, ya que se cuenta con mayor cobertura de los profesores dentro de la muestra, lo que permite tener resultados ms consistentes y poder mejorar eventualmente ciertas especificaciones.

Por lo tanto, este trabajo indaga, la relacin que existe entre el desempeo docente y el aprendizaje de los alumnos, mejorando ciertas especificaciones de los trabajos ms recientes en la materia para Chile. El primer captulo que se refiere al Contexto Chileno, hace un breve resumen del sistema educacional, las principales reformas de los ltimos 20 aos y en particular, las aplicadas a los docentes, con una sntesis de lo que es el sistema de Evaluacin Docente. En el segundo captulo se realiza un compendio de la literatura internacional y nacional ms reciente sobre este tema, incluyendo el anlisis de las ltimas investigaciones realizadas en el pas. En el tercer captulo se muestran las estimaciones, con una breve descripcin de los datos, la estadstica descriptiva, el modelo que se utiliza y los resultados. Finalmente a partir de todo lo anterior se expone la conclusin de esta investigacin.

McMeekin, R.W. 2006. Accountability educacional: posibilidades y desafos para Amrica Latina a partir de la experiencia internacional, J.Corvaln y R.W.McMeekin (ed.), pp.19-49.

-4-

CAPITULO I CONTEXTO CHILENO Este captulo tiene como finalidad dar a conocer el marco institucional en que funciona la educacin en Chile, describiendo las principales caractersticas del sistema educacional actual y el Sistema de Evaluacin Docente. I. a) Sistema Educacional La educacin siempre ha sido uno de los principales focos de reforma en los diversos gobiernos chilenos de los ltimos 50 aos: la Reforma Educacional, emprendida en el gobierno del Presidente Eduardo Frei Montalva (1964-197O), la Continuacin Reforma Educacional, dada por el gobierno del Presidente Salvador Allende (197O-1973) y el sistema que sigue medianamente vigente hasta el da de hoy - en su diseo de subsidio a la demanda y competencia pblico/privada por la matrcula- implementado en el rgimen militar (1973-199O), donde se introducen significativos cambios en el esquema de gestin de la educacin. A partir de 1990, los gobiernos de la Concertacin han realizado sucesivas reformas que han tenido fuertes impactos en el aumento de la cobertura, con el objetivo de mejorar el acceso a la educacin con equidad.

La reforma al sistema escolar, implementada en 1981, pretendi potenciar la provisin educativa y el mejoramiento escolar por medio de dos estrategias principales. La primera correspondi a un proceso de descentralizacin de la gestin de los establecimientos pblicos de educacin. La segunda, fue la utilizacin de un esquema de financiamiento por medio de vouchers, es decir un pago de subvencin mensual plana entregado a los sostenedores pblicos o privados- de acuerdo a su matrcula, es decir, la eleccin del establecimiento seleccionado por la familia del estudiante. La primera se logr a travs de la delegacin de la administracin de los colegios pblicos a las municipalidades, con lo que se buscaba mejorar la toma de decisiones y la asignacin de los recursos. La segunda, permiti el ingreso de nuevos actores del sector privado, quienes proveen educacin, financiada con recursos pblicos. Es importante mencionar que debido a reducciones en el presupuesto gubernamental de

-5-

la poca, la subvencin por alumno tuvo un descenso de 29%, y los sueldos de los profesores un 32%, en trminos reales, en el perodo 1981 a 1990 5.

Con el objetivo de mitigar las potenciales fallas de mercado que se producen debido a las asimetras de informacin en el sistema educacional, se implement una prueba nacional estandarizada, inicialmente sta correspondi al Programa de Evaluacin del Rendimiento escolar (PER 1982-1984), luego llamado Sistema de Medicin de la Calidad de la Educacin (SIMCE), desde 1988. En los siguientes prrafos se revisar de manera breve las reformas al sistema educacional y luego las reformas a los profesores.

A partir de los aos 90, y con la llegada de la democracia, se increment la cantidad de recursos que el Estado destina a la educacin, concentrndose en la mayor focalizacin de estos recursos y estrategias para mejorar los resultados de las escuelas de los sectores ms vulnerables. Se realizaron profundas transformaciones, a travs de distintos programas de los gobiernos de la Concertacin, se implementa una nueva modalidad de financiamiento compartido que a partir de 1993 permite a los establecimientos cobrar un monto fijo mensual obligatorio a las familias y a partir de este, recibir tambin cierto valor de subvencin; adems en 1996 se pone en marcha la Reforma Educacional, luego la Jornada Escolar Completa iniciada en 1997 y, ms tarde, en el 2003, se logra la promulgacin de la ley de 12 aos de escolaridad obligatoria. Todas las reformas anteriores han tenido como resultado un importante avance en materia de cobertura, logrando ms de un 97% en la educacin primaria, mostrndose como un pas lder dentro de la regin y aproximndose al promedio de los pases de la OCDE. 6

Durante el ao 2008 se implement una nueva forma de financiamiento, la Subvencin Escolar Preferencial (SEP), ley que fue diseada con el objetivo de
5

En Alejandra Mizala y Pilar Romaguera, 2005, Calidad de la educacin Chilena: El desafo de la prxima dcada 6 Tokman A. 2004. Educacin y Crecimiento en Chile, Banco Central de Chile, Documentos de Trabajo, N 289

-6-

impulsar una educacin de calidad y equitativa para todos los alumnos que pertenecen al sistema subvencionado. A grandes rasgos, la idea es otorgar una cantidad mayor de recursos a los alumnos categorizados como de mayor vulnerabilidad econmica, los cuales se denominan prioritarios.

Es importante hacer una breve explicacin de la SEP, porque es la reforma compensatoria ms sustancial que se ha dado en los ltimos aos. Para recibir la SEP, el establecimiento subvencionado se debe inscribir de forma voluntaria, asumiendo las distintas obligaciones y compromisos que la Ley establece. Para adherirse al proyecto, las escuelas deben comprometerse con el Ministerio de Educacin a cumplir ciertas obligaciones, detalladas en el llamado Convenio de Igualdad de Oportunidades y Excelencia Educativa. Un aspecto importante de ste Convenio es el Plan de Mejoramiento Educativo al cual deben comprometerse las escuelas 7.

Los establecimientos son clasificados segn distintos indicadores, como son los resultados educacionales y la gestin escolar, como Autnomos, Emergentes o en Recuperacin. Lo anterior dar como resultado la forma en que van a ser tratados en el uso de los recursos y con el nivel de supervisin que recibirn por parte del Ministerio de Educacin, adems de las obligaciones que deben cumplir.

En el 2006, fruto de las movilizaciones generadas a partir de la Revolucin Pingina (Movimiento estudiantil liderado por alumnos de educacin secundaria que queran derrocar la LOCE, Ley Orgnica Constitucional de Enseanza), se gener el Consejo Asesor Presidencial para la Calidad de la Educacin cuyo objetivo principal fue promover recomendaciones para mejorar la calidad de la educacin. Los amplios acuerdos a los que lleg el Consejo, se relacionan con lograr una educacin de mayor calidad y equidad, lo que se establece como una tarea nacional de largo plazo. Se destaca la importancia de la participacin de los distintos actores tanto los estudiantes como sus familias, los directivos y los profesores, recalcando la importancia de tener buenos profesores y directivos, fomentando su formacin permanente. A partir de lo anterior se formul el Proyecto de Ley General de Educacin (LGE) que reemplaza la
7

Ley 20.248: Ley de Subvencin Escolar Preferencial. 3 de Abril de 2008.

-7-

LOCE, y que fue aprobada en el ao 2009. Adems en el ao 2008 se comenz a discutir un proyecto de Ley que fortalece la Educacin Pblica, promovido por los partidos de la concertacin.

Pero las reformas implementadas no han logrado mejorar la calidad de la educacin en todos los sectores, lo que se refleja en que los puntajes SIMCE se ven estancados en los ltimos aos 8, mostrando deficientes resultados. Lo anterior se ve reflejado con mayor claridad desde el ao 2006, donde se incorpor al SIMCE los estndares de desempeo, y se puede ver que dentro de la poblacin de nivel socioeconmico bajo, el 53% est en el nivel inicial, mientras que solo el 19% alcanza el nivel avanzado. La diferencia es clara para los alumnos que pertenecen al quintil de ingreso ms alto, donde el 69% tiene un nivel avanzado y solo un 11% tiene nivel inicial 9. La desigualdad es profunda al igual que las diferencias que se muestran en las mediciones internacionales, tanto PISA, como TIMSS, donde Chile aparece muy por debajo de algunos pases que tienen el mismo nivel de ingreso per cpita 10, aunque al considerar al utilizar comparaciones latinoamericanas, Chile aparece en un segundo grupo de pases, luego de Cuba, en los logros en lenguaje para estudiantes de 3 y 6 bsico (junto a Costa Rica y Uruguay), aunque a mayor distancia de estos pases al considerar matemticas (UNESCO, 2008).

La situacin es insatisfactoria en los distintos niveles socioeconmicos: slo un 5% de los jvenes de 15 aos tiene el nivel promedio de sus pares de los pases de la OECD (PISA 2000); en la prueba TIMSS 1999- 2003 (matemticas y ciencias) que tambin se aplica a nivel internacional, los resultados tambin son deficientes. Finalmente podemos ver que a pesar del aumento del gasto en educacin que se ha dado desde los aos 90 11 los alumnos siguen presentando niveles muy bajos en pruebas nacionales e internacionales 12.
8

En Alejandra Mizala y Pilar Romaguera, 2005, Calidad de la educacin Chilena: El desafo de la prxima dcada. 9 Resultados Lenguaje SIMCE 4 Bsico 2007, MINEDUC. 10 Relacin Puntaje TIMSS en Matemtica e Ingreso Per Cpita. Ver en, Harald Beyer. Centro de Estudios Pblicos 2004. 11 Informe MINEDUC 2007.
12

IALS 2000, TIMSS 2003, PISA 2006.

-8-

A nivel de los establecimientos, existen escuelas que han logrado tener un mejor desempeo, las cuales se han identificado a travs de distintas investigaciones que se han realizado de escuelas efectivas 13. Estas evidencian como escuelas de bajos recursos, tienen logros muy buenos, utilizando los mismos recursos de la subvencin otorgada por el sistema voucher; son escuelas que logran darle un valor agregado a la educacin que entregan a sus alumnos 14. Uno de los estudios para nuestro pas, muestra que escuelas vulnerables
15

presentan mejores resultados, al

tener elementos claves como son un buen equipo directivo y docente, que estn comprometidos y que tengan altas expectativas de sus alumnos. Se presentan como factores esenciales el ambiente escolar, la identidad que tienen tanto padres, profesores, directivos y alumnos con su escuela. Son las expectativas positivas frente a los logros potenciales de los alumnos, un determinante fundamental a la hora de obtener mejores resultados. Tambin es relevante la importancia de tomar en cuenta la relacin familiaescuela, as como las prcticas de liderazgo y metodologas eficientes utilizadas en el aula.

Otro tema que se debe mencionar es que los docentes tambin han sido parte de distintas reformas, ya que la situacin laboral previa a los aos 90, en cuanto a nivel de salarios y condiciones de trabajo era deficitaria 16. Por ello, en los primeros aos del retorno a la democracia hubo un amplio acuerdo para el aumento de los salarios de los profesores y un mejoramiento en las situacin laboral para los profesores; en 1991 se promulg la Ley de Estatuto Docente, normativa que se aplica al sector municipal, que regula la estructura de salarios de los docentes, donde se premia a la experiencia, y se garantiza la estabilidad laboral.

Ver, entre otros: Cuttance, 1989; Creemers , 1994, Arancibia et al., 2000; Bellei, C. et al. 2004. Martinic, S. y Pardo, M. (2003). Aportes de la Investigacin Educativa Iberoamericana para el Anlisis de la Eficacia Escolar en F.J. Murillo La Investigacin sobre Eficacia Escolar en Iberoamrica. Revisin Internacional sobre Estado del Arte, Convenio Andrs Bello Ministerio de Educacin, Cultura y Deporte, Espaa y CIDE, Chile. 15 Raczynski, D. y Muoz, G..: Factores que desafan los buenos resultados educativos de escuelas en sectores de pobreza. (chile). Asesoras para el Desarrollo. Agosto 2004. 16 Ver en Mizala y Romaguera, artculo Estructura de remuneraciones, diferenciales de salarios y sistemas de incentivos en el sector educacin, N Proyecto: 1000936, Concurso: FONDECYT, 2000 - 2002
14

13

-9-

En 1996 se crea un primer mecanismo de incentivo colectivo a la gestin de los establecimientos escolares subvencionados por medio del Sistema Nacional de Evaluacin del Desempeo (SNED), que da informacin sobre los procesos y resultados educativos de las escuelas y establece incentivos a los profesores. Adems desde el ao 2003 se integr el SACGE, Sistema de Aseguramiento de la Calidad de la Gestin escolar, que es una autoevaluacin voluntaria de las escuelas, la cual es validada por una comisin externa.

Como se mencion anteriormente solo para quienes trabajan en el sector Municipal sus condiciones de trabajo estarn reguladas segn el Estatuto Docente, por lo que dentro del Sistema Educacional Chileno, los contratos de los profesores, al igual que la estructura de sus remuneraciones dependern del tipo de establecimiento en el cual se desempean. Por lo tanto, para quienes trabajan en el sector municipal todo lo relacionado con jubilacin, bonos, despidos, etc. ser regulado por un marco regulatorio similar y administrado por el Municipio. De esta misma manera, solo los profesores que son parte de ese sector, son quienes deben participar de la Evaluacin Docente, que detallaremos a continuacin.

I. b) Sistema de Evaluacin Docente

El sistema de evaluacin de docentes de aula en el sistema municipal chileno se realiza en base a los criterios y descriptores que se encuentran en el documento del Marco para la Buena Enseanza (MBE), y su objetivo es realizar una evaluacin de desempeo a todos los docentes del Sistema Municipal.

La evaluacin para el docente tendr como resultado, que segn el puntaje obtenido pasa a estar dentro de una categora, ya sea Destacado, Competente, Bsico e Insatisfactorio. Dependiendo de la categora a la cual pertenezca, deber seguir cursos de accin alternativos.

Quienes estn en la categora Destacado y Competente, podrn postular a la AVDI (Asignacin Variable por Desempeo), la cual se obtiene luego de rendir una

- 10 -

prueba de carcter voluntario, y segn puntaje obtenido. A partir de esto podrn recibir un bono o asignacin que se da a partir del nivel de los resultados obtenidos y por el tramo de aos que les queden para realizar la siguiente evaluacin obligatoria.

Para quienes tengan la categora Bsico e Insatisfactorios, es obligatorio participar de los Planes de Superacin Profesional (PSP). Solo quienes obtengan la categora Insatisfactorio, debern repetir su evaluacin al ao siguiente, y si nuevamente queda en la misma categora, deber suspender sus actividades acadmicas, para trabajar durante un ao en su Plan de Superacin Profesional (PSP), siendo sometido al trmino del proceso a una tercera evaluacin. Si llega a suceder que vuelve a no superar el puntaje del nivel insatisfactorios, el profesor dejar de pertenecer a la Dotacin Docente. Quienes se nieguen a rendir la Evaluacin Docente, sern tratados como parte de la categora Insatisfactoria.

Las entidades que participan dentro del proceso son: los Municipios, como Administradores de la evaluacin y de los planes de superacin profesionales, el Ministerio de Educacin con el rea de Acreditacin y Evaluacin Docente del CPEIP, y finalmente una entidad de Asesoramiento Tcnico Independiente, que hasta ahora ha estado a cargo de la Pontificia Universidad Catlica de Chile.

La evaluacin se realiza cada cuatro aos, y los instrumentos que se utilizan son un Portafolio con un conjunto de evidencias de clases, una Pauta de Autoevaluacin, Informes de Referencia de Terceros (Director y Jefe Tcnico) y una Entrevista de un Evaluador Par 17.

17

Ms informacin en www.docentemas.cl

- 11 -

CAPITULO II REVISIN BIBLIOGRAFICA Este captulo tiene como finalidad hacer un breve anlisis de la literatura, tanto a nivel nacional como internacional, lo cual permitir al lector tener referencias acerca de las evidencias que muestran las distintas investigaciones en base a la certificacin docente y cmo influye sta sobre el nivel de logros de los estudiantes a su cargo. II. a) Evidencia internacional

En los exmenes a profesores se desarrolla una perspectiva sobre el saber de los profesores, donde se diferencian distintas categoras del conocimiento; la primera es el conocimiento del contenido, la cual se relaciona con el volumen de conocimiento que posee un profesor y la forma en que los organiza, y la otra es el del conocimiento pedaggico del contenido, es decir, conocer la materia para ensearla, de manera tal que se pueda tener el manejo de estructurar y presentar la materia, para lo cual el maestro debe contar con la habilidad de ocupar estrategias para reorganizar el aprendizaje segn el ambiente que se tenga en el aula (Shulmann, 2005).

Por lo tanto, medir el desempeo docente es un tema complejo tcnica y polticamente, que requiere de rigurosidad para que las evaluaciones que se realicen, sirvan para establecer variables que sean buenos predictores de lo que se quiere estimar. Como una referencia sobre la magnitud de los efectos que generan los buenos profesores sobre sus alumnos, se puede mencionar que en 1992, Hanushek encuentra que un alumno con un profesor de alta calidad, logra una mejora de los niveles de aprendizaje de 1,5 unidades equivalentes de nivel de grado, a diferencia de un alumno con un docente de baja calidad, que solo logra una mejora de 0,5 equivalentes a nivel de grado. Por lo que se podra decir que un docente de alta calidad puede marcar la diferencia en conocimientos para un alumno de un ao entero.

En la literatura internacional las ltimas investigaciones que utilizan mtodos de mayor especificidad, como es el uso de datos longitudinales, sealan un efecto estadsticamente positivo y significativo de los buenos profesores sobre sus alumnos.

- 12 -

A continuacin se realizar un breve anlisis de alguno de los estudios que se han realizado, acerca de la certificacin docente y su efecto sobre los logros de los alumnos, en orden cronolgico.

En el ao 2005 Hanushek, Kan, O`Brien y Rivkin publican un estudio, en que se hace una estimacin de la relacin del logro de los estudiantes con la mejor calidad de los docentes. Esto a travs de un modelo bsico que muestra como variable dependiente al logro del estudiante, y como variables explicativas el crecimiento de los flujos de los insumos, relacionados con los factores determinados por la historia la familiar, del barrio, la escuela y los profesores. Se ocupa el panel de datos Texas Schools Microdata Panel (TSMP), estudiando los grados de 4 a 8 de educacin primaria, para los aos escolares desde 1995/1996 a 2000/2001.

La investigacin seala que existe una alta heterogeneidad en los resultados de los alumnos, adems muestra que aparentemente las buenas prcticas de los profesores, asociadas a los buenos resultados de sus alumnos, no pareciera estar relacionada con sus grados de avances o la certificacin, aunque la experiencia docente s parece ser importante en el primer ao de enseanza. Los autores reportan que la variacin en la calidad de la educacin asociada a mejores puntajes, ocurre principalmente dentro de las instituciones ms que entre instituciones, y que efectivamente existe un efecto positivo entre mejor calidad docente y el logro de sus estudiantes.

En el ao 2006 Kane, Rockoff y Staiger, publican una investigacin en la cual se realizan mediciones de los efectos que generan los profesores certificados versus los no certificados en sus alumnos en la ciudad de Nueva York, con datos desde el perodo escolar 1998/99 a 2004/05, encontrando que hay pocas diferencias en

promedio. Entre los efectos que generan los profesores certificados y los certificados de manera alternativa (ej: Teacher for America), se encuentra que los efectos positivos generados son muy similares para quienes tienen profesores con ms experiencia y profesores que han sido becados en su enseanza por su buen rendimiento; tambin existe un efecto positivo para los profesores que vienen del programa Teachers for

- 13 -

America en matemtica, ms que en lenguaje (los profesores del programa Teachers for America no se encuentran certificados, ya que su labor se produce por un corto perodo de tiempo, donde luego egresan del programa). Los autores concluyen que no existen diferencias significativas en los efectos que producen los profesores certificados y los no certificados, sobre los aprendizajes de sus estudiantes.

Los investigadores Clotfelter, Ladd y Vigdor, han realizado numerosos estudios acerca de las certificaciones docentes y los efectos que tienen sobre los logros de los alumnos. En una publicacin del ao 2006, utilizando datos de Carolina del Norte, del North Carolina Education Research Data Center (NCERDC), para el perodo escolar 2000/01 de 5 grado, realizan un estudio que les permite verificar como existe una tendencia de que los profesores altamente calificados estn en escuelas en que sus alumnos presentan un mejor nivel tanto acadmico como socioeconmico, y que en su mayora pertenecen a la poblacin blanca. Lo anterior sera evidencia para sealar que se podran generar sesgos por seleccin al estimar los efectos de los profesores sobre sus alumnos. Se agrega que se ven ms favorecidos los alumnos con mejor rendimiento en el rea de matemtica, donde se ve un aumento en los resultados previstos de 1 a 2 por ciento de una desviacin estndar.

En ese mismo ao 2006, publican otra investigacin junto a Glennie, en la cual realizan un estudio sobre la implementacin de una poltica pblica realizada en Carolina del Norte, la que consiste en dar un bono a los profesores que estn certificados en matemtica o ciencias y que trabajen en sectores de pobreza o en escuelas secundarias pblicas con debilidades acadmicas. Utilizando datos longitudinales, desde el perodo escolar 1999/2000 hasta el perodo 2003/04, teniendo un panel de cuatro aos, se concluye que el programa tuvo efectos positivos, disminuyendo la rotacin de profesores, teniendo mayor efecto sobre profesores de matemtica y con mayor experiencia; profesores con 10 a 19 aos de experiencia, tienen una reduccin estadsticamente significativa del 37 por ciento en las tasas de salida del sistema educacional.

- 14 -

En enero del ao 2007, publican otra investigacin sobre el mismo tema, la cual se refiere a la relacin los resultados de los alumnos y el nivel de certificacin de sus profesores. En este trabajo, los autores determinan que existen fuertes efectos positivos para los alumnos que cuentan con profesores de su misma raza, con un efecto de 0,020 a 0,029 desviaciones estndar de matemticas y de 0,013 a 0,020 para la lectura. Tambin existe un efecto positivo para los alumnos que tienen profesores con mayor grado de certificacin, ms en matemtica que en el rea de lenguaje; as profesores sin experiencia en el rea de matemticas con certificacin con respecto a uno dbil, aumenta de de - 0,150 a -0,206 desviaciones estndar, en cambio en lectura es de -0,081 a -0,120. Para este estudio, se utilizan datos longitudinales, para 3,4 y 5 grado, en los aos 1995 a 2004 de Carolina del Norte.

En noviembre del mismo ao se hace una publicacin de un estudio ms exhaustivo sobre el tema, donde se estiman un modelo de efectos fijos por estudiante, minimizando sesgos que se puedan producir por la distribucin no aleatoria de profesores y estudiantes, utilizan datos de Carolina del Norte, dado que en ese Estado se toman pruebas al finalizar los cursos (EOC), las que pueden ser realizadas tanto en 9 como en 10 grado. La muestra tiene datos especficos de alumnos que estaban en 10 Grado en 1999/2000; en 2000/01, en 2001/02 y en 2002/03, permitiendo que los alumnos ya hayan realizado las pruebas. Adems, la muestra incluye solo a los alumnos que se logr hacer coincidir al menos con tres profesores de las pruebas EOC. Se predice que el efecto de los profesores que tienen certificacin es positivo en sus alumnos, y que, a su vez, existe una desigual distribucin de los profesores por escuela, la cual es determinada tanto por raza como por nivel socioeconmico; lo que es evidencia para sealar que no hay igualdad de acceso a la educacin de alta calidad para quienes pertenecen a minoras, o que sus padres presentan menor nivel de educacin.

Por otra parte, existen diversos estudios que analizan los efectos del programa de certificacin docente de Estados Unidos (National Board for Professional Teaching Standards, NBPTS).Uno de estos estudios es realizado por Goldhaber, (2007), que utiliza datos a nivel de estudiantes, profesores y escuela de Carolina del Norte, en los

- 15 -

aos 1996 a 1998. La base de datos incluye el estatus del profesor respecto del NBPTS: postulante en curso, postulante exitoso, postulante rechazado, y no postulante (status que puede cambiar ao a ao). Teniendo en consideracin que los docentes certificados poseen atributos que se asocian con mejores resultados acadmicos de los estudiantes, se utiliza un mtodo de estimacin sencillo, el que consisti en una regresin mltiple, donde la variable de resultado fue el avance de los alumnos de un ao a otro, y se control por un amplio set de variables en los niveles mencionados. Para identificar el efecto NBPTS se introdujeron variables dummies indicando el estatus del docente (bsicamente certificado, postulante rechazado, no postulante; pero tambin si el docente era un futuro certificado docentes que en el ao en cuestin no estaban certificados, pero s lo seran en aos posteriores-, o futuro postulante). El estudio tambin condujo estos anlisis separados por NSE de los estudiantes, raza, y grado.

Los resultados obtenidos sealan que los alumnos de los docentes que llegaran a ser certificados (futuro NBPTS) aumentaron sus puntajes en matemtica en 0,05 S.D. y en lenguaje en 0,04 S.D. ms que sus pares de docentes no certificados. Sin embargo, el efecto estimado para los actuales docentes NBPTS es slo significativo para lenguaje y ms pequeo en magnitud. Un dato interesante es que los docentes que estn en el ao de su proceso de postulacin al NBPTS son menos efectivos que en sus aos previos y posteriores, lo que segn los autores podra ser, porque el proceso mismo de certificacin, disminuira la efectividad docente mientras ocurre. Los autores prueban varios modelos y no encuentran evidencia que los docentes participantes (ganadores ni perdedores) sean ms efectivos despus que antes del proceso de certificacin NBPTS. Finalmente, los autores encuentran que tener un docente con certificado NBPTS afecta positivamente ms a los alumnos ms pobres en lenguaje y matemticas. Por ltimo, tambin observan mayores efectos NBPTS en estudiantes en 3 que en los grados 4 y 5.

- 16 -

II. b) Evidencia para Chile

Es importante mencionar que existe muy poca investigacin acerca de la certificacin que se da a partir de la evaluacin docente y la correlacin que se da con los logros de los alumnos, lo cual en el sistema nacional se puede medir por la prueba que se realiza de forma censal todos los aos, SIMCE. El foco de las investigaciones ha sido determinar cmo los profesores que han pasado por el sistema de Evaluacin Docente, y que han sido calificados segn las distintas categoras (Insatisfactorio, Bsico, Competente y Destacado) influyen en los resultados que los alumnos tienen en el SIMCE.

El trabajo de Paredes, Manzi y Len (2008), utiliza datos del SIMCE 2006 para alumnos de 4 bsico y los resultados de la Evaluacin Docente 2005 y 2006. Este estudio utiliza como variable dependiente el logro escolar, controlando por las caractersticas del alumno, de su familia, del establecimiento y de sus pares (medido por el promedio del ingreso familiar de los compaeros de colegio). Adems se agregan los resultados vinculados al desempeo docente que es medido a travs de: el promedio de resultados del establecimiento, el promedio de los resultados en el portafolio del establecimiento y el porcentaje de profesores dentro del establecimiento que se encuentran en las distintas categoras de clasificacin; todo lo anterior se obtiene a travs de la Evaluacin Docente, (y se mide de esta manera ya que se tiene una carencia de informacin al no poder relacionar directamente al profesor y el curso en que hace clases). Con todo esto se realiza una estimacin de un Modelo Lineal Jerrquico (HML), para considerar la estructura jerrquica que tienen los datos. Si bien las estimaciones por MCO no difieren con el modelo HML, se podra romper el supuesto de independencia de las observaciones. Se ocupa como nivel 1 los alumnos y nivel 2 los establecimientos, esto dado que se tiene los puntajes a nivel de cada alumno y adems al medir la calidad docente a nivel de colegio, se toman los datos a nivel agregado por escuela.

Se llega a la conclusin que el desempeo del profesor, medido de la forma en que se evala la calidad docente y calculando como el promedio de los profesores

- 17 -

dentro de la escuela, afecta al resultado de los alumnos, adems se aade el hecho de que el efecto de la calidad docente parece ser mayor que el del nivel socioeconmico en el SIMCE para colegios Municipales, pero menor que el efecto de la educacin de los padres 18

Para corregir la inminente presencia de endogeneidad que se pueda dar ya que los buenos alumnos tienen a buenos profesores, se utiliza el mtodo de variables instrumentales, donde la variable proxy de calidad docente es el porcentaje de profesores que fueron calificados dentro de las categoras insatisfactorio, bsico, competente y destacado por establecimiento, adems de otras variables que se consideran como outputs docentes. El resultado de esta estimacin muestra que esas variables inciden positivamente, pero que el efecto de calidad docente, es incluso superior como porcentaje de la varianza de la prueba SIMCE.

Por otro lado se realiza una estimacin, para ver el efecto escuela, la cual arroja como resultado que son las escuelas que se encuentran en un nivel intermedio e inicial (Calificacin otorgada por el MINEDUC) las que se ven afectadas de manera ms positiva por la calidad docente, el efecto no es estadsticamente significativo para las escuelas en nivel avanzado. Finalmente se concluye que al aumentar la puntuacin en una evaluacin docente para un profesor en la mitad de la desviacin estndar, es como elevar los puntajes SIMCE en 1,92 pts. El mismo aumento se puede lograr al incrementar los ingresos familiares en $175.000, lo que es un cambio en casi una desviacin estndar de los ingresos.

A pesar que el estudio anterior intenta corregir la endogeneidad que se pueda producir en la distribucin de los docentes entre los establecimientos escolares, dado que no existe una distribucin aleatoria de los profesores, si no que los con mejor desempeo pueden hacer clases a los cursos que tienen alumnos con mejores rendimientos, puede verse que la variable que se usa como proxy es dbil, porque probablemente ese comportamiento se d a nivel de escuela, es decir que los buenos
18

Calidad Docente y Rendimiento Escolar en Chile; Evaluando la Evaluacin, M. Gabriela Len, Jorge Manzi, Ricardo Paredes, 2008.

- 18 -

profesores estn en las buenas escuelas, ms que a nivel de cursos. Por otro lado, en el estudio se concluye que los resultados del impacto directo que tienen los mecanismos de incentivos sobre el nivel de logros de los alumnos son dbiles, lo que da pie para realizar una nueva investigacin en la que se tengan ms datos y que se pueda relacionar directamente al profesor con el curso en que hizo clases, como se hace en este estudio.

Otra investigacin para el caso chileno es el trabajo publicado el ao 2008 por Bravo y otros, donde se utilizan los datos de Asignacin de Excelencia Pedaggica (AEP) 2002, Evaluacin Docente 2003, y Asignacin Variable de Desempeo Individual (AVDI) 2006, mientras que para analizar el impacto sobre los aprendizajes de los estudiantes se utilizan los puntajes de 4 bsico para el SIMCE 2002 y 2006.

Para medir el impacto de la certificacin sobre el desempeo de los estudiantes se utiliza un modelo simple de funcin de produccin, donde la variable dependiente es el puntaje del alumno en el SIMCE y las variables explicativas se dan a partir de las caractersticas de la familia, del establecimiento, y de sus docentes, obteniendo como resultado que los programas de certificacin son exitosos en identificar a los docentes ms efectivos, y para estos profesores se tienen que, dado la relacin con sus alumnos, estos obtienen en general los mejores resultados en las pruebas del SIMCE 19 . Se aprecia que para aquellos alumnos que tienen menor nivel socioeconmico, al tener un profesor que est certificado por el programa AEP, tendrn un mejor rendimiento escolar, y se da evidencia que el efecto de un profesor que tiene una certificacin AEP, es siempre positivo para sus alumnos.

Para la Evaluacin Docente, al igual que en la investigacin de Paredes y otros (2008), tambin hay un efecto positivo muy fuerte para aquellos alumnos que tienen un profesor con categora Destacado. As tambin sucede que los profesores que obtienen un mejor puntaje en la prueba AVDI, tienen alumnos con mejor rendimiento escolar. Los resultados muestran que el tener un profesor que est en la categora
19

La relacin entre la Evaluacin Docente y el Rendimiento de los alumnos; Evidencia para el caso de Chile; David Bravo, Denise Falck, Roberto Gonzlez, Jorge Manzi, Claudia Peirano, 2008.

- 19 -

destacado versus uno que est en la categora insatisfactorio, puede determinar una diferencia en los puntajes de los resultados de los alumnos de 0.11 y 0.43 desviaciones estndar.

En el estudio anterior, nuevamente no se corrige el posible efecto de endogeneidad que se pueda producir de que los buenos profesores hacen clases a los buenos alumnos, lo que se podra solucionar, parcialmente, incluyendo el efecto par al interior de cada curso.

En ambos estudios se trabaja con datos de corte transversal, lo cual implica que se podra tener sesgo por seleccin y por variables relevantes omitidas no observables, produciendo parmetros sobre o sub estimados. Esto se podra solucionar ocupando datos longitudinales que permitean controlar por esas caractersticas no observables, al medir las variables de anlisis en dos o ms perodos de tiempo. Se ocupar la metodologa de efectos fijos, en los casos que exista correlacin entre las variables explicativas del modelo y las variables no observadas (o de efecto individual), cuando no hay correlacin se puede utilizar la metodologa de efectos aleatorios. En general se utiliza efectos fijos, lo que al controlar por las variables que son no observables y que no varan a travs del tiempo, permite disminuir el sesgo por variable omitida relevante; por ejemplo se podran agrupar todas las caractersticas que son fijas en el tiempo, observables y no observables de los profesores, alumnos, familias y establecimientos en una misma constante, permitiendo tener estimadores ms cercanos al verdadero valor de los betas.

Lamentablemente, todava no se cuenta con datos longitudinales, pero probablemente en un futuro cercano se podrn hacer estudios que ocupen este tipo de datos ya que los docentes irn siendo evaluados cada cuatro aos, lo que permitira construir un panel de datos.

Otro problema, es que los datos utilizados de los resultados obtenidos por los profesores en las evaluaciones docentes son escasos, es decir que las mediciones fueron realizadas con un porcentaje parcial de profesores que contaban con evaluacin

- 20 -

docente. Lo anterior podra tener como consecuencia estimaciones sesgadas. En Paredes et. al. (2008), se ocupan solo datos para los profesores que fueron evaluados en 2 aos y en Bravo et. al. (2008), solo se ocupa los profesores que fueron evaluados en un ao. Dado la disponibilidad de datos, lo anterior intenta ser mejorado en este trabajo, ya que se cuenta con ms informacin al respecto, ocupando 4 aos de Evaluacin Docente, teniendo alrededor del 80% aprox. de los profesores municipales calificados en las distintas categoras, lo que permite tener mejores estimaciones y relacionar de manera ms directa a los profesores con sus alumnos.

Adems, dado que los datos son solo para los establecimientos municipales, sera correcto intentar identificar si existe un efecto por comuna y regin, lo que en los estudios anteriores podra ser una variable omitida en las estimaciones.

- 21 -

CAPITULO III ESTIMACIONES

En este captulo se revisa la metodologa implementada, que permite identificar los determinantes del desempeo escolar y su relacin con los resultados que obtienen los profesores en la Evaluacin Docente, haciendo un breve anlisis de los resultados obtenidos.

III. a) Datos

Se utilizan las bases proporcionadas por el Ministerio de Educacin, especficamente por el SIMCE y el Centro de Perfeccionamiento, Experimentacin e Investigaciones Pedaggicas (CPEIP), que facilit los datos de la Evaluacin Docente. Adems se pidi la colaboracin de la Divisin de Planificacin y Presupuesto, quienes nos facilitaron la base SIGE (antes RECH) para poder empalmar los datos.

Los datos proporcionados son a partir de la prueba SIMCE para 4 bsico del ao 2008, se trabaja con este grado porque en general el aprendizaje de los alumnos de niveles iniciales est asociado a pocos docentes, puesto que, en muchos casos, son uno o dos profesores los encargados de ensear todas las disciplinas a los estudiantes. Asimismo, la segregacin escolar por resultados educativos an no es tan pronunciada como en el segundo ciclo de educacin bsica y educacin medida, lo cual reduce la asociacin de la calidad de un docente en particular y los resultados en los aprendizajes de los estudiantes de su curso. A partir de estos datos se tiene los puntajes por alumno y tipo de prueba rendida, adems de la informacin generada por los cuestionarios que realizan tanto apoderados como profesores.

Adems se ocupan los datos de la Evaluacin Docente, que a travs del cuestionario complementario por ao (del 2005 al 2008), se pueden ver las categoras en que est cada profesor; Insatisfactorio (I), Bsico (B), Competente (C) y Destacado (D), e informacin especfica de cada docente, como es la experiencia, nivel profesional, capacitaciones, etc. Es importante sealar que los datos de Evaluacin

- 22 -

Docente solo estn para los establecimientos Municipales, y que adems solo se cuenta con el 90% aproximado de esa informacin, ya que hay profesores que no autorizan que se utilicen sus datos para fines de investigaciones.

La base de datos del SIMCE 2008 contiene 239.822 observaciones, que es la cantidad de alumnos que rindieron esa prueba. Para la base de datos que contiene los resultados de la Evaluacin Docente desde el 2005 al 2008, se tiene 36.625 profesores que trabajan en 4 Bsico el ao 2008. Dado que solo se toma la informacin para los alumnos de establecimientos Municipales, se tiene un total de 75.150 observaciones para la base final, ya que no se incluye en las estimacin las variables omitidas de algunas observaciones.

III. b) Modelo

Dado que el objetivo final es ver la relacin de los certificados docentes sobre los logros escolares de sus alumnos, y sabiendo de la existencia de mltiples insumos educativos, se plantea un modelo de Funcin de produccin. La dificultad para medir la calidad de los insumos y su aporte marginal al producto educativo 20, se debe a que la educacin de un nio est influenciada no solo por lo que el profesor imparte dentro de la sala de clases, sino que tambin por caractersticas de su familia, como la educacin de los padres, la cantidad de libros que hay en el hogar, las caractersticas de la escuela, cmo es el ambiente en el curso, nivel socioeconmico promedio de la escuela, tipo de establecimiento, y adems las caractersticas del profesor, como es la experiencia, el nivel profesional, etc. Es por ello que el modelo de funcin de produccin que se plantea, considera como variable dependiente el puntaje SIMCE de cada alumno, y como variables explicativas las caractersticas de su familia, de la escuela y del profesor. Esta se puede representar a travs de la siguiente ecuacin:

S ijk = 0 + 1 D1 + 2 F1 + 3 P1 + 4 E1 + 5 EP1 + ijk

(1)

20

Mizala y Romaguera, 2005, Calidad de la educacin Chilena: El desafo de la prxima dcada.

- 23 -

Donde S ijk es el puntaje SIMCE del estudiante i, del profesor j en la escuela k. Las variables explicativas son D1 , que son variables dummies para cada categora que obtienen los profesores en la Evaluacin Docente; F1 caractersticas del alumno y su familia; P caractersticas del profesor; E1 caractersticas del establecimiento; EP mide 1 1 el efecto par; ijk es el error de estimacin, el cual captura todas las caractersticas no observables que afectan el rendimiento escolar, como la habilidad o la motivacin individual en los alumnos.

Se utiliza el mtodo de estimacin de Mnimos Cuadrados Ordinarios, utilizando cluster en los errores que permite controlar por la interdependencia del rendimiento de los alumnos al interior de las escuelas, sin embargo est metodologa no controla la presencia del sesgo de seleccin a nivel de alumnos y profesores, lo cual puede causar estimaciones inconsistentes y sesgadas.

El primer modelo estimado es la versin ms simple, donde solo se ve el puntaje SIMCE y las dummies de la categora de la Evaluacin Docente que obtiene el profesor del alumno que obtiene ese puntaje SIMCE. Se estima por cluster (en los establecimientos), ya que permite especificar que las observaciones son

independientes a travs de los establecimientos.

S ijk = 0 + 1 D1 + ijk

(2)

Los siguientes modelos van agregando las variables de control, midiendo los distintos determinantes para llegar a un modelo final que contiene todas las variables como se planteo en (1). As el segundo modelo esta conformado por lo descrito en (2) ms las variables que contienen las caractersticas de la familia y el alumno.

S ijk = 0 + 1 D1 + 2 F1 + ijk

(3)

- 24 -

El tercer modelo contiene las caractersticas del establecimiento y una variable que pretende medir el efecto par que se da en los cursos, agregado al modelo en (2). La variable de efecto par es la educacin promedio de los padres por curso, la cual se incluye con el objetivo de poder demostrar que estudiantes que se relacionen con un grupo de compaeros cuyos padres tienen un menor nivel de educacin, se vern perjudicados por eso, lo que se manifestar en los resultados del rendimiento escolar medidos a travs del SIMCE. De la misma manera debera ocurrir el efecto contrario para alumnos que tengan compaeros cuyos padres tengan ms aos de educacin.

S ijk = 0 + 1 D1 + 4 E1 + 5 EP1 + ijk

(4)

Dado lo anterior, se esperara

que 5 tenga un valor positivo cuando la

educacin de los padres promedio por curso sea mayor.

El cuarto modelo incluye las caractersticas del profesor y el quinto contiene todas las variables. Adems se muestra las expectativas de los padres, pero no se incluyen en el modelo final dado que son una variable endgena, porque se esperara que a mayor educacin de los padres tengan mayor expectativa de la educacin de sus hijos y por otro lado padres ms motivados, que tienen ms expectativas de la educacin de sus hijos, los apoyarn ms en su rendimiento escolar. El ltimo modelo incluye variables dummies por regiones y comunas, para controlar por efectos fijos que puedan ser no observables al interior de las comunas y regiones.

III. c) Estadstica Descriptiva

A partir de la base de datos de SIMCE para cuarto bsico del ao 2008 y la de Evaluacin Docente 2005-2008, se forma una base de datos y dado la vinculacin directa entre alumnos del sector municipal y sus profesores, se logra tener una muestra de 75.150 alumnos, con un puntaje promedio de 233.37 en la prueba SIMCE de matemticas, 248.95 para lenguaje y 236.90 en comprensin del medio. (Ver Anexo, Cuadro B: Datos Estadsticos)

- 25 -

Se realiza una estadstica descriptiva a nivel de alumnos segn categora de Evaluacin Docentes que obtienen sus profesores, que se muestra en el Cuadro A. Del total de alumnos hay un 51% hombres y 49% mujeres, para los profesores el 86% son mujeres.

A travs del cuestionario que se les hace a los apoderados, podemos caracterizar brevemente la muestra. Por ejemplo, observamos que el 15% de los

estudiantes declara tener Internet en el hogar, un 93% asisti a algn tipo de educacin preescolar y el 13% tienen padres que pertenecen a una etnia. Asimismo observamos que en promedio tanto la educacin de los padres como de las madres es 10 aos, y se tiene que en los hogares en promedio hay 5 personas El Ingreso principal promedia los $219.500 por familia. (Ver Anexo, Cuadro B y C)

Los profesores tienen 48 aos en promedio. Un

84% tiene un Ttulo

Universitario (Ver Anexo, Cuadro D), con 22 aos de experiencia promedio y 12 aos de permanencia en el establecimiento. El 32.88% tiene categora Bsico, 58,98% competente, 7,64% Destacado y solo 0,50% Insatisfactorio.

Del total de los establecimientos, podemos ver, que segn las estadsticas por alumnos y la categorizacin que hace el MINEDUC por nivel socioeconmico para los establecimientos, en la muestra hay un 14,72% que pertenece a un nivel bajo, el 50,95% a un nivel medio bajo, el 30,03% a un nivel medio y solo un 4,30% a un nivel medio alto. Podemos ver que los profesores con categora Insatisfactorio y Bsico se concentran en los establecimientos de nivel socioeconmico bajo y medio bajo, mientras que los de categora Competente y Destacado se concentran en los establecimientos de nivel socioeconmico medio bajo y medio.

- 26 -

Cuadro A: Estadstica Descriptiva por Categora Evaluacin Docente y Porcentaje segn caractersticas. Profesores Hombres Mujeres Total Insatisfactorio 0.07 0.44 0.50 Caracteristicas Profesor Bsico Competente 5.04 7.87 27.84 51.10 32.88 58.98 Destacado 1.25 6.39 7.64 Total 14.23 85.77 100.00

Alumno Hombre Mujer Total Nivel S.Ec Estab Bajo Medio Bajo Medio Medio Alto Total

Caracteristicas Alumno 0.28 0.23 0.50 16.71 16.17 32.88 29.67 29.31 58.98 3.87 3.77 7.64 50.52 49.48 100.00

Caracteristicas Establecimiento y porcentaje alumnos 0.02 0.40 0.09 0.00 0.50 5.18 17.63 8.46 1.61 32.88 8.53 29.70 18.36 2.38 58.98 1.00 3.22 3.11 0.30 7.64 14.72 50.95 30.03 4.30 100.00

Fuente: Elaboracin propia, segn datos MINEDUC

III. d) Resultados

El modelo que se muestra en la primera columna del Cuadro 1, es una regresin simple donde la variable dependiente es el puntaje SIMCE en matemticas (se toma solo est prueba para las distintas estimaciones) 21 y las variables explicativas son dummies con los resultados de la Evaluacin Docente, tomando como categora base Insatisfactorio. Este modelo muestra que el alumno que tiene un profesor con categora Bsico tendr 11 puntos ms, luego un alumno con un profesor con categora Competente tendr 19 puntos ms y uno con profesor Destacado tendr 25 puntos ms, todos con respecto a un alumno que tiene un profesor con categora Insatisfactorio.

Se toma la prueba de matemticas, ya que por un lado es el sector en que Chile tiene peor rendimiento escolar a nivel internacional, y es donde la literatura seala que hay mayores efectos entre los certificados de los docentes y el logro estudiantil.

21

- 27 -

La estimacin se hace con cluster a nivel de establecimientos, lo que permite corregir posibles problemas que se den por la heteroscedasticidad del desempeo entre los colegios; esto se da por que se rompe uno de los supuestos bsicos de MCO, la homocedasticidad en la varianza de los errores.

El nivel de logros de un alumno est relacionado con muchas variables, entre ellas las caractersticas propias del alumno y de su familia, que determinan en parte si el ambiente en que se desenvuelve es ms o menos propicio para su educacin. La columna dos, en el Cuadro 1 muestra la estimacin del desempeo de los alumnos con el puntaje SIMCE de matemticas como Proxy y como variable independiente se utilizan las dummies de las categoras de la Evaluacin Docente (que es nuestra variable de anlisis) y controles referentes a las caractersticas propias del alumno y de su familia. Se muestra el segundo modelo, donde se utiliza un ndice Socio-EconmicoCultural 22 (ISEC), que est compuesto por ingreso per cpita del hogar, el nmero de libros por hogar, aos educacin padre y aos educacin madre.

Con el objeto de simplificar el anlisis, se trabaja con el ISEC (en vez de las variables desagregadas) para poder ms adelante controlar por variables de efecto par a nivel de cursos y no tener problemas de estimacin como multicolinealidad. En los resultados de la estimacin, que se ven en la segunda columna del Cuadro 1, el ser mujer hace que un alumno tenga 4 puntos menos y el haber asistido a la educacin preescolar 2 puntos ms. Por otro lado, el tener mayor nmero de personas en el hogar tiene una relacin negativa, de manera que habite una persona ms en el hogar genera una reduccin de 2 puntos, podemos suponer que esta relacin se da por un entorno menos propicio para que el alumno pueda estudiar con tranquilidad. Tener Internet en el hogar y pertenecer a una etnia tienen una relacin positiva, pero baja y adems no se puede rechazar la hiptesis nula de que el parmetro sea cero con un 95% de confianza

Creado a travs de la metodologa de Anlisis de Componentes Principales, (Jolliffe, I. (1973): "Discarding Variables in a Principal Component Analysis". App. Stat. 22, 21-31).

22

- 28 -

El ISEC tiene una relacin positiva, es decir que al aumentar el nmero de libros en el hogar o aumentar un ao la educacin de sus padres o aumentar el nivel de ingreso per cpita, tiene un efecto positivo, incrementando el resultado del puntaje SIMCE de matemticas. Podemos concluir entonces, que el tener recursos educativos y culturales como el nmero de libros o Internet afecta de manera positiva el rendimiento escolar, que es una evidencia que puede ser utilizada en la generacin de polticas pblicas en educacin.

Al aplicar los controles podemos ver que se mantiene la relacin entre las Categoras de la Evaluacin Docente y el puntaje SIMCE, solo que disminuye levemente su efecto en magnitud, bajando a 10 puntos el efecto del profesor Bsico, 17 puntos el del profesor Competente y 22 puntos el del profesor Destacado, todos sobre el alumno que tiene un profesor con categora Insatisfactorio.

El tercer modelo contiene las caractersticas del establecimiento y una variable asociada al efecto par en este caso determinado por los aos de educacin promedio de ambos padres a nivel de curso. Segn la estimacin, que se muestra en la tercera y cuarta columna del Cuadro 1, se encuentran parmetros consistentes con la evidencia, es decir que tener un grupo de compaeros (curso) con padres ms educados beneficiara el rendimiento escolar de los alumnos en 4 puntos ms en la prueba de SIMCE de matemticas. Pero se debe tener cuidado con la interpretacin de estos parmetros, ya que la variable de efecto par puede estar midiendo aspectos no observables, como la motivacin de los padres a buscar colegios con pares de mejor rendimiento para sus hijos. Si el aspecto anterior es omitido en la regresin, se da una correlacin positiva entre el puntaje SIMCE y el efecto par, donde este ltimo est sobre estimado ya que puede estar compuesto por aspectos individuales o familiares que no son observados.

Podemos ver que ambas estimaciones tienen parmetros similares asociados a las variables dummies de Evaluacin Docente. Con respecto a la estimacin en el primer modelo, se puede ver que en general desciende a la mitad el efecto de los profesores con respecto a la estimacin anterior, segn las distintas categoras, donde

- 29 -

un estudiante que tiene un profesor evaluado en la categora Insatisfactorio tendr 5 puntos menos que un alumno con profesor en categora Bsico, 9 menos que el de categora Competente y 11 menos que el de categora Destacado. Si un establecimiento se encuentra ubicado en una zona rural tendr 5 puntos ms en el SIMCE, luego al analizar las categoras del nivel socioeconmico que el MINEDUC le da a los establecimientos, podemos ver fuertes diferencias entre la estimacin que se hace al controlar por efecto par y al no controlar.

La categora que se toma como base, es la de nivel socioeconmico bajo, y para el caso de la estimacin sin control por efecto par, hay un aumento de 2 puntos en el puntaje SIMCE para un alumno que asiste a un establecimiento con nivel socioeconmico medio bajo con respecto a un estudiante del establecimiento de categora bajo. Esa diferencia aumenta a 4 puntos para el estudiante del establecimiento de categora medio y a 11 para el que asiste a un establecimiento con nivel socioeconmico medio alto (La categorizacin del MINEDUC incluye el grupo alto pero dado que la muestra solo toma los establecimientos Municipales, existen muy pocos colegios en esa categora, por lo que se introdujo a los del grupo medio alto).

Al controlar por efecto par podemos ver que se produce una relacin negativa con el rendimiento del alumno, medido a travs de la prueba SIMCE, y los establecimientos segn nivel socioeconmico.

Para controlar por efectos fijos a nivel de escuela, se incluye en la estimacin el puntaje SIMCE en matemticas promedio del establecimiento para 4 bsico para el promedio entre los aos 2002, 2005, 2006 y 2007, con lo anterior se pretende incluir las caractersticas a nivel de escuela que puedan ser omitidas pero que permanezcan constantes en el tiempo. 23 Al crear est variable, se produjo en ciertos casos que no existan datos para los aos anteriores, por lo que se pierden datos, pero se utiliza para

23

Tambin se incluye el promedio del SIMCE 2007 como variable de control de calidad del establecimiento. Especficamente el promedio del puntaje SIMCE 2007 por establecimiento se toma como el valor rezagado en un perodo. Ver Anexo Cuadro 5

- 30 -

tener como referencia otro Proxy de las condiciones previas del establecimiento, permitiendo controlar por efectos fijos a nivel de escuela, viendo que establecimientos de mejor desempeo acadmico tendrn alumnos con mejor rendimiento, y por lo tanto el efecto de los buenos profesores tiende a disminuir, porque podran no ser los que realmente agregan valor. El caso ideal sera poder poner los puntajes a nivel de los alumnos, pero no todos los aos la prueba es realizada por los mismos estudiantes. Se da una relacin positiva con los puntajes SIMCE de los aos anteriores, de manera que alumnos que asisten a establecimientos que en promedio tienen SIMCES ms alto, tendrn un puntaje actual mayor, estas variables son estadsticamente significativas al 99% de confianza.

Es importante mencionar, que los alumnos no se encuentran distribuidos aleatoriamente entre los establecimientos educacionales, como se mencion antes, dado que existe un sesgo de seleccin, donde establecimientos seleccionan a sus alumnos dado ciertas caractersticas, as como los padres no seleccionan el establecimiento de manera aleatoria, pero tambin existe una seleccin a nivel de los profesores, lo que genera una sobre estimacin en los resultados, si los buenos profesores se concentran con los estudiantes de mejor rendimiento. Por lo tanto el sesgo de seleccin en los distintos niveles no permite identificar los verdaderos determinantes del desempeo escolar, por lo cual se tienen estimaciones sesgadas e inconsistentes.

El cuarto modelo estimado, que se muestra en la quinta columna del Cuadro 1, incluye las caractersticas a nivel de los profesores, donde la relacin entre el resultado del rendimiento escolar medido a travs de la prueba SIMCE y las categoras que tienen los profesores segn la Evaluacin Docente, tienen un efecto mayor que en las estimaciones realizadas anteriormente, donde un alumno tendr 13 puntos ms si tiene un profesor con categora Bsico, 20 puntos ms si su profesor es de categora Competente y 26 puntos ms si su profesor es de categora Destacado, todos en comparacin a un alumno con un profesor de categora Insatisfactorio. Si el profesor es mujer, el alumno tendr 8 puntos ms. Un ao ms de experiencia o de permanencia del profesor en el establecimiento no alcanzan a agregar 1 punto en el

- 31 -

puntaje SIMCE; se produce una relacin negativa con la edad del profesor, pero su efecto es muy leve. Los profesores que tienen Titulo Universitario generan 1 punto ms, pero el parmetro es no significativo, lo que se relaciona con lo encontrado en la literatura internacional, pero los que tienen algn estudio de post titulo (Magster, Diplomado, etc.) tienen una relacin negativa.

El modelo que se presenta en la sexta columna del Cuadro 1, tiene todas las variables hasta ahora utilizadas, que en general presentan el mismo efecto encontrado en las estimaciones anteriores. En cuanto a las dummies por categora segn Evaluacin Docente, se tiene que la diferencia para un alumno que tiene un profesor Bsico es de 5 puntos ms en el SIMCE con respecto a uno que tiene un profesor de evaluacin Insatisfactorio, esta brecha aumenta a 9 puntos para el que tiene un profesor de categora Competente y a 11 para el alumno con profesor Destacado.

El modelo que se ve en la ltima columna del Cuadro 1, tiene dummies por regiones y comunas, ese modelo se repite pero incluyendo expectativas de los padres (Ver Anexo, Cuadro 4), pero al agregar las expectativas de los padres, se tienen problemas en la estimacin ya que como se mencion anteriormente es una variable endgena, dado que padres que visualizan un mejor desempeo de sus hijos podran esperar niveles de educacin ms alta para sus hijos, a su vez, padres que observen un menor desempeo de sus hijos podran tener sobre los niveles de educacin que tendrn sus hijos. menores expectativas

- 32 -

CUADRO 1: Variables Ev. Docente y controles Estimacin de la ecuacin de logro escolar con OLS. SIMCE 4to bsico ao 2008, mat
Variables simce MAT basico competente destacado mujer n_phog inter indig preesc ISEC rural medio_b medio medio_a sim_prom_m edpscurso genero_p edad_p exp perm tit post Cumunas Regiones Constant Observations R-squared 216.571** [5.571] 75190 0.01 225.005** [4.479] 75190 0.08 47.536** [6.439] 75190 0.09 22.401** [7.071] 75190 0.09 209.432** [5.982] 75190 0.01 62.918** [7.532] 75190 0.13 Base 11.435* [5.615] 18.864** [5.594] 25.171** [5.797] Familia 9.550* [4.427] 16.663** [4.411] 21.900** [4.596] -3.536** [0.462] -1.502** [0.119] 0.965 [0.719] 0.545 [0.658] 2.025* [0.787] 9.150** [0.219] 5.032** [1.016] 2.071+ [1.106] 3.898** [1.425] 11.357** [2.520] 0.741** [0.025] 6.112** [1.026] -4.397** [1.374] -9.391** [2.193] -10.418** [3.719] 0.703** [0.026] 4.245** [0.515] 7.644** [1.309] -0.146+ [0.081] 0.301** [0.071] 0.110+ [0.059] 0.592 [1.237] -2.100+ [1.272] Tecnica de estimacin, OLS con cluster Establec. 5.245 [3.405] 9.241** [3.391] 10.864** [3.592] Efecto Par 4.930 [3.306] 8.970** [3.282] 10.453** [3.486] Profesores 12.587* [5.188] 19.687** [5.168] 26.059** [5.369] Todo 4.832 [3.097] 8.970** [3.068] 10.697** [3.278] -3.992** [0.412] -0.930** [0.111] -0.540 [0.605] 1.035+ [0.605] 2.659** [0.743] 7.546** [0.175] 6.459** [1.004] -4.602** [1.332] -8.959** [2.148] -11.993** [3.670] 0.670** [0.025] 0.678 [0.516] 5.701** [0.970] -0.103 [0.064] 0.143* [0.056] 0.155** [0.044] 1.520 [0.935] -0.076 [0.891] Reg. y comuna 4.569 [3.700] 8.459* [3.685] 9.417* [3.860] -3.986** [0.401] -0.707** [0.103] 0.194 [0.577] 1.172* [0.582] 3.076** [0.734] 7.576** [0.173] 5.912** [1.020] -4.563** [1.266] -8.161** [2.134] -11.341** [3.671] 0.528** [0.028] 2.131** [0.542] 5.020** [0.962] -0.076 [0.063] 0.142** [0.055] 0.144** [0.043] 1.042 [0.912] -0.712 [0.885] s s 112723 [53,403.027] 75190 0.15

Robust standard errors in brackets, cluster por establecimiento

Fuente; Elaboracin propia, segn datos MINEDUC

+ significant at 10%; * significant at 5%; ** significant at 1%

- 33 -

El ltimo modelo, que luego es replicado para las pruebas de Lenguaje y Comprensin del Medio, no incluye las expectativas de los padres, dado lo mencionado anteriormente. Se utiliza efectos fijos por comunas y regin, para evitar en parte el problema de sesgo que se puede producir al interior de las comunas, dado que pueden seleccionar a los profesores, adems, pueden existir otras caractersticas no observables que se dan a nivel de comuna y regin que influyen en el rendimiento escolar de los alumnos. Estas caractersticas podran ser, por ejemplo, los recursos con que cuenta la comuna para el gasto en Educacin y si existe seleccin de los profesores (dado el sistema educacional, algunos establecimientos tienen como sostenedores a las Municipalidades).

Con respecto a las estimaciones anteriores, se observa una disminucin de los efectos de las categoras de los profesores segn Evaluacin Docente en los resultados del SIMCE, lo anterior refleja que al controlar por efectos fijos de comunas y regiones existen variables no observables que son determinantes en el logro escolar, y que no incluirlas podra producir un sesgo de variable relevante omitida. Segn la estimacin, el estudiante con un profesor Bsico tiene 5 puntos ms con respecto al que tiene un profesor Insatisfactorio, el de profesor Competente tiene 8 puntos ms y el de profesor Destacado tiene 9 puntos ms, podemos ver que las variables en general siguen teniendo la misma relacin que en las estimaciones anteriores

Al ver las estimaciones de las pruebas de Lenguaje y Comprensin del Medio, podemos ver que existe una diferencia entre el gnero del alumno para las distintas pruebas, mientras en las pruebas cientficas los hombres tienen un mejor desempeo, en lenguaje las mujeres tienen mejores resultados. Lo anterior podra ser explicado por que los hombres tienen ms habilidades cientficas y analticas y menos aptitudes humanistas que las mujeres en esa edad.

Con respecto al efecto que tienen en el desempeo escolar los profesores segn categora establecida por Evaluacin Docente, hay un descenso con respecto a la magnitud de la estimacin para la prueba de matemticas, tanto en Lenguaje como en Comprensin del Medio, pasando a 3,5 y 7, en Lenguaje, y a 1 y 4,5 en

- 34 -

Comprensin del medio, segn efecto de un profesor con categora Bsico, Competente y Destacado respectivamente sobre un alumno con profesor Insatisfactorio, pero las variables son no significativas al 90% de confianza, en la prueba de Comprensin del Medio, lo mismo para Lenguaje con el profesor de categora Bsico. Lo anterior podra ser una seal, de que la Evaluacin Docente logra identificar a los buenos profesores que tienen una correlacin positiva sobre los resultados de sus alumnos en matemtica, dado que es el rea ms precaria en materia de educacin a nivel nacional, como lo muestran diversos estudios Internacionales (IALS 2000, TIMSS 2003, PISA 2006).

Las otras variables tienen variaciones leves con respecto a las que se dan en la estimacin sobre el puntaje en la prueba de Matemticas.

- 35 -

CUADRO 2: Todas las Variables, Lenguaje Estimacin de la ecuacin de logro escolar con OLS. SIMCE 4to bsico ao 2008, leng
simce LENG basico competente destacado mujer n_phog inter indig preesc ISEC rural medio_b medio medio_a edpadres sim_prom_l genero_p edad_p exp perm tit post Cumunas Regiones Constant Observations R-squared Tecnica de estimacin, OLS con cluster 2.515 [3.186] 5.495+ [3.170] 6.519+ [3.388] 12.575** [0.394] -0.891** [0.106] 1.419* [0.582] 1.847** [0.583] 2.733** [0.743] 6.497** [0.172] 6.570** [0.975] -2.734* [1.199] -3.654+ [1.989] -7.234* [3.303] 1.989** [0.498] 0.426** [0.028] 4.509** [0.907] 0.007 [0.056] 0.063 [0.047] 0.129** [0.038] 1.656* [0.821] -0.594 [0.808] s s 100.602** [7.778] 74931 0.14

CUADRO 3: Todas las Variables, Comprensin Estimacin de la ecuacin de logro escolar con OLS. SIMCE 4to bsico ao 2008,comprension del medio
simce COMP basico competente destacado mujer n_phog inter indig preesc ISEC rural medio_b medio medio_a Tecnica de estimacin, OLS con cluster 1.327 [2.926] 4.080 [2.931] 4.655 [3.079] -2.320** [0.356] -1.179** [0.097] 0.639 [0.530] 1.593** [0.524] 4.055** [0.677] 7.309** [0.157] 5.915** [0.848] -1.726+ [1.040] -2133 [1.709] -5.361+ [2.975] 2.342** [0.440] sim_prom_c genero_p edad_p exp perm tit post Cumunas Regiones Constant Observations R-squared 0.376** [0.025] 3.950** [0.799] -0.040 [0.049] 0.074+ [0.042] 0.131** [0.033] 0.344 [0.698] -0.565 [0.696] s s 133.618** [9.861] 75150 0.15

edpscurso

Robust standard errors in brackets, cluster por establecimiento + significant at 10%; * significant at 5%; ** significant at 1%

Robust standard errors in brackets, cluster por establecimiento + significant at 10%; * significant at 5%; ** significant at 1%

Fuente: Elaboracin propia, segn datos MINEDUC

- 36 -

CONCLUSIONES

A medida que la sociedad se va desarrollando, se demanda una mayor complejidad en la preparacin educacional de sus habitantes, por lo que es necesario tener mejores niveles de calidad para todos los sectores. Por lo tanto, es un desafo poder establecer cules son los factores determinantes para alcanzar esa mejor calidad, logrando as un rendimiento escolar superior. Tanto la literatura internacional como nacional, muestran que las caractersticas a nivel del alumno y su familia, como del establecimiento y sus profesores, son determinantes del logro escolar.

Pero gran parte de la responsabilidad cae en los profesores, esta investigacin mostr la evidencia al respecto tanto nacional como internacional segn el anlisis de la literatura, donde la certificacin docente presenta una relacin positiva con los aprendizajes de los estudiantes. Es decir, profesores que tienen mejores niveles de certificacin, se asocian con alumnos con un mejor desempeo escolar.

Para demostrar lo anterior, se realizaron distintas estimaciones, en que se muestra el caso de Chile, viendo como el puntaje de la prueba SIMCE 2008 de los alumnos de 4 bsico est relacionado con la categora que tiene un profesor dada por el sistema de Evaluacin Docente que se aplica a los profesores del sector Municipal, tomando en cuenta adems las variables que incluyen caractersticas familiares, por establecimientos y de los profesores, controlando por efectos fijos a nivel de comuna y regiones, utilizando el mtodo de estimacin de Mnimos Cuadrados Ordinarios, con cluster a nivel de establecimientos, permitiendo controlar por la interdependencia del rendimiento de los alumnos al interior de las escuelas

En general las estimaciones realizadas muestran la relacin esperada entre las variables y el rendimiento escolar, pero dado que la muestra tiene un mayor nmero de observaciones con respecto a otras investigaciones, y dado que en ella el profesor es vinculado directamente con el alumno, se determinan coeficientes ms cercanos al verdadero valor poblacional.

- 37 -

Para las tres pruebas (Matemticas, Lenguaje y Comprensin del Medio) hay una relacin positiva a partir de la certificacin que tienen los docentes y el rendimiento de sus alumnos, por lo tanto un estudiante que tenga un profesor Competente o Destacado se asocia con un puntaje mayor en la prueba SIMCE que un alumno que tiene un profesor con categora Insatisfactorio. Esto se observa ms claramente con los resultados de la prueba de matemticas, donde el estudiante con el profesor de categora Bsico tiene 5 puntos ms que uno que tiene un profesor de categora Insatisfactorio; la brecha aumenta a 8 puntos con el alumno de profesor Competente y a 9 con el de profesor Destacado. Por lo tanto, se podra ver que la certificacin docente es una buena medida para identificar el desempeo de los profesores.

La certificacin docente que categoriza al profesor como Competente o Destacado es significativa con un 90% de confianza en el nivel de logro de los alumnos, pero solo para las pruebas de matemticas y lenguaje, en el modelo que incluye todas las variables y los efectos fijos por comuna y regin.

Es importante mencionar que este trabajo toma los datos solo para los establecimientos Municipales, por lo tanto el anlisis solo se realiza para ese sector, quedando fuera los alumnos de los establecimientos Particulares Subvencionados y Particulares, dado que la Evaluacin Docente solo se realiza a los profesores que pertenecen al sector municipal.

Por otro lado, las estimaciones realizadas no corrigen el sesgo de seleccin que se pueda dar a nivel de establecimientos, por parte de los apoderados y para los profesores, aunque se trata de corregir al incluir los resultados rezagados del establecimiento. Lo que podra sobre estimar los resultados, dado que los buenos profesores pueden estar en cursos que existe un mejor rendimiento de los alumnos, por lo tanto el profesor podra no ser quien de valor agregado al mejor desempeo escolar.

La

brecha

existente

entre

establecimientos

de

distintos

niveles

socioeconmicos es alta, lo cual puede afectar a la segregacin de los profesores en

- 38 -

los establecimientos, por lo tanto se deberan generar polticas que se enfoquen hacia la distribucin aleatoria de los profesores, o en que los mejores profesores trabajen en los establecimientos de mayor vulnerabilidad (por ejemplo a travs de incentivos), lo anterior con el objetivo de tener igualdad de oportunidades para los establecimientos en torno al acceso de una educacin de mejor calidad.

Dado la relacin positiva que se encontr en esta investigacin sobre la certificacin de los buenos profesores y el logro de los alumnos, es fundamental promover polticas que generen mayores incentivos a la superacin del desempeo de los profesores, promoviendo la formacin permanente y mejorando su formacin inicial, suscitando una mayor valoracin de la sociedad hacia los docentes. Sin embargo, no existe evidencia que el cambio en la evaluacin docente de un mismo profesor modifique los resultados de los aprendizajes de los estudiantes que son educados por este profesor, lo cual debiese ser considerado como parte de una investigacin futura.

- 39 -

REFERENCIAS Aaronson, D., L. Barrow and W. Sander, 2003. Teachers and Student Achievement in the Chicago Public High Schools. Federal Reserve Bank of Chicago manuscript. Arancibia, V., Bralic, S. y Strasser, 2000. Diseo, Implementacin y Evaluacin de un Modelo de Desarrollo de Efectividad Escolar, Proyecto FONDECYT N 1980590, Santiago, Chile. Bellei, C.; Raczynski, D.; Muoz, G.; Prez, L.M., 2004. "Escuelas Efectivas en Sectores de Pobreza: Quin dijo que no se puede?". UNICEF, Asesoras para el Desarrollo y Ministerio de Educacin, Santiago, Chile, 2004. Bravo, D., D. Contreras y C. Sanhueza. 1999: Rendimiento Escolar, Desigualdad y Brecha de Desempeo Privado/Pblico: Chile 1982-1997. Documento de Trabajo, Departamento de Economa, Universidad de Chile. Bravo, Falck, Gonzlez, Manzi, Peirano, 2008, La relacin entre la Evaluacin Docente y el Rendimiento de los alumnos; Evidencia para el caso de Chile. Centro de Microdatos, Departamento de Economia, Universidad de Chile y Centro de Medicin MIDE UC, Escuela de Psicologa, P.Universidad Catlica de Chile. Brunner, J. J. 2003. Lmites de la lectura periodstica de resultados educacionales. IIPE-Unesco. Evaluar Las Evaluaciones: Una Mirada Poltica De Las Evaluaciones De La Calidad Educativa. Buenos Aires: IIPE, 67-84. Clotflelter, C.T., H.F. Ladd, and J.L. Vigdor, 2002 Who Teaches Whom? Race and the Distribution of Novice Teachers. Economics of Education Review, 24 (2005), pp. 377-392. Clotfelter, C.T., H.F. Ladd, and J.L.Vigdor. 2006. Teacher-Student Matching and the Assessment of Teacher Effectiveness. Journal of Human Resources, vol. XLI, N. 4 (Fall), pp. 778-820. Clotfelter, C.T., H.F. Ladd, J.L.Vigdor, and J. Wheeler. 2006. High Poverty Schools and the Distribution of Principals and Teachers. Sanford Institute Working Paper. Contreras, D,, Elacqua, G. 2005, El desafo de la calidad y equidad en la educacin chilena, Expansiva, En Foco N043 Contreras, D., Elacqua, G., y Salazar, F. 2006. The Effectiveness of Private School Franchises in Chiles National Voucher Program. Departamento de Economa, Universidad de Chile. Creemers, B.P.M. (1994). The Effective Classroom, Cassell, London.

- 40 -

Cuttance, P. (1989). "Evaluating the effectiveness of schools", en Reynolds, D. y Cuttance, P. eds. New Directions in School Effectiveness and School Improvement, Cassell, Londres. Hsieh, C. y M. Urquiola, 2003 "When Schools Compete, How Do They Compete? An Assessment of Chile's Nationwide School Voucher Program". National Bureau of Economic Research. Working Paper 1008 Dee, T.S., 2005 A Teacher Like Me: Does Race, Ethnicity, or Gender Matter?. American Economic Review 95 (May), 158-165. Goldhaber, D.D. and D.Brewer, 2000, Does Teacher Certification Matter? High School Teacher Certification Status and Student Achievement. Educational Evaluation and Policy Analysis v.22 pp.129-45 Goldhaber, D. and E. Anthony, 2007, Can Teacher Quality be Effectively Assessed? National Board Certification as a Signal of Effective Teaching. Review of Economics and Statistics, 89(1): 134- 150. Hanushek, E. A. 1992. The Trade-off between Child Quantity and Quality. Journal of Political Economy, 100(1), 84-117 Hanushek, E.A. 1997. Assessing the Effects of School Resources on Student Performance: An Update. Educational Evaluation and Policy Analysis 19(2): 141-164. Hanushek, E.A., J.F. Kain, and Rivkin, S.G 2005, Teachers, Schools and Academic Achievement. Econometrica v.79 pp.418-458. Hanushek, E. A., J. F. Kain, D. M. OBrien and S.G. Rivkin, 2005, The Market for Teacher Quality, unpublished paper, Stanford University, January. Hedges, L.V., R. Laine, and R. Greenwald, 1994, Does Money Matter? A MetaAnalysis of Studies of the Effects of Differential School Inputs on Student Outcomes, Educational Researcher23 (April): 5-14. Kane, T. J., Rockoff, J. E. y Staiger, D. O. (2006). What Does Certification Tell Us about Teacher Effectiveness? Evidence from New York City. Working Paper N 12155, National Bureau of Educational Research. Larraaga, O. 2004. Competencia y Participacin Privada: La Experiencia Chilena en Educacin. Estudios Pblicos 96, primavera. Len, Manzi, Paredes, 2008, Calidad Docente y Rendimiento Escolar en Chile; Evaluando la Evaluacin. Pontificia Universidad Catlica de Chile. Ley 20.248: Ley de Subvencin Escolar Preferencial. 3 de Abril de 2008.

- 41 -

Martinic, S. Y Pardo, M. 2003. Aportes de la Investigacin Educativa Iberoamericana para el Anlisis de la Eficacia Escolar en F.J. Murillo La Investigacin sobre Eficacia Escolar en Iberoamrica. Revisin Internacional sobre Estado del Arte, Convenio Andrs Bello Ministerio de Educacin, Cultura y Deporte, Espaa y CIDE, Chile. McMeekin, R.W. 2006. Accountability educacional: posibilidades y desafos para Amrica Latina a partir de la experiencia internacional, J.Corvaln y R.W.McMeekin (ed.), pp.19-49. Mizala, A. y P. Romaguera: 2000 School Performance and Choice: The Chilean Experience. En Journal of Human Resources, Vol. 35, N 2. Mizala, A. y P. Romaguera, 2002, artculo Estructura de remuneraciones, diferenciales de salarios y sistemas de incentivos en el sector educacin, N Proyecto: 1000936, Concurso: FONDECYT, 2000 - 2002 Mizala, A. y P. Romaguera, 2005, Calidad de la educacin Chilena: El desafo de la prxima dcada en P. Meller (ed) La Paradoja Aparente. Equidad y Eficiencia: Resolviendo el dilema. Aguilar Chilena Ediciones. Mizala, A.; P. Romaguera y M. Urquiola, 2006. "Socioeconomic status or noise? Tradeoffs in the generation of school quality information," Documentos de Trabajo 225, Centro de Economa Aplicada, Universidad de Chile. Montt, P., C. E. Beca, C. Sotomayor, J.E. Garca-Huidobro y H. Walter, 2006, Docentes para el nuevo siglo. OECD, 2004, Reviews of national policies for education. OECD. 2006. Education at Glance 2006, Paris Raczynski, D. y G. Muoz, 2004, Factores que desafan los buenos resultados educativos de Escuelas en sectores de pobreza. (Chile). Asesoras Para El Desarrollo. Rockoff, J.E. 2004, The Impact of Individual Teachers on Student Achievement: Evidence from Panel Data, American Economic Review Papers and Proceedings (May 2004), 247-252. Shulman, L. (2005) El saber y entender de la profesin docente. Centro de Estudios Pblicos N. 99: 195-224 Tokman A. 2004. Educacin y Crecimiento en Chile, Banco Central de Chile, Documentos de Trabajo, N 289

- 42 -

ANEXO; Cuadros Estadsticos

Variable Ptje mat. SIMCE Ptje leng. SIMCE Ptje comp. SIMCE Dummy insatisfactorio Dummy basico Dummy competente Dummy destacado Dummy genero alumno Num. Personas del hogar Dummy internet en hogar Dummy pertenece a Etnia Dummy asistio educacin preesc. ndice Socio Econmico Cultural Num. Libros en el hogar Aos de educacin padre Aos de educacinmadre Ingreso familiar Dummy establecimiento rural Dummy establecimiento bajo Dummy establecimiento medio bajo Dummy establecimiento medio Dummy establecimiento medio alto Aos de educacin padres curso Ptje mat. SIMCE '07 Ptje leng. SIMCE '07 Ptje comp. SIMCE '07 SIMCE mat. Promedio 02-07 SIMCE leng. Promedio 02-07 SIMCE comp. Promedio 02-07 Dummy genero profesor Edad profesor Experiencia profesor Permanencia en el estab. del profesor Dummy tit Dummy post Dummy espect. padres==basica inc
Dummyespect. padres==basica Dummy espect. padres==media inc Dummy espect. padres==media tec Dummy espect. padres==media hum Dummy espect. padres==IP O CFT

Dummy espect. padres==Universitaria Dummy espect. padres==Postgrado Fuente: Elaboracin propia, segn datos MINEDUC

CUADRO B: DATOS ESTADISTCOS Observaciones Media esviacin estnd 75190 233.3786 51.99607 74931 248.9585 51.93156 75150 236.9001 47.763 75480 .0050344 .0707755 75480 .3288288 .4697908 75480 .5897721 .4918782 75480 .0763646 .2655823 75480 .4947536 .4999758 75480 4.995403 1.729381 75480 .1481055 .3552068 75480 .1347509 .3414596 75480 .9327504 .2504554 75480 .0956662 1.421294 75480 24.52014 25.00813 75480 10.03447 3.451638 75480 9.962785 3.339109 75480 219499.9 199669.4 75480 .1726683 .3779627 75480 .1472046 .3543121 75480 .509539 .4999123 75480 .3002782 .4583819 75480 .0429783 .2028095 75480 9.970674 1.565186 75480 231.8874 23.30081 75480 242.0373 20.33034 75480 236.3256 20.26951 75480 235.2778 18.82931 75480 242.7661 17.33818 75480 241.6573 18.47787 75480 .8577239 .3493354 75480 47.77104 10.12535 75480 21.72707 12.49914 75480 11.927 10.64965 75480 .8306174 .375092 75480 .8124006 .3903945 75480 .0020138 .0448302 75480 .0340488 .1813557 75480 .0116587 .107345 75480 .3060016 .4608334 75480 .0587308 .2351217 75480 .1568362 .3636487 75480 .3584791 .479557 75480 .0722311 .2588718

Min 101.31 123.95 99.18 0 0 0 0 0 1 0 0 0 -3.946847 0 0 0 50000 0 0 0 0 0 3.714286 149 164 175 161 167 176 0 9 0 0 0 0 0 0 0 0 0 0 0 0

Max 377.54 382.5 371.09 1 1 1 1 1 11 1 1 1 17.8287 100 21 21 2000000 1 1 1 1 1 15.4 317 319 305 311 310.5 310.75 1 70 54 44 1 1 1 1 1 1 1 1 1 1

- 43 -

CUADRO C: Caracteristicas familiares y porcentaje por alumno Dummy internet en hogar Freq. Percent Cum. No 64,301 85.19 85.19 Si 11,179 14.81 100.00 Total 75,480 100.00 Dummy asistio educacin preescolar Freq. Percent Cum. 5,076 6.72 6.72 70,404 93.28 100.00 75,480 100.00 Dummy padres pertenecen a Etnia Freq. Percent Cum. 65,309 86.52 86.52 10,171 13.48 100.00 75,480 100.00

No Si Total

No Si Total

Fuente: Elaboracin propia, segn datos MINEDUC

CUADRO D: Tipo de Titulo del profesor y porcentaje Tipo de Titulo del Profesor Ttulo escuela normal Ttulo en universidad Ttulo IP Sin ttulo Total 6,594 62,695 5,398 267 74,954 Freq. 8.80 83.64 7.20 0.36 100.00 Percent 8.80 92.44 99.64 100.00 Cum.

Fuente; Elaboracin propia, segn datos MINEDUC

- 44 -

CUADRO 4: Todas las Variables y Expectativas Padres Estimacin de la ecuacin de logro escolar con OLS. SIMCE 4to bsico ao 2008, mat Tecnica de estimacin, OLS Variables con cluster simce MAT basico competente destacado mujer n_phog inter indig preesc ISEC rural medio_b medio medio_a edpscurso sim_prom_m genero_p edad_p exp perm tit post esp_pads==basica esp_pads==media inc esp_pads==media tec esp_pads==media hum esp_pads==IP O CFT esp_pads==Universitaria esp_pads==Postgrado Cumunas Regiones Constant Observations R-squared Exp. Padres 4.323 [3.648] 8.023* [3.629] 8.765* [3.804] -4.829** [0.392] -0.651** [0.101] -1.146* [0.568] 0.901 [0.571] 2.008** [0.733] 4.883** [0.174] 6.186** [0.999] -4.750** [1.247] -8.970** [2.110] -12.043** [3.632] 1.824** [0.533] 0.506** [0.028] 4.865** [0.952] -0.076 [0.062] 0.144** [0.054] 0.139** [0.042] 1.054 [0.901] -0.565 [0.868] 4.481 [3.755] 3.152 [3.929] 15.802** [3.667] 14.161** [3.732] 21.116** [3.700] 33.386** [3.688] 38.015** [3.750] s s 95.977 [.] 75190 0.18

CUADRO 5: Todas las Variables y control Establecimiento Estimacin de la ecuacin de logro escolar con OLS. SIMCE 4to bsico ao 2008, mat Tecnica de estimacin, OLS Variables con cluster simce MAT basico competente destacado mujer n_phog inter indig preesc ISEC rural medio_b medio medio_a edpscurso mate07 genero_p edad_p exp perm tit post Cumunas Regiones Constant Observations R-squared
+ significant at 10%; * significant at 5%; ** significant at 1%

control efecto estab. 4.379 [4.050] 8.471* [4.033] 9.058* [4.189] -4.745** [0.397] -0.691** [0.101] -0.984+ [0.571] 0.853 [0.574] 1.817* [0.734] 4.875** [0.174] 6.129** [1.010] -4.107** [1.254] -5.661** [2.113] -6.043 [3.761] 2.780** [0.525] 0.307** [0.020] 4.893** [0.948] -0.077 [0.063] 0.153** [0.055] 0.147** [0.043] 0.852 [0.914] -0.433 [0.881] s s 133.329 [.] 75190 0.18

Robust standard errors in brackets, cluster por establecimiento

Robust standard errors in brackets, cluster por establecimiento

Fuente: Elaboracin propia, segn datos MINEDUC

+ significant at 10%; * significant at 5%; ** significant at 1%

- 45 -