COMPETENCIA Y PARTICIPACIÓN PRIVADA: LA EXPERIENCIA CHILENA EN EDUCACIÓN
Osvaldo Larrañaga
Documento de Trabajo Nº 207
Marzo 2004
Departamento de Economía
Facultad de Ciencias Económicas y Administrativas Universidad de Chile
Informaciones: Margarita Orrego, Teléfono 6783455, e-mail: morrego@econ.uchile.cl
Competencia y participación privada: La experiencia chilena en educación
Osvaldo Larrañaga1
Departamento de Economía, U de Chile
Abstract
El artículo revisa críticamente la literatura empírica respecto del impacto de la competencia y participación de privados sobre los resultados de la educación chilena. El artículo identifica períodos de acuerdo a la extensión de la competencia y participación privada; discute la naturaleza de las pruebas de rendimientos que sirven de base a los estudios empíricos, así como la calidad metodológica de las investigaciones realizadas. La mejor evidencia empírica muestra que la competencia y la participación de privados ha tenido un efecto positivo sobre los rendimientos escolares. Estos resultados deben ser interpretados como logros relativos entre establecimientos, puesto que no se dispone de una medida absoluta de logros educacionales. Asimismo, se trata de efectos de orden menor en relación a la brecha que presenta la educación en Chile respecto de países de similar grado de desarrollo económico y buenos logros educacionales.
1 Este trabajo se originó como un artículo de referencia en el marco del proyecto Preal: “Políticas
educacionales en Chile: Vouchers, Concentración, Incentivos y Rendimiento”. Se agradecen los comentarios de Dante Contreras, Juan Pablo Valenzuela, Claudia Peirano y Joseph Ramos a versiones anteriores del trabajo. La responsabilidad definitiva del artículo y juicios emitidos solo compete a su autor.
Competencia y participación privada: La experiencia chilena en educación
Introducción
La experiencia chilena en educación ha tenido como característica distintiva la introducción de un esquema de competencia donde proveedores públicos y privados se financian con una subvención fiscal por alumno. Las características del sistema de educación chileno se aproximan a un esquema de vouchers, constituyendo un caso de estudio de interés internacional.
El análisis de la experiencia chilena es importante para el futuro diseño de la política educacional del propio país. Las pruebas internacionales de logros educacionales muestran que el país está muy por debajo de lograr estándares satisfactorios en su capital humano. La prueba Timss de 1999 situó al país en el lugar 35 de un total de 38 países participantes, por debajo de naciones con inferior ingreso per capita (Mulis et al., 2000). La prueba Sials de alfabetización de adultos mostró que más de la mitad de los chilenos entre 15 y 65 años son analfabetos funcionales, puesto que escasamente entienden lo que leen (Bravo, Contreras y Larrañaga, 2002).
Tal situación torna imperioso avanzar políticas públicas que induzcan cambios cualitativos en el nivel y la distribución de los resultados de la enseñanza en el país. La agenda de política debe estar basada en evidencia empírica sólida respecto de los determinantes efectivos de la calidad de la educación. El diseño de políticas sin base en el conocimiento sistematizado es análogo a buscar un objeto en una habitación oscura; solo por casualidad y después de muchos esfuerzos fallidos podrá lograrse el objetivo deseado.
Este trabajo revisa críticamente las investigaciones empíricas que han evaluado el funcionamiento del sistema de competencia y participación privada de la educación en Chile. La revisión se centra
en los estudios que utilizan los resultados de las pruebas estandarizadas de logros educacionales (Simce) como variable dependiente. Estas pruebas tienen un carácter prácticamente censal para los estudiantes de cuarto y octavo años de educación básica a partir del año 1988. Otros trabajos relevantes han utilizado como variable de resultado a la prueba de selección a las universidades, cuyos contenidos y población objetivo poseen carácter más específicos.
El trabajo se organiza en cinco secciones principales. La primera sección caracteriza el grado de competencia y participación privada en el sistema educacional chileno. La segunda sección analiza el principal elemento de evaluación de la calidad de la educación en el país -las pruebas estandarizadas de rendimiento escolar Simce- presentado sus result ados principales y su comparación respecto de estándares internacionales. La tercera sección revisa la evidencia disponible respecto del efecto de la competencia entre establecimientos educacionales sobre los resultados del sector. La cuarta sección evalúa el rendimiento de los colegios particulares subvencionados en relación a los establecimientos municipales. Las conclusiones del trabajo se presentan en una última sección.
1.- Competencia y participación privada en el sistema chileno
La evaluación de la experiencia chilena requiere caracterizar adecuadamente los elementos de competencia y participación privada allí presente. Sobre la materia hay discrepancias entre los expertos. Para algunos analistas el sistema educacional chileno ofrece una experiencia “de texto” de la aplicación de un esquema de vouchers (Hsieh y Urquiola, 2002). Para otros autores el sistema contiene un conjunto de características que lo alejan de un modelo de vouchers (Aedo y Sapelli, 2001).
Resulta evidente que previo a derivar conclusiones respecto de la efectividad de la competencia y de la participación privada se precisa establecer cuándo y dónde se presentan estos factores en la experiencia chilena. En esta materia se distinguen tres períodos de interés: el impulso inicial (1980- 1986); el período de baja intensidad de la competencia (1987-1994); y la reactivación de la competencia (1995 adelante).
El impulso inicial: 1981-86
La experiencia chilena de competencia y participación privada se origina en los inicios de los 80s.
En esa época las antiguas escuelas públicas, dependientes del Ministerio de Educación, son transferidas a los gobiernos locales dando origen al sector municipalizado de educación. Al mismo tiempo, se autorizó a escuelas privadas a operar bajo financiamiento público bajo la condición que no cobraran pagos de matrícula a los estudiantes. Este sector de escuelas pasó a denominarse educación privada subvencionada.
Los administradores de las escuelas reciben de parte del Estado una subvención o pago por estudiante. La asignación de los recursos entre las escuelas sigue a las decisiones que las familias realizan respecto del lugar de estudios de sus hijos, en un contexto donde los oferentes educacionales compiten para atraer y retener a los estudiantes.
El sistema de la subvención se asemeja a un esquema de vouchers, aún cuando sea el Estado quien transfiere los recursos financieros a los establecimientos en función de la matrícula que asiste a clases. La subvención “sigue al alumno”, como requiere el sistema de vouchers, pero los padres de familia pueden carecer del rol de clientes asertivos que imagina el esquema de subsidios a la demanda.
La reforma induce un fuerte cambio en el mercado de los profesores. Quiénes trabajan en las escuelas municipales pierden su condición de empleados públicos, siendo transferidos a la normativa laboral del sector privado. Tal cambio significa que las condiciones de contratación y despido, así como la estructura de remuneraciones, pueden responder más cercanamente a los determinantes de oferta y demanda. Este es un requisito necesario para el funcionamiento del modelo de competencia en el sector de educación, considerando el peso de los salarios de los profesores en el costo de provisión del servicio.
La reforma tuvo un efecto dramático para la educación particular subvencionada. Alrededor de un 15% del total de los estudiantes del país emigran desde las escuelas públicas a las privadas subvencionadas en el período 1981-86, causando un aumento de la participación en la matrícula del sector de 15.1% a 30.8%.2 El número de establecimientos del sector privado subvencionado crece en un 62% entre 1980 y 1985. Por su parte, las escuelas públicas experimentan una caída en su participación de 78.0% a 63.1% en el período 1981-86, aún cuando el número de sus establecimientos se mantiene relativamente constante (Cuadros A-1 a A-3 del Anexo).
En suma, este primer período se caracteriza por una fuerte competencia en el mercado educacional, originado en la introducción de la subvención como mecanismo de asignación de recursos, la flexibilización del régimen laboral de los profesores y la expansión de las escuelas privadas subvencionadas.
El período de baja competencia: 1987-1994
La etapa de rápido desarrollo inicial del modelo de competencia y participación privada fue de corta duración. Cambios en la situación económica y en la política educacional dan lugar a una segunda
2 El sector privado subvencionado existía en forma previa a la reforma de los 80s, tratándose de escuelas preferentemente religiosas que no estaban sujetas a un régimen competitivo con el sector público.
fase caracterizada por la detención del crecimiento del sector privado subvencionado y por la introducción de políticas que protegen a las escuelas municipales del rigor de la competencia. De esta manera, el período comprendido entre los años 1987 y 1994 se caracteriza por una reducción en la intensidad de la competencia.
El primer cambio es la fuerte reducción del gasto público en educación en el contexto de la crisis de la deuda externa de mediados de los 80s. Ello se materializa en la caída del gasto público en educación como porcentaje del PIB desde un 4.0% en 1983 a una media de 2.8% en los años 1987- 1994.
La caída en el valor real de la subvención reduce el retorno a la inversión educacional y detiene la expansión del sector particular subvencionado. Quiroz y Chumacero (1997) realizan un estudios de costos y concluyen que los colegios privados subvencionados operaban prácticamente sin márgenes para la inversión, después de considerar el nivel de la subvención y los costos de la enseñanza.
La segunda modificación de importancia se origina en el cambio de la política educacional en 1990.
En ese año se produce el retorno a la democracia y el nuevo gobierno da un giro a la política de educación bajo el diagnóstico que los problemas de calidad y equidad no serían resueltos por los mecanismos de mercado (Cox y Lemaitre, 1999).
Bajo este contexto se introduce un conjunto de políticas de carácter centralizado cuyo objetivo es incrementar los niveles de calidad y equidad de las escuelas, aún cuando la subvención sigue operando como principal instrumento de financiamiento en el sector.
En 1991 se dicta el Estatuto Docente, una normativa laboral que se aplica al sector de educación municipal y que tiende a generar inmovilidad en las plantas docentes de los establecimientos así
como una estructura de remuneraciones alejada de las condiciones de mercado. La normativa es el resultado de la negociación política entre el nuevo gobierno democrático y el gremio de los profesores, el cual había experimentado un fuerte detrimento en sus condiciones económicas durante el anterior gobierno autoritario. En opinión de actores del proceso, el estatuto docente fue el precio que se pagó para no retrotraer el conjunto del sistema educacional a la situación pre-1980 (Cox y Lemaitre, 1999).3
En el período 1987-94 se detiene el crecimiento del sector privado subvencionado. El número de escuelas privadas subvencionadas se mantiene prácticamente constante (2637 en 1994 vs 2643 en 1985) tal como sucede con la participación del sector en la matrícula de estudiantes (32.9% en 1994 versus 32.7% en 1987).
La reactivación de la competencia: 1995-2002
Este último período se caracteriza por la reactivación de las condiciones de competencia, aún cuando las escuelas municipales siguen operando en un contexto de relativa protección. Un elemento clave es la introducción del financiamiento compartido, que consiste en un cobro que las escuelas privadas realizan a las familias en adición a la subvención que reciben del Estado. Ello genera las condiciones de rentabilidad que posibilita la reanudación de la inversión en este sector.
El esquema de financiamiento compartido se introduce en el año 1994 y se expande progresivamente durante los años siguientes. El mecanismo también está disponible para escuelas municipales de nivel medio, aún cuando el 89% de los colegios que cobraban financiamiento
3 El gremio de profesores experimentó fuertes pérdidas en la condición laboral en el régimen autoritario, siendo además objeto de persecución política.
compartido el año 2000 eran particulares subvencionados. El cobro promedio ascendía en dicho año a $ 8.900, cifra que representa un 53% de la subvención estatal en el caso de enseñanza básica.
La introducción del esquema de financiamiento compartido explicaría el incremento en la oferta privada de colegios. Así, el número de establecimientos privados subvencionados aumenta en un 23% en el período 1995 a 2001, tras haber permanecido estancado durante el período previo.
Correspondientemente, la matrícula del sector aumenta en este último período en un 29%.
Estos datos sugieren que la dinámica del sector educacional habría estado fuertemente determinada por consideraciones de oferta vinculada al nivel de la subvención, un elemento que es generalmente obviado en los estudios que se centran en los factores de demanda.
Por otra parte, en el año 1995 se relajan algunas de las restricciones a la movilidad laboral, permitiéndose a los municipios modificar la dotación de profesores frente a cambios en la matrícula de estudiantes. Ese mismo año se introduce un esquema de incentivos (Sned) que favorece a los profesores de los colegios con mejores resultados medido a través de cuatro indicadores que combinan rendimiento, valor agregado e igualdad de oportunidades. Este esquema introduce una relación entre las remuneraciones de los profesores del sector municipal y sus logros.
También en 1995 se empiezan a publicar los resultados de las Pruebas SIMCE a nivel de establecimiento. Ello representa un cambio estructural en la disponibilidad de información a disposición de los padres de familia, en el contexto de un sistema cuya eficacia requiere la toma de decisiones informadas por parte de sus actores.
En síntesis
El sector de educación en Chile combina elementos de mercado y de regulación estatal, siendo necesario distinguir entre períodos. Los mecanismos de competencia operan más libremente en la primera mitad durante los años 80s. Posteriormente, la caída en el valor de la subvención y la introducción de políticas centralizadas restringe el ámbito de la competencia y de la participación privada. A partir de 1995 se produce una reactivación del funcionamiento de la competencia con la introducción del financiamiento compartido y la publicación de los resultados del Simce
En la actualidad las escuelas privadas subvencionadas operan en un contexto competitivo, puesto que su financiamiento depende de las elecciones de las familias y porque poseen flexibilidad para ajustar la dotación y remuneraciones de los profesores. En cambio, el sistema municipal opera en un contexto más protegido, producto del estatuto docente y una restricción presupuestaria más
“blanda”. Ello aún cuando está expuesto a la información pública de sus resultados y a la eventual competencia por parte de sostenedores privados.
2.- La calidad de la educación y los resultados de la prueba Simce
La mayor parte de los estudios que analizan la experiencia chilena se basan en los resultados de la prueba Simce como medida de logros educativos. Corresponde por tanto conocer las características del instrumento de evaluación, previo al análisis de los estudios basados en el indicador.
A.- Evaluando la medida de evaluación : ¿Qué mide la prueba Simce?4
El Simce es una prueba que mide logros en matemáticas y lenguaje para alumnos de cuarto y octavo grado en años alternativos. A partir de 1998 se aplica también a los alumnos de segundo medio (décimo grado). 5
4 Esta sección se basa en Eyzaguirre y Fontaine (1999)
La característica más importante de la prueba Simce es su naturaleza relativa, cuyo objetivo es producir un orden (ranking) de los estudiantes antes que la evaluación de los logros educacionales respecto de estándares educacionales establecidos (pruebas de criterio). Ello tiene implicancias importantes respecto del uso e interpretación que se otorga a los puntajes del Simce.
Así, los resultados del Simce no pueden interpretarse como una medida de logros educativos, puesto que la prueba no informa respecto del grado de aprendizaje de los contenidos pedagógicos de un determinado nivel de enseñanza. El puntaje promedio del Simce refleja el nivel de conocimientos del estudiante promedio, cualquiera que este sea. Se sigue que un “buen” puntaje Simce no es garantía de un “buen” nivel de calidad de la enseñanza.
Asimismo, no se puede otorgar interpretación cardinal a las diferencias de resultados en la prueba Simce. Tener el doble de puntaje de Simce no implica tener el doble de conocimientos, puesto que la variable tiene solo sentido ordinal. Así también, que los resultados del Simce sigan una distribución normal no implica que los conocimientos sigan tal distribución, puesto que la “función”
que vincula a ambas variables no es lineal (metodología de construcción de las preguntas de la prueba). Ello también implica que una diferencia de diez puntos en la prueba puede tener distinta connotación en materia de conocimientos a lo largo de la distribución de puntajes Simce.
Una segunda característica importante es que las pruebas Simce del período 1988-97 son no comparables en el tiempo. Ello responde a la metodología utilizada en su construcción. Esta consiste en una selección de preguntas tal que se eliminan aquellas con respuestas correctas por debajo del 30% y arriba de 80%, considerándose en definitiva un conjunto de preguntas tal que la
5 En cuarto básico también se rinde una prueba de comprensión del medio, mientras que en octavo se rinden historia y geografía y ciencias naturales.
media de respuestas correctas sea 65% en cuarto básico (60% en octavo y segundo medio). Por tanto, el puntaje promedio debiera ser siempre 65% ( 60%), si es que la muestra de alumnos que se utiliza para testear las preguntas fuese representativa de la población nacional. 6
Por lo demás, las pruebas del período 1988-97 se caracterizarían por problemas de calidad en su construcción. Eyzaquirre y Fontaine (1999) examinan las preguntas de la prueba de octavo básico de 1997, que por primera vez se hacían públicas, encontrando que las preguntas se caracterizaban por un bajo nivel de dificultad y mala calidad en la elaboración. De este manera, el 78% de las preguntas de lenguaje de octavo básico correspondía a materias de tercer a sexto grado; la mayor parte de las preguntas eran simples e incluían “ayuda s” para que el estudiante pudiera responder bien; existían items mal formulados cuyo poder de discriminación radicaba en la capacidad de entender la pregunta antes la evaluación de conocimientos.
A partir de 1997 se introduce la técnica de “equating”, la cual permite la comparación de los resultados en el tiempo a través de la repetición de determinados ítems entre distintas pruebas, para luego correlacionar el puntaje entre estos itemes y el resto de las preguntas, y derivar así una medida del nivel de una prueba respecto de otra.
En el año 1998 la prueba Simce modifica sus contenidos, combinando materias de los currículo antiguo y reformado, e incorpora preguntas abiertas para medir destrezas y habilidades de tipo superior. Las preguntas son construidas por expertos y utilizan la teoría item respuesta, de modo que las preguntas más difíciles tienen mayor ponderación. De esta manera, se espera solucionar los problemas más evidentes de calidad de las preguntas, aún cuando la prueba sigue teniendo criterio ordinal.
6 El incremento de puntaje de las pruebas Simce en el período 1990-96 se habría originado en la utilización de muestras de estudiantes con nivel de logros crecientemente inferior al promedio nacional.
B.- Los resultados de Chile en el contexto internacional
Una adecuada caracterización de la calidad de la educación del país requiere la comparación de resultados con otros países. Más aún si las pruebas nacionales de logros son de naturaleza relativa, no informando del nivel efectivo para los resultados de la enseñanza.
A tal objetivo contribuye la participación de Chile en la prueba Timss de 1999 para alumnos de octavo grado. Esta es una evaluación de logros educacionales en matemáticas y ciencias que cumple con los mejores estándares de calidad metodológica, permitiendo una comparación de los resultados entre los países participantes.
Los resultados revelan un problema de proporciones en la calidad de la enseñanza en el país. Así, Chile obtuvo el lugar 35 dentro de 38 países participantes en la prueba Timss de matemáticas. Los resultados muestran que solo el 48% de alumnos de octavo básico en Chile alcanzan los estándares esperados para cuarto básico a nivel internacional en matemáticas. (Mulis et al, 2000).
Un estudio semejante para niños de tercero y cuarto básico fue realizado para trece países de América Latina por la UNESCO. Los resultados muestran a Cuba muy distanciado del resto de los países de la región. En un segundo nivel compiten Chile, México, Brasil y Argentina. Sin embargo estos países presentan un bajo valor de rendimiento: alrededor de un 40% de niños no entienden lo que leen, a la vez que el 85% no es capaz de resolver problemas de matemáticas del respectivo nivel de enseñanza (citado en Eyzaguirre y Fontaine, 2001)
Para efectos de referir los resultados del Simce a nivel internacional puede realizarse una homologación de los puntajes entre la prueba Simce de 1999 y la prueba Timss, para luego realizar
una comparación con tres países participantes en esta última prueba y cuyo ingreso per capita está inmediatamente por debajo de Chile: Malasia, Tailandia y Turquía.7.
Para objeto de la homologación se asume una función de distribución normal para las pruebas Simce y Timss para cada uno de los países considerados. Ello posibilita comparar las respectivas distribuciones utilizando solo la media y la desviación estándar. El Cuadro A-7 en el Anexo muestra que el supuesto de normalidad es apropiado, puesto que la distribución simulada replica muy cercanamente la distribución efectiva en los casos descritos.
Los resultados del ejercicio muestran que una brecha de 10 puntos en la prueba Simce (0.2 desviaciones estándares) corresponden a 12.3% de la diferencia promedio del Timss entre Chile y Malasia. Las comparaciones con Tailandia y Turquía entregan diferencias de 20.9% y 42.4%, respectivamente (Cuadro A-8 del Anexo).
¿Qué factores pueden explicar el pobre logro educacional del país en relación a los estándares internacionales? Para responder este tipo de preguntas la base de datos del Timss incluye un gran número de variables que informan sobre el desarrollo económico y social de cada país, los recursos educacionales que cuentan los hogares y escuelas, el currículo de matemáticas, las actitudes y expectativas de los distintos agentes del sector, etc.
El Cuadro A-9 presenta el ranking que Chile ocupa en estos indicadores. Sorprendentemente, el país obtiene una mejor posición para cada uno de ellos, respecto de la obtenida en el resultado de la
7 No se consideró a los ex países socialistas, por su particular relación entre capital humano e ingreso per capita.
prueba. Puesto de otra forma, el país presenta peores resultados que los predichos por los determinantes observables de los logros educacionales.8
No son evidentes las razones que explican el bajo rendimiento de los estudiantes del país en el contexto internacional Pero sí resulta claro que los factores de competencia y participación privada han mostrado baja efectividad para modificar la mala posición que presenta la educación chilena respecto de estándares internacional de calidad.
3.- Competencia y resultados de la educación: la evidencia empírica
La introducción de un sistema de competencia en la educación (vouchers) tendría asociado efectos sobre la productividad de las escuelas y efectos de selección de los alumnos (Hoxby, 2002).
Los efectos sobre la productividad de los colegios se relacionan con los incentivos que genera la competencia sobre la oferta educativa. La competencia aumentará la productividad de las escuelas en la medida que se cumplan ciertas condiciones: que haya múltiples oferentes que compitan por las elecciones de las familias; que los presupuestos de los colegios dependan efectivamente de la elección de los padres; que los establecimientos educacionales puedan realizar una gestión autónoma; y que los padres de familia realicen decisiones racionales e informadas respecto de la educación de sus hijos.
Los efectos relacionados con la selección de los alumnos se originan en el hecho que el servicio de la educación depende de las características de sus usuarios. Así, los establecimientos educacionales
8 Una conclusión similar se deriva del estudio de Beyer (2001), quién realiza un análisis econométrico de los resultados del Timss entre países para concluir que Chile está por debajo de los patrones esperados de logro, después de controlar por las variables socioeconómicas de relevancia.
pueden exhibir mejores resultados si consiguen mejores alumnos. A su vez, la elección de los colegios por parte de las familias tendrá en cuenta los atributos del establecimiento y las características de los estudiantes. Esta relación de elección bilateral origina agrupamientos de alumnos y colegios (sorting), con dos tipos de efectos sobre los resultados de la educación: (i) efectos relacionados con la composición de los estudiantes; (ii) externalidades asociadas a los efectos de los pares (peer effects).
Consideraciones metodológicas
La experiencia chilena ofrece un caso excepcional para evaluar los efectos de la competencia sobre los resultados educacionales. Sin embargo, no se dispone de información para realizar una evaluación antes/después de la introducción del sistema de competencia, puesto que las primeras pruebas estandarizadas corresponden a un período posterior (Pruebas PER de los años 1982 a 1984).
Los estudios que evalúan el efecto de la competencia han explotado las diferencias que exhibe la variable a nivel geográfico. Para tal efecto se utiliza la comuna, que es la unidad territorial administrada por los municipios. Chile posee un total de 334 comunas, pero no todas ellas presentan un tamaño adecuado para que opere la competencia. Así por ejemplo, en 115 comunas hubo menos de 200 estudiantes rindiendo la prueba Simce de octavo básico el año 1999.9 Por otra parte, en el caso de Santiago se precisa cuidar la asociación entre “comuna” y “mercado educacional”, puesto que las 34 comunas que integran esta ciudad difícilmente constituyen mercados separados.
9 Estas comunas no solo tienen espacio para unas pocas escuelas, sino que existe una baja probabilidad de entrada de escuelas privadas a comunas pequeñas (Auguste y Vale nzuela, 2003).
También es importante distinguir entre administradores de las escuelas y los establecimientos educacionales a su cargo, puesto que son los primeros quienes reciben los recursos de la subvención de acuerdo a la matrícula de los establecimientos que administran. La eventual disociación entre grado de competencia y número de escuelas puede ser particularmente relevante en el caso de las comunas grande s con baja participación de escuelas privadas, donde el municipio se asemeja a un monopolista del servicio educacional. 10
La estimación econométrica del efecto de la competencia no requiere contar con un modelo estructural para los determinantes de los resultados educacionales. Basta con especificar las variables de control que son relevantes; esto es, aquellas que afectan los resultados educacionales y que varían conjuntamente con el grado de competencia.11
El problema más importante de la estimación se origina en la presencia de variables no observables que se correlacionan con la medida de competencia y con los resultados de la educación. En este caso el parámetro del efecto competencia será sesgado e inconsistente.
El tema es recurrente en los estudios de la materia. Típicamente, el grado de competencia se mide por la fracción de estudiantes que asiste a escuelas privadas en un mercado educacional. Ahora bien, la localización de las escuelas privadas en determinada área geográfica no es aleatoria, sino que responderá a las características que presenten las escuelas públicas y los estudiantes en dicha área. En la medida que se trate de características no observables –por tanto, no controlables- se producirá un sesgo en el estimador del efecto de la competencia. Suponga, a modo de ejemplo, que
10 Los administradores de conglomerados de establecimientos pueden tener distintos esquemas de asignación interna de sus recursos. Podría argumentarse que, en último término, prevalecerá la lógica de la competencia, induciendo a los administradores a cerrar sus “sucursales” menos exitosas. Sin embargo, también puede existir una política de subsidios cruzados entre los establecimientos de una administración común. A la fecha no se dispone de estudios empíricos en la materia.
11 Este es el denominado enfoque experimental. Ver, Angrist y Krueger (1999)
las escuelas privadas se localizan en áreas donde las escuelas públicas presentan mayores deficiencias en su (no observada) capacidad de gestión. Se sigue que existirá una correlación negativa entre competencia y resultados de las escuelas públicas, pero esta relación no corresponde a un efecto de la competencia.
Para tratar el problema descrito se pueden utilizar instrumentos; esto es, variables relacionadas con la competencia pero no así con los resultados de la educación. El instrumento provee variación exógena de la competencia, posibilitando la estimación consistente del parámetro de interés. Otra estrategia de estimación se basa en efectos fijos; la cual explota la variación temporal que presentan los resultados y las variables de interés. El supuesto metodológico es que los factores no observables relacionados con la competencia son fijos en el tiempo (por ejemplo, capacidad de gestión de las escuelas), de modo que se anulan en una ecuación de diferencias.
Los estudios de competencia
A la fecha se dispone de cuatro estudios que han evaluado el efecto de la competencia sobre los resultados de las pruebas Simce.12
12 Contreras y Macías (2002) estudian los efectos de la competencia utilizando los resultados de la prueba de selección a las universidades (PAA). La PAA evalúa habilidades verbales y matemáticas y e s obligatoria para postular a la mayor parte de las universidades en Chile. A diferencia de la prueba Simce, la PAA es rendida por un subconjunto de los estudiantes: alrededor de dos tercios de la cohorte que egresa de la educación secundaria (quienes a su vez representarían un 49% de la cohorte generacional). Las habilidades que miden la PAA dependen tanto de factores innatos como aquellos adquiridos en la familia y en la escuela.
Los resultados establecen que existiría una relación positiva entre la competencia a nivel comunal de los establecimientos y los resultados de la prueba de selección a las universidades. Los resultados generalizan a una variante donde el índice de concentración se desagrega entre colegios subvencionados y colegios privados pagad os.
El artículo de McEwan y Carnoy (1998) fue el primero que estudió el efecto de la competencia en el sistema educacional chileno, para lo cual utilizó los resultados de las pruebas Simce del período 1988 a 1996. La investigación se centró en estimar el impacto de la competencia sobre el logro de las escuelas públicas, que es uno de los efectos positivos esperados de un esquema de vouchers. La medida de la competencia fue el porcentaje de matrícula de colegios privados subvencionados en cada comuna.
Para tratar el problema de la endogeneidad de la medida de competencia los autores realizan una estimación con efectos fijos a nivel de establecimientos, suponiendo que los factores no observados se mantienen constante en el tiempo. También utilizan constantes (efectos fijos) por año para tratar los problemas de comparición del Simce y los cambios en el nivel de la subvención.
Los resultados del modelo con efectos fijos por colegio muestra un efecto negativo de la competencia: las comunas con mayor matrícula en colegios privados presentan colegios públicos con menor Simce (Cuadro 1). Las estimaciones mínimo cuadrados presentan el resultado opuesto, que sería atribuible a un sesgo en los parámetros.
Los autores argumentan que la relación negativa entre competencia y resultados de las escuelas públicas es causada por la emigración de los mejores estudiantes hacia las escuelas privadas. De esta manera, los colegios públicos localizados en comunas con mayor presencia de escuelas privadas obtienen puntajes más bajos. El resultado descrito podría reflejar tan solo un efecto de composición, sin que necesariamente exista pérdidas netas a nivel de individuos. Tampoco excluye la posibilidad que la competencia en el sector de educación tenga algún efecto positivo sobre los colegios públicos, tan solo que cualquier impacto positivo sería dominado por el citado efecto de composición.
Cuadro 1
Efecto de la competencia sobre Simce lenguaje de colegios, McEwan y Carnoy Coeficientes estandarizados
OLS 0.03 *
OLS con controles comunales -0.04 *
Efectos aleatorio a nivel de escuela -0.08 * Efectos fijo a nivel de escuela -0.16 * Número de observaciones Alrededor de 15.000 Fuente: Basado en McEwan y Carnoy (1988)
Nota: Efectos de la competencia sobre rendimiento escuelas municipales, control por participación del colegio público en P-900, dummies por año.
Parámetros con asterisco son significativos a un 5%.
El segundo estudio corresponde a Hsieh y Urquiola (2002). El artículo se centra en el período 1982- 88, puesto que este presenta los mayores cambios de matrícula asociados a la introducción del sistema de competencia. Al igual que en el caso anterior, la medida de competencia utilizada en la participación de la matrícula del sector privado subvencionado y la metodología para tratar el problema de endogeneidad asociado es la estimación a través de efectos fijos.
Los resultados principales se presentan en dos niveles. Primero, se muestra que los resultados del Simce en los colegios públicos, en relación a los resultados de la respectiva comuna, disminuyen a medida que aumenta la presencia de escuelas privadas subvencionadas. Los resultados obtenidos generalizan a otros dos indicadores de la educación - la tasa de repitencia y los años promedio de escolaridad de niños entre 10 y 15 años de edad -, así como a la composición socioeconómica de los alumnos (medida por la educación de los padres).
Estos resultados reflejarían el ya citado efecto de composición: el sistema de competencia induciría el traslado de niños con mejores características de aprendizaje a los colegios privados.
Un segundo nivel inquiere sobre la existencia de efectos a nivel agregado para cada comuna. La emigración hacia las escuelas privadas puede ser acompañada por externalidades positivas a nivel del sistema, como sería el caso del efecto dinámico de la competencia sobre las escuelas públicas.
También pueden ocurrir externalidades de signo negativo, asociada al efecto de los pares (peer effect) si la salida de los mejores estudiantes afecta el resultado de quienes permanecen en las escuelas públicas.13
Las estimaciones a nivel comunal no muestran efectos estadísticamente significativos en los coeficientes estimados (Cuadro 2). Se concluye que cualquier efecto neto de la competencia sobre la productividad de los colegios habría sido más que compensado por efectos de composición, incluyendo posibles externalidades negativas derivadas de la salida de los mejores estudiantes de los colegios públicos.
En suma, los estudios descritos muestran la falta de efectos positivos de la introducción de la competencia sobre los resultados educacionales. El primero de estos estudios, McEwan y Carnoy (1998), así como otros trabajos de los mismos autores, habría entregado respaldo a la política pública que otorgó mayor peso a las intervenciones del Ministerio de Educación en la década de los 90s.
13 El efecto de los pares puede funcionar en distintas direcciones, Así, puede beneficiar a todos los estudiantes si las cursos son más homogéneas son más efectivos para la enseñanza. También puede haber efectos distributivos, si un tipo de estudiante gana más que otros. La literatura no es definitiva respecto de estos efectos. Veáse Hanushek et al (2001); Hoxby (2000).
Cuadro 2:
Efecto de la competencia sobre Simce matemáticas de comunas, Hsieh y Urquiola Coeficientes estandarizados
Controles Todas las comunas con
información
Comunas urbanas, excluye Santiago
Ninguno 0.00 0.24
Socioeconómicos comuna -0.16 * -0.08
Efectos fijos comunales -0.16 0.20
Número observaciones 172 84
Fuente: Hsieh y Urquiola (2002)
Nota: Panel de datos 1982 –88. Todas las regresiones contienen dummy para 1998. Parámetros con asterisco son significativos al 5%
El estudio de Gallegos (2002) tiene por objeto estimar los efectos de la competencia en el contexto de los incentivos que entrega el marco de política y la estructura del mercado. El trabajo está basado en los resultados del Simce del período 1994-97. La estimación relaciona la variable competencia, medida como el porcentaje de matrícula privada a nivel de la comuna, con los resultados del Simce a nivel de establecimientos. Para tratar el problema de la competencia como variable endógena se utilizan como instrumentos a la fracción de la población urbana y el número de estudiantes en la comuna. Estas variables se relacionan con la decisión de ofrecer educación en una comuna, pero no estarían correlacionados con los resultados de la educación.
Considerando el conjunto de colegios subvencionados, los resultados muestran que la competencia contribuye a un mejor Simce del establecimiento promedio. El efecto de la competencia es mayor cuando solo se utiliza una muestra de colegios privados subvencionados, sugiriendo que la
estructura de incentivos importa puesto que los colegios privados están más expuestos a la competencia (Cuadro 3).
Cuadro 3:
Efectos de la competencia sobre Simce establecimientos, Gallegos Coeficientes estandarizados
Cuarto básico Octavo básico
Colegios 1994 1996 1995 1997
Todos los subvencionados 0.11* 0.03 0.10* 0.07*
Privados subvencionados 0.17* 0.11* 0.24* 0.20*
Municipales 0.09* 0.01 0.06 0.04*
Fuente: Basado en Gallegos (2002)
Nota: Controles socioeconómicos; parámetros significativos al 5% con asterisco.
Finalmente, el trabajo de Auguste y Valenzuela (2003) analiza el efecto de la competencia sobre los resultados de la educación utilizando la base de datos de individuos de la prueba Simce del año 2000. Este es el primer estudio de competencia educacional en Chile que se basa en datos individuales, lo cual posibilita un mejor tratamiento estadístico de la materia.
La estimación del modelo utiliza datos comunales. Ello resuelve el problema de selección entre escuelas, suponiendo que las comunas representan mercados independientes. Al respecto, la ciudad de Santiago se trata como un solo mercado, pero los resultados son robustos a esta especificación.
La variable competencia se mide por la participación del sector privado (pagado y subvencionado) en la comuna. Los autores realizan un cuidadoso tratamiento para la elección de instrumentos, mostrando que la población de la comuna y la distancia a la ciudad más cercana son instrumentos válidos.
El Cuadro 4 presenta los principales resultados del estudio. Allí se muestra el cambio en la variable de resultado frente al cambio en la medida de competencia, ambos medidos en términos de desviaciones estándares. Los resultados se presentan para tres grupos de escuelas: todas, urbanas y urbanas subvencionadas por el Estado.
El primer conjunto de resultados concierne al efecto de la competencia sobre los puntajes de la prueba Simce, que ha sido la variable de interés de los estudios previos. Coincidiendo con Gallegos (2001), las estimaciones con variables instrumentales muestran que la competencia tiene un efecto positivo y significativo sobre los resultados del Simce. Para las escuelas urbanas financiadas por el Estado, un aumento de la medida de competencia de una desviación estándar causaría un cambio de 0.45 desviaciones estándares en el puntaje Simce. 14
Un segundo grupo de resultados considera como variable dependiente a la productividad de las escuelas, que se mide como el puntaje del Simce neto del efecto de las condicionantes socioeconómicas de los estudiantes.15 Los autores reportan el resultado para el conjunto de las escuelas urbanas, para las cuales un cambio de una desviación estándar en la competencia aumenta en 0.63 puntos la desviación estándar del Simce comunal.
El tercer grupo de resultados se refiere al efecto de la competencia sobre la distribución de estudiantes entre escuelas públicas y privadas, medida a través de resultados y de insumos. En ambos casos se considera la relación del promedio comunal de la variable entre las escuelas públicas y privadas. Los resultados muestran que la competencia aumenta la brecha entre las escuelas públicas y privadas, medidas a través de resultados o de insumos, validando la hipótesis
14 Hay que tener presente que la desviación estándar del Simce a nivel comunal es cuatro veces menor respecto de la medición individual.
15 La variable dependiente son los coeficientes de variable dummies a nivel de cada comuna –y de la ciudad de Santiago-, estimados en una regresión de los datos individuales del puntaje Simce y que controla por las variables del hogar del estudiante.
que se produce una emigración de los mejores estudiantes hacia las escuelas privadas. Así por ejemplo, el aumento de una desviación estándar de la medida de competencia provocaría una caída de 0.78 puntos en el nivel socioeconómico de los alumnos de las escuelas públicas respecto de las privadas (medido por los años de educación de las madres, en desviaciones estándares).
Cuadro 4
Efectos de la competencia en resultados simce, productividad y sorting, Augutse y Valenzuela Coeficientes estandarizados
Variable de resultado Todas las escuelas Escuelas urbanas Escuelas urbanas públicas y vouchers
Simce (OLS) 0.053* 0.031 -0.006
Simce (IV) 0.269* 0.401* 0.449*
Productividad (IV) 0.630*
Sorting outcome (IV) -0.498*
Sorting inputs (IV) -0.777*
Número observaciones 254 221 219
Fuente : Basado en Auguste y Valenzuela (2003).
Nota: Parámetros con asterisco significativos a un 5%.
¿Qué aprendemos de los estudios de competencia?
La pregunta principal en la materia -si la competencia ha tenido un efecto positivo sobre la calidad de la educación- no puede tener respuesta definitiva por falta de los datos requeridos a tal efecto. A la falta de información sobre resultados del proceso educacional en el período previo a la reforma se agrega la naturaleza ordinal de las pruebas de logros educativos de los años posteriores.
Los estudios existentes identifican efectos relativos de la competencia entre los establecimientos educacionales. Así por ejemplo, un mayor puntaje promedio del Simce en las comunas sujetas a mayor grado de competencia no es demostración que la competencia eleve la calidad de la enseñanza; simplemente plantea que esas comunas obtienen mejores logros en relación a otras comunas. En teoría, ambos tipos de comunas podrían están en mejor (o peor) situación que en la situación sin competencia. En definitiva, los datos nacionales no permiten conocer si la competencia puede elevar el nivel general de las escuelas.
Los estudios establecen en forma sólida la existencia de un efecto composición, asociado a la migración de los mejores estudiantes desde los colegios públicos a los privados. Ello puede explicar una caída en el resultado Simce de los colegios municipales. Pero este es un efecto trivial y sin efecto sobre los resultados del sistema, a menos que existan externalidades negativas asociadas a la nueva composición de los pares en los colegios municipales. Esta es una pregunta sin respuesta aún definitiva.
Tal como lo señalan Aedo y Sapelli (2001) y Sapelli (2002), no se puede juzgar las bondades de un sistema de competencia si los “precios” que guían las decisiones de asignación de recursos son incorrectos. En particular, la selección es un resultado que se produce en la medida que la subvención no reconozca que es más caro educar a niños provenientes de hogares pobres o niños con problemas de aprendizaje. La solución radicaría en fijar precios correctos antes que eliminar el sistema de competencia.16
Los resultados de los estudios de brecha, que se reportan más adelante, muestran que los estudiantes que asisten a escuelas privadas subvencionadas obtienen mejores resultados en el Simce que sus
16 En el caso de un bien cuyo precio es fijado por debajo del equilibrio, tal situación sería análoga a suponer que la escasez resultante es producto de la competencia antes que causada por la política de precios.
contrapartes municipales, una vez que se controla por las variables socioeconómicas y por la elección del tipo de establecimiento educacional. No sabemos si ello es solo causado por la mayor competencia a que está afecto el sector subvencionado - o si hay ventajas en la función de producción o si existe interacción entre competencia y tecnología – pero es a la postre un factor que relaciona competencia y logros educacionales. Esto es, si la competencia tiene asociado la expansión de las escuelas privadas, y si estas exhiben mejores resultados que las municipales, entonces existirá correspondencia entre competencia y logros educacionales.
El efecto neto de los distintos factores debiera ser observado en los resultados a nivel de comunas, recordando que se trata de resultados de carácter relativo. Así, la relación positiva entre competencia y logros educativos a nivel de promedios comunales, reportada en el estudio de Auguste y Valenzuela (2003), incorpora los diversos canales a través de los cuales actúa la competencia sobre los resultados educacionales. Hsieh y Urquiola (2002) mostraban el caso contrario utilizando datos comunales para el período 1982-88, pero trabajan con datos de menor calidad y no estrictamente comparables. Las pruebas Per del período 1982-84 cubren alrededor de la mitad de colegios que las pruebas Simce del año 1988.
El efecto de la competencia sobre la productividad debiera observarse en el sector privado subvencionado, que está más abierto a los incentivos de la elección de las familias y que tiene mayor espacio para modificar la tecnología de la enseñanza. A tal respecto, el estudio de Gallegos identifica que la competencia tiene efectivamente mayor impacto sobre el sector privado subvencionado. El parámetro del efecto de competencia es 3.5 veces más alto en el sector privado respecto del municipal. La magnitud del parámetro es significativa; por cada punto de desviación estándar que aumenta la participación privada, el resultado del Simce aumenta 0.244 unidades de desviación estándar en el caso de octavo básico (0.151 para cuarto básico).
En suma, la mejor evidencia sugiere que la competencia favorece los resultados educacionales. Sin embargo, se trata de un impacto relativamente menor, tal como lo señalan los autores de los respectivos estudios, y como lo confirma la comparación del país en el contexto internacional. Por otra parte, falta aún por conocer el funcionamiento de la competencia a nivel de sus diversos canales –efecto de composición y de selección, efecto de los pares, respuesta de los colegios públicos, etc -, así como la distribución de sus resultados entre la población de estudiantes (versus sus efectos sobre los promedios).
4.- Educación pública versus privada
La literatura nacional es relativamente prolífica en estudios que evalúan los resultados de las pruebas Simce entre escuelas municipales versus privadas subvencionadas. Si bien el propósito de estas investigaciones es realizar un estudio comparativo de la eficacia de las modalidades público y privada de la oferta educativa, sus resultados también pueden ser interpretados como un test indirecto del sistema de vouchers, bajo la premisa que las escuelas privadas subvencionadas estarían más expuestas a los rigores de la competencia que sus contrapartes municipales.
Metodológicamente, los estudios de brecha entre escuelas se asimilan a la literatura del efecto tratamiento. En este caso, el tratamiento es asistir a un tipo de escuela (privada); mientras que la ausencia de tratamiento consiste en asistir al otro tipo de escuela (pública). La brecha entre tipos de escuela puede suponerse lineal y aditiva, resumiéndose en una variable muda, o puede considerarse un modelo que supone ecuaciones distintas según tipo de escuela, en cuyo caso la brecha puede ser evaluada en diferentes niveles de las variables de control.
Para evaluar los resultados de la educación privada versus pública hay que tener presente las potenciales fuentes de selección no aleatoria de estudiantes entre los establecimientos. Así, las
familias más educadas y motivadas tenderán a elegir las mejores escuelas para sus hijos, a la vez que las escuelas tendrán incentivos a seleccionar a los mejores estudiantes a través de exámenes y procedimientos similares.
Bajo selección en variables observables, el efecto tratamiento puede ser calculado como la diferencia entre los resultados obtenidos en las pruebas Simce, condicional en las variables observables. Esto es, se compara el resultado educacional que consiguen estudiantes con características similares, salvo el tipo de escuela de asistencia.
El problema surge cuando la selección de la escuelas se realiza sobre la base de variables no observables, pero que se relacionan con los resultados educacionales (por ejemplo, motivación de los padres). Todos los estudios para Chile que han corregido por selección en las variables no observables han utilizado alguna variante del procedimiento de dos etapas de Heckman. En la primera etapa se estima una función de selección, que endogeniza la probabilidad de participar en el tratamiento. La segunda etapa estima la función de resultados, controlando por la probabilidad estimada de participar en el tratamiento. El supuesto clave de la metodología radica en asumir que los residuos de las distintas ecuaciones siguen una distribución normal conjunta. 17
Los estudios realizados en el país se pueden separar en dos grupos de acuerdo a si utilizan información a nivel de establecimientos o de estudiantes. Tal característica está relacionada con la disponibilidad de la información. Los resultados del Simce estuvieron disponibles solo a nivel de establecimientos en el período 1988 a 1997; mientras que a partir de 1998 se puede acceder a las bases de datos individuales.
17 Ver Heckman (2001) para una revisión de las opciones metodológicas.
Resultados con datos a nivel de establecimientos
En el primer grupo destaca por su carácter exhaustivo el estudio de Bravo, Contreras y Sanhueza (1999). Los autores utilizan todas las bases de datos de las pruebas Simce del período 1998 a 1997 para estimar la brecha de rendimientos entre escuelas públicas y privadas subvencionadas, controlando por características socioeconómicos y geográficas. También se hace uso de los resultados de la prueba PER que fuera aplicada en los años 1982 a 1984.18 En cualquier caso no se controla por sesgo de selección, dado que se trabaja con resultados a nivel de establecimiento.
Los resultados principales se reportan en el Cuadro 5, diferenciándose según el tipo de controles utilizados: (i) ninguno; (ii) socioeconómicos, a través de variable categórica con cuatro niveles; (iii) geográficos, a partir de un índice construido sobre la base de tamaño de ciudad y dificultades de acceso.
Cuadro 5
Brecha de resultado privado subvencionado vs municipal; Bravo, Contreras y Sanhueza Prueba de matemáticas, cuarto básico
(brecha por 1 sd puntaje simce)
Controles 1982 1983 1984 1988 1990 1992 1994 1996
Ninguno 0.22* 0.38* 0.41* 0.49* 0.50* 0.40* 0.43* 0.34*
Socioeconómico 0.14* 0.27* 0.29* 0.20* 0.19* 0.18* 0.16* 0.14 Socioeconómico,
geográficos
0.11* 0.25* 0.29* 0.15* 0.03 0.06 0.12 0.04
Número escuelas 2815 3017 3291 5513 4421 4162 4522 5110 Fuente: Basado en Bravo, Contreras y Sanhueza (1999)
Nota: Todos los coeficientes con asterisco significativos al 5%. La media de las pruebas fluctúa en el cercanía de 50 y la desviación estándar en 10.
18 La prueba PER es un test estandarizado de logros en matemáticas y lenguaje que se introduce en 1982 a efectos de evaluar el sistema de vouchers. Sin embargo, la prueba se discontinuó en 1984 y sus resultados no fueron dados a conocer hasta 1995 por presiones internas en el Ministerio de Educación.
Los resultados se presentan en términos de tasas de la desviación estándar del Simce. Así, la brecha sin controles fluctúa entre 0.22 y 0.50 puntos de desviación estándar del Simce, a favor de los establecimientos privados subvencionados. Cuando se controla por factores socioeconómicos y geográficos, la brecha se reduce en alrededor de un tercio para las pruebas PER y a menos de la quinta parte en el caso de las pruebas Simce. De hecho, cuando se utilizan todos los controles la brecha desaparece, en sentido estadístico, en la mitad de las mediciones de la prueba Simce.
En el estudio de Mizala y Romaguera (1988) se estiman funciones de producción educacionales utilizando los datos de la prueba Simce del año 1996 (cuarto básico).19 El resultado del Simce de cada establecimiento se regresio na en un vector de variables socioeconómicas (tramos de ingresos, índice vulnerabilidad), variables del establecimiento (experiencia profesores, razón profesor a alumno, número de colegios, área geográfica) y características de alumnos (asistencia a educación preescolar).
El resultado principal del artículo establece que no existen diferencias de puntaje Simce entre los colegios públicos y privados subvencionados, una vez que se controla por las variables descritas (Cuadro 6). También se reporta una apreciable disminución de la brecha de resultados entre establecimientos municipales y particular pagados.
El estudio de Mizala y Romaguera (1988) representa el estado del arte del conocimiento de la materia hacia fines de los 90s. Sus conclusiones son citadas por personeros del Ministerio de Educación para mostrar que la modalidad de la escuela no hace una diferencia en el resultado educacional, una vez que se controlan las variables socioeconómicas, y que el mejoramiento de calidad de la educación debe ser objeto de intervenciones de política directa.
19.Publicado posteriormente como Mizala y Romaguera (2000)
Cuadro 6
Brechas de resultados de colegios municipales versus privados: Mizala y Romaguera Prueba de matemáticas, cuarto básico, 1996
(brecha por 1 sd puntaje simce)
Controles Brecha respecto de colegios
privados subvencionados
Brecha respecto de colegios privados pagados Logros simce Valor
agregado
Logros simce Valor agregado
Ninguno 0.41* 0.10* 1.67* 0.44*
Hogar 0.06* 0.03 0.65* 0.24*
Hogar, geográficos -0.06* 0.02 0.42* 0.17*
Hogar, geográficos, insumos 0.03 0.05 0.45* 0.18*
Número observaciones 5133 4074 5133 4074
Fuente: Mizala y Romaguera (1998)
Nota: Parámetros con asterisco son signifcativos a un 5%
Tokman (2001) investiga la presencia de efectos diferenciales del tipo de escuela según características de los alumnos. Los datos utilizados son promedios por establecimientos correspondientes a la prueba Simce de 1996. Adicionalmente, se utiliza información socioeconómica provenientes de las encuestas Casen de 1996 y 1998. El procedimiento es similar a Aedo y Larrañaga (1994), consistente en identificar en la encuesta de hogares estudiantes según escuelas, para luego asociar a cada establecimientos las características promedio del conjunto asociado de estudiantes. 20
La estimación econométrica se realiza sobre la base de funciones distintas para escuelas públicas y privadas. Adicionalmente, se modela la elección de las escuela a través de un modelo probit, en el contexto del método de dos etapas de Heckman.
20 El uso de la encuesta de hogares tiene asociado problemas. Primero, el tamaño de la “muestra” puede ser demasiado reducido para obtener buenos estimadores del factor socioeconómico de los establecimientos.
Segundo, puede haber un sesgo de selección en la muestra de escuelas si se excluye a aquellas que no logran representación en la encuesta de hogares, lo cual depende del tamaño del establecimiento.
Los resultados de la estimación con corrección por selección, bajo el supuesto de ventajas comparativas absolutas, muestra que la elección de las escuelas privadas se correlaciona negativamente con resultados del Simce (y la elección de escuelas públicas se relaciona positivamente). El resultado anterior se mantiene en el caso de las escuelas públicas cuando se admiten ventajas comparativas relativas, pero pierde significancia estadística para las escuelas privadas. Estos resultados son contrarios a los esperados y pueden estar influenciados por la selección de la muestra.
Resultados con datos individuales
Sapelli y Vial (2002) utilizan la base individual del Simce de 1988 para segundo medio y un modelo generalizado de elección de Roy. Este consiste en ecuaciones separadas del resultado del Simce para colegios públicos y privados, además de una ecuación de selección de colegios que depende de variables socioeconómicas y de variables que miden la disponibilidad de escuelas privadas a nivel de provincias (distritos electoral en el caso de Santiago). El supuesto aquí es que hay poca o nula movilidad entre estas áreas, de modo que se trata de variables que afectan la decisión de elección del colegio, no así los resultados de la prueba. El sesgo de selección se trabaja suponiendo que los errores de las tres ecuaciones siguen una distribución normal trivariada.
Controlando por sesgo de selección se obtiene un efecto de tamaño moderado a favor de la educación privada subvencionada, equivalente a un 15% de la desviación estándar (Cuadro 7). El resultado está referido al “tratamiento de los tratados”; esto es, quienes efectivamente asisten a escuelas privadas comparados con estudiantes de iguales características que asisten a escuelas públicas. De la ecuación de selección se desprende que habría ventajas absolutas antes que relativas (quienes van a colegios privados son “mejores” estudiantes que quienes asisten a establecimientos
públicos). Por otra parte, los resultados apuntan a una leve ventaja en favor de las escuelas públicas en el caso de individuos que se escogiesen en forma aleatoria en la población (efecto ATE).
Cuadro 7
Brecha privados subvencionados vs municipales, Sapelli y Vial Datos individuales, Simce segundo medio, 1998
Efecto por 1 sd de puntaje simce
Tramos de ingreso familiar (miles de $)
Método Todos < 100 100-200 200-300 300-600 > 600
OLS , efecto ATE 0.20* 0.21* 0.21* 0.24* 0.18* 0.21*
Heckman, efecto ATE -0.05* -0.11* -0.04* 0.01* 0.05* 0.01*
Heckman, efecto TT 0.15* 0.15* 0.16* 0.19* 0.12* 0.15*
Fuente: Basado en Sapelli y Vial (2002)
Nota: Todos los coeficientes con asterisco son significativos al 5%. La media de las pruebas fluctúa es 250 y la desviación estándar 50.
Mizala y Romaguera (2002) utilizan los datos individuales del Simce de 1998 (segundo medio) para estudiar la heterogeneidad de los resultados de las escuelas. Para tal efecto realizan estimaciones de las funciones de producción con regresiones de cuantiles. Un cuantil bajo (alto) representaría el caso de estudiantes con logros por debajo (arriba) del promedio, condicional en su situación socioeconómica y demás variables observables.
Este es uno de los pocos trabajos que analiza el efecto de los pares sobre el resultado educacional.
La variable se define a nivel socioeconómico y del resultado del Simce, y se mide como el porcentaje de estudiantes por colegio que están en el rango de +/- 0.5 desviaciones estándares alrededor de la media. Esta medida puede estar afecta a problemas, puesto que depende de la distribución de puntajes al interior del colegio. Así, es posible tener dos establecimientos con gran
diferencia en la varianza de las variables, pero que entreguen igual valor para el efecto de los pares (tal como se mide en el artículo).
Los resultados revelan que el impacto del tipo de propiedad del establecimiento sobre el resultado educacional varía según los cuantiles de la distribución de no observables. Así, la brecha a favor de los colegios privados es mayor para los alumnos de cuantiles inferiores, disminuyendo para cuantiles superiores de la distribución de no observables (Cuadro 8). En todo caso, se constata una significativa brecha de puntajes a favor de los establecimientos privados subvencionados, después de controlar por los factores socioeconómico e insumos de la escuela.
Por su parte, el efecto de los pares socioeconómicos es más importante para los cuantiles bajos, sugiriendo que los estudiantes menos hábiles son quienes más ganan en los grupos homogéneos.
Cuadro 8
Brecha privado subvencionado vs municipal. Regresiones de cuantiles, Mizala y Romaguera Simce individual segundo medio 1998
(brecha por 1 sd puntaje Simce)
OLS Q 10 Q 25 Q 50 Q 75 Q 90
0.38* 0.48* 0.44* 0.38* 0.34* 0.30*
Fuente: Mizala y Romaguera (2002)
Nota: Controla por factores socioeconómicos e insumos de colegios (función de producción). Todos los coeficientes con asterisco son significativos al 5%. La media de las pruebas fluctúa es 250 y la desviación estándar 50.
La interpretación de los autores alude a los residuos como una variable relacionada con las características del individuo (habilidades). Sin embargo, el residuo también puede responder a características de los establecimientos. Así por ejemplo, un colegio con mal liderazgo puede situar a gran parte de sus alumnos por debajo del resultado esperado del Simce (condicional en los
observables). La distinción es importante a la hora de interpretar los resultados. La reducción de la brecha entre establecimientos públicos y privados para los cuantiles superiores puede tener distintas lecturas, según predominen factores individuales o de la escuela en los residuos.
¿Qué aprendemos de los estudios de brecha entre tipos de escuela?
Los estudios de brecha ilustran la importancia que tienen los datos y las metodologías de estimación en las conclusiones de los trabajos. De esta manera, hacia fines de los 90s la conclusión dominante apuntaba a que la propiedad de los establecimientos no hacía diferencia en los resultados de las pruebas estandarizadas, una vez que se controlaba por los factores socioeconómicos de los estudiantes y por los insumos de los colegios.
Sin embargo, los estudios más recientes, basados en datos individuales reportan resultados a favor de las escuelas privadas subvencionadas, después de controlar por las variables relevantes y por la decisión de selección de establecimientos. Así, Sapelli y Vial (2002) reportan una brecha de resultados a favor de las escuelas privadas subvencionadas equivalente a un 15% de la desviación estándar de la distribución de puntaje individual, un efecto significativo en el contexto nacional.21
21 Un resultado similar se encuentra en el estudio de Contreras (2002), basado en la prueba de selección de las universidades (PAA) del año 1998. La metodología de estimación tiene dos etapas. La primera etapa estima un modelo logit multinomial para la elección de escuelas privadas pagadas y privadas subvencionadas. En la segunda etapa se regresiona el logro en la PAA sobre edad, educación padres y la probabilidad estimada de asistir a la escuela respectiva. La brecha en la PAA de matemáticas de asistir a colegios subvencionados versus municipales es 0.11 sd del puntaje de la prueba, de acuerdo a estimaciones OLS que controlan por la educación de los padres y la edad del alumno. El efecto sube a 0.37 puntos de desviación estándar en las regresiones en dos etapas que controlan por selección. La dirección del sesgo es contraria a la esperada si la selección de escuelas privadas se correlacionara positivamente con no observables que afectan los resultados de la PAA. La interpretación de los resultados se basa en el efecto marginal, esto es, en el efecto esperado para estudiantes en escuelas privadas pero que están restringidos por la disponibilidad de estas escuelas (estudiantes en comunas más pobres tienen más que ganar).
Los resultados de estos estudios trascienden el ámbito de interés académico, constituyendo un factor de influencia en la política pública. La política pública de educación de los años 90s, que privilegió las intervenciones centralizadas, encontró fundamentos en los trabajos que concluían que la competencia y la participación privada no tenían efecto sobre los resultados educacionales.
¿Qué explica los distintos resultados entre los estudios con datos de establecimientos versus aquellos basados en datos individuales?
Un primer elemento es la corrección del sesgo de selección que es posible realizar cuando se utilizan datos individuales. Como se plantea en Aedo y Sapelli (2001), la conclusión que la modalidad del establecimiento no importa después de controlar por el factor socioeconómico tendría validez si todo el efecto de esta variable estuviese asociado a una mejor capacidad de aprendizaje de los alumnos. La conclusión cambia si el factor socioeconómico está también asociado a una mejor elección del colegio, en cuyo caso la brecha de resultados responde a diferencias en la calidad de la educación que provee el establecimiento.
Una segunda materia a la hora de interpretar la brecha de resultados es el tratamiento de las variables de control. A tal respecto considere que siempre existirá un número suficiente de controles que haga desaparecer la brecha entre los distintos tipos de establecimientos, puesto que se habrá dado cuenta de los factores que explican tal brecha. El punto relevante radica en la naturaleza endógena o exógena a los establecimientos educaciones de las variables que determinan los resultados de la enseñanza. Así por ejemplo, la diferencia a favor de los establecimientos privados que es explicada por la combinación de insumos educacionales responde a una decisión de política
