El liceo en tiempos turbulentos
Tekst- Rozmiar: 760 str. 12 ilustracji
- Kategoria: literatura faktu, literatura edukacyjnaEdytuj
Tabla II: Características Generales de los Establecimientos (Continuación)
| Nombre Establecimiento | Promedio Asistencia a | Tasa de Repitencia b | Retención Escolar c | Tasa titulación TP d | Rotación de Profesores e | |||||||||||||||
| 2005 | 2008 | 2012 | 2016 | 2005 | 2008 | 2012 | 2016 | 2004 | 2007 | 2010 | 2013 | 2014 | 2015 | 2016 | 2017 | 2005-2006 | 2008-2009 | 2012-2013 | 2016-2017 | |
| Liceo Pablo Neruda | 88% | 93% | 92% | 93% | 18% | 8% | 7% | 3% | 42% | 59% | 57% | 59% | 57% | 42% | 51% | 76% | 38% (29) | 19% (26) | 25% (44) | 4% (45) |
| Liceo Técnico Profesional People Help People | 96% | 88% | 86% | 89% | 12% | 5% | 6% | 5% | 30% | 33% | 48% | 57% | 83% | 70% | 80% | 86% | 23% (13) | 50% (14) | 26% (23) | 29% (31) |
| Bright College | 93% | 92% | 91% | 91% | 2% | 2% | 1% | 0% | 69% | 67% | 60% | 87% | 89% | 91% | 94% | 97% | 0% (11) | 9% (11) | 8% (12) | 20% (5) |
| Liceo Industrial Ingeniero Ricardo Fenner | 94% | 94% | 93% | 92% | 5% | 2% | 1% | 1% | 65% | 80% | 73% | 75% | 92% | 93% | 97% | 93% | 25% (36) | 11% (36) | 11% (36) | 5% (37) |
| Liceo Hualañé | 91% | 93% | 93% | 92% | 8% | 6% | 8% | 9% | 67% | 73% | 76% | 78% | - | - | - | - | 15% (20) | 5% (20) | 16% (19) | 0% (23) |
| Liceo Valentín Letelier | 92% | 90% | 91% | 93% | 9% | 11% | 11% | 5% | 61% | 62% | 67% | 87% | - | - | - | - | 10% (72) | 11% (71) | 21% (56) | 29% (75) |
| Liceo Bicentenario de Excelencia Polivalente San Nicolás | 94% | 95% | 95% | 95% | 3% | 6% | 5% | 5% | 65% | 63% | 71% | 73% | 34% | 24% | 36% | 31% | 28% (32) | 22% (32) | 11% (66) | 8% (96) |
| Liceo Histórico | 91% | 89% | 89% | 90% | 10% | 10% | 18% | 10% | 43% | 40% | 44% | 49% | - | - | - | - | 4% (23) | 9% (23) | 24% (25) | 41% (27) |
| Liceo Antonio Varas | 92% | 89% | 93% | 93% | 13% | 7% | 9% | 7% | 60% | 61% | 60% | 74% | - | - | - | - | 21% (14) | 8% (13) | 33% (15) | 12% (17) |
| Liceo Minero América | 95% | 94% | 94% | 93% | 6% | 8% | 4% | 7% | 81% | 76% | 79% | 71% | 26% | 35% | 15% | 37% | 11% (37) | 29% (38) | 10% (39) | 26% (50) |
| Liceo Los Ángeles | 94% | 93% | 95% | 93% | 12% | 5% | 6% | 3% | 80% | 89% | 90% | 84% | - | - | - | - | 10% (51) | 5% (43) | 24% (42) | 13% (54) |
| Liceo Canelo | 89% | 85% | 90% | 90% | 10% | 3% | 10% | 12% | 66% | 45% | 52% | 39% | - | - | - | - | 20% (5) | 38% (13) | 16% (19) | 22% (23) |
| Promedio nacional | 93% | 92% | 91% | 91% | 8% | 8% | 8% | 6% | 78% | 78% | 76% | 79% | 36% | 35% | 35% | 35% | 22% | 22% | 25% | 22% |
| Promedio NSE A B C | 93% | 91% | 90% | 90% | 9% | 10% | 9% | 8% | 75% | 75% | 72% | 76% | 28% | 27% | 28% | 28% | 20% | 22% | 25% | 23% |
a Promedio asistencia educación media.
b Tasa de repitencia educación media.
c Porcentaje de estudiantes que se mantienen en la escuela 3 años después por cohorte.
d Tasa de titulación al primer año de egreso de educación media.
e Porcentaje de profesores de educación media que se retira del liceo. En paréntesis el número de profesores del año base.
Trayectorias de Desempeño de los liceos de la muestra
Tal como se describe en el capítulo metodológico, la selección de los 12 liceos se hizo entre aquellos que presentaron un proceso de mejoramiento de su desempeño relevante y sostenido en el tiempo, pero comenzando desde distintos niveles de desempeño al inicio del periodo. Para comparar longitudinalmente el desempeño de los liceos estudiados, observando la evolución del propio desempeño y de otros establecimientos, se estimó para el periodo 2001-2016 el Índice de Desempeño Escolar (IDE), propuesto por Valenzuela, Bellei y Allende (2016). Esta metodología, originalmente construida para educación básica, es posible utilizarla también en educación media, dada la existencia de los datos necesarios para todos los indicadores utilizados en el análisis factorial que da origen al índice. El IDE de educación media, al igual que el original, está compuesto por variables de efectividad relativa, eficacia absoluta, eficiencia interna y equidad de los establecimientos de educación media. Así mismo, por construcción, el índice tiene promedio cero para el periodo base (2001-2003) y se expresa en unidades de desviación estándar (DS). Cabe mencionar que, para evitar la excesiva influencia de cambios no sistemáticos en los resultados escolares, las estimaciones se presentan como promedios móviles (Kaine, Staiger y Geppert, 2002).
Los resultados del IDE para la muestra se presentan en los gráficos 1 (liceos con especialidades Técnico-Profesionales) y 2 (Liceos Científico-Humanistas). Lo primero que se puede concluir es que el IDE promedio a nivel nacional, incluyendo todos los tipos de liceos, no se modificó durante todo el periodo analizado, es decir, la evolución del desempeño agregado de los liceos chilenos se mantuvo constante. Tampoco varió la trayectoria del IDE para los liceos de nivel socioeconómico Bajo, Medio-Bajo y Medio, aunque, como se aprecia, el promedio de este grupo se mantuvo aproximadamente 0,4 desviaciones estándares por debajo del promedio de los liceos del país.
Para los liceos participantes en el estudio se observa que en el primer periodo (2001-2003), solo tres de los once establecimientos con datos3 se encontraban por sobre el promedio nacional, es decir, un IDE sobre 0, cantidad que aumenta a cinco liceos si se considera el promedio de los establecimientos de similar GSE; solo el Liceo Los Ángeles lograba al inicio del periodo valores significativamente más altos que el promedio nacional (sobre media desviación estándar). Luego de más de una década, 10 de los 12 establecimientos considerados alcanzaron un valor en el IDE superior al promedio nacional, cantidad que aumentaba a 11 liceos si consideramos el promedio del IDE solo de los establecimientos de GSE similar. En concreto, cuatro de los establecimientos del estudio (Bright College, Liceo Valentín Letelier, Liceo San Nicolás y Liceo Canelo) finalizaron el periodo con índices de desempeño escolar que en promedio aumentaron más de 1,8 desviaciones estándar en el periodo analizado, mientras que otros 7 colegios lo hicieron entre 0,8 y 1,2 desviaciones estándares. Estos resultados son muy destacados, puesto que, durante el periodo, el aumento del IDE promedio para los liceos de similar GSE fue de solo 0,02 desviaciones estándares, mientras que el promedio nacional experimentó un pequeño deterioro.
Los gráficos 1 y 2 muestran que la principal característica de los liceos estudiados es que prácticamente todos aumentaron sustantivamente su IDE a través de los años, la mayor parte en algunos subperiodos para luego consolidar lo alcanzado, mientras que solo algunos lo han hecho en forma sistemática en el tiempo. Nótese que cinco de ellos comenzaron por debajo del desempeño de sus pares del mismo nivel socioeconómico y otros dos eran solo similares a dicho promedio. En concreto, de los doce establecimientos, cinco presentan una trayectoria de mejoramiento sostenida a través del tiempo o, dado que ha alcanzado un desempeño muy excepcional, una mantención en un muy alto IDE (Bright College, Valentín Letelier, San Nicolás, Los Ángeles y Liceo Canelo). Estos colegios pertenecen a todos los GSE considerados y aunque tres de estos establecimientos son Liceos Públicos Bicentenario, en todos ellos su trayectoria de mejoramiento ya era destacada previo al programa. En el caso del Liceo San Nicolás, este es la única oferta de educación media para la zona urbana de su comuna. Por el contrario, seis establecimientos concentraron su mejoramiento en el IDE en un periodo acotado de tiempo, generalmente durante un lapso de cuatro años, luego del cual han podido sostener dicho logro o han presentado un leve deterioro. Esos resultados dan cuenta que una de las características de las trayectorias de desempeño de los liceos es que la mayoría de las veces éste se concentra en periodos de tiempo, y que luego el desafío es sostener dicho mejoramiento. Este atributo que observamos en enseñanza media también ha sido observado en las trayectorias de las escuelas básicas, sugiriendo que las estrategias requeridas para la mejora, y su institucionalización en la cultura de los establecimientos, son diferentes dependiendo de la etapa de desarrollo en que se encuentran y que demandan tiempo para consolidarse.
Por último, los gráficos también muestran que los liceos del estudio varían significativamente en su nivel de desempeño, tanto al inicio como al final del período, con valores IDE en un rango de aproximadamente 1,5 desviaciones estándar. Incluso es posible observar que, al término del periodo uno de los establecimientos, el Liceo Pablo Neruda, todavía no alcanzaba al promedio de los colegios de similar GSE del país, dado su muy bajo punto de partida. Esto recuerda un propósito importante de la investigación, que fue conocer los procesos de mejoramiento y sus complejidades tanto para liceos de alto como mediano y bajo desempeño.
Gráfico 1. Índice de desempeño escolar (IDE) para liceos Técnico-Profesionales a
Nota: Durante el periodo 2008-2012 no es posible estimar el IDE para el Liceo People Help People debido a su baja representación muestral.
a Este cuadro incluye un liceo Polivalente: el Liceo Bicentenario de Excelencia Polivalente San Nicolás
* La línea vertical roja muestra el último promedio móvil utilizado para seleccionar la muestra de establecimientos del estudio.
** El IDE está basado en una distribución normal con media 0 y desviación estándar 1 para el promedio móvil del periodo 2001/2003, por lo cual su evolución está en desviaciones estándares respecto al periodo de base (2001/2003). Valores negativos indican que el desempeño del establecimiento está por debajo del promedio nacional respecto del año base y los positivos, por sobre el promedio.
Gráfico 2. Índice de desempeño escolar (IDE) para liceos Humanista-Científicos
* La línea vertical roja muestra el último promedio móvil utilizado para seleccionar la muestra de establecimientos del estudio.
** El IDE está basado en una distribución normal con media 0 y desviación estándar 1 para el promedio móvil del periodo 2001/2003, por lo cual su evolución está en desviaciones estándares respecto al periodo de base (2001/2003). Valores negativos indican que el desempeño del establecimiento está por debajo del promedio nacional respecto del año base, y los positivos, por sobre el promedio.
Evolución de indicadores de logro académico
En esta sección se analizará la evolución de algunos indicadores del IDE que se basan en las pruebas SIMCE, como son el promedio de puntajes SIMCE, el efecto escuela y el porcentaje de alumnos en distintos niveles de aprendizaje en las pruebas de Lectura y Matemática de 2º medio. Adicionalmente, se observará los promedios de la prueba de selección universitaria (PSU), resultado que para algunas de las comunidades estudiadas representa el indicador más relevante para evaluar la efectividad académica de su proyecto educativo.
Es importante aclarar que ni el SIMCE ni la PSU, como test estandarizados, miden completamente el logro escolar, puesto que no consideran múltiples objetivos y aprendizajes relevantes de la experiencia formativa en la educación media. Estas pruebas tampoco miden la calidad de los establecimientos educacionales, puesto que no evalúan los procesos ni condiciones de enseñanza, ni permite identificar los múltiples factores que afectan el aprendizaje de los alumnos, muchos de los cuales son externos a los liceos (Himmel, 1992; Flórez, 2013). Por ende, los resultados de estas pruebas deben ser considerados con precaución y analizados en su debido contexto.
Los resultados del promedio SIMCE Lectura (Cuadro 1) en el primer periodo observado, muestran que solo un colegio obtuvo un resultado por sobre el promedio nacional (Liceo Los Ángeles). Sin embargo, si solo consideramos el promedio de los establecimientos con GSE bajo, medio-bajo y medio, el número de liceos por sobre el promedio de sus pares aumentaba a cinco (Liceo Industrial Ricardo Fenner, Liceo Hualañé, Liceo Valentín Letelier, Liceo Los Ángeles y Liceo Canelo). En cambio, en el último periodo observado, 7 liceos se ubicaron por sobre el promedio nacional de la prueba SIMCE Lectura, número que aumenta a 9 si se considera solo a los establecimientos de similar GSE. Por otro lado, los resultados en la prueba SIMCE matemática del último periodo muestra que todos los liceos menos uno, el Liceo Pablo Neruda, se ubican por sobre o en el margen del promedio nacional de la prueba, y por sobre el promedio de los establecimientos de GSE similar.
En términos de las trayectorias de puntaje SIMCE, en ambas disciplinas se observaron grandes avances. Sin embargo, fue mayormente matemática, la disciplina que concentró mayor avance en todos los liceos.. Así, mientras el promedio de aumento en puntajes entre el primer periodo y el último observado en lectura fue 26 puntos, en matemática dicho incremento fue de 55 puntos. Los liceos más destacados en lectura fueron el Bright College y el Liceo San Nicolás, con incrementos de 45 y 52 puntos respectivamente en todo periodo analizado. Por otra parte, en matemática, algunos liceos presentaron aumentos verdaderamente notables en sus puntajes, superando en siete casos un incremento de más de una desviación estándar (50 puntos) en todo el periodo. Dentro de estos destacan los liceos Canelo (93 puntos), San Nicolás (91 puntos), Valentín Letelier (86 puntos), y Bright College (79 puntos).
La literatura ha mostrado que en parte importante los resultados en las pruebas SIMCE están asociados al nivel socioeconómico y al capital cultural de las familias; por ende, los resultados mencionados podrían estar reflejando principalmente cambios en la composición social de dichos establecimientos. Por esto, para obtener una estimación de la efectividad escolar relativa, que en alguna medida controle esta condición dentro de cada establecimiento, se estimó un «efecto establecimiento de enseñanza media», que consiste en ajustar los puntajes observados con las características de los estudiantes, así como de los establecimientos4.
Los resultados del efecto establecimiento para lectura y matemática también se muestran en el Cuadro 1. Es posible observar que 6 de 12 liceos tenían un efecto establecimiento en lectura superior al promedio nacional en el primer periodo para el cual fue posible realizar las estimaciones. En cambio, en el periodo final (2015-2016) todos los establecimientos considerados en la muestra presentaron un efecto establecimiento por sobre el promedio nacional, así como por sobre el promedio de los liceos del mismo GSE; como se puede ver, el Bright College y el Liceo Los Ángeles obtuvieron poco más de 50 puntos por sobre lo esperado para sus características de composición estudiantil. Por otro lado, 7 de 12 liceos obtuvieron un efecto establecimiento mayor al promedio nacional en matemática en el primer periodo, número que aumentó a 11 en el último periodo analizado, con un promedio de 45 puntos en el efecto establecimiento para los colegios considerados en el estudio. En términos relativos, es posible mencionar que 6 establecimientos (Liceo People Help People, Bright College, Liceo Valentín Letelier, Liceo San Nicolás, Liceo Los Ángeles, y Liceo Canelo) son los que han mostrado los efectos establecimiento más altos, superiores a 50 puntos; mientras los 5 establecimientos que les siguen obtuvieron efectos establecimiento igualmente relevantes de entre 20 y 40 puntos. Los resultados estarían dando cuenta que el aumento del desempeño medido por el IDE en estos establecimientos sería en buena parte determinado por la mejora en el logro en matemática, tendencia que ha sido sostenida en el tiempo en prácticamente todos los establecimientos estudiados.
El Cuadro 2 muestra el porcentaje de alumnos que se ubican en los niveles de aprendizaje insuficiente y adecuado definidos oficialmente para Lectura y Matemática. Estos indicadores pueden ser considerados un indicador de «equidad absoluta», ya que describen a grandes rasgos la heterogeneidad con la que un establecimiento debe trabajar y la capacidad de garantizar un nivel básico de logros de aprendizaje. Como se ve, la gran mayoría de los establecimientos estudiados obtiene un porcentaje de alumnos en nivel insuficiente mayor al promedio nacional tanto en Lectura como en Matemática (10 de 12 en Lectura y 8 de 12 en Matemática) en el primer periodo observado. Sin embargo, en el periodo 2015-2016, la mayoría logra reducir este indicador a niveles muy por debajo del promedio nacional; solo 3 de 12 en Lectura y 1 de 12 en Matemática, mantienen una proporción por sobre el promedio nacional..
Finalmente, el Cuadro 3 muestra los resultados en la prueba de selección universitaria (PSU). Dado el carácter voluntario de la PSU y el que no todos los liceos orientan a sus estudiantes a rendirla, es importante considerar el número de alumnos que rinden las pruebas respectivas, información que también se incluye en el cuadro 3.
Los resultados indican que entre los liceos Humanista-Científicos (HC) y Polivalentes del estudio solo 4 establecimientos lograron superar el puntaje promedio nacional en Lenguaje y Comunicación (Liceo Valentín Letelier, Liceo San Nicolás, Liceo Los Ángeles y Liceo Canelo) en el último año observado.
Al observar los resultados de la PSU de matemática, al igual que como ocurría con los puntajes SIMCE, la realidad es bastante diferente, ya que de los 8 liceos HC y Polivalentes estudiados todos lograron superar el promedio nacional de los establecimientos de GSE bajo y medio en el año 2016. Además, 6 establecimientos lograron incluso superar el promedio nacional en dicho año. En términos de trayectorias el Liceo Los Ángeles, el Liceo Antonio Varas, y el Liceo Canelo fueron los liceos que incrementaron sus puntajes de forma sobresaliente, llegando estos últimos a totalizar más de 100 puntos de aumento en la PSU en los últimos 8 años.
Por otro lado, los liceos TP presentan los menores puntajes en la PSU, ubicándose todos por debajo del promedio nacional e incluso por debajo del promedio de los establecimientos con GSE similar. Este menor desempeño es coherente con el comportamiento histórico de los liceos TP, puesto que ellos no han estado orientados a preparar a sus estudiantes para la PSU, proceso relativamente reciente, como se verá en el análisis de los casos. En términos de trayectorias, destaca el Liceo Técnico Profesional People Help People que, si bien no ha logrado obtener puntajes por sobre el promedio nacional, ni por sobre los colegios de GSE bajo y medio, logró aumentar sus puntajes PSU a lo largo de los 8 años observados, llegando a sobrepasar en algunos periodos el promedio de colegios similares, terminando en el último año (2016) con cerca de 40 puntos adicionales en Lenguaje y Comunicación, y cerca de 100 puntos por sobre el promedio inicial en Matemática.
Evolución de indicadores SIMCE de logro académico
Cuadro 1. Evolución promedio SIMCE y efecto establecimiento o liceo, 2° medio, por establecimiento 2006/08 a 2015/16.
Nota: El último promedio móvil utilizado para seleccionar la muestra de establecimientos corresponde al periodo 2013-2014.
Cuadro 2. Evolución de niveles de desempeño SIMCE lectura y matemática, 2° medio, por establecimiento 2006/08 a 2015/16.
Nota 1: El último promedio móvil utilizado para seleccionar la muestra de establecimientos corresponde al periodo 2013-2014.
Nota 2: Esta investigación utilizó los estándares de aprendizaje de 8vo básico como una aproximación de los estándares de aprendizaje de segundo medio, debido a que estos últimos solo estuvieron disponibles desde 2015 en adelante.
Cuadro 3. Evolución puntajes prueba de selección universitaria (PSU), 2010-2016
Nota: Los años corresponden al año en que efectivamente se rindió la PSU, y no al proceso de selección que se informa comúnmente.
Referencias
Anderson, G. E., Jimerson, S. R. & Whipple, A. D. (2005). «Student ratings of stressful experiences at home and school: Loss of a parent and grade retention as superlative stressors». Journal of Applied School Psychology, 21(1), 1–20. doi:10.1300/J370v21n01_01.
Avalos, B. & Valenzuela, J.P. (2016). Education for all and attrition/retention of new teachers. International Journal of Educational Development, 49, 279-290.
Flórez, M. T. (2013). Análisis crítico de la validez del sistema de medición de la calidad de la educación (SIMCE). Reino Unido: Universidad de Oxford.
Himmel, E. (1992). Comentario a «Análisis del SIMCE y sugerencias para mejorar su impacto en la calidad, de E. Schiefelbein». En: La realidad en cifras. Santiago: FLACSO, pp. 281-289.
Jimerson, S. R. (2001): «Meta-analysis of grade retention research: Implications for practice in the 21st century». School psychology review, 30(3), 420.
Kane, Thomas; Staiger, Douglas y Geppert, Jeffrey (2002). «Randomly Accountable: Test Scores and Volatility». Education Next, Spring 2002, 2(1), pp. 56-61.
McGrath, H. (2006). To repeat or not to repeat?. Journal of the Western Australian Primary Principal’s Association, 26(2), 39-46.
Reschly, A. L. & Christenson S. L. (2013). «Grade retention: Historical perspectives and new research,» Journal of school psychology, 51(3), 319–322.
Sameroff, A. & Chandler, M. (1975). Reproductive risk and the continuum of care-taking casualty. In F. Horowitz, E. Hetherington, P. Scarr-Salapatek & A. Siegal (Eds.), Review of child development research, vol. 4 (pp. 187- 244). Chicago: University of Chicago Press.
Solis, A. (2017). «The Effects of Grade Retention on Human Capital Accumulation». Working paper, Department of Economics, Uppsala University (Online). Uppsala. Retrieved from <http://urn.kb.se/resolve?urn=urn:nbn:se:uu:diva-337403>.
Tingler, L., Schoenberger, J. & Algozzine, B. (2012). Does grade retention make a difference? The Clearing House. A Journal of Educational Strategies, Issues and ideas, 85(5), 179-185.
Valenzuela, J.P., Bellei, C. & Allende, C. (2016) Measuring systematic long-term trajectories of school effectiveness improvement, School Effectiveness and School Improvement, 27:4, 473-491.
3 El Liceo Canelo tiene información solo desde el periodo 2003-2006, pues antes no contaba con estudiantes de enseñanza media.
4 Esta estimación se realizó a través de un modelo jerárquico en dos niveles de intercepto aleatorio, donde las variables de control correspondientes al primer nivel del modelo (estudiantes) fueron: la educación de la madre y del padre; el ingreso de los hogares; el número de libros en el hogar; y el sexo de los alumnos. El segundo nivel de esta estimación (escuela) consideró el promedio por establecimiento de la educación de las madres y padres; el promedio del ingreso de los hogares (ajustado a pesos del 2013); la dependencia institucional del establecimiento; un índice de selectividad del establecimiento (construido a través de análisis factorial utilizando las respuestas a la pregunta ¿Qué requisitos o antecedentes fueron solicitados para que el alumno pudiera ingresar a este establecimiento?, realizada en el cuestionario de padres y apoderados del SIMCE); y un set de variables dicotómicas indicando las regiones donde se ubicaron las escuelas.