Mostrando entradas con la etiqueta pruebas. Mostrar todas las entradas
Mostrando entradas con la etiqueta pruebas. Mostrar todas las entradas

América Latina y las pruebas del LLECE




El Tercer Estudio Regional Explicativo y Comparativo (TERCE) del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) coordinado por la Oficina Regional de Educación de la UNESCO en América Latina y el Caribe (UNESCO-OREALC) aplicó en 2013 pruebas de Lectura, Escritura, Matemáticas y Ciencias Naturales a más de 134 mil niños y niñas de 3º y 6º grados de educación primaria de 14 países: Argentina, Brasil, Colombia, Costa Rica, Chile, Ecuador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay, más el estado mexicano de Nuevo León.

Lo que se evalúa dentro de cada área responde a lo prescrito en el currículo escolar de cada país y a los aprendizajes a lograr establecidos en éste.
"El TERCE describe lo que los estudiantes saben y son capaces de hacer en función de su propio currículo nacional".
Los resultados del TERCE se presentaron en dos entregas (2014 y 2015):

a) Primera entrega: 4 dic. 2014. El informe presentó los resultados del segundo estudio (SERCE, 2006) y del tercer estudio (TERCE, 2013) a fin de que cada país participante en ambos estudios pudiera analizar su evolución en el tiempo (en las áreas evaluadas en 3º y 6º grados de primaria).

b) Segunda entrega: 30 julio 2015. La segunda entrega detalló los resultados del TERCE y presentó un análisis de factores asociados a dichos aprendizajes: nivel socioeconómico, género, ser indígena, público/privado, rural/urbano, apoyo y expectativas de las familias, asistencia a educación preescolar, trabajo infantil, repetición, práctica docente, clima escolar y violencia en las escuelas, infraestructura, materiales escolares, uso de la computadora, lectura fuera de la escuela, entre otros. Además, en esta segunda entrega se dieron a conocer los resultados de un área evaluada por primera vez en las pruebas del LLECE: Escritura.

Las dos entregas del TERCE, con una separación de siete meses entre ellas, crearon confusión e incidieron en una pérdida de interés e impacto de la segunda entrega, que es la que provee la información más sustantiva. Una cosa son los avances y otra los resultados y su posición en el contexto regional. Varios países destacados en su avance respecto del SERCE aparecieron luego (segunda entrega) en la misma posición regional. Un ejemplo del Ecuador: en la primera entrega apareció destacado como el país que más mejoró resultados en Lenguaje (Lectura) en 6º grado; no obstante, en la segunda entrega Lenguaje (Lectura) de 6º grado apareció ubicado "por debajo de la media regional". Es decir: hubo avance en el puntaje pero fue insuficiente para sacarlo de esa categoría.

Esencialmente, no hay novedades en cuanto a los factores asociados. Todos estos factores ya han sido identificados en su incidencia positiva o negativa sobre los aprendizajes escolares, en pruebas anteriores del LLECE y/o en otras pruebas nacionales e internacionales.

Si bien la mayoría de países participantes mejoró puntajes entre el SERCE (2006) y el TERCE (2013), los resultados del TERCE vuelven a mostrar que:

a) la mayoría de estudiantes sigue en los niveles más bajos de desempeño, sin lograr los mínimos necesarios;
b) persisten grandes disparidades en los logros de aprendizaje entre países, al interior de cada país y al interior de cada escuela;
c) persiste alta segregación socio-económica y cultural en las zonas de residencia y en los sistemas escolares, lo que dificulta que niños de distintos grupos sociales se encuentren en la escuela; 
d) seguimos arrastrando, por ende, serios problemas de calidad y equidad en la educación primaria/básica en la región.

Mejora el desempeño escolar en América Latina, pero las inequidades y otros factores siguen afectando los aprendizajes (boletín de prensa UNESCO-OREALC)
"El TERCE evidencia que si bien el puntaje promedio regional de logros de aprendizaje mejoró en todos los grados y áreas evaluados, la mayoría de los estudiantes sigue concentrándose en los niveles más bajos de desempeño (I y II) y son pocos los que se ubican en el nivel superior (IV). Esto indica el desafío al que se enfrentan los países de la región: lograr en los estudiantes aprendizajes que les permitan un mejor dominio de los conocimientos y el desarrollo de habilidades avanzadas en matemática, lenguaje y ciencias naturales".
▸ El TERCE - igual que anteriores estudios del LLECE - clasifica los resultados de los países de acuerdo a la media regional (ver tabla a continuación). Los países que aparecen sobre la media regional, con uno o más resultados, son:
Chile, Costa Rica y México (7)
Uruguay (6)
Argentina y Perú (4)
Brasil y Colombia (2)
Guatemala (1)

▸ En el primer estudio, el PERCE (1996), la gran sorpresa fueron Cuba - que logró los mejores resultados, ubicándose como número 1 en la región, con gran diferencia respecto de los demás países - y Colombia - que obtuvo mejores resultados en zonas rurales que en zonas urbanas (gracias al programa de multigrado Escuela Nueva, adoptado entonces como política nacional para democratizar y mejorar la calidad de la educación rural en ese país).

▸ En el segundo estudio, el SERCE (2006), la gran sorpresa volvió a ser Cuba, nuevamente puntera en la región en todas las áreas y grados evaluados. Además, como casos excepcionales, las niñas obtuvieron mejores resultados que los niños en Matemáticas en 3er grado en República Dominicana y en 6º grado en Cuba.

▸ En el tercer estudio, el TERCE (2013), donde Cuba no participó, la gran sorpresa fueron México - entre los tres países con mejores resultados en la región, junto con Chile y Costa Rica, habitualmente en los primeros lugares, después de Cuba - y Guatemala - esta vez por encima del promedio regional en Escritura en 6º grado, cuando varios países (Colombia, Ecuador, Honduras, Paraguay y República Dominicana) se ubican por debajo de la media regional en esta área y grado.

México dio poca atención a los resultados del TERCE, tanto los medios como los órganos encargados de la educación, como la Secretaría de Educación Pública (SEP). Los resultados del TERCE (3º y 6º de primaria) contrariaron la visión de la educación mexicana en esos momentos, desprestigiada y enfrentando protestas masivas a la reforma educativa, centrada en la evaluación docente. Dicha evaluación acababa de concluir que 48% de los maestros mexicanos "no son idóneos". Por otra parte, la divulgación de la segunda entrega del TERCE encontró a México ocupado con la presentación de los resultados de su propia evaluación nacional, el PLANEA, que sustituyó a las pruebas ENLACE, y que desde 2014-2015 evalúa aprendizajes en el último grado de primaria y secundaria. El PLANEA encontró que la mitad de los estudiantes que culminan la secundaria se ubica en los niveles más bajos de desempeño. A semana seguida, dos realidades muy contrastantes de evaluación del sistema escolar y de los aprendizajes escolares en el país.

▸ El caso de México recuerda en alguna medida lo sucedido a raíz de la publicación del PERCE, en 1998. Los resultados de Cuba causaron gran revuelo en el escenario educativo latinoamericano; durante muchos días las prensas nacionales y los organismos internacionales involucrados en la educación no supieron cómo reaccionar.

▸ Otro país complicado con los resultados del TERCE fue el Ecuador. Si bien mejoró los puntajes de Lenguaje y Matemáticas en comparación con el SERCE, los resultados finales ubicaron al país debajo del promedio regional en Lectura y Escritura en 6º grado (7º de básica). El gobierno ocultó este dato. La versión oficial fue que el Ecuador se ubicó en el grupo de países que están en la media regional y que es "uno de los países con mayores avances en calidad educativa en América Latina". (Ver: ¿Quién verifica la informacion sobre educación?).

▸ Resulta evidente y lamentable la poca atención prestada por los países - gobiernos y sociedades - a los resultados del TERCE (de alcance regional) en comparación con los resultados de PISA (de alcance global).

A propósito del TERCE la UNESCO-OREALC advierte que:

a) el logro de aprendizaje evaluado por pruebas como las del LLECE solo representa una dimensión de la calidad educativa;
b) si bien se valoran los avances en la mayoría de países participantes, se requiere esfuerzos adicionales y sostenidos para mejorar los aprendizajes básicos y la calidad de la educación en todos ellos.
c) permanecen tres aspectos críticos:
1. los logros no se dan en todos los países.
2. las desigualdades internas son muy grandes en todos los países, y los más perjudicados son los más pobres, los que viven en zonas rurales y las minorías étnicas.
3. los avances en la educación deben juzgarse por la calidad más que por la simple expansión.

"El avance de este tipo de estudios consiste en mostrar el avance de los países y los factores que explican su éxito o su rezago. Lo central no es 'quién va ganando la carrera' sino entender cuáles son las razones de su éxito y así generar aprendizajes mutuos entre sistemas educativos". Informe TERCE, 2014.

"El objetivo del TERCE no es el ránking de los países. No busca detectar ganadores o perdedores en la región". Informe TERCE, 2014.
Incluyo abajo información básica sobre el LLECE, sus estudios y pruebas. Al final, comparo los resultados en las pruebas LLECE con los resultados de los mismos países en las pruebas PISA.

Ver en este blog "El Ecuador y las pruebas del LLECE".



El LLECE

El Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) se creó en 1994 en México, con la participación de 15 países, en el marco del Proyecto Principal de Educación para América Latina y el Caribe (1980-2000) coordinado por UNESCO-OREALC, con sede en Santiago.

El LLECE ha conformado una red de unidades de evaluación educativa en los países, que trabaja de manera coordinada bajo la dirección de la UNESCO. Los equipos nacionales participan en todas las fases del proceso de evaluación. Las pruebas están pensadas desde las realidades de América Latina y el Caribe. Toman como referencia los currículos escolares en las áreas evaluadas, para lo cual se realiza un análisis curricular. Para cada grado y área se definen 4 niveles de desempeño, desde el Nivel I hasta el Nivel IV. Las pruebas se aplican tanto en escuelas públicas como privadas.

El LLECE se propone no solo medir logros de aprendizaje sino además analizar los contextos y las circunstancias en los que ocurre el aprendizaje. Los resultados y estudios en torno a las pruebas del LLECE deben servir a los países sobre todo para compararse consigo mismos - evolución de los aprendizajes escolares en el tiempo - antes que para competir con otros países. A diferencia de otras pruebas internacionales (por ejemplo PISA de la OCDE), el objetivo no es establecer un ranking. Lo importante es determinar el avance, estancamiento o retroceso de cada país en las áreas estudiadas y los "factores asociados" a los resultados en cada caso. El informe divulgado en diciembre 2014 no incluye un listado de países ordenado según un ránking.


Los tres estudios del LLECE: PERCE (1996), SERCE (2006) y TERCE (2013)

El LLECE ha realizado hasta la fecha tres estudios: en 1996, 2006 y 2013. Las pruebas se aplican en educación primaria, en planteles públicos y privados. Se evalúan tres áreas: Lectura, Matemáticas y Ciencias Naturales. El TERCE evaluó también Escritura.

▸ El primer estudio (PERCE, 1996) se aplicó en 3º y 4º grados. Lectura y Matemáticas.
Países participantes: 13
Publicación de resultados: noviembre 1998.

▸ El segundo estudio (SERCE, 2006), se aplicó en 3º y 6º grados. Lectura y Matemáticas en 3º. Lectura, Matemáticas y Ciencias Naturales en 6º. Se agregó Ciencias Naturales (solo 8 países tomaron esta prueba).
Países participantes: 16 (más el estado mexicano de Nuevo León)
Publicación de resultados: junio 2008.
Resumen Ejecutivo.

▸ El tercer estudio (TERCE, 2013) se aplicó en 3º y 6º grados. Lenguaje (Lectura y Escritura) y Matemáticas en 3º. Lenguaje (Lectura y Escritura), Matemáticas y Ciencias Naturales en 6º. Igual que el SERCE. Se aplicó a 3.065 escuelas y 195.752 estudiantes en los países participantes, 100.752 de 3º y 95.000 de 6º. En promedio, en cada país participaron 250 escuelas y 9.000 estudiantes.
Países participantes: 15 (más el estado mexicano de Nuevo León)
Publicación de resultados:
- primera entrega: 4 diciembre 2014.
- segunda entrega: 30 julio 2015.

Innovaciones introducidas en el TERCE:
- Módulos nacionales de factores asociados, a fin de permitir a los países analizar los factores que afectan el aprendizaje en su caso específico.
- Un módulo para analizar el impacto del uso de las TICs en la calidad educativa.
- Evaluación de habilidades de Escritura.
- Relación entre alimentación y aprendizaje.

Ver: Cinco razones para ser parte del estudio TERCE

La comparabilidad entre PERCE, SERCE y TERCE

Hay diferencias importantes entre la primera prueba (PERCE) y la segunda prueba (SERCE), lo que impide compararlas. No obstante, se puede aprender mucho en la comparación de los tres estudios: PERCE, SERCE y TERCE para los países que participaron en estos.

Esta vez se tuvo en cuenta la necesidad de comparación entre el SERCE y el TERCE, lo que se logró en todas las áreas (excepto escritura).

Países participantes

América Latina está integrada por 19 países: Argentina, Bolivia, Brasil, Colombia, Costa Rica, Cuba, Chile, República Dominicana, Ecuador, El Salvador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, Uruguay y Venezuela.

En el primer estudio (PERCE) participaron 13 países:
Argentina, Bolivia, Brasil, Colombia, Costa Rica, Cuba, Chile, Honduras, México, Paraguay, Perú, República Dominicana y Venezuela.
(Los datos de Costa Rica no se incluyeron en los resultados dado que no se entregaron oportunamente. Perú no autorizó la publicación de sus resultados).

En el segundo estudio (SERCE) participaron 16 países (ni Bolivia ni Venezuela)
Argentina, Brasil, Colombia, Costa Rica, Cuba, Chile, Ecuador, El Salvador, Guatemala, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana, Uruguay -y el estado de Nuevo León en México.

En el tercer estudio (TERCE) participaron 15 países: (no están Cuba, Bolivia ni Venezuela. UNESCO anunció que se incorporarán más adelante):
Argentina, Brasil, Chile, Colombia, Costa Rica, Ecuador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay, más el estado mexicano de Nuevo León.

- 14 países participaron en los dos últimos estudios, TERCE y SERCE.
- solo 9 países han participado en los tres estudios: Argentina, Brasil, Colombia, Costa Rica, Chile, México, Paraguay, Perú y República Dominicana.


Ver Presentación de UNESCO-OREALC, 4 dic. 2014


▸ La mayoría de los 14 países participantes en ambos estudios mejoraron resultados respecto de los obtenidos en 2006. Chile obtuvo los mejores resultados, seguido por Costa Rica, Uruguay, México y Brasil.

▸ "El puntaje promedio regional de logros de aprendizaje mejoró significativamente desde el SERCE en todos los grados y áreas evaluados, especialmente en matemática".

▸ El mayor avance del conjunto de países se dio en Matemática en 3er grado.

▸ En 4 países el puntaje promedio disminuyó. Entre ellos países con posiciones destacadas en la región como Costa Rica (que mantiene el segundo lugar) y Uruguay (tercer lugar, después de Chile y Costa Rica).

Género: En Lectura, las niñas obtienen en general mejores resultados que los niños especialmente en 3er grado (Argentina, Brasil, Chile, Costa Rica, México, Paraguay, República Dominicana y estado mexicano de Nuevo León). En Matemáticas no hay diferencias significativas entre niños y niñas en 3er grado, pero las diferencias se ven en sexto grado, a favor de los niños. En Ciencias Naturales, la diferencia es a favor de las niñas (en SERCE la diferencia fue a favor de los niños).

Lectura
▸ 3er grado: 8 de los 14 países participantes en ambas pruebas mejoraron: Brasil, Ecuador, Guatemala, Nicaragua, Panamá, Paraguay, Perú y Rep. Dominicana; los avances más significativos se dieron en Rep. Dominicana, Ecuador, Guatemala y Perú; Perú logró el mayor avance. En Argentina, Chile, Colombia y Uruguay no hay diferencias. Costa Rica, México y el estado mexicano de Nuevo León empeoraron resultados.
▸ 6º grado: mejoraron Chile, Ecuador, Guatemala, Panamá, Paraguay, Perú y Rep. Dominicana. 
- Costa Rica bajó resultados en Lenguaje en 3er y 6º grados.

Matemáticas
▸ 3er grado: 12 de los 14 países participantes en ambos estudios mejoraron resultados. En Paraguay, Uruguay y el estado mexicano de Nuevo León los resultados se mantuvieron iguales.
▸ 6º grado: 10 de los 14 países participantes en ambos estudios mejoraron resultados. En Nicaragua y Uruguay no hubo diferencias significativas. En Costa Rica y Paraguay los resultados bajaron.

Ciencias Naturales (6º grado)
▸ La prueba se aplicó en 7 países que habían tomado la prueba en 2006 (Argentina, Colombia, Perú, Panamá, Paraguay, Rep. Dominicana y Uruguay) y en el estado mexicano de Nuevo León.
▸ 4 países de los que participaron en el SERCE obtuvieron resultados significativamente mejores: Argentina, Colombia, Perú y Rep. Dominicana. Panamá no mostró diferencias. Paraguay y Uruguay empeoraron resultados.
▸ Se agregaron esta vez 8 países que no tomaron esta prueba en el SERCE y que por ende no son parte de la muestra de comparabilidad SERCE-TERCE: Brasil, Costa Rica, Chile, Ecuador, Guatemala, Honduras, México y Nicaragua.


Resultados de aprendizaje en el TERCE y factores asociados al aprendizaje (2a entrega)





▸ El TERCE describe lo que los estudiantes saben y son capaces de hacer en función de su propio currículo, lo que permite ubicar niveles de desempeño de acuerdo a las metas de aprendizaje definidas en cada país. El propósito del TERCE es ayudar a movilizar a los sistemas escolares hacia la mejora interna antes que hacia la competencia con otros países.

Logros de aprendizaje

▸ El TERCE evidencia avances en los resultados de aprendizaje en la mayoría de países participantes. Al mismo tiempo, muestra que dichos avances están aún lejos de haber logrado aprendizajes óptimos en las áreas evaluadas: lenguaje (lectura/escritura, matemática, y ciencias naturales). La mayoría de los estudiantes evaluados se concentran en los niveles más bajos de desempeño (I y II); pocos se ubican en el nivel superior (IV). (Ver Informe de Factores Asociados).

▸ En cada una de las pruebas los países fueron distribuidos en tres grupos respecto a los niveles de desempeño logrados: promedio regional, debajo del promedio regional y por encima del promedio regional. Tres países aparecen por encima del promedio regional en todas las pruebas y grados evaluados: Chile, Costa Rica y México. Les siguen Argentina, Uruguay y el estado mexicano de Nuevo León (Ver Distribución de países según resultados en áreas y grados y comparación con la media regional Ver también Descripción de los niveles de desempeño por grado y prueba).

▸ El rendimiento en lectura tiende a ser superior que en matemática y ciencias naturales. En algunos países se registran diferencias de género: las niñas tienen mejores resultados en lectura y los niños en ciencias y matemática. (Ver: Informe de resultados: Logros de aprendizaje).

Factores asociados al aprendizaje

▸ Este análisis de factores asociados se realiza con información recogida a través de cuestionarios dirigidos a distintos actores del sistema educativo en los países participantes.

▸ El TERCE indaga tres ámbitos principales:
a) las características de los estudiantes y sus familias;
b) las características del docente, prácticas pedagógicas y recursos en el aula; y
c) las características de las escuelas que se relacionan con el aprendizaje.

▸ Los logros de aprendizaje se relacionan positivamente con el nivel socioeconómico de las familias, el apoyo de los padres, la asistencia a la educación preescolar, la práctica de la lectura dentro y fuera del sistema escolar, la disponibilidad de recursos de enseñanza-aprendizaje en las escuelas y las condiciones básicas de infraestructura. Los estudiantes que tienen hábitos de lectura fuera de la escuela logran mejores desempeños.

▸ A nivel de aula, los factores asociados que inciden positivamente en los resultados de aprendizaje son la asistencia y puntualidad de los docentes; la disponibilidad de cuadernos y libros; el entorno escolar y las buenas prácticas docentes.

▸ El ausentismo escolar está negativamente asociado al aprendizaje, igual que la violencia escolar en sus múltiples formas. El uso recreativo del computador entre estudiantes de sexto grado tiene una relación negativa con el aprendizaje.

▸ Ser indígena es una condición desfavorable para el aprendizaje. Los niños de grupos indígenas tienen consistentemente logros de aprendizaje más bajos en todos los países. Esto aparece no solamente asociado a nivel socio-económico, lo que sugiere que el tratamiento educativo que se da a estos grupos sigue siendo inadecuado e insuficiente. En Perú, Paraguay, Panamá y Nicaragua se da la mayor relación entre el logro y la pertenencia a un pueblo originario, medida a través de la ascendencia materna y uso de la lengua indígena en el hogar.

▸ El análisis de las escuelas permite afirmar que en general los sistemas escolares en la región son segregadores y poco inclusivos socioeconómicamente: es difícil que estudiantes provenientes de diferentes estratos socio-económicos coincidan en la misma escuela. La segregación social y residencial sigue siendo fuerte.

Próximos pasos
 
▸ Está programada la entrega de otros productos del estudio, tales como la publicación Aportes para la Enseñanza en las áreas evaluadas y un documento con recomendaciones de políticas a partir de los resultados de factores asociados.

Comparación entre resultados LLECE (TERCE 2013) y PISA(2012)

Países participantes en LLECE

En las pruebas del LLECE han participado en total 19 países:
Argentina, Bolivia, Brasil, Colombia, Costa Rica, Cuba, Chile, Ecuador, El Salvador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana, Uruguay y Venezuela.

De estos, 14 participaron en los dos últimos estudios, TERCE y SERCE, que son comparables:
Argentina, Brasil, Colombia, Costa Rica, Chile, Ecuador, Guatemala, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay. 

Países participantes en PISA

- En PISA han participado 11 países:
Argentina, Brasil, Colombia, Costa Rica, Chile, México, Panamá, Perú, República Dominicana, Trinidad y Tobago, y Uruguay.
- Con excepción de Trinidad y Tobago, todos ellos (10) han participado en las pruebas del LLECE.
- En la prueba PISA 2012, igual que en las anteriores, los países latinoamericanos se ubicaron a la cola, con estas posiciones:

Chile (lugar 51 con 423 puntos)
México (lugar 53 con 413 puntos)
Uruguay (lugar 55 con 409 puntos)
Costa Rica (lugar 56 con 407 puntos)
Brasil (lugar 58 con 391 puntos)
Argentina (lugar 59 con 388 puntos)
Colombia (lugar 62 con 376 puntos)
Perú (último, lugar 65 con 368 puntos)

En el caso del LLECE solo pueden compararse resultados entre el SERCE y el TERCE.
En el caso de PISA, los resultados son comparables: en lectura desde 2000, en matemática desde 2003, y en ciencia desde 2006.

Si comparamos los resultados en LLECE con los resultados en PISA encontramos similitudes y tendencias interesantes: los países que avanzan poco, no avanzan o retroceden en PISA son los mismos que avanzaron poco, no avanzaron o retrocedieron en el TERCE.

Según análisis del BID, América Latina en PISA 2012, Brief ·2: ¿Cuánto mejoró la región?, Washington D.C., 2014:

En PISA:
- Argentina y Costa Rica no registraron cambios significativos en ninguna de las tres materias.
- Uruguay empeoró en las 3 materias.
- Brasil mejoró en las 3 materias.
- Chile, Colombia y Perú mejoraron en lectura.
- México mejoró en matemática.
- 6 de los 8 países participantes no vieron cambios en ciencia.
- Chile y Perú entre los que más mejoraron en lectura.

No obstante, países con desempeño similar a los de la región han mejorado aún más: Serbia, Qatar, Turquía. "Las mejoras en la región no alcanzan para llegar a ser un desempeño aceptable". Solo los jóvenes que cruzan el nivel II se considera que tienen un nivel aceptable. Los jóvenes latinoamericanos están por debajo de ese umbral.

Desempeño promedio de la OCDE: 500 puntos. Alcanzar ese promedio tomará varias décadas:
- 27 años a Brasil en matemática
- 18 años para Chile en lectura
- 39 años a Argentina en ciencia


Artículos de análisis de la aplicación de los estudios del LLECE en América Latina

ECUADOR  El Ecuador en las pruebas del LLECE, Rosa María Torres, OTRAEDUCACION

PERU
A LA TERCE... Una lectura de los hallazgos y recomendaciones para el Perú de la Tercera evaluación regional de la calidad de la educación de LLECE-UNESCO, por Manuel Bello, La Mula, 28 sep. 2015
Tratamiento comunicacional de los resultados del TERCE 

Ver Cobertura de prensa de UNESCO-OREALC

Recogemos aquí ejemplos del tratamiento comunicacional del informe de resultados comparativos del SERCE y el TERCE divulgados por UNESCO-OREALC el 4 diciembre de 2014.


Educación: la escuela pasó del liderazgo al estancamiento, La Nación, Argentina, 5 dic. 2014.
"La educación primaria argentina está estancada: ni empeoró ni mejoró entre 2006 y 2013". "Mientras que hace 20 años los alumnos argentinos lideraban los resultados en matemática y lectura, hoy tienen un desempeño medio en comparación con el resto de las naciones medidas". "Entre los 15 países de la región, los alumnos de 3° y 6° grado se ubican respectivamente novenos y séptimos en lengua y literatura; sextos y quintos en matemática, y los de 6° grado aparecen terceros (de siete países) en ciencias naturales. Los resultados presentados fueron comparados con el Serce, el anterior estudio presentado en 2006, y la conclusión es que las variaciones son mínimas, en tanto que en otros países hubo mejoras sustanciales".

Nueva prueba regional: los alumnos argentinos no se destacan en ninguna materia, Clarín, Argentina, 4 dic. 2014
"Un nuevo estudio internacional de educación se conoció hoy. Y como siempre, una vez presentados los resultados, sobreviene el "festival de interpretaciones". Hoy a la mañana, el ministro de Educación argentino Alberto Sileoni salió a decir que "la Argentina mejoró en todos los resultados" porque "subió cerca de 30 puntos en matemáticas, 12 en ciencias naturales y entre 2 y 3 en lengua y lectura", con respecto a los resultados del año 2006. Si bien estos datos son ciertos, cuando se analiza el contexto de los resultados se ve que el crecimiento de entre 2 y 30 puntos es sobre más de 500 (es decir, 6% en el mejor de los casos). Y que a pesar de que el conjunto de los países de la región crecieron, Argentina lo hizo incluso un poco por debajo del promedio general de todos los países de la región".

Calidad de la educación primaria en Costa Rica empeoró en últimos siete años, La Nación, 4 dic. 2014. 

Persiste rezago en lectura entre estudiantes de primaria, revela estudio TERCE, La Jornada, México, 4 dic. 2014.

Estudio Unesco: Chile casi duplicó tasa de repitencia, La Segunda Online, Chile, 4 dic. 2014

Alumnos de Primaria destacan en la región, pero no mejoran, El Observador, Uruguay, 5 dic. 2014
"La evaluación de la Unesco ubicó a Uruguay en tercer lugar; autoridades preocupadas por falta de avances"

Perú supera en prueba de lectura y matemática a Brasil y Colombia, La República, Perú, 5 dic. 2014
“Entre los países participantes, Perú logró el mayor progreso en lectura, respecto de la anterior evaluación que rindieron también los alumnos que cursan el tercero de primaria”, adelantó la jefa de la Unidad de Medición de la Calidad Educativa, Liliana Miranda. Según estos resultados preliminares, el Perú muestra además el segundo mejor progreso en matemática respecto del año 2006".

Textos relacionados en este blog
Repensando el entusiasmo evaluador y las pruebas
Malos resultados escolares, ¿quién tiene la culpa?
Auge de la trampa en educación
Una prueba no prueba nada
¿China, Corea del Sur o Finlandia?
PISA, ¿para qué? ¿El Ecuador en PISA?
Pruebas PISA: Seis conclusiones y una pregunta
Voces críticas de PISA en América Latina
Glosario mínimo sobre la educación en Finlandia
El Ecuador y las pruebas LLECE

PISA para Países en Desarrollo (PISA-D)




See English text: Now comes PISA for "developing countries"


Muchos cuestionamientos vienen haciéndose a la prueba internacional PISA (Programa Internacional de Evaluación de los Almunos) de la OCDE  (Organización para la Cooperación y el Desarrollo Económicos), la cual evalúa competencias en lectura, matemáticas y ciencias entre jóvenes de 15 años. Las pruebas se aplicaron por primera vez en el 2000 y desde entonces cada tres años. Algunos de los cuestionamientos se refieren a la inadecuación de dichas pruebas para los llamados "países en desarrollo".
 

Los países latinoamericanos participantes en PISA vienen ubicándose a la cola de los resultados de esta prueba, todos ellos lejos de los puntajes de los "países desarrollados" o "países OCDE" (México, Chile y Colombia han sido incorporados oficialmente como países OCDE).

Diseñadas y pensadas por la OCDE y para los países OCDE (los "países ricos"), las pruebas han venido incorporando poco a poco a "países en desarrollo", "países pobres", países no-OCDE (Ver: lista de países que han participado en PISA)

Los cuestionamientos sobre la inadecuación o inutilidad de PISA para los países no-OCDE se han referido entre otros a:

» la necesidad de contextualizar las pruebas, atendiendo a la gran heterogeneidad (socio-económica, cultural, etc.) de los países, y de los "países en desarrollo" específicamente;

»
muchos jóvenes de 15 años están fuera del sistema escolar o lo han abandonado (las tasas de abandono, sobre todo en la educación secundaria, son altas);


» no hay capacidad técnica en la mayoría de estos países para conducir pruebas estandarizadas masivas como PISA;

» muchos países participan ya en pruebas comparativas a nivel internacional (como las pruebas LLECE de la UNESCO en el caso de América Latina);

» los efectos devastadores que tiene al interior de los países, cada tres años, la publicación de los bajos resultados y de los ránkings comparativos a nivel internacional;
 
» la enorme atención que dedican los gobiernos a mejorar puntajes y ránkings entre una prueba y otra, lo que distrae tiempo y recursos de cuestiones fundamentales y del objetivo del aprendizaje
en cuanto tal.


Algunos de estos cuestionamientos se han expresado en cartas abiertas a la OCDE tales como la enviada en 2013 por un grupo de Ministros de Educación, desde América Latina (Los Ministros de Educación del MERCOSUR y la prueba PISA) o la enviada en 2014 por 92 académicos y especialistas de Estados Unidos y otros países desarrollados (¡Paren PISA!). También se han planteado cuestionamientos en Chile (Bárbara Figueroa critica la Prueba PISA porque mide asuntos 'ajenos a la realidad educativa chilena') y desde el Ecuador a propósito de la conveniencia o no de que este país se incorpore a PISA (¿PISA para qué? El Ecuador en PISA-D). (Ver: Voces críticas de PISA desde América Latina).

PISA para el Desarrollo (PISA-D): Hacia una globalización de PISA

 
En respuesta a estos y otros cuestionamientos, la OCDE propuso PISA for Development (PISA para el Desarrollo PISA-D), una iniciativa para países de ingresos bajos y medios. La idea es ampliar la participación de estos países en PISA, en el marco de una estrategia de globalización de PISA. 

Se espera que los resultados de aprendizaje en los países de ingresos bajos y medios  sean inferiores a los de los países de ingresos altos. En los "países ricos" la mayoría de resultados de aprendizaje se ubica en y a partir de los niveles 3 y 4 de competencia en las tres áreas evaluadas: lectura, matemáticas y ciencias. En los "países pobres" los resultados de aprendizaje se ubican en la base, entre los niveles 1 y 2. Cada área tiene 6 niveles; el nivel 6 refleja la competencia más alta y el nivel 1 la competencia más baja. El nivel 2 se considera básico.

Siete países - de Africa, Asia y América Latina - decidieron participar en esta primera aplicación de PISA-D: Camboya (Asia); Ecuador, Guatemala, Honduras y Paraguay (América Latina); Senegal y Zambia (Africa). Ver mapa abajo (Ver: Reunión técnica, junio 2013; OECD Call for Tender 100000990, August 2014).

PISA-D puede ser administrado tanto dentro como fuera del sistema escolar.
En 6 países se aplicó PISA-D fuera del sistema escolar: Guatemala, Honduras, Panamá, Paraguay, Senegal y Zambia.


Mapa tomado del sitio del Instituto Nacional de Evaluación Educativa (INEVAL), Ecuador

"PISA for Development busca incrementar la relevancia de PISA para las políticas de los países en desarrollo, mediante instrumentos mejorados que sean más relevantes a los contextos de los países en desarrollo pero que produzcan puntajes en las mismas escalas de la evaluación de PISA. El proyecto también desarrollará un enfoque y una metodología para incluir a jóvenes que están fuera de la escuela. Los objetivos del proyecto se cumplirán en un período de 36 meses, en una alianza tripartita que involucra a la OCDE, a socios del desarrollo interesados (miembros del DAC - Comité de Asistencia para el Desarrolo de la OCDE -además del Banco Mundial, la UNESCO y otros organismos de Naciones Unidas y organizaciones regionales) y países participantes del mundo en desarrollo".

- En: OECD Post-2015, Element 2, Paper 1: The OECD's contribution on education to the post-2015 framework: PISA for Development (Nuestra traducción del inglés).
 La OCDE ve las siguientes ventajas a obtenerse con PISA for Development:
  • "Una referencia única respecto de la cual determinar el grado de progreso en las metas de calidad y equidad en educación.
  • Una medición comparable y robusta de progreso que permita a todos los países  – independientemente de su punto de partida – ubicarse en una trayectoria de mejoramiento a fin de lograr metas internacionales comunes. 
  • Resultados creíbles y comparables: PISA requiere que los países participantes sigan estándares técnicos, institucionales y administrativos comunes en la evaluación.
  • Una oportunidad para ayudar a construir capacidad institucional. Los países son los responsables de supervisar la ejecución de PISA; por tanto, la participación en PISA también puede llevar a mejoras en las instituciones".
Con PISA-D la OCDE se preparó para el "post-2015", año de arranque de la nueva agenda mundial de desarrollo, los Objetivos de Desarrollo Sostenible (ODS, 2015-2030), una vez concluido el plazo de la Educación para Todos (EPT, 1990-2000-2015) y de los Objetivos de Desarrollo del Milenio (ODM, 2000-2015). Ni la EPT ni los ODM cumplieron cabalmente sus metas. Los ODS incorporaron "la agenda pendiente de la EPT".

La toma de conciencia en torno a la llamada "crisis global de aprendizaje" (millones de niños y niñas en el mundo que no están aprendiendo a leer, escribir y calcular después de pasar cuatro o más años en la escuela), que por primera vez reconoció la precariedad del aprendizaje tanto en el marco de la EPT como de los ODM, centradas en el acceso, han puesto la medición de los aprendizajes como un tema central y a la OCDE/PISA como un actor y un aliado clave.

"Desarrollar una medida universal de éxito educativo" es uno de once puntos con los cuales la OCDE se plantea contribuir a la Agenda Post-2015 (Beyond the MDGs: Towards an OECD contribution to the post-2015 agenda). La OCDE se propone establecer UNA definición de éxito educativo y UNA manera de medirlo en todo el mundo. PISA-D es la estrategia y el instrumento para incorporar a esa "otra parte del mundo" que aún no ha entrado a la pista de la evaluación, las pruebas estandarizadas y los ránkings.

Un actor mayor y viejo entusiasta de la evaluación como el Banco Mundial bendice la evaluación global de aprendizajes y la recomienda especialmente para los "países en desarrollo". 
"En una economía global, el primer indicador de éxito ya no es la mejora de estándares nacionales sino los sistemas con mejor rendimiento a nivel internacional. (Dicho esto, también es importante que los países establezcan y midan metas de aprendizaje que reflejen sus propias prioridades y valores nacionales). Esto significa usualmente participar en uno de los muchos programas internacionales de evaluación que miden matemáticas, ciencias, resolución de problemas u otras competencias de los estudiantes del mismo grado o de la misma edad en los diferentes sistemas educativos en el mundo. Los países - particularmente los países en desarrollo y las economías emergentes - pueden sentirse en desventaja en esta comparación global, pero deben tener en cuenta que lo importante es la mejora continua a lo largo del tiempo" (Education: Measuring for Success in Today’s World, 9 May 2014).
PISA-D: Cuestiones que necesitan mayor atención y discusión

Las siguientes cuestiones se mencionaban en el artículo "The PISA for Development initiative moves forward: Have my wishes been fulfilled?" (2 Feb. 2015):

» Una prueba con preguntas que puedan responder efectivamente los jóvenes de 15 años en los países en desarrollo.


El plan original de la OCDE era utilizar solamente las 337 preguntas de su repertorio para crear la prueba de PISA-D. No obstante, un año y medio más tarde, la OCDE empezó a explorar la posibilidad de complementar las preguntas de PISA con otras usadas en evaluaciones regionales e internacionales. La idea es asegurar que las preguntas puedan ser efectivamente contestadas por los jóvenes de 15 años en estos países. 

» Una prueba que pueda ser costeada por los países en desarrollo.


El piloto de PISA-D cuesta el doble que la aplicación de la prueba regular de PISA, puesto que hay mucho trabajo adicional que desarrollar, entre otros, adaptar el cuestionario a los contextos de estos países y diseñar una metodología para incluir a los jóvenes que están fuera del sistema escolar. Donantes como el Banco Mundial han provisto considerable financiamiento a fin de facilitar la participación de estos países. En cualquier caso, es esencial tener en cuenta la sustentabilidad a largo plazo de PISA-D, si los países van a tener que cubrir sus costos.

» Una prueba que contribuya al aprendizaje de todos.

El piloto enfrenta el desafío de recolectar datos de toda la cohorte de 15 años en un país, lo que incluye también a quienes están fuera del sistema escolar: población que nunca fue a la escuela o que se retiró.

Agregamos, además, el reto de llegar a grupos que no hablan la lengua oficial o que tienen dificultades en su manejo escrito.


Los resultados de PISA-D a nivel escolar son comparables con los resultados de los países que han venido participando en PISA.

Ver: Michael Ward, "Making PISA more relevant to more of the world", OCDE, 6 Dec. 2018.

Resultados de PISA-D


La OCDE dio a conocer los resultados de PISA-D el 11 de diciembre de 2018, en Quito. 



Los resultados incluyen a 7 países:

Camboya
Ecuador

Guatemala

Honduras

Paraguay

Senegal

Zambia


Textos relacionados en OTRAƎDUCACION
Sobre evaluación en educación | On Evaluation in Education
- Artículos sobre PISA | Articles on PISA

 

Artículos sobre PISA ▸ Articles on PISA

Artículos sobre las pruebas PISA publicados en este blog
Articles on PISA published in this blog
PISA y PIAAC
https://otra-educacion.blogspot.com/2020/01/pisa-o-piaac-panorama-educativo-de-un-pais.html
 
PISA: Disputa política y evaluación educativa (Ecuador)
https://otra-educacion.blogspot.com/2020/02/correa-moreno-y-pisa.html

El Ecuador en las pruebas internacionales de educación
https://otra-educacion.blogspot.com/2019/12/el-ecuador-en-las-pruebas.html


Bienestar de los estudiantes de 15 años en diez países (PISA)
http://otra-educacion.blogspot.com/2018/05/bienestar-de-los-estudiantes-de-15-anos.html  

Aprender a resolver problemas y de manera colaborativa (PISA 2015)
http://otra-educacion.blogspot.com/2017/12/aprender-a-resolver-problemas.html

 
"Creo que Paulo [Freire] habría disfrutado mucho conociendo escuelas, aulas y bibliotecas finlandesas"
http://otra-educacion.blogspot.com/2017/12/creo-que-paulo-freire-amigos-rosa-maria.html

10 ideas falsas sobre Finlandia y la educación
http://otra-educacion.blogspot.com/2016/02/10-ideas-falsas-sobre-Finlandia-y-la-educacion.html
10 false ideas on education in Finland
http://otra-educacion.blogspot.com/2016/03/10-false-ideas-on-education-in-finland.html

Now comes PISA for "developing countries"
http://otra-educacion.blogspot.com/2014/05/now-comes-pisa-for-developing-countries.html
Ahora viene PISA para "países en desarrollo"
http://otra-educacion.blogspot.com/2014/05/pisa-para-paises-en-desarrollo.html

Stop PISA! ▸ ¡Paren PISA!
http://otra-educacion.blogspot.com/2014/05/stop-pisa-paren-pisa.html

¿PISA para qué? El Ecuador en PISA-D
http://otra-educacion.blogspot.com/2014/04/pisa-para-que.html

"Los estudiantes en el Ecuador son buenos para memorizar"
https://otra-educacion.blogspot.com/2018/12/los-estudiantes-en-el-ecuador-son.html

Los ministros de educación del MERCOSUR y las pruebas PISA 
http://otra-educacion.blogspot.com/2013/08/los-ministros-de-educacion-del-mercosur.html


Prueba PISA: Seis conclusiones y una pregunta
http://otra-educacion.blogspot.com/2011/05/pruebas-pisa-seis-conclusiones-y-una.html

» Repensando el entusiasmo evaluador y las pruebas
http://otra-educacion.blogspot.com/2010/12/repensando-el-entusiasmo-evaluador-y.html

¿China, Corea del Sur o Finlandia?
http://otra-educacion.blogspot.com.es/2013/04/china-corea-del-sur-o-finlandia.html

Un GERMen infecta a los sistemas escolares (traducción al español del artículo de Pasi Sahlberg)
http://otra-educacion.blogspot.com/2013/04/un-germen-infecta-los-sistemas-escolares.html
How GERM is infecting schools around the world, by Pasi Sahlberg
http://www.washingtonpost.com/blogs/answer-sheet/post/how-germ-is-infecting-schools-around-the-world/2012/06/29/gJQAVELZAW_blog.html


Una prueba no prueba nada (en proceso)
http://otra-educacion.blogspot.com/2013/03/las-pruebas-no-prueban-nada.html

Voces críticas de PISA en América Latina (en proceso)
http://otra-educacion.blogspot.com/2014/11/voces-criticas-de-pisa-en-america-latina.html


PISA con humor
http://otra-educacion.blogspot.com/2016/09/pisa-con-humor.html


Las políticas educativas en Finlandia no están orientadas a sacar buena nota en PISA (entrevista con Pasi Sahlberg)
http://otra-educacion.blogspot.com/2016/12/las-politicas-educativas-en-finlandia-y-PISA.html


▸ Más evaluación, ¿mejor educación?
http://otra-educacion.blogspot.com/2017/10/mas-evaluacion-mejor-educacion.html


LinkWithin

Related Posts Plugin for WordPress, Blogger...