sábado, 30 de septiembre de 2017

Respuesta al artículo titulado “Crítica a la Evaluación de Impacto de las #EscuelasDelMilenio por parte del Ministerio de Educación y a su mal uso comunicacional”


A continuación, en virtud del derecho a la replica, publico la respuesta que me hace llegar el MinEduc mediante Ruthy Intriago sobre la Crítica a la Evaluación de Impacto de las #EscuelasDelMilenio por parte del Ministerio de Educación y a su mal uso comunicacional. Felicito el hecho de que exista una respuesta al mismo, no obstante aún no se da respuesta a lo esencial por lo siguiente: 

1) ¿Por qué el MinEduc no libera las bases de datos de Ser2008? -ejercicio que habría costado 5 millones de dólares. No se sabe cuánto costó la evaluación de impacto financiada por el BID a cargo de Juan Ponce, Marcelo Drouet y Ruthy Intriago.-

2) ¿Cuál es el listado de escuelas -Código Amie y nombre- que se utilizan para el grupo de tratamiento (17) y cuál es el listado utilizado para el grupo de control? Una muestra insuficiente que contiene sesgo de selección, porque las Escuelas del Milenio sustituyen a varias escuelas pequeñas por lo cual no es posible tener una línea de base con Ser2008, siendo que al no saber cómo se construye la línea de base para una institución que absorbe a varias instituciones de menor tamaño el estudio de MinEduc pierde toda validez, mi estudio identifico 41 UEM lo cual es mas del doble de las 17 que utiliza el MinEduc para el mismo periodo en mención. 

3) ¿Por qué se insiste en manifestar que el factor socioeconómico no es relevante, cuando la literatura empírica, por más de 60 años y a lo largo de miles de estudios en diferentes países, determina que es el principal factor asociado al rendimiento académico, siendo que su omisión es lo que causa endogeneidad? Con referente a mi estudio, el citar un estudio clásico como el de Coleman 1966, con más de 15,300 referencias académicas al mismo, no puede ser catalogado como desactualizado, sino más bien como algo relevante dentro de la revisión literaria puesto que se entiende que este no es un campo de investigación nuevo y que no se trata de inventar el agua tibia.

Debo así mismo manifestar sobre mi estudio las siguientes aclaraciones, que son importantes para comprender la respuesta del MinEduc en el entorno de un debate académico en el que se da una replica y contra replica: 

domingo, 17 de septiembre de 2017

Crítica a la Evaluación de Impacto de las #EscuelasDelMilenio por parte del Ministerio de Educación y a su mal uso comunicacional


La evaluación de impacto de programas de política pública es una herramienta que busca identificar si una política pública ha tenido el efecto deseado para el cual la intervención fue diseñada. Si bien una evaluación de impacto se sustenta en parámetros técnicos y el uso de herramientas científicas tales como el análisis estadístico y los planteamientos de experimentos o cuasi experimentos, la discrecionalidad y compromiso ético del investigador es un factor que puede determinar los resultados. 

Para evitar los malos usos de los datos y motivar conclusiones erróneas sobre ciertas observaciones, es vital tomar considerar todos los elementos que intervienen en un fenómeno y contrastarlos con los que han sido considerados para el estudio, sobre todo los que se omiten para realizarla. Por eso, es necesario que en la academia existan muchos estudios relacionados a la misma temática.

El pasado mes de agosto, el Ministerio de Educación del Ecuador (MinEduc) publicitó mediante evento público la denominada "Evaluación de Impacto del programa de las Escuelas del Milenio", a cargo del economista Juan Ponce de la Flacso. Estudio que habría sido contratado por el MinEduc con un crédito no reembolsable del Banco Interamericano de Desarrollo (BID), del cual también se tendría asistencia técnica proveniente de expertos del mismo BID.

El estudio pretende evaluar matricula y rendimiento académico en dos de las cuatro áreas fundamentales de los estándares educativos: Lenguaje y Matemáticas. Los resultados del estudio concluyen que no se encuentra ningún impacto en la matrícula, mientras que en el rendimiento académico sí se encuentra un efecto de 0.5 desviaciones estándar en Matemáticas y ninguno en Lenguaje. Sin embargo, las declaraciones se centraron en un discurso que logró unificar los titulares en una idea simple y falsa: "Las Escuelas del Milenio no cumplieron su objetivo".

En cuanto a lo comunicacional, sorprende que el MinEduc jamás haya pedido una rectificación sobre titulares que no son exactos y que se contradicen con lo anunciado por el Ministro Fander Falconi en días previos. Tan solo unas semanas antes de lanzar el mencionado estudio, el Ministro aseveró: "yo ya tengo una evaluación preliminar de la Unidades del Milenio, la voy a anunciar en 2 o 3 semanas, relacionado con dos aspectos: cobertura y mejora del rendimiento, y en los dos aspectos sale una evaluación bastante positiva, entonces estamos hablando de modelos exitosos".