Índice Multidimensional de Calidad
de la Educación -IMCE-



El IMCE es un índice que sintetiza en un solo valor los resultados de la institución en las diferentes dimensiones que se consideran relevantes para la calidad educativa, a saber: rendimiento académico, progreso académico y ambiente escolar de aprendizaje. Se construye bajo la premisa que la calidad es multidimensional, es decir, está influenciada por una diversidad de factores que se deben tomar en cuenta para su análisis. Su puntaje va de 0 hasta 100 siendo 100 la máxima calificación posible. Cada dimensión tiene un peso específico en el índice, la suma de todas ellas corresponde al total. El proceso de construcción del IMCE toma como insumos la información recopilada a través de instrumentos primarios o proveniente de fuentes secundarias que alimentan la construcción de indicadores; el proceso incluye todas las actividades de construcción de modelos de medición y el cálculo de indicadores que posteriormente permiten tener un indicador multidimensional, así como la transformación de variables, cruces y estandarización de información.

El índice Multidimensional de Calidad de la Educación –IMCE– permite tener una mirada de la calidad educativa en las instituciones educativas de la ciudad, y del conjunto del sistema, además de la elaboración de ordenamientos de instituciones que apoyan la toma de decisiones de los directivos, la secretaría de educación y los padres de familia. Este insumo se complementa además con la elaboración de instrumentos técnicos institucionales y municipales que permiten la visualización de la información resultante de manera individual y colectiva y la creación de boletines y reportes. A continuación se muestran las dimensiones, indicadores y fuentes de información para la construcción del IMCE.

Simcie

Dimensiones del IMCE - Aproximación a la calidad educativa

Ambiente escolar

La dimensión de ambientes escolar, hace referencia a la forma específica en que se relacionan y se comunican los miembros de una institución educativa, así como también a la manera en que la misma involucra a los actores (docentes, padres y comunidad en general), en el proceso de aprendizaje de los estudiantes, esto en concordancia con la UNESCO [Cas00], que señala que en Latinoamérica, toda la comunidad educativa contribuye a la determinación de factores relacionales, comunicativos y motivacionales que juegan un papel crucial en el rendimiento escolar. Es decir, que las interacciones al interior de las instituciones educativas no se encuentran relacionadas exclusivamente con la institución o la infraestructura sino también a los factores del contexto, la organización y las relaciones en los actores pueden afectar los resultados educativos.

Para la medición de esta dimensión fue necesario construir tres encuestas, una para cada actor de la comunidad educativa: estudiantes, padres y docentes. Su diseño se basó en dos estudios: el "Progress Report" de la ciudad de Nueva York [Edu11] y la "Evaluación del Programa Escuelas de Calidad para la Equidad y la Convivencia" (Universidad Eafit, Secretaría de Educación, & Proantioquia, 2008). Se optó por apoyarse en estos dos estudios debido a que el primero, permite el seguimiento y monitoreo del progreso académico de los estudiantes del Distrito de New York -Estados Unidos-, el cual se realiza desde el 2006 y cuenta con una encuesta de ambiente escolar que ha sido progresivamente mejorada y ajustada. En segunda instancia, se escogió, el estudio de "La Evaluación del Programa Escuelas de Calidad para la Equidad y la Convivencia", debido a que aplicó un instrumento mucho más amplio y vasto que contempla ítems relevantes del ambiente escolar y cuyas preguntas fueron producto de una indagación exhaustiva sobre instrumentos que abordan este aspecto.

Las encuestas están compuestas por preguntas cualitativas que evalúan la percepción del encuestado con respecto a diferentes componentes. Las categorías de respuesta son: "en completo desacuerdo", "en desacuerdo", "de acuerdo" y "completamente de acuerdo". Estas opciones de respuesta son ordinales y se le asignan un valor entre 0 y 10, siendo este último el mejor puntaje posible. Es decir, se obtiene un puntaje de 10 si la respuesta a la pregunta es: completamente de acuerdo, y así sucesivamente.

Se aplica anualmente desde el 2011 al universo de instituciones educativas oficiales de la ciudad; a partir de 2012 se incluyeron las instituciones de cobertura, y una muestra de instituciones privadas que participan voluntariamente. En el año 2014 se logró incrementar el número de instituciones participantes a 351, de las cuales el 66,9% son oficiales, el 24,7% son privadas y 14,2% restante son de cobertura. La aplicación se contrata por medio de un Operador, quien realiza todo el proceso de levantamiento de información durante el segundo semestre del año y entrega las bases de datos a la Secretaría de Educación para su análisis y cálculo de indicadores.

Tabla 1. Número de instituciones en la encuesta de AE 2011-2013

SECTOR2011201220132014
CONTRATACIÓN0163950
OFICIAL209209209214
PRIVADO0316687
TOTAL209256314351

Fuente: Secretaría de Educación

El Ambiente Escolar aporta información sobre la forma específica en que se relacionan y se comunican los miembros de una institución educativa y la manera en que la misma involucra a los actores en el proceso de aprendizaje de los estudiantes. Bajo esta idea, con el objetivo de construir un panorama general del ambiente escolar de cada institución educativa, se decidió diseñar y aplicar tres encuestas de percepción que indagan tanto a estudiantes, docentes y padres de familia, sobre cuatro categorías de factores que condicionan el ambiente escolar: expectativas académicas, participación, comunicación, y seguridad y respeto.

Rendimiento académico

Esta dimensión toma en cuenta los resultados académicos de los estudiantes de la institución educativa. Dichos resultados se pueden entender como sus habilidades cognitivas, o las habilidades humanas para procesar información, razonar, recordar, relacionar y en general aprender; en este sentido, Lockheed y Verspoor (1991, pág. 16) afirman que:

"La calidad de la educación primaria en un país debe ser juzgada a partir del aprendizaje de todos sus niños. Mejorar la calidad (...) implica, por tanto, asegurar que más niños completen la escuela primaria habiendo llegado a dominar lo que se les enseñó".

En el IMCE, los indicadores de rendimiento miden el desempeño académico en el periodo de interés (t) de los estudiantes de las instituciones educativas. Estos indicadores se han diseñado y estimado con base en la siguiente información: pruebas SABER 5°, 9° y 11°, las tasas de aprobación de los grados 5°, 9° y 11° y la tasa de estudiantes en extra-edad de la población en edad regular.

IndicadorInterpretación de sus resultados
Porcentaje de estudiantes de las IE en cada rango de calificación en SABER 11 en lenguaje y matemáticas
  • Puntaje bajo: puntaje promedio ≤ 30
  • Puntaje medio: puntaje promedio > 30 y ≤ 70
  • Puntaje alto: puntaje promedio > 70
Mediana de los resultados de las IE en SABER 11 en lenguaje y matemáticas Indica la mediana obtenida por la IE en las pruebas SABER 11 en las áreas de lenguaje y matemática
Tasa de aprobación de 5°, 9° y 11° en el año observado Indica el porcentaje de estudiantes que aprobaron el grado 5, 9 y 11 y culminaron así su ciclo de educación básica primaria, secundaria o media en el año observado.
Tasa de estudiantes en extraedad en educación regular. Indica el porcentaje de estudiantes que se encuentran en extraedad de la población en edad escolar. Se define a un individuo en extraedad en cuando este tiene tres o más años por encima de la edad normal del grado correspondiente.
Porcentaje de estudiantes en nivel avanzado en pruebas SABER 5 y 9 en lenguaje y matemáticas
  • Porcentaje de estudiantes en nivel avanzado en lenguaje grado 5°
  • Porcentaje de estudiantes en nivel avanzado en matemáticas grados 5°
  • Porcentaje de estudiantes en nivel avanzado en lenguaje grado 9°
  • Porcentaje de estudiantes en nivel avanzado en matemáticas grados 9°

Progreso académico

Por su parte, los indicadores de progreso académico como su nombre lo indica, miden el progreso o variación en el rendimiento académico de las instituciones a través del tiempo. Este indicador toma los resultados de las pruebas SABER para determinar el avance o retroceso en el logro académico de cada establecimiento educativo entre el año de referencia y tres año atrás1, por medio de la captura de la variación en el tiempo en los resultados (puntajes), agregados del establecimiento en las pruebas Saber 5°, 9° y 11° del ICFES en las áreas de lenguaje y matemáticas.

Para la estimación de los indicadores de progreso se construye una función que toma valores más altos en aquellas instituciones que crecen desde posiciones altas y valores más bajos en aquellos que decrecen desde posiciones bajas. En otras palabras, la no linealidad de la función de crecimiento se consideró con el fin de darle mayor crédito a instituciones que progresen desde niveles más altos.

El indicador de progreso tiene la interpretación de una puntuación abstracta del progreso de la IE, es decir, si bien la escala se encuentra entre 0 y 100 puntos, un valor cercano a cero, debe ser interpretado como una disminución en el progreso desde un nivel bajo por parte de la IE, mientras que un valor cercano a 100 indica un crecimiento de la IE desde una posición relativamente alta. El calificativo de abstracto se refiere a que en ningún momento una calificación en particular puede ser interpretada de manera directa como el aumento de un número determinado de posiciones relativas. Esto es debido a que la función creada tiene en cuenta dos efectos distintos y que no necesariamente se relacionan, como lo son el crecimiento y la posición inicial de la institución educativa. De manera análoga se construyen todos los indicadores de progreso.

IndicadorInterpretación de sus resultados
Progreso de los estudiantes de la IE, que se encuentran en quinto, noveno y once, para Lenguaje y Matemáticas.
  • Variaciones positivas: X > 50
  • Sin variación: X = 50
  • Variaciones negativas: X < 50
  • Nota: Entre más cerca de 100, mayor progreso, entre más cerca de cero, mayor decrecimiento.
Variación del porcentaje de IE en cada categoría de rendimiento en SABER 11.
  • Hay variaciones negativas (castigadas) y positivas (premiadas). En valor absoluto, se podría decir que: Variación baja: X ≤ 2
  • Variación media: 2 < X ≤ 4
  • Variación alta: X ≥ 4
Fuente: (Universidad Eafit, 2012)

Bonificación

Esta variable reconoce la mayor dedicación y esfuerzo que deben realizar varias de las instituciones para lograr que un porcentaje importante de su población estudiantil logre elevar su rendimiento y progreso académico, dado que sus condiciones socioeconómicas son adversas. Diferentes variables socioeconómicas y de educación se emplean para poder identificar esta población y asignar un crédito adicional o premio, al trabajo realizado por las instituciones que atienden población vulnerable. Este indicador se construye a partir de las bases de datos de Olimpiadas del Conocimiento y el Sistema de Matrícula.

La premiación se realiza según la cantidad de respuestas correctas en Olimpiadas, ponderadas por la proporción de estudiantes en las condiciones de vulnerabilidad definidas. La finalidad de este indicador es disminuir la brecha existente entre las instituciones, que en medio de condiciones adversas deben impartir una educación de calidad, y aquellas que gozan de condiciones socioeconómicas relativamente superiores.


1La razón para tomar el año de referencia frente a tres años atrás, es que los resultados de los estudiantes cambian lentamente, por lo que se requiere un periodo de tiempo superior a un año para capturar el progreso.

Mas información sobre el sistema: