Diez preguntas básicas sobre los Exámenes de la Calidad y el Logro Educativos (Excale)

Una de las funciones del Instituto Nacional para la Evaluación de la Educación (INEE) es evaluar lo que los estudiantes mexicanos aprenden del currículo nacional. El propósito fundamental de la evaluación del aprendizaje es proporcionar un conocimiento general del rendimiento académico de los estudiantes, a nivel estatal y nacional, así como identificar los factores que ayuden a explicar las diferencias entre los niveles de logro.

Para lograr este objetivo, el INEE desarrolló los Exámenes de la Calidad y el Logro Educativos (Excale).

1. ¿Qué son los Excale?

2. ¿Qué grados y asignaturas evalúan los Excale?

3. ¿A quién se aplican los Excale?

4. ¿Cada cuándo se aplican los Excale?

5. ¿Pueden los maestros y padres de familia conocer los resultados obtenidos por sus alumnos o hijos en los Excale?

6. ¿Cómo se elaboran los Excale?

7. Una vez elaborados, ¿qué sigue?

8. ¿Qué tipo de información relacionada con el contexto en que ocurre el aprendizaje recaba el INEE?

9. ¿Cómo se efectúa el análisis e interpretación de resultados de los Excale?

10. ¿Cómo se difunden los resultados?

1. ¿Qué son los Excale?

Los Excale son pruebas de aprendizaje de gran escala que miden el logro escolar de los estudiantes de educación básica en distintas asignaturas y grados. Estos exámenes tienen tres características distintivas: son criteriales, están alineados al currículo y son matriciales.

Son criteriales porque se diseñan para evaluar el dominio que tienen los estudiantes de una disciplina en particular. Su interés central es conocer el nivel de logro que alcanzan los estudiantes como resultado de su escolarización formal. Cada contenido temático se evalúa a profundidad, procurando incluir todos los conocimientos y habilidades de importancia para la disciplina y grado escolar.

Están alineados al currículo porque su propósito es evaluar los aprendizajes pretendidos por los planes y programas de estudio nacionales. El hecho de contar en México con un currículo nacional para la educación básica, libros de textos gratuitos y una formación magisterial bastante uniforme, facilita identificar lo que aprenden los estudiantes en relación con lo que se espera de ellos.

Puesto que los Excale pretenden evaluar todos los contenidos curriculares importantes, tienen un diseño matricial en el cual los reactivos que conforman una prueba se agrupan en bloques para ser distribuidos entre los alumnos; no todos contestan las mismas preguntas, pero con las repuestas de todos se obtienen resultados del examen en su conjunto. En este tipo de pruebas, la calificación individual del estudiante no es tan importante como los resultados agregados a nivel de entidad federativa y modalidad educativa, dado que lo que se busca es evaluar al sistema educativo en su conjunto.

2. ¿Qué grados y asignaturas evalúan los Excale?

Las asignaturas propiamente instrumentales, tales como Matemáticas y Español, además de aquellas que cubren grandes áreas curriculares relacionadas con Ciencias Naturales y Ciencias Sociales, realizando en cada caso la selección de contenidos conforme el currículo nacional y el grado escolar a evaluar.

Los grados a evaluar son los terminales de cada nivel escolar: 3º de preescolar, 6º de primaria y 3º de secundaria. Adicionalmente, se añade 3º de primaria con el fin de evaluar segmentos de tres años escolares.

De este modo, se han establecido las siguientes asignaturas para cada nivel y grado desde el preescolar hasta la secundaria.

Niveles, grados y asignaturas que evalúan los Excale

3. ¿A quién se aplican los Excale?

Se aplican a muestras representativas de estudiantes de escuelas públicas y privadas, de educación básica de todo el país. El número de estudiantes varía de acuerdo con el estado, el grado a evaluar y la modalidad educativa de que se trate. En 2005 se aplicaron más de 47 mil pruebas a estudiantes de sexto de primaria en 2 mil 770 escuelas y a 52 mil 251 alumnos de tercero de secundaria en 2 mil 397 escuelas. En 2006, la prueba se aplicó a casi 55 mil alumnos de tercero de primaria en un poco mas 3 mil escuelas mientras que en 2007 se aplicaron a más de 10 mil pruebas a estudiantes de tercer año de preescolar en aproximadamente mil 100 escuelas y a alrededor de 13 mil estudiantes de sexto de primaria en más de 700 planteles educativos.En 2008, la evaluación de tercer grado de secundaria abarcó a más de 100 mil estudiantes de aproximadamente 4 mil escuelas.

Aunque el porcentaje de estudiantes evaluados en cada grado es pequeño, las estimaciones que hace el INEE son bastante precisas y confiables. Cada escuela tiene la misma probabilidad de ser seleccionada en la muestra; asimismo, al interior de cada escuela y grado escolar, todos los estudiantes tienen la misma probabilidad de ser seleccionados para responder la prueba.

Las evaluaciones que realiza el INEE no son voluntarias: todas las escuelas y alumnos del país tienen la obligación de participar en las evaluaciones de gran escala que se realizan año con año.

4. ¿Cada cuándo se aplican los Excale?

El plan de evaluación de los Excale se basa en un programa cuatrianual; es decir, un mismo grado se evaluará cada cuatro años, tal como se muestra en la siguiente tabla.

Plan de Evaluación por grados y asignaturas escolares

Nota: L = Excale-Lenguaje y Comunicación; P = Excale-Pensamiento Matemático; Excale-Español; M = Excale-Matemáticas; N = Excale-Ciencias Naturales; S = Excale-Ciencias Sociales. El sombreado indica muestras nacionales sin representatividad estatal.

Este plan ofrece la posibilidad de evaluar los aprendizajes de los estudiantes del Sistema Educativo Nacional tanto transversal como longitudinalmente ya que, por ejemplo, si en 2006 se evaluó a los alumnos de tercero de primaria, tres años más tarde, cuando teóricamente estén cursando sexto, serán sujetos de una nueva evaluación y tres años después, en 2012, participarán en la evaluación de tercero de secundaria. Es cierto que no necesariamente estarán siendo evaluados exactamente los mismos alumnos, sin embargo, hay que recordar que el objetivo de los Excale no es evaluar los aprendizajes logrados por cada alumno, sino tener una visión del Sistema Educativo en su conjunto. Las evaluaciones se realizan al final del año escolar (mayo o junio).

5. ¿Pueden los maestros y padres de familia conocer los resultados obtenidos por sus alumnos o hijos en los Excale?

Si bien no es posible conocer los resultados obtenidos en los Excale por algún estudiante en particular, el INEE publica los resultados obtenidos por todos los alumnos a nivel nacional, estatal y/o por modalidad educativa.

La aplicación de los Excale permite cubrir diversos objetivos:

a) proporcionar un conocimiento general del rendimiento académico de los estudiantes como resultado de su escolarización formal, con distintos grados de desagregación, entre los que se encuentran los estratos escolares de primaria (escuelas urbanas públicas, rurales públicas, cursos comunitarios, educación indígena, y escuelas privadas) y las modalidades educativas de secundaria (escuelas generales, técnicas, telesecundarias y escuelas privadas);

b) permitir comparaciones del rendimiento escolar entre diversas regiones geográficas, así como entre distintas modalidades educativas;

c) conocer los puntos fuertes y débiles del aprendizaje de los estudiantes en distintos grados y áreas temáticas del currículum;

d) conocer las tendencias a lo largo del tiempo del aprendizaje de las Matemáticas, el Español, las Ciencias Naturales y las Ciencias Sociales;

e) analizar algunas variables de contexto que influyen de manera importante en el logro escolar; y,

f) identificar el crecimiento o estancamiento de los aprendizajes en las disciplinas evaluadas.

6. ¿Cómo se elaboran los Excale?

Cada prueba Excale se elabora con mucho tiempo de anticipación; su realización abarca diferentes etapas, en cada una de las cuales participa no sólo el personal técnico del INEE, sino grupos de profesionales, expertos en currículo, profesores en servicio, autores de libros, entre otros, quienes conforman distintos comités. Las labores de estos comités abarcan diversas tareas: analizar el currículo y seleccionar los contenidos que se evaluarán; definir las características de los reactivos que conformarán la prueba; formular, revisar y pilotear las preguntas así como ensayar las condiciones reales de aplicación de los Excale.

7. Una vez elaborados, ¿qué sigue?

La prueba se aplica a una muestra nacional de estudiantes. El equipo de personas que aplica la prueba se compone por personal del INEE y por aplicadores contratados y capacitados especialmente para llevar a cabo esta tarea. La información se recaba a través de procedimientos estandarizados y una supervisión eficaz. Todo el proceso está diseñado para asegurar que la prueba arroje resultados confiables. Las evaluaciones se realizan al mismo tiempo en todas las escuelas participantes.

La información que se recaba individualmente de los directores y sus escuelas, de los docentes y sus aulas, así como de los estudiantes y sus familias, es confidencial. Después de que se reportan los resultados de las evaluaciones, el INEE pone a disposición de todos los interesados las bases de datos sin los nombres de los estudiantes ni de los planteles, para asegurar que éstos no puedan ser identificados.

8. ¿Qué tipo de información relacionada con el contexto en que ocurre el aprendizaje recaba el INEE?

Los resultados de los Excale nos permiten conocer lo que los estudiantes aprenden del currículo; sin embargo, esta información no es suficiente para entender las diferencias que logran en el aprendizaje.

Por eso, el INEE recaba información de diversas variables de contexto sobre los alumnos y sus familias, los docentes y el aula, y el director y la escuela. Es de especial interés conocer las oportunidades de aprendizaje a las que están expuestos los estudiantes, a fin de explicar las diferencias en el logro educativo de los distintos tipos de centros escolares.

Los cuestionarios tienen el propósito de recabar información sobre el estudiante y su familia, los docentes, y el director, sobre aspectos relacionados con características personales, familiares y escolares; así mismo, se obtiene información sobre el salón de clases, el ambiente del aula, la interacción con los padres, la cobertura curricular y las prácticas pedagógicas; la infraestructura y la organización escolar.

Las características y composición de los distintos cuestionarios varían de acuerdo con el grado escolar al que estén destinados.

9. ¿Cómo se efectúa el análisis e interpretación de resultados de los Excale?

Esta fase se inicia con un análisis de los resultados con el fin de establecer los niveles de logro de los estudiantes; se realizan los primeros análisis estadísticos poniendo especial énfasis en el comportamiento psicométrico de las pruebas aplicadas. Los niveles de logro que han sido utilizados por el INEE son:

Estos niveles se definen de acuerdo con la asignatura y grado de que se trate. Finalmente, se realizan los informes sobre los resultados de aprendizaje de los estudiantes evaluados, considerando las variables de contexto y de oportunidades de aprendizaje aportadas en los cuestionarios aplicados a alumnos, docentes y directores. Asimismo, es muy importante para el INEE conocer el logro de aprendizaje de las distintas poblaciones muestreadas (entidades federativas, estratos y modalidades educativas), así como los contenidos del currículo nacional que los estudiantes dominan.

10. ¿Cómo se difunden los resultados?

Los resultados de los Excale se dan a conocer a través de múltiples modalidades: mesas públicas; conferencias de prensa; libros; folletos, informes, etcétera, los cuales pueden ser consultados en el portal de Internet del INEE: http://www.inee.edu.mx/