|
El TIMSS
A la vista de
los positivos resultados de las experiencias
anteriores, la IEA ha puesto en marcha, en 1991, una evaluación
conjunta en Matemáticas y Ciencias conocida con el nombre de
TIMSS, Third International Mathematics and Science Study o
Tercer Estudio Internacional de Matemáticas y Ciencias.
Tres han sido
las poblaciones a evaluar:
- los dos cursos que reúnan la mayor proporción de alumnos de 9 años,
- los dos que reúnan la mayor proporción de alumnos de 13 años y
- el último curso de la Enseñanza Secundaria.
El núcleo central del estudio son los alumnos de 13 años.
El diseño del
estudio, la construcción de los instrumentos y su
aplicación han tenido lugar entre 1991 y 1995. Han participado
en total más de 500.000 alumnos de 15.000 centros docentes de 45
países de todo el mundo. Los resultados del primer informe
correspondiente a los alumnos de 13 años se han hecho públicos
en una conferencia de prensa celebrada en Boston el 20 de
noviembre de 1996. Los informes correspondientes a las otras
poblaciones se completarán a lo largo de 1997.
Objetivos del estudio
El objetivo
del estudio es conocer el nivel de rendimiento de los
alumnos, comparar los resultados entre países y tratar de
explicar las diferencias observadas en función de las distintas
características de los sistemas educativos.
El punto de partida
es la distinción de tres niveles de currículo:
- currículo intencional o previsto: el que oficialmente se fija en
la normativa educativa y en las guías curriculares a las que
deben ajustarse los libros de texto para su aprobación,
- currículo impartido o práctico: lo que los profesores enseñan a
los alumnos al desarrollar en el aula el currículo intencional,
- currículo alcanzado o efectivo: lo que aprenden realmente los
alumnos.
Las grandes líneas
de investigación del estudio surgen a partir
de los tres tipos de currículo antes descritos:
- ¿Cómo varían los objetivos de aprendizaje del currículo
oficial en Matemáticas y Ciencias de un país a otro y qué
características de los sistemas educativos influyen para
desarrollar esos objetivos?
- ¿Cómo varía la puesta en práctica de unos países a otros y
por qué?
- ¿Qué conceptos, procesos y actitudes aprenden los alumnos?
- Relaciones entre el currículo y el contexto social y
educativo.
Un estudio de
este tipo y de esta magnitud representa una
oportunidad extraordinaria para comparar el currículo entre
países, la forma de enseñar, los logros alcanzados y así
favorecer la reflexión acerca del sistema educativo del país y
su puesta en práctica.
Los problemas
de comparación derivados de la existencia de
diferencias en el currículo, tanto en cuanto a contenido, como
a objetivos y enfoque deben ser tenidos en cuenta al examinar los
resultados de una evaluación internacional, incluso en el caso
de que todos los países participantes hayan respetado
rigurosamente los procedimientos de realización del estudio. Si
bien en el TIMSS se ha acordado un currículo internacional para
Matemáticas y otro para Ciencias, que está formado en gran parte
por contenidos comunes a todos los países participantes, es
inevitable que haya temas que aún siendo comunes reciban distinto
tratamiento y se les atribuya distinta importancia en cada país.
Participación española
España, a través
del INCE, ha participado en la parte central del
estudio, formada por los alumnos que tenían 13 años en el curso
1994-95, pertenecientes a los niveles educativos de 7º y 8º de
Educación General Básica. Las conclusiones que se desprenden del
estudio se refieren, pues, a alumnos de Educación General Básica
y no del primer ciclo de Educación Secundaria porque éste aún no
estaba implantado cuando se llevó a cabo el estudio, en el curso
escolar 1994-95. Las pruebas se aplicaron durante el mes de mayo
y la primera semana de junio de 1995.
Para garantizar
unos niveles de calidad y precisión mínimos se
establecieron unas normas internacionales para la selección de
la muestra de alumnos, que cada país debía seguir rigurosamente.
No obstante, de los 41 países participantes con alumnos de
13 años, sólo 25, entre los cuales está España, han cumplido
estrictamente las normas fijadas para la muestra.
En España han
participado 153 colegios con 7.596 alumnos, siendo
3.855 de 8º de EGB y 3.741 de 7º de EGB.
Pruebas utilizadas
La prueba de rendimiento
de Matemáticas y Ciencias contiene preguntas de tres tipos:
- preguntas cerradas con 4 ó 5 opciones de respuesta para elegir
la correcta,
- preguntas abiertas de respuesta corta, en las que basta con que
el alumno escriba la respuesta, y
- preguntas de respuesta extendida en las que el alumno tiene que
explicar en detalle el proceso seguido para llegar a la
respuesta.
Los tiempos de respuesta
estimados para cada tipo de pregunta eran 1 minuto, 2 minutos y 5 minutos,
respectivamente. No todos los alumnos han contestado a las mismas preguntas
pero el proceso seguido puede garantizar que se trata de pruebas de la misma
dificultad.
Cada alumno ha contestado a
unas 70 preguntas de ambas materias; en total se han usado 286 (151 de
Matemáticas y 135 de Ciencias), distribuidas en 8 cuadernillos diferentes
con una estructura común. El número de preguntas realizadas permite cubrir
ampliamente el currículo internacional acordado en ambas materias.
Además de la prueba de
contenidos de Matemáticas y Ciencias para los alumnos, se han utilizado
cuestionarios de contexto con preguntas sobre la situación personal y
académica de los propios alumnos, de los profesores y de los equipos
directivos de los centros. Ello permite relacionar el rendimiento de los
alumnos con factores familiares, escolares y de práctica diaria en el
aula.
Además de las diferencias
en el currículo ya citadas, otro factor que incide en los resultados es el
formato de las preguntas, especialmente las de opción múltiple, ya que es
poco usual en muchos países. Concretamente, en España, ha sido la primera vez
que muchos alumnos se han enfrentado a una prueba con este tipo
de preguntas.
Análisis de los resultados
Para expresar los
resultados y poder efectuar comparaciones, en cada materia se ha
construido una escala TRI (Teoría de Respuesta
al Item) en la que se sitúan las preguntas según su grado de
dificultad. El rendimiento global de cada país en cada materia
viene dado por la puntuación media de los alumnos en esa escala.
La escala está ajustada de modo que la puntuación media
internacional para todos los alumnos de 13 años, tanto de 7º como
de 8º, sea 500 y la desviación típica 100. El uso de las escalas
TRI para expresar los resultados permite hacer comparaciones
con fiabilidad, pero tiene la desventaja de que son difíciles de
interpretar.
Las páginas que
siguen se refieren solamente a Matemáticas y reflejan los resultados
globales y por bloques en 7º y 8º.
Posteriormente, sobre
las preguntas de la prueba aparecen los porcentajes de aciertos
en 7º y 8º para algunas preguntas seleccionadas. cada pregunta va
acompañada de un comentario sobre el error más frecuente cometido por
los alumnos de 8º.
|
