Jornadas de Evaluación Educativa: Estudios Internacionales Facultad de Educación - UAH Instituto Nacional de Evaluación Educativa - MECD 12-13 de marzo de 2014

1. SECRETARÍA DE ESTADO DE EDUCACIÓN, FORMACIÓN
PROFESIONAL Y UNIVERSIDADES
DIRECCIÓN GENERAL DE EVALUACIÓN Y COOPERACIÓN
TERRITORIAL
http://www.mecd.gob.es/inee
Facultad de Educación,
UAH
• Lis Cercadillo • Joaquín Vera
• Alba Reboredo • Chema Sánchez
Instituto Nacional de
Evaluación Educativa,
MECD

2. ¿QUÉ ES INEE?
● El Instituto Nacional de Evaluación Educativa es el organismo responsable
de la evaluación del sistema educativo en el Ministerio de Educación,
Cultura y Deporte.
● Sus funciones son:
 Evaluación general del sistema educativo y realización, en
colaboración con las Administraciones educativas, de las evaluaciones
generales de diagnóstico.
 Coordinación de la participación del Estado español en las
evaluaciones internacionales.
 Elaboración del Sistema Estatal de Indicadores de la Educación.
 Participación en la elaboración de los indicadores internacionales de
la educación
 Revista de Educación: publicación científica del MECD para la difusión
de los avances en la investigación y en la innovación educativa.
 Boletín de Educación: resumen informativo de los temas de mayor
relevancia de los últimos informes publicados por el INEE.

3. MAPA DE EVALUACIONES
INTERNACIONALES
Evaluación Externa Internacional Competencias Destinatarios Periodicidad
Última
realizada
OCDE
PISA
Programa para la Evaluación Internacional de Estudiantes
Programme for International Student Assessment
Lectora
Matemática
Científica
Alumnos que
cumplen 16
años en el año
de realización
3 años
2012
Siguiente
2015
TALIS
Estudio Internacional de Enseñanza y Aprendizaje
Teaching and Learning International Survey
Encuesta al
profesorado
Profesores y
directores de
Educación
Secundaria
5 años 2013
IEA
PIRLS
Estudio Internacional de Progreso en Comprensión Lectora
Progress in International Reading Literacy Study
Lectora 4º EP 5 años
2011
Siguiente
2016
TIMSS
Estudio International de Matemáticas y Ciencias
Trends in International Mathematics and Science Study
Matemática
Científica
4º EP 4 años
2011
Siguiente
2015
TIMSS
ADVANCED
Estudio International de Matemáticas y Ciencias
Trends in International Mathematics and Science Study
Matemáticas y
Física avanzadas
2º Bachillerato 5 años
2008
Siguiente
2015
ECES
Estudio Internacional sobre Educación Pre-primaria
International Early Childhood Education Study
Desarrollo de
destrezas infantiles
Pre-primaria
No
definida
En
elaboración

4. http://pisa-sq.acer.edu.au/showQuestion.php?testId=2295&questionId=5http://www.youtube.com/watch?v=QHzpPflDiMY
PONGÁMONOS A PRUEBA

5. http://pisa-sq.acer.edu.au/showQuestion.php?testId=2295&questionId=5http://www.youtube.com/watch?v=QHzpPflDiMY
PONGÁMONOS A PRUEBA

6. PONGÁMONOS A PRUEBA

7. PONGÁMONOS A PRUEBA

8.  Evaluaciones muestrales, cíclicas, a gran escala
 Cuadernillo de prueba + cuestionarios de contexto
 Rigor metodológico:
• Marco teórico: Qué evaluar, elaboración de ítems,
distribución de ítems y cuadernillos…
• Selección de la muestra
• Traducción de materiales, aplicación, corrección,
limpieza de datos…
• Análisis TRI de las respuestas  Dificultad de los
ítems y puntuación lograda por los alumnos
 Informes internacionales comparativos
RASGOS COMUNES DE LOS
ESTUDIOS DE EVALUACIÓN

9. EJEMPLO DE CONSTRUCCIÓN
DE PRUEBAS

10. ítems
Prepilotaje
Pilotaje
Estudio principal
Análisis de resultados
Elaboración de una prueba
Respuesta de elección múltiple
Respuesta cerrada
Respuesta abierta construida
Respuestas abiertas
Matriz de
especificaciones
EJEMPLO DE CONSTRUCCIÓN
DE PRUEBAS
estímulo

11. DESCRIPTOR
BLOQUES DE CONTENIDOS
• Números
• Álgebra
• Geometría
• Funciones y Gráficas
• Estadística y Probabilidad
• Contenidos comunes
Ejemplo: Contenidos y Procesos
para Matemáticas 2º ESO
EJEMPLO DE CONSTRUCCIÓN
DE PRUEBAS

12. DISEÑO Y APLICACIÓN
DE LAS PRUEBAS
La obtención de resultados representativos, válidos y fiables, y la
distribución por niveles requiere un gran número de ítems
Distribución de cuadernillos por bloques (Balanced Incomplete Block - BIB)
MO1
MO2
Cuadernillo1
CO1
CO2
Cuadernillo2
CO2
CO3
MO2
MO3
Cuadernillo3
MO3
MO4
CO3
CO4
Cuadernillo4
CO4
CO5
MO4
MO5
Cuadernillo5
MO5
MO6
CO5
CO6
Cuadernillo6
CO6
CO7
MO6
MO7
Cuadernillo7
MO7
MO8
CO7
CO8
Cuadernillo8
CO8
CO9
MO8
MO9
Cuadernillo9
MO9
M10
CO9
C10
Cuadernillo10
C10
C11
M10
M11
Cuadernillo11
M11
M12
C11
C12
Cuadernillo12
C12
C13
M12
M13
Cuadernillo13
M13
M14
C13
C14
Cuadernillo14
C14
C01
M14
M01
TIMSS• 14 bloques de matemáticas
y 14 de ciencias
• 8 bloques de cada materia
son de anclaje
• Cada bloque tiene entre 10 y 14
preguntas de dominios de contenido
y cognitivos en proporción del
marco teórico
• 175 ítems de matemáticas
• 172 ítems de ciencias
Llevaría 8 horas y media
realizar toda la prueba cognitiva
• 72 minutos
• unas 40 preguntas

13. DISEÑO Y APLICACIÓN
DE LAS PRUEBAS
Preparación
de los
alumnos
(10 minutos)
Primera
parte
PIRLS/TIMSS
40/36
minutos
Descanso
15 minutos
Preparación
(5 minutos)
Segunda
parte
PIRLS/TIMSS
40/36
minutos
Cuestionario
del alumno
(10-30
minutos)
Preparación
de los
alumnos
(5 minutos)
Primera
parte
TIMSS/PIRLS
36/40
minutos
Descanso
15 minutos
Preparación
(5 minutos)
Segunda
parte
TIMSS/PIRLS
36/40
minutos
INSTRUMENTOS PARA CONOCER LOS FACTORES DE CONTEXTO
CUESTIONARIOS DE CONTEXTO
• Alumnos
• Padres o tutores legales
• Directores de los centros
• Profesores
ENCYCLOPEDIA
Información de cada país sobre su
sistema educativo y el currículo de
Lectura, Matemáticas y Ciencias
PRIMER DÍA
SEGUNDO DÍA
Recogida
Cuestionario
de padres

14. http://www.mecd.gob.es/inee
WEB INEE

15. 1º http://www.mecd.gob.es/inee
2º Ítems liberados de pruebas de evaluación y otros recursos
RECURSOS PARA
EL PROFESORADO
http://www.oecd.org/pisa/test/

16. BOLETINES DE EDUCACIÓN

17. PROGRAMA DE VISITAS

18. Síguenos en Twitter:
@educaINEE
En nuestro blog:
http://blog.educalab.es/inee/
Y en slideshare:
http://www.slideshare.net/INEE_MECD
http://www.mecd.gob.es/inee/
GRACIAS