Claudia Ortega y Jaione Cubero, Universidad de Cadiz
El grupo de investigación evalfor de la Universidad de Cádiz ha desarrollado una serie de proyectos en base a los principios de la evaluación orientada al aprendizaje y la evaluación sostenible. En este taller Claudia y Jaione presentarán uno de sus principales productos, el servicio Web evalcomix, diseñado para que alumnos y profesores puedan implementar actividades de evaluación participativa.
MOODLE CON EVALCOMIX: DESARROLLANDO LA EVALUACIÓN SOSTENIBLE V2
1. MoodleMoot 2012
“Moodle con EvalCOMIX: Desarrollando
la evaluación sostenible”
Txorierri (Derio – BIZKAIA)
15 de junio de 2012
Jaione Cubero Ibáñez
Claudia Ortega Gómez
Grupo EVALfor
Universidad de Cádiz
E ALfor Grupo de Investigación EVALfor
2. Antecedentes
Evaluación de competencias en contextos de aprendizaje mixto
(blended-learning) Ref. EA2007-0099
Evaluación de competencias con Herramientas de Interacción
Dialógica Asíncrona (Foros, blogs y wikis) Ref. EA2008-0237
Reingeniería de la e-Evaluación, tecnologías y desarrollo de
competencias en profesores y estudiantes universitarios – Ref.
Proyecto de Excelencia P08-SEJ-03502
INnovación en la EVALuación de COmpetencias: Diseño y desarrollo de
procedimientos e instrumentos para la evaluación de competencias en
entornos de aprendizaje mixtos/virtuales con la participación de los
estudiantes en los títulos de grado Ref. EA2010-0052
De la calificación a la e-proalimentación. Estrategias y herramientas
innovadoras para la evaluación/proalimentación y el desarrollo de
competencias en los estudiantes universitarios Ref. EA 2011-0057
Desarrollo de competencias profesionales a través de la EVALuación
participativa y la SIMulación utilizando herramientas Web Ref ALFA III
(2011)-10
E ALfor Grupo de Investigación EVALfor
5. Evolución de la Evaluación
Introducción de las ideas sobre medición educativa:
1960
- Sistematización de la evaluación
- Introducción de conceptos como fiabilidad y validez
- Introducción de nuevas técnicas (pruebas de elección múltiple)
1970 Se incorpora la diferenciación sumativa/formativa
1980 Se acepta el valor de la autoevaluación y la evaluación entre iguales
Se reconoce las consecuencias de la evaluación para el aprendizaje
1990
del estudiante.
2000
Evaluación Sostenible – Retroalimentación / Proalimentación
2010 e-Evaluación / u-Evaluación
E ALfor Grupo de Investigación EVALfor
6. ¿Puede permanecer inalterable la
evaluación del aprendizaje cuando están
cambiando sustancialmente la forma y el
contenido de lo que se aprende?
E ALfor Grupo de Investigación EVALfor
7. Cambios en la evaluación
– diseñar procedimientos para la evaluación orientada al
aprendizaje de competencias
– utilizar métodos para la evaluación del trabajo presencial,
semipresencial y no presencial del alumnado
– utilizar medios, técnicas e instrumentos de evaluación
diferentes a los exámenes de papel y lápiz para evaluar las
competencias adquiridas
– de las TICs a las TACs
E ALfor Grupo de Investigación EVALfor
8. Evaluación orientada
Marco de
Finalidades al aprendizaje
referencia
Valorar el Mantener
rendimiento estándares
Digital Digital
Promover el
aprendizaje
Participantes
estratégico
e-Evaluación
Experiencias de los estudiantes
e-Evaluación
Experiencias del tutor
Contexto
Contexto
Actuaciones
Tareas de
e-Evaluación
como tareas de
e-Aprendizaje
e-Aprendizaje
e-Aprendizaje
Estudiantes Retroalimentación
como y
evaluadores proalimentación
Analógico Analógico
Resultado
e-Aprendizaje estratégico
E ALfor Grupo de Investigación EVALfor
9. Estudiantes como evaluadores
Heteroevaluación Autoevaluación
Evaluación del Evaluación entre
Coevaluación Autoevaluación
Profesor iguales
Participación estudiantes
E ALfor Grupo de Investigación EVALfor
10. Retroalimentación
y
proalimentación
Siete principios de una buena retroalimentación
(Nicol y Macfarlane-Dick, 2006)
1. Clarificar qué se entiende por un trabajo bien hecho.
2. Facilitar la reflexión y la autoevaluación en el aprendizaje.
3. Proporcionar información significativa en la retroinformación
que ayude a los estudiantes a autocorregirse.
4. Promover el diálogo profesor-estudiantes y compañeros.
5. Estimular la autoestima y la motivación positiva.
6. Crear las oportunidades para que se pueda actuar sobre la
retroinformación.
7. Utilizar la retroinformación de los estudiantes para mejorar la
enseñanza.
E ALfor Grupo de Investigación EVALfor
11. Retroalimentación
y
proalimentación
Principio 1: Clarificar qué se entiende por un trabajo bien hecho
(Nicol, 2011)
EMPODERAMIENTO/
AUTORREGULACIÓN
• Los estudiantes crean los criterios
• Los estudiantes añaden sus propios criterios
• Los estudiantes identifican los criterios a partir de
muestras de trabajo
• Se aportan ejemplos de diferentes niveles de
ejecución
• Los estudiantes reformulan los criterios con sus
propias palabras
• Aportar un documento con criterios
COMPROMISO
E ALfor Grupo de Investigación EVALfor
13. Transparencia
Sistematizar y hacer pública la evaluación:
Los procedimientos de evaluación
Competencia General (transversal o básica):
Competencia Específica:
Productos
Técnicas e
Tareas a realizar por Esperados/Medios Evaluador/es
Criterios Instrumentos
el estudiante de Evaluación
E ALfor Grupo de Investigación EVALfor
14. Procedimiento de evaluación
Competencia General (transversal o básica): Aplicación de conocimientos
Competencia Específica: Diseñar un proyecto de investigación acorde a normas estandarizadas
Productos
Técnicas e Instrumentos
Tareas a realizar por el estudiante Esperados/Medios de Persona que evalúa
de Evaluación
Evaluación
- Asistencia a clases - Respuesta a pruebas - Profesor - Pruebas Objetivas de
teóricas objetivas donde se Conocimientos Básicos de
- Lectura de explicite el dominio Investigación
a) Tareas
documentación básica conceptual sobre
presenciales
- Lectura de documento: metodología de
previas
Orientaciones para la investigación
realización de proyectos de
investigación
- Selección de tema de - Descripción del tema de - Profesor - Lista de control de
interés investigación Selección Bibliográfica
- Selección de bibliografía - Listado de bibliografía
y documentación
- Elaboración de proyecto - Borrador 1 de Proyecto de - Profesor - Escala de valoración de
borrador 1 Investigación - Estudiante Proyectos de Investigación
- Elaboración de proyecto - Borrador 2 de Proyecto de (Autoevaluación)
b) Tareas no borrador 2 Investigación
presenciales - Elaboración de proyecto - Borrador 3 de Proyecto de
borrador 3 Investigación
- Elaboración de proyecto - Proyecto de Investigación -Profesor - Escalas de valoración de
definitivo -- Estudiantes Proyectos
(Autoevaluación /
Evaluación entre
iguales)
c) Tarea - Presentación oral del - Guión de Presentación -Profesor - Escala de valoración de la
presencial proyecto de investigación - Presentación en -- Estudiantes presentación oral de
PowerPoint (Autoevaluación / proyectos
Evaluación entre
iguales)
E ALfor Grupo de Investigación EVALfor
22. A (Excelente) B (Satisfactoria) C (Aceptable) D (Deficiente) E (Muy
Deficiente)
A B C D E
Escala:
Graduación empleada para REDACCIÓN
medir/valorar cada uno de las
Redactado de forma fácilmente comprensible
dimensiones y/o atributos.
Dimensiones: Adecuación ortográfica y gramatical
Los diferentes aspectos o facetas que
componen el objeto de evaluación.
Análisis e integración documental (discurso personal)
Subdimensiones: Coherencia de cuadros, tablas y figuras con sus contenidos
Los diferentes aspectos o facetas que
componen una dimensión.
Valoración global de la redacción
CONTENIDO
Atributos:
Título
Cada uno de los elementos o
ítems que globalmente Coherencia con objetivos y problema
constituyen una dimensión.
Introducción
Valoraciones: Cada una de las
puntuaciones o estimaciones Presentación clara y breve del proyecto
que se realizan sobre cada uno
de los atributos
Presentación adecuada de la estructura del proyecto
E ALfor Grupo de Investigación EVALfor
23. ESCALA
CRITERIOS/
ATRIBUTOS
DESCRIPTORES VALORES
E ALfor Grupo de Investigación EVALfor
24. ¿Y en la práctica? …
http://avanza.uca.es/moodle_evalfor
Usuario: mooteuXX
Contraseña: mooteuXX
E ALfor Grupo de Investigación EVALfor
25. Primera actividad:
Qué espero del curso
Trabajo Individual:
Cumplimentar “Expectativas del curso”
E ALfor Grupo de Investigación EVALfor
26. ¿Qué es EvalCOMIX?
Servicio web de autoría y despliegue de
instrumentos de evaluación de competencias
Permite el intercambio de información con otras
aplicaciones
Es un sistema independiente
Surge a partir de las limitaciones de los VLE
(Entorno de Aprendizaje Virtuales) en sistemas de
evaluación.
E ALfor Grupo de Investigación EVALfor
27. ¿Qué es EvalCOMIX?
Posee dos servicios principales:
• Creación de instrumentos
• Evaluación de actividades
E ALfor Grupo de Investigación EVALfor
28. ¿Qué es EvalCOMIX?
Instrumentos de Evaluación:
• Lista de Control
• Escala de Valoración
• Lista de Control + Escala de Valoración
• Rúbrica
• Diferencial Semántico
• Mixto
• Argumentario Evaluativo
• Importación / Exportación de instrumentos
E ALfor Grupo de Investigación EVALfor
29. ¿Qué es EvalCOMIX?
Una vez integrado en un VLE
como Moodle, permite la
evaluación de actividades
mediante los instrumentos
creados
E ALfor Grupo de Investigación EVALfor
30. ¿Qué es EvalCOMIX?
Modalidades de evaluación:
• Evaluación del Profesorado (EP)
• Autoevaluación del Estudiante (AE)
• Evaluación entre Iguales (EI)
E ALfor Grupo de Investigación EVALfor
31. ¿Cómo funciona
EvalCOMIX?
La información se intercambia mediante XML.
E ALfor Grupo de Investigación EVALfor
32. ¿Cómo funciona
EvalCOMIX?
Gráfico de conexión con Moodle
Posee una API (conjunto de métodos y procedimientos)
independiente del Sistema Operativo, lenguaje de programación y
plataforma para el intercambio de información.
E ALfor Grupo de Investigación EVALfor
33. ¿Cómo funciona
EvalCOMIX?
EvalCOMIX es integrable en cualquier VLE, pero
nuestro trabajo actual se centra en su
integración con distintas versiones de Moodle.
Se está estudiando una futura integración en
otros servicios como LAMS, Mediawiki, etc.
E ALfor Grupo de Investigación EVALfor
34. Versiones de
EvalCOMIX_MD
EvalCOMIX_MD 2.0
Integración de EvalCOMIX con Moodle 1.9
EvalCOMIX_MD 3.0
Integración de EvalCOMIX con Moodle 2.X
Gran reestructuración interna de Moodle 1.9 a 2.0,
por lo que la integración actual no sirve. Se
desarrolla una nueva integración
E ALfor Grupo de Investigación EVALfor
35. Antecedentes de
EvalCOMIX
Moodle se puede extender ampliando su código o
programando extensiones:
• Módulo
• Bloque
• Plugin
E ALfor Grupo de Investigación EVALfor
36. Nueva Integración
Nueva integración desarrollada como un bloque.
Alto grado de compatibilidad con futuras versiones de Moodle. No
se modifica código.
Fácil instalación: añadir directorio evalcomix al directorio blocks
Herencia y polimorfismo de clases de Moodle (clase grade_report)
Independencia del Sistema Gestor de Bases de Datos.
E ALfor Grupo de Investigación EVALfor
37. Nueva Integración
Nueva interfaz de acceso al bloque:
E ALfor Grupo de Investigación EVALfor
38. Nueva Integración
Gestión de instrumentos:
E ALfor Grupo de Investigación EVALfor
39. Nueva Integración
Acceso centralizado de todas las funcionalidades:
E ALfor Grupo de Investigación EVALfor
40. Mejoras de la 3.2
E ALfor Grupo de Investigación EVALfor
41. Mejoras de la 3.2
E ALfor Grupo de Investigación EVALfor
42. Actualidad en EvalCOMIX
Integrado en los campus virtuales de diversas universidades
Usado en diversos proyectos por más de 10 universidades,
tanto españolas como internacionales (Escocia, Australia,
etc.)
http://avanza.uca.es/reevalua/
http://evalcomix.uca.es
E ALfor Grupo de Investigación EVALfor
43. Trabajo futuro
Añadir el bloque al repositorio de Moodle
Evaluación de varios profesores
Añadir el proceso de apertura de datos que permitiría
manejar éstos desde Moodle y otros sistemas para incluir
gráficas, informes, etc.
E ALfor Grupo de Investigación EVALfor
44. Let us envisage new forms of e-assessment and
then build and evaluate them.
Imaginemos nuevas formas de e-evaluación y
después construyámoslas y evaluémoslas.
(Whitelock, 2009)
(JISC, 2010)
E ALfor Grupo de Investigación EVALfor
45. Referencias
Boud, D. (2000). Sustainable assessment: rethinking assessment for the Learning society.
Studies in Continuing Education, 22, (2), 151-167.
Bryan, C. & Clegg, K. (2006) Innovative Assessment in Higher Education. New York:
Routledge.
Ibarra Sáiz, M.S. y Rodríguez-Gómez, G. (2010). Aproximación al discurso dominante sobre
la evaluación del aprendizaje en la universidad. Revista de Educación, 351, 385-407.
Rodríguez Gómez, G. e Ibarra Sáiz, M.S. (Eds). (2011). e-Evaluación orientada al e-
Aprendizaje estratégico en la Educación Superior. Madrid: Narcea
Rodríguez Gómez, G.; Ibarra Sáiz, M.S. y Gómez Ruiz, M.A. (2011). e-Autoevaluación en la
universidad: un reto para profesores y estudiantes. Revista de Educación, (353), 401-430.
doi: 10-4438/1988-592X-RE-2010-356-045.
Rodríguez Gómez, G. Ibarra Sáiz, M.S. y Gómez Ruiz, M.A. (2012). La evaluación entre
iguales: beneficios y estrategias para su práctica en la universidad. Revista de Educación.
Avance de publicación online. doi: 10-4438/1988-592X-RE-2010-359-092.
E ALfor Grupo de Investigación EVALfor