Claudia Ortega y Jaione Cubero, Universidad de Cadiz El grupo de investigación evalfor de la Universidad de Cádiz ha desarrollado una serie de proyectos en base a los principios de la evaluación orientada al aprendizaje y la evaluación sostenible. En este taller Claudia y Jaione presentarán uno de sus principales productos, el servicio Web evalcomix, diseñado para que alumnos y profesores puedan implementar actividades de evaluación participativa.

1. MoodleMoot 2012
“Moodle con EvalCOMIX: Desarrollando
la evaluación sostenible”
Txorierri (Derio – BIZKAIA)
15 de junio de 2012
Jaione Cubero Ibáñez
Claudia Ortega Gómez
Grupo EVALfor
Universidad de Cádiz
E ALfor Grupo de Investigación EVALfor

2. Antecedentes
Evaluación de competencias en contextos de aprendizaje mixto
(blended-learning) Ref. EA2007-0099
Evaluación de competencias con Herramientas de Interacción
Dialógica Asíncrona (Foros, blogs y wikis) Ref. EA2008-0237
Reingeniería de la e-Evaluación, tecnologías y desarrollo de
competencias en profesores y estudiantes universitarios – Ref.
Proyecto de Excelencia P08-SEJ-03502
INnovación en la EVALuación de COmpetencias: Diseño y desarrollo de
procedimientos e instrumentos para la evaluación de competencias en
entornos de aprendizaje mixtos/virtuales con la participación de los
estudiantes en los títulos de grado Ref. EA2010-0052
De la calificación a la e-proalimentación. Estrategias y herramientas
innovadoras para la evaluación/proalimentación y el desarrollo de
competencias en los estudiantes universitarios Ref. EA 2011-0057
Desarrollo de competencias profesionales a través de la EVALuación
participativa y la SIMulación utilizando herramientas Web Ref ALFA III
(2011)-10
E ALfor Grupo de Investigación EVALfor

3. Antecedentes
E ALfor Grupo de Investigación EVALfor

4. E ALfor Grupo de Investigación EVALfor

5. Evolución de la Evaluación
Introducción de las ideas sobre medición educativa:
1960
- Sistematización de la evaluación
- Introducción de conceptos como fiabilidad y validez
- Introducción de nuevas técnicas (pruebas de elección múltiple)
1970 Se incorpora la diferenciación sumativa/formativa
1980 Se acepta el valor de la autoevaluación y la evaluación entre iguales
Se reconoce las consecuencias de la evaluación para el aprendizaje
1990
del estudiante.
2000
Evaluación Sostenible – Retroalimentación / Proalimentación
2010 e-Evaluación / u-Evaluación
E ALfor Grupo de Investigación EVALfor

6. ¿Puede permanecer inalterable la
evaluación del aprendizaje cuando están
cambiando sustancialmente la forma y el
contenido de lo que se aprende?
E ALfor Grupo de Investigación EVALfor

7. Cambios en la evaluación
– diseñar procedimientos para la evaluación orientada al
aprendizaje de competencias
– utilizar métodos para la evaluación del trabajo presencial,
semipresencial y no presencial del alumnado
– utilizar medios, técnicas e instrumentos de evaluación
diferentes a los exámenes de papel y lápiz para evaluar las
competencias adquiridas
– de las TICs a las TACs
E ALfor Grupo de Investigación EVALfor

8. Evaluación orientada
Marco de
Finalidades al aprendizaje
referencia
Valorar el Mantener
rendimiento estándares
Digital Digital
Promover el
aprendizaje
Participantes
estratégico
e-Evaluación
Experiencias de los estudiantes
e-Evaluación
Experiencias del tutor
Contexto
Contexto
Actuaciones
Tareas de
e-Evaluación
como tareas de
e-Aprendizaje
e-Aprendizaje
e-Aprendizaje
Estudiantes Retroalimentación
como y
evaluadores proalimentación
Analógico Analógico
Resultado
e-Aprendizaje estratégico
E ALfor Grupo de Investigación EVALfor

9. Estudiantes como evaluadores
Heteroevaluación Autoevaluación
Evaluación del Evaluación entre
Coevaluación Autoevaluación
Profesor iguales
Participación estudiantes
E ALfor Grupo de Investigación EVALfor

10. Retroalimentación
y
proalimentación
Siete principios de una buena retroalimentación
(Nicol y Macfarlane-Dick, 2006)
1. Clarificar qué se entiende por un trabajo bien hecho.
2. Facilitar la reflexión y la autoevaluación en el aprendizaje.
3. Proporcionar información significativa en la retroinformación
que ayude a los estudiantes a autocorregirse.
4. Promover el diálogo profesor-estudiantes y compañeros.
5. Estimular la autoestima y la motivación positiva.
6. Crear las oportunidades para que se pueda actuar sobre la
retroinformación.
7. Utilizar la retroinformación de los estudiantes para mejorar la
enseñanza.
E ALfor Grupo de Investigación EVALfor

11. Retroalimentación
y
proalimentación
Principio 1: Clarificar qué se entiende por un trabajo bien hecho
(Nicol, 2011)
EMPODERAMIENTO/
AUTORREGULACIÓN
• Los estudiantes crean los criterios
• Los estudiantes añaden sus propios criterios
• Los estudiantes identifican los criterios a partir de
muestras de trabajo
• Se aportan ejemplos de diferentes niveles de
ejecución
• Los estudiantes reformulan los criterios con sus
propias palabras
• Aportar un documento con criterios
COMPROMISO
E ALfor Grupo de Investigación EVALfor

12. Soluciones tentativas
E ALfor Grupo de Investigación EVALfor

13. Transparencia
Sistematizar y hacer pública la evaluación:
Los procedimientos de evaluación
Competencia General (transversal o básica):
Competencia Específica:
Productos
Técnicas e
Tareas a realizar por Esperados/Medios Evaluador/es
Criterios Instrumentos
el estudiante de Evaluación
E ALfor Grupo de Investigación EVALfor

14. Procedimiento de evaluación
Competencia General (transversal o básica): Aplicación de conocimientos
Competencia Específica: Diseñar un proyecto de investigación acorde a normas estandarizadas
Productos
Técnicas e Instrumentos
Tareas a realizar por el estudiante Esperados/Medios de Persona que evalúa
de Evaluación
Evaluación
- Asistencia a clases - Respuesta a pruebas - Profesor - Pruebas Objetivas de
teóricas objetivas donde se Conocimientos Básicos de
- Lectura de explicite el dominio Investigación
a) Tareas
documentación básica conceptual sobre
presenciales
- Lectura de documento: metodología de
previas
Orientaciones para la investigación
realización de proyectos de
investigación
- Selección de tema de - Descripción del tema de - Profesor - Lista de control de
interés investigación Selección Bibliográfica
- Selección de bibliografía - Listado de bibliografía
y documentación
- Elaboración de proyecto - Borrador 1 de Proyecto de - Profesor - Escala de valoración de
borrador 1 Investigación - Estudiante Proyectos de Investigación
- Elaboración de proyecto - Borrador 2 de Proyecto de (Autoevaluación)
b) Tareas no borrador 2 Investigación
presenciales - Elaboración de proyecto - Borrador 3 de Proyecto de
borrador 3 Investigación
- Elaboración de proyecto - Proyecto de Investigación -Profesor - Escalas de valoración de
definitivo -- Estudiantes Proyectos
(Autoevaluación /
Evaluación entre
iguales)
c) Tarea - Presentación oral del - Guión de Presentación -Profesor - Escala de valoración de la
presencial proyecto de investigación - Presentación en -- Estudiantes presentación oral de
PowerPoint (Autoevaluación / proyectos
Evaluación entre
iguales)
E ALfor Grupo de Investigación EVALfor

15. E ALfor Grupo de Investigación EVALfor

16. E ALfor Grupo de Investigación EVALfor

17. Lista de Control
E ALfor Grupo de Investigación EVALfor

18. Escala de Valoración
E ALfor Grupo de Investigación EVALfor

19. Diferencial Semántico
E ALfor Grupo de Investigación EVALfor

20. Rúbrica
E ALfor Grupo de Investigación EVALfor

21. Argumentario evaluativo
E ALfor Grupo de Investigación EVALfor

22. A (Excelente) B (Satisfactoria) C (Aceptable) D (Deficiente) E (Muy
Deficiente)
A B C D E
Escala:
Graduación empleada para REDACCIÓN
medir/valorar cada uno de las
Redactado de forma fácilmente comprensible
dimensiones y/o atributos.
Dimensiones: Adecuación ortográfica y gramatical
Los diferentes aspectos o facetas que
componen el objeto de evaluación.
Análisis e integración documental (discurso personal)
Subdimensiones: Coherencia de cuadros, tablas y figuras con sus contenidos
Los diferentes aspectos o facetas que
componen una dimensión.
Valoración global de la redacción
CONTENIDO
Atributos:
Título
Cada uno de los elementos o
ítems que globalmente Coherencia con objetivos y problema
constituyen una dimensión.
Introducción
Valoraciones: Cada una de las
puntuaciones o estimaciones Presentación clara y breve del proyecto
que se realizan sobre cada uno
de los atributos
Presentación adecuada de la estructura del proyecto
E ALfor Grupo de Investigación EVALfor

23. ESCALA
CRITERIOS/
ATRIBUTOS
DESCRIPTORES VALORES
E ALfor Grupo de Investigación EVALfor

24. ¿Y en la práctica? …
http://avanza.uca.es/moodle_evalfor
Usuario: mooteuXX
Contraseña: mooteuXX
E ALfor Grupo de Investigación EVALfor

25. Primera actividad:
Qué espero del curso
Trabajo Individual:
Cumplimentar “Expectativas del curso”
E ALfor Grupo de Investigación EVALfor

26. ¿Qué es EvalCOMIX?
Servicio web de autoría y despliegue de
instrumentos de evaluación de competencias
Permite el intercambio de información con otras
aplicaciones
Es un sistema independiente
Surge a partir de las limitaciones de los VLE
(Entorno de Aprendizaje Virtuales) en sistemas de
evaluación.
E ALfor Grupo de Investigación EVALfor

27. ¿Qué es EvalCOMIX?
Posee dos servicios principales:
• Creación de instrumentos
• Evaluación de actividades
E ALfor Grupo de Investigación EVALfor

28. ¿Qué es EvalCOMIX?
Instrumentos de Evaluación:
• Lista de Control
• Escala de Valoración
• Lista de Control + Escala de Valoración
• Rúbrica
• Diferencial Semántico
• Mixto
• Argumentario Evaluativo
• Importación / Exportación de instrumentos
E ALfor Grupo de Investigación EVALfor

29. ¿Qué es EvalCOMIX?
Una vez integrado en un VLE
como Moodle, permite la
evaluación de actividades
mediante los instrumentos
creados
E ALfor Grupo de Investigación EVALfor

30. ¿Qué es EvalCOMIX?
Modalidades de evaluación:
• Evaluación del Profesorado (EP)
• Autoevaluación del Estudiante (AE)
• Evaluación entre Iguales (EI)
E ALfor Grupo de Investigación EVALfor

31. ¿Cómo funciona
EvalCOMIX?
La información se intercambia mediante XML.
E ALfor Grupo de Investigación EVALfor

32. ¿Cómo funciona
EvalCOMIX?
Gráfico de conexión con Moodle
Posee una API (conjunto de métodos y procedimientos)
independiente del Sistema Operativo, lenguaje de programación y
plataforma para el intercambio de información.
E ALfor Grupo de Investigación EVALfor

33. ¿Cómo funciona
EvalCOMIX?
EvalCOMIX es integrable en cualquier VLE, pero
nuestro trabajo actual se centra en su
integración con distintas versiones de Moodle.
Se está estudiando una futura integración en
otros servicios como LAMS, Mediawiki, etc.
E ALfor Grupo de Investigación EVALfor

34. Versiones de
EvalCOMIX_MD
EvalCOMIX_MD 2.0
Integración de EvalCOMIX con Moodle 1.9
EvalCOMIX_MD 3.0
Integración de EvalCOMIX con Moodle 2.X
Gran reestructuración interna de Moodle 1.9 a 2.0,
por lo que la integración actual no sirve. Se
desarrolla una nueva integración
E ALfor Grupo de Investigación EVALfor

35. Antecedentes de
EvalCOMIX
Moodle se puede extender ampliando su código o
programando extensiones:
• Módulo
• Bloque
• Plugin
E ALfor Grupo de Investigación EVALfor

36. Nueva Integración
Nueva integración desarrollada como un bloque.
Alto grado de compatibilidad con futuras versiones de Moodle. No
se modifica código.
Fácil instalación: añadir directorio evalcomix al directorio blocks
Herencia y polimorfismo de clases de Moodle (clase grade_report)
Independencia del Sistema Gestor de Bases de Datos.
E ALfor Grupo de Investigación EVALfor

37. Nueva Integración
Nueva interfaz de acceso al bloque:
E ALfor Grupo de Investigación EVALfor

38. Nueva Integración
Gestión de instrumentos:
E ALfor Grupo de Investigación EVALfor

39. Nueva Integración
Acceso centralizado de todas las funcionalidades:
E ALfor Grupo de Investigación EVALfor

40. Mejoras de la 3.2
E ALfor Grupo de Investigación EVALfor

41. Mejoras de la 3.2
E ALfor Grupo de Investigación EVALfor

42. Actualidad en EvalCOMIX
Integrado en los campus virtuales de diversas universidades
Usado en diversos proyectos por más de 10 universidades,
tanto españolas como internacionales (Escocia, Australia,
etc.)
http://avanza.uca.es/reevalua/
http://evalcomix.uca.es
E ALfor Grupo de Investigación EVALfor

43. Trabajo futuro
Añadir el bloque al repositorio de Moodle
Evaluación de varios profesores
Añadir el proceso de apertura de datos que permitiría
manejar éstos desde Moodle y otros sistemas para incluir
gráficas, informes, etc.
E ALfor Grupo de Investigación EVALfor

44. Let us envisage new forms of e-assessment and
then build and evaluate them.
Imaginemos nuevas formas de e-evaluación y
después construyámoslas y evaluémoslas.
(Whitelock, 2009)
(JISC, 2010)
E ALfor Grupo de Investigación EVALfor

45. Referencias
Boud, D. (2000). Sustainable assessment: rethinking assessment for the Learning society.
Studies in Continuing Education, 22, (2), 151-167.
Bryan, C. & Clegg, K. (2006) Innovative Assessment in Higher Education. New York:
Routledge.
Ibarra Sáiz, M.S. y Rodríguez-Gómez, G. (2010). Aproximación al discurso dominante sobre
la evaluación del aprendizaje en la universidad. Revista de Educación, 351, 385-407.
Rodríguez Gómez, G. e Ibarra Sáiz, M.S. (Eds). (2011). e-Evaluación orientada al e-
Aprendizaje estratégico en la Educación Superior. Madrid: Narcea
Rodríguez Gómez, G.; Ibarra Sáiz, M.S. y Gómez Ruiz, M.A. (2011). e-Autoevaluación en la
universidad: un reto para profesores y estudiantes. Revista de Educación, (353), 401-430.
doi: 10-4438/1988-592X-RE-2010-356-045.
Rodríguez Gómez, G. Ibarra Sáiz, M.S. y Gómez Ruiz, M.A. (2012). La evaluación entre
iguales: beneficios y estrategias para su práctica en la universidad. Revista de Educación.
Avance de publicación online. doi: 10-4438/1988-592X-RE-2010-359-092.
E ALfor Grupo de Investigación EVALfor