Este documento presenta información sobre la elaboración de pruebas de evaluación de acuerdo con los indicadores de medición de la prueba de comprensión lectora para estudiantes de segundo grado de primaria en Perú. Explica conceptos clave como objetivo de evaluación, propósito y tipos de instrumentos, e identifica las capacidades lectoras y los indicadores que son evaluados en la prueba censal de estudiantes.
ELABORACIÓN DE PRUEBAS SEGÚN INDICADORES DE MEDICIÓN DE LA PRUEBA DE COMPRENSIÓN LECTORA ECE
1. Primaria 2015
ELABORACIÓN DE PRUEBAS
SEGÚN INDICADORES DE MEDICIÓN
DE LA PRUEBA DE COMPRENSIÓN
LECTORA - ECE
Capacitadora:
Rosa Amalia Salcedo Lobatón
Rosa Rodríguez Cháves
COLECCIÓN 2015
Ingresa a:
WWW.COREFO.COM
2. CAPACITACIÓN DE VERANO 2015
LIMA
2
Contactos Corefo:
1. Prof. Jacobo Miranda C.
Subgerente de Capacitaciones y Proyectos especiales
Correo electrónico: jmiranda@corefo.com
Cel: 946043976
2. Prof. José G. Landeo P.
Supervisor de Capacitaciones
Correo electrónico: jlandeo@corefo.com
Cel.: 961593980
3. Prof. Willy Silva A.
Coordinador de Capacitaciones y Soporte técnico
Correo electrónico: wsilva@corefo.com
Cel.: 943216042
3. CAPACITACIÓN DE VERANO 2015
LIMA
3
ELABORACIÓN DE PRUEBAS SEGÚN INDICADORES DE MEDICIÓN DE LA PRUEBA DE
COMPRENSIÓN LECTORA- ECE
“La evaluación no sólo evalúa los resultados, sino que condiciona lo
que se enseña, y cómo, y muy especialmente lo que aprenden los
estudiantes y cómo”.
Neus San Martí
¿Estás de acuerdo con lo expresado en la frase anterior?
¿Por qué se señala en esta que la evaluación condiciona lo que se enseña, y cómo se enseña?
¿A que hace referencia la frase cuando señala que la evaluación condiciona lo que los estudiantes aprenden y
cómo lo hacen?
1. LA EVALUACIÓN
1.1. Definición
Independientemente del campo en el que se aplique, el término evaluación se vincula estrechamente
con el hecho de juzgar o determinar el valor de algo o de alguien: características de las personas,
procesos, cosas, fenómenos, sistemas, ideas, situaciones etc.
Cotidianamente evaluamos una situación social o política, un programa de televisión, las
características de dos productos antes de decidir cuál de ellos comprar. Estas son evaluaciones
informales, generalmente basadas en perspectivas parciales de la realidad, en sentimientos,
intereses o gustos personales muy diferente a la evaluación formal, la cual implica formular juicios de
valor de manera consciente, siguiendo un procedimiento formal y a la luz de criterios válidos y
definidos.
Llevada al contexto educativo, el término “evaluación” es definido como:
▪ “Un enjuiciamiento sistemático sobre el valor o mérito de un objeto, para tomar decisiones de
mejora”. 1
▪ “Una actividad o proceso sistemático de identificación, recogida o tratamiento de datos sobre
elementos o hechos educativos, con el objetivo de valorarlos primero y, sobre dicha
valoración, tomar decisiones”.2
▪ “Proceso sistemático, diseñado intencional y técnicamente, de recogida de información, que
ha de ser valorada mediante la aplicación de criterios y referencias como base para la
posterior toma de decisiones de mejora, tanto del personal como del propio programa”.3
▪ "Un proceso sistemático continuo e integral destinado a determinar hasta qué punto fueron
logrados los objetivos educacionales previamente determinados".4
La evaluación educativa, por lo tanto, se caracteriza por:
▪ Ser un proceso, que implica varios pasos o fases, planificación, recojo de información, el
tratamiento de la misma , y la valoración de la información obtenida en función de criterios y
referencias
1
Joint Committee- Desde los test hasta la evaluación educativa actual- 1988
2
Juan Manuel García Ramos, Investigación y Evaluación y Efectos 1989
3
Ramón Pérez Juste. Evaluación de Programas Educativos 2006
4
Manuel Fermín Sanchez. -Evaluación Formativa
4. CAPACITACIÓN DE VERANO 2015
LIMA
4
▪ Ser un proceso sistemático, es decir que responde a normas y procedimientos es
minuciosamente planificados y desarrollados, a una finalidad y objetos de evaluación
claramente definidos.
▪ Ser criterial, es decir que se orienta por referentes o criterios establecidos previamente.
En el caso de la evaluación de los aprendizajes esta puede definirse como “un proceso sistemático y
continuo mediante el cual se determina el grado en que se están logrando los objetivos de
aprendizaje”. El objetivo de la evaluación del aprendizaje, es valorar el aprendizaje en su proceso y
resultados.
1.2. Fases del proceso de evaluación
En la sección anterior se señaló que la evaluación es un proceso que comprende varias fases o
etapas. Dichas etapas son: La Planificación o diseño de la evaluación, el Recojo y Selección de la
información, la Interpretación y valoración de la información.
Teniendo en cuenta su finalidad, en el presente documento abordaremos únicamente la primera de
estas etapas. La etapa de Planificación o Diseño de la Evaluación.
Planificación o Diseño de la Evaluación
La Planificación implica esencialmente dar respuesta al ¿para qué?, ¿qué? y ¿cómo se evaluará?
Así, en esta etapa se definen los siguientes componentes del proceso de evaluación:
el objeto de evaluación,
el propósito de la evaluación,
y los instrumentos mediante los cuales se obtendrá la información.
Planificación Recojo y
selección de
información
Interpretación y
valoración de la
información
FASES DEL PROCESO DE EVALUACIÓN
5. CAPACITACIÓN DE VERANO 2015
LIMA
5
Definición del objeto de evaluación
Definir el objeto que se evaluará es la primera decisión importante que se debe tomar al planificar
una evaluación.
En el caso de la evaluación de los aprendizajes es en este momento que debe definirse el área
curricular, el dominio y la capacidad y/o capacidades de dicho dominio que se evaluarán. Sin
embargo, una capacidad puede ser bastante imprecisa para definir cuál es nuestro objeto de
evaluación.
Por ejemplo:
En el área de Comunicación Integral, en el dominio de Expresión Oral, definir que la capacidad
que se va a evaluar es “Expresa ideas, emociones y experiencias con claridad, empleando las
convenciones del lenguaje oral en cada contexto”, no permite tener suficiente claridad
respecto a si las actividades de evaluación deben recoger información referida a: El uso
adecuado de conectores, al ordenamiento lógico de las ideas que expresa el niño o referidas al
uso de vocabulario apropiado.
Al definir nuestro objeto de evaluación es necesario precisar no sólo el área curricular, el dominio
y la capacidad en la que centraremos nuestra atención, sino también y fundamentalmente los
indicadores de logro que serán evaluados en el marco de la capacidad seleccionada.
Definición del propósito de la evaluación
Definir el propósito de una evaluación implica responder a la pregunta ¿para qué voy a evaluar?
Cómo se señaló anteriormente, el o los objetos de la Evaluación Educativa pueden ser muy
diversos. Y en el caso de un determinado objeto de evaluación como pueden ser los docentes ,
los propósitos o finalidades pueden muy diversos.
Así, las evaluaciones que tienen como objeto “el desempeño docente” tienen como finalidad:
Orientar al docente para realizar mejor su trabajo;
asignar al docente una calificación, con el fin de promover o no su ascenso.
En otros casos los docentes también son evaluados para acceder a una plaza.
Al igual que con el objeto de evaluación “desempeño docente”, las evaluaciones que tienen por
objeto los “aprendizajes de los estudiantes” pueden tener diversas finalidades, por ejemplo:
Conocer qué han aprendido y cuáles son sus dificultades, de modo de ayudarlos en su
proceso de aprendizaje
Determinar si son promovidos de grado o curso. Esta decisión puede derivarse tanto
de la acumulación de información sobre lo que el alumno aprendió a lo largo del año,
como de una prueba o examen final.
6. CAPACITACIÓN DE VERANO 2015
LIMA
6
En muchos países los estudiantes también deben presentarse a evaluaciones con el fin
de acceder a otro nivel del sistema educativo.
En los últimos años en muchos países se aplican pruebas de logro educativo a los alumnos con
la finalidad de conocer en qué medida están siendo logrados los conocimientos y competencias
que se espera que los estudiantes hayan adquirido cuando finalizan un ciclo o nivel del sistema
educativo.
La finalidad de cualquier proceso de evaluación debe ser, comprender mejor la realidad con la
que se está trabajando y contribuir a mejorarla, como las evaluaciones de los alumnos realizadas
por su profesor con el fin de comprender el proceso de aprendizaje y apoyar a cada alumno en
función de sus dificultades, y las evaluaciones nacionales e internacionales de logros educativos
cuyo propósito es contribuir a identificar las principales debilidades de los sistemas educativos y
orientar la reflexión y formulación de las políticas educativas.
Es necesario destacar que la definición de los propósitos es de importancia decisiva para el
resto del diseño de una evaluación.
Por ejemplo:
“Si el propósito de una evaluación es calificar a los docentes, y esta calificación tendrá
consecuencias para sus carreras funcionales, se requiere una gran confiabilidad y
precisión en los puntajes que se les asignen, porque diferencias de puntajes muy
pequeñas entre los individuos pueden determinar que unos accedan a un cargo y otros
no.
En cambio, si la evaluación tiene como finalidad principal orientar a los docentes para
mejorar su trabajo como forma de desarrollo profesional, la asignación de puntajes
precisos pasa a tener importancia secundaria, dado que no está en juego la carrera de
los individuos”5
.
La selección y definición de instrumentos
Una práctica bastante generalizada cuando se habla de una “evaluación” es que la primera tarea
que se emprende es la elaboración de los instrumentos. Sin embargo cómo se puede concluir de
lo expuesto en la sección anterior, los instrumentos se diseñan sólo después de haber definido el
objeto y la finalidad de la evaluación.
Los instrumentos de evaluación, son todos aquellos dispositivos diseñados para el recojo
sistemático de la información relevante.
5
PREAL- Para comprender las Evaluaciones Educativas- Ficha N 2
7. CAPACITACIÓN DE VERANO 2015
LIMA
7
Los instrumentos que se utilizan para la recolección de información en las evaluaciones educativas
pueden ser muy diversos. No obstante cabe señalar que una dificultad que presentan muchos de los
instrumentos diseñados por los docentes para evaluar los aprendizajes de sus estudiantes, es la falta
de coherencia entre los referentes o indicadores de evaluación y las actividades o ítems propuestos
para evaluarlos, lo que afecta la validez de la información obtenida .
Por ejemplo:
Un error bastante generalizado es el uso de ítems de tipo opción múltiple para evaluar
indicadores como “Opina sobre las acciones de los personajes y los hechos en textos de
estructura simple, con o sin imágenes”6
, dándole al estudiante respuestas de opinión ya
construidas para evaluar un indicador que busca que el estudiante dé su propia opinión
crítica y libre frente a una situación, o la acción de un personaje.
2. LA EVALUACIÓN CENSAL DE ESTUDIANTES - ECE
La Evaluación Censal de Estudiantes (ECE) consiste en la aplicación de pruebas estandarizadas a
todos los estudiantes de segundo grado de primaria del Perú, para medir cuánto han aprendido en
Matemática y en Comprensión lectora. Desde el año 2007, el Ministerio de Educación realiza esta
evaluación al final de cada año.
El propósito de la ECE es mejorar los aprendizajes de los estudiantes de 5 a 7 años.
Los resultados de esta evaluación deben ser monitoreados anualmente por el Ministerio de
Educación para poder evaluar la eficacia de las intervenciones que se están realizando.
Los resultados de la ECE son devueltos a todos los actores involucrados en la tarea educativa con la
finalidad que estos puedan tomar decisiones de mejora desde el nivel de responsabilidad que les
corresponde
2.1. Qué evalúa la ECE
El objeto de evaluación de la ECE son los aprendizajes de los niños de 5 a 7 años referidos a la
comprensión lectora, a la apropiación de la noción de número y sus operaciones, y a su habilidad
para resolver problemas en este campo.
En relación al área de Comunicación y específicamente al dominio de Comprensión lectora, la ECE
evalúa las capacidades de los estudiantes consideradas más relevantes. La selección de dichas
capacidades se realiza a partir de lo que se propone en el Diseño Curricular Nacional7
6
Indicador para primer grado, área Comunicación, dominio: Comprensión de textos escritos, capacidad: 6. Reflexiona
sobre laforma, contenido y contexto del texto.- Rutas del Aprendizaje- MINEDU 2014
7
El documento revisado Marco de Trabajo de la ECE ha estado vigente para la prueba 2014. En este se establece que las capacidades
evaluadas en esta prueba son extraídas del DCN.
8. CAPACITACIÓN DE VERANO 2015
LIMA
8
CAPACIDADES LECTORAS INDICADORES DE LOGRO
LEE ORACIONES Establece correspondencia entre una
oración y un dibujo.
LOCALIZA INFORMACIÓN LITERAL Identifica datos explícitos.
Reconoce sucesiones de hechos o
acciones.
INFIERE INFORMACIÓN Deduce relaciones de causa-efecto.
Deduce el significado de palabras o
expresiones a partir del contexto.
Deduce el tema central del texto.
Deduce la idea principal de un párrafo del
texto.
Deduce las cualidades o defectos de los
personajes de una narración.
Deduce la enseñanza del texto.
Deduce el propósito del texto.
Fuente: Marco de Trabajo-Evaluación Censal de Estudiantes-UMC-MINEDU
Estas capacidades son evaluadas a través de los siguientes tipos de textos: A continuación
se describe cada uno de los indicadores de logro que evalúa la ECE.
INDICADOR DESCRIPCIÓN
Establece correspondencia
entre una oración y un
dibujo.
Consiste en leer una oración, interpretarla y asociarla con su
dibujo.
Identifica datos explícitos. Consiste en identificar información que está presente de
manera explícita en los textos.
Reconoce sucesiones de
hechos o acciones.
El estudiante identifica la secuencia en que ocurren los
hechos o acciones explícitas del texto, en el caso de los
textos narrativos, y secuencias de procedimientos, en el caso
de textos instructivos.
Deduce relaciones de
causa-efecto
Consiste en deducir una relación causal entre dos
afirmaciones explícitas del texto, descubriendo que una de
ellas es causa o consecuencia de la otra.
Deduce el significado de
palabras o expresiones a
partir del contexto
Consiste en descubrir, a partir de la información del texto, el
significado de palabras o expresiones cuyo significado no es
accesible a priori al lector.
9. CAPACITACIÓN DE VERANO 2015
LIMA
9
Deduce el tema central del
texto.
Consiste en inferir la información más importante y que
sintetiza el contenido de todo el texto
Deduce la idea principal de
un párrafo del texto.
Consiste en jerarquizar la información que se presenta en
alguno de los párrafos de un texto y, a partir de ahí, inferir
cuál es la idea más importante y que engloba a las demás.
Deduce las cualidades o
defectos de los personajes
de una narración.
Consiste en deducir algunas características principales de los
personajes de una narración a partir de las pistas que el texto
ofrece (acciones, diálogos, comentarios, etc.).
Deduce la enseñanza del
texto.
Consiste en inferir el mensaje o la lección que busca
transmitir el texto leído.
Deduce el propósito del
texto.
Consiste en inferir el propósito para el que fue escrito el texto
(contar, describir, opinar, informar, etc.).
3. CÓMO ELABORAR PRUEBAS SEGÚN INDICADORES DE LA ECE
De acuerdo con lo ya expuesto los instrumentos de evaluación deben diseñarse después de haber
definido con precisión el para qué y el qué se va a evaluar, es decir después de definir la finalidad, el
objeto, las capacidades e indicadores a ser evaluados. Las pruebas escitas constituyen uno de los
diversos instrumentos mediante los cuales las evaluaciones de los aprendizajes recogen información
relevante en relación a estos.
La elaboración de una prueba implica una serie de pasos, cuyo objetivo fundamental es garantizar la
validez y confiabilidad de la misma, dichos pasos son:
Selección de propósito y contenidos didácticos.
Definición de los resultados de aprendizaje a evaluar
Elaboración de la tabla de especificaciones.
Construcción de la prueba de evaluación.
Para los fines del presente documento nos centraremos en desarrollar el tercer paso del proceso de
elaboración de la una prueba: Elaboración de la tabla de Especificaciones.
3.1 Elaboración de la Tabla de Especificaciones
Una tabla de especificaciones es una herramienta que permite planificar los instrumentos
convenientes, brindando la posibilidad de comprobar su grado de validez, es decir, si realmente se
ajustan a los propósitos y contenidos de aprendizaje.
La tabla de especificaciones puede utilizarse en evaluaciones diagnósticas, formativas y sumativas;
centrarse en contenidos de orden declarativo, procedimental y actitudinal; abarcar distintos niveles
cognitivos (conocimiento, comprensión, aplicación, etc.), así como instrumentos tan diversos como las
pruebas objetivas, las preguntas abiertas de respuesta corta y de ensayo.
Las tablas de especificaciones pueden variar en cuanto a sus elementos. En el presente documento
presentamos un modelo básico que comprende:
10. CAPACITACIÓN DE VERANO 2015
LIMA
10
Las capacidades a evaluar.
Los indicadores de evaluación.
La descripción de cada uno de los indicadores, es decir la explicación del sentido cada
indicador.
El tipo de ítem mediante el cual se recogerá la información referida a cada indicador.
El detalle, que es la formulación detallada del ítem.
Número y puntaje de cada ítem.
11. CAPACITACIÓN DE VERANO 2015
LIMA
11
Modelo de tabla de especificaciones
Capacidad Indicador Descripción Contenido Items Puntaje
Tipo Detalle N°
Localiza
informaci
ón literal
Identifica
datos
explícitos.
Consiste en
identificar
información
que está
presente de
manera
explícita en
los textos.
Texto
descriptivo
Selección
única
Según el texto ¿dónde
crece el eucalipto?
a) sólo en climas secos.
b)en todo el mundo
c) sólo en climas fríos.
1 2
12. CAPACITACIÓN DE VERANO 2015
LIMA
12
▪ Capacidades e indicadores de evaluación
Los aprendizajes esperados están dados por las capacidades e indicadores de
aprendizaje en el DCN, o fascículos de las Rutas del Aprendizaje, para cada grado y/o
ciclo.
A partir de los indicadores de aprendizaje se formulan los indicadores de evaluación. Los
indicadores de evaluación de los aprendizajes son evidencias, señales, signos
observables, que permiten determinar si el estudiante está logrando los aprendizajes.
Ejemplo
Capacidad Indicador Indicador de evaluación
Identifica información en
diversos tipos de textos
según el propósito.
Localiza información ubicada
entre los párrafos de
diversos tipos de textos de
estructura simple, con
imágenes y sin ellas.
Identifica el espacio
geográfico en el que se
desarrollan los hechos de un
texto narrativo sin imágenes
Los indicadores de evaluación deben contar con una acción, un contenido sobre el cual se
desarrolla la acción y una condición o producto.
Ejemplo:
▪ Tipos de Items
Un ítem es una pregunta que en conjunto con otras conforman una prueba. En las
pruebas escritas se utilizan dos clases de ítems: objetivos y de desarrollo.
Los ítems objetivos pueden ser a su vez de diferente tipo:
Tipo Descripción
Selección única Consta de un enunciado que hace referencia a una
situación y varias opciones de respuesta entre las cuales
sólo una es correcta.
Respuesta corta o
completamiento
Estos items brindan información a partir de la cual el
estudiante responde en forma breve lo solicitado, en los
espacios en blanco.
Correspondencia o
apareamiento
Se presentan dos columnas paralelas de enunciados y
respuestas cuyo contenido se relaciona entre sí.
Identificación Se presenta al estudiante diagramas, croquis, diagramas
Identifica el espacio geográfico en el que se desarrollan los hechos de un texto
Acción contenido
narrativo sin imágenes
condición
13. CAPACITACIÓN DE VERANO 2015
LIMA
13
para que los estudiantes identifiquen las partes de
acuerdo a lo solicitado.
Verdadero-falso Se presenta a base de una serie de cuestiones
afirmativas en donde unas son falsas y otras verdaderas.
Ejemplos
▪ Item de Selección Única:
¿Qué quiere decir “Creo que te han estafado”?
- Creo que te han pagado.
- Creo que te han engañado.
- Creo que te han molestado.
▪ Item de apareamiento
Lee cuidadosamente las proposiciones siguientes y luego coloco en el paréntesis respectivo la
letra de la columna derecha que concuerde con la posición de la izquierda.
( ) es un rumiante a- el burro
( ) es un roedor b- el gato
( ) es un acuático c- el león
( ) es feroz d- el pez
( ) es un animal de carga e- el ratón
f- la vaca
g- el perro
▪ Item de completamiento
Completa los espacios en blanco con la información del texto:
El ratón de campo ……………………………asustado al oir los pasos del cocinero.
A su vez los ítems “de desarrollo” pueden ser también de diversos tipos:
Tipo Ejemplo
Respuesta restringida Es un tipo de ítem de de desarrollo en el cual se
indica claramente al estudiante la respuesta esperada.
Respuesta abierta El estudiante debe organizar, sintetizar y expresar sus
pensamientos a partir de un tema o una pregunta
▪ Determinación de puntajes para cada indicador
Este proceso consiste en calcular cuánto puntaje tendrá cada indicador en función
de la significatividad del aprendizaje para el logro de la capacidad
14. BIBLIOGRAFÍA
Ministerio de Educación (2006) Evaluación Censal de Estudiantes-Marco de Trabajo.
PREAL-Para comprender las evaluaciones educativas-Fichas 1,2, 3, 4, 5, 6, y 7.
Ministerio de Educación (2014). Rutas del aprendizaje “Comprensión de Textos iii
Ciclo”. Lima.
MINEDU-Cómo mejorar la Comprensión Lectora de nuestros estudiantes- Informe
para el docente. ECE 2013
Ministerio de Eduacación Pública. Guatemala- La Prueba Escrita 208.
Danilo Quiñones Reyna- Universidad Pedagógica “Pepito Tey- Cuba”- Evaluar para
que aprendn más.
Nydia Elola, Lilia Toranzos -Evaluación Educativa Una Aproximación Conceptual-
Buenos Aires 2008.
Juan Manuel García Ramos, Investigación y Evaluación -1989
Ramón Pérez Juste. Evaluación de Programas Educativos 2006