De la evaluación de aula a la evaluación de sistema de ciudadanía, ¿Qué podemos evaluar de ciudadanía con una prueba de lápiz y papel?
María Teresa Estefanía Sánchez Unidad de Medición de la Calidad Educativa - UMC
¿Qué entendemos por evaluar?
La evaluación educativa es el acto de recoger información de manera sistemática a fin de emitir un juicio de valor que posibilite retroalimentar la práctica y la toma de decisiones en la actividad educativa. La evaluación educativa no solo recopila datos, sino que emite juicios en base a criterios, valores, normas sociales de los actores educativos.
Unidad deMedición de laCalidad Educativa
¿Qué es una evaluación de sistema? ¿Para qué sirve? La evaluación de sistema brinda información sobre los logros de los estudiantes a escala nacional, regional o internacional. Sirve para retroinformar a los distintos actores del sistema educativo. Permite mejorar el diseño de políticas educativas, revisar estándares de aprendizaje o evaluar el impacto de algunos programas.
Unidad deMedición de laCalidad Educativa
¿Qué es una evaluación de sistema? ¿Para qué sirve? La evaluación de sistema brinda información sobre los logros de los estudiantes a escala nacional, regional o internacional. Sirve para retroinformar a los distintos actores del sistema educativo. Permite mejorar el diseño de políticas educativas, revisar estándares de aprendizaje o evaluar el impacto de algunos programas.
Unidad deMedición de laCalidad Educativa
¿Para qué sirve una evaluación de sistema en la escuela?
DIRECTORES
DOCENTES
PADRES DE FAMILIA
• Analizar entre el currículo prescrito vs. currículo enseñado.
• Identificar dificultades en sus estudiantes.
• Monitorear la educación que reciben sus hijos.
• Diseñar remediales.
programas
• Comprender qué están aprendiendo sus hijos.
• Discutir sobre el enfoque pedagógico y las estrategia de enseñanza empleadas.
• Conocer que se espera que sus hijos logren.
• Mejorar la gestión pedagógica e institucional de la IE. • Identificar necesidades de capacitación docente.
Unidad deMedición de laCalidad Educativa
¿Para qué sirve una evaluación de sistema en la escuela?
DIRECTORES
DOCENTES
PADRES DE FAMILIA
• Analizar entre el currículo prescrito vs. currículo enseñado.
• Identificar dificultades en sus estudiantes.
• Monitorear la educación que reciben sus hijos.
• Diseñar remediales.
programas
• Comprender qué están aprendiendo sus hijos.
• Discutir sobre el enfoque pedagógico y las estrategia de enseñanza empleadas.
• Conocer que se espera que sus hijos logren.
• Mejorar la gestión pedagógica e institucional de la IE. • Identificar necesidades de capacitación docente.
Unidad deMedición de laCalidad Educativa
¿En qué se diferencian una evaluación de aula y una evaluación de sistema? Evaluación de Aula
Evaluación de Sistema
Objetivo: evaluar el progreso o logro académico de un grupo de estudiantes en concreto.
Objetivo: evaluar los progresos del logro académico del sistema educativo y retroalimentar las decisiones.
Tiene como ámbito el aula.
Es estandarizada a nivel nacional.
Puede ser aplicada usando diversas metodologías y recursos.
Prácticamente se restringe a evaluaciones de ‘lápiz y papel’.
La retroalimentación hacia los estudiantes es directa.
La retroalimentación hacia los estudiantes es indirecta, se hace vía instancias de gestión regional, local y escuelas.
Unidad deMedición de laCalidad Educativa
¿Cómo se articula la evaluación de sistema en el sistema educativo? Diseño Curricular Nacional / Marco Curricular
Evaluación de Sistema
Estándares de Aprendizaje
Estrategias Pedagógicas
Materiales educativos
Unidad deMedición de laCalidad Educativa
¿Qué es la Unidad de Medición de la Calidad Educativa (UMC)? La Unidad de Medición de la Calidad Educativa (UMC) es la instancia técnica del Ministerio de Educación, responsable de desarrollar el Sistema Nacional de Evaluación del rendimiento estudiantil. Brinda información relevante a las instancias de decisión de política educativa, a la comunidad educativa y a la sociedad en general sobre estos resultados.
Unidad deMedición de laCalidad Educativa
¿Qué evaluaciones desarrolla actualmente? Evaluaciones Nacionales: •Censales •Muestrales Evaluaciones Internacionales: PISA LLECE ICCS
Otro estudios Uso de reportes Factores Asociados Estudio longitudinal Estudio Cualitativo
¿Qué entendemos por ciudadanía? ¿Qué elementos tendría la ciudadanía?
Proceso por medio del cual la persona se constituye como sujeto de derechos y responsabilidades, y con sentido de pertenencia a una comunidad política . Un ciudadano está comprometido con una sociedad justa, de respeto y valoración de la diversidad, y capaz de establecer un diálogo intercultural desde el reconocimiento de las diferencias y del conflicto. UMC -MINEDU
Unidad deMedición de laCalidad Educativa
¿Qué buscamos evaluar a nivel de sistema en ciudadanía? • La ciudadanía no es únicamente un área curricular.
• La ciudadanía se desarrollo tanto en la familia, en el barrio como en la comunidad. • Con pruebas de lápiz y papel no se puede evaluar el ejercicio ciudadano.
Desde la UMC, buscamos evaluar los elementos de las competencias ciudadanas propuesta que sean posibles de medir con pruebas de lápiz y papel.
Unidad deMedición de laCalidad Educativa
¿Cuál es nuestro modelo de evaluación? Habilidades Cognitivas
“Deber ser”
Habilidades Afectivas / Comportamentales / Dilemas
Componente Cualitativo
Factores Asociados
Unidad deMedición de laCalidad Educativa
¿Qué pasos hemos seguido para construir nuestra prueba de habilidades cognitivas? Revisión bibliográfica Elaboración de definiciones operacionales Construcción de taxonomía de procesos cognitivos Elaboración de indicadores Diseño de tabla de especificaciones
Elaboración de ítemes
¿Es necesario evaluar en ciudadanía?
En la definición que hemos elaborado de ciudadanía ¿Qué competencias o habilidades están involucradas?
Unidad deMedición de laCalidad Educativa
Competencias Ciudadanas Convivencia Democrática Competencias en el marco de: La Declaración de los Derechos Humanos La Constitución Política del Perú
Deliberación sobre asuntos públicos
Participación Democrática
Unidad deMedición de laCalidad Educativa
¿Cuáles son las competencias a evaluar? Convivencia Democrática
Competencias propuestas en: Rutas de Aprendizaje Mapas de Progreso. Marco Curricular
Competencia propuesta por la UMC
Comprensión de Principios Democráticos y Sistemas Cívicos
Deliberación sobre asuntos públicos
Participación Democrática
¿Cómo elaboramos los indicadores de logros de aprendizaje?
(Proceso Cognitivo + Contenido) Contexto
¿Cómo elaboramos los indicadores?
Unidad deMedición de laCalidad Educativa
¿Qué elementos presentan nuestros ítemes? PROCESOS • Convivencia democrática
• Participación democrática
CONTENIDOS
CONTEXTO
• Sistema democrático
• Escolar
• Estructura política del Estado Peruano
• Familiar • Local / Nacional
• Deliberación sobre asuntos públicos
• Doctrina de los Derechos Humanos y Cultura de Paz
• Comprensión de principios democráticos y sistemas cívicos
• Interculturalidad y legitimidad de las diferencias • Medio ambiente
Unidad deMedición de laCalidad Educativa
Procesos Cognitivos Evaluados Describir: Explicar las características clave de los conceptos y de los contenidos cívicos y ciudadanos. Ilustrar con ejemplos: Aportar referencias que apoyen o aclaren determinadas afirmaciones sobre conceptos cívicos y ciudadanos. Reconocer: Distinguir o identificar por los rasgos o características un concepto, discurso o principio vinculado a temas cívicos y ciudadanos. Los ítems que evalúan este proceso deben apuntar a la identificación de elementos o características que permitan una mejor comprensión de la situación planteada. Justificar: Utilizar la evidencia y los conceptos cívicos y ciudadanos para construir o reconocer un argumento razonado con el fin de apoyar o sustentar una determina posición, principio, actitud o la importancia de alguna institución o concepto. Resolver Problemas: Encontrar vías de acción o de pensamiento que puedan servir para paliar problemas cívicos
Unidad deMedición de laCalidad Educativa
Generalizar: Identificar principios conceptuales cívicos y ciudadanos manifestados como ejemplos específicos, y explicar cómo pueden aplicarse en otros contextos cívicos y ciudadanos (es decir, en otros casos o ejemplos específicos). El enunciado del ítem debe presentar un caso o ejemplo dentro de un contexto determinado en donde se manifieste el cumplimiento o incumplimiento de un principio, valor o concepto democrático; mientras que la pregunta debe pedir que se identifique (en el caso de un ítem cerrado) o que se elabore (en el caso de un ítem abierto) un ejemplo análogo al propuesto, es decir, un ejemplo donde se cumpla o se incumpla el mismo principio; las alternativas (ítem cerrado) deben ser todas ejemplos propuestos, donde solo una de ellas permita la analogía correcta.
Evaluar: Emitir un juicio sobre el valor, la importancia o las ventajas y desventaja de una opinión, decisión, hecho, proceso, institución, etc., para la vida democrática y ciudadana. El ítem debe plantear una situación frente a la cual el estudiante tenga que tomar una postura. Dicha postura debe explicitar su valoración sobre algún hecho, decisión, principio, institución, etc. Por supuesto, el sentido del ítem es el de evaluar la adecuación del juicio del estudiante con principios y criterios democráticos. Marco de Evalución EM 2013
¿Habrían diferencias entre un indicador de una evaluación de sistema y una evaluación de aula ?
Unidad deMedición de laCalidad Educativa
Ejemplos de Indicadores Comprende Principios - Reconoce las diferencia entre un gobierno autoritario y uno democrático. Convivencia Democrática - Resuelve problemas relacionados a casos de discriminación. Participación Ciudadana - Reconoce la importancia de la organización estudiantil dentro de la escuela. Deliberación sobre asuntos públicos - Ilustra con ejemplos la toma de posición informada.
A partir de nuestra definición y de nuestras competencias elaboremos indicadores
¿Cómo se elaboran los ítems? ¿Qué elementos debemos tener presentes?
Unidad deMedición de laCalidad Educativa
Pautas Generales para la elaboración de ítems Deben ser claros y breves. • Usar un vocabulario simple. • Evitar complejidades innecesarias. • Disminuir al mínimo necesario la extensión del texto. • Usar adecuadamente la gramática y la puntuación. Deben corresponder a la tabla de especificaciones Evitar sesgos y estereotipos Evitar abordar temas sensibles Evitar ítems con respuestas socialmente aceptadas Evitar ítems con alta subjetividad
Unidad deMedición de laCalidad Educativa
Tipos de ítems: ítems de opción múltiple
Usar una pregunta o una oración incompleta. No usar el formato de completar una oración. Las instrucciones deben estar muy claras. Incluir la idea principal en el enunciado y no en las alternativas. Redactar el enunciado de manera positiva. Una de las alternativas debe ser la correcta. Mantener las alternativas con contenido homogéneo. Alternativas con longitud similar. Evitar utilizar: "todas las anteriores", "ninguna de las anteriores". Parafrasear las alternativas de manera positiva, evitar el uso del "NO". Evitar dar claves para adivinar la respuesta. Deben ser alternativas plausibles. Usar errores típicos de los estudiantes para los distractores.
Unidad deMedición de laCalidad Educativa
Tipos de ítems: respuesta construida/abiertos Se establecen los criterios de corrección por créditos - Crédito completo - Crédito parcial - Sin crédito
¿Es importante/necesario evaluar en ciudadanía?
Unidad deMedición de laCalidad Educativa
Oportunidades al evaluar en ciudadanía Reforzar el mensaje de que la ciudadanía es un aprendizaje fundamental (solo se evalúa lo importante). Entregar información que permita retroinformar a los distintos actores educativos.
Brindar información sobre si estamos logrando las competencias propuestas por el Ministerio de Educación. Al estar informados, se pueden hacer los ajustes necesarios para lograr mejores aprendizajes en los estudiantes.
¿Por qué sí debemos evaluar en ciudadanía?
Unidad deMedición de laCalidad Educativa
Contribuye a comprender qué tan preparados están los jóvenes para vivir en democracia y cuál es su disposición para respetar los derechos humanos. Permite ampliar la perspectiva de qué se puede conceptualizar y medir más allá de lo cognitivo. Permite medir competencias valoradas en el mundo del trabajo. Tiene el potencial de cubrir distintas necesidades de evaluación. Permite la innovación metodológica.
[email protected] [email protected]