MINISTERIO DE EDUCACIÓN, CULTURA Y DEPORTE

MODULO I. EL PROYECTO DE DIRECCIÓN UNIDAD 4. Seguimiento y evaluación del proyecto de dirección. Indicadores de logro

PROTOCOLO PARA EL TRABAJO DE LA UNIDAD El desarrollo de esta unidad se ha realizado con un doble objeto. Considerar la evaluación inicial, continua y final proyecto de dirección, vinculada a la del desempeño directivo, es uno de ellos. Y, a la vez, como intención destacada se adopta la de facilitar informaciones, orientaciones y supuestos prácticos que permitan comprender adecuadamente la naturaleza de los indicadores de logro y su consideración en el proyecto de dirección como referencias principales para la evaluación del mismo. Ambos propósitos toman como perspectiva el mejor ajuste, la más adecuada elaboración del proyecto, a fin de posibilitar tanto el acceso a la función directiva como la evaluación de esta –por distintas instancias y agentes, además de la propia autoevaluación- basada en el proyecto con sus consiguientes efectos: es el caso, entre otros, de la renovación del mandato. De ahí que se sitúe la relevancia del proyecto de dirección como mérito para el acceso a la función directiva, a modo de evaluación inicial del proyecto; la utilidad del seguimiento del proyecto para la evaluación continua del desempeño; y el alcance de la evaluación final, con la información sobre los logros de los objetivos del proyecto. Por ello se describen los indicadores de logro y el modo de estimarlos en el plan de actuación del proyecto de dirección, así como las características, tipos y formulación de los mismos; junto a la evaluación del proyecto de dirección bajo distintos procesos y a través de distintos agentes. Contenidos con los que podrá completarse la elaboración consistente de un proyecto de dirección personal. Competencias generales y específicas que se pretenden desarrollar en esta unidad La unidad contribuye a la adquisición de la siguiente competencia general: •

Habilidades de dirección estratégica: planificación, implementación y evaluación de planes y proyectos

Por su parte, las competencias específicas cuya adquisición facilita esta unidad son estas: -

Habilidades para el manejo de indicadores de logro Actitud de rendición personal de cuentas.

1

Resultados esperados •

La percepción del seguimiento y de la evaluación continua del proyecto de dirección y de su vinculación con la propia evaluación del desempeño directivo.

•

Las habilidades y destrezas para formular indicadores de logro, en el plan de actuación del proyecto, que permitan, de manera satisfactoria, el seguimiento y la evaluación del mismo.

•

La capacidad de ofrecer informaciones relevantes, a partir de los indicadores de logro considerados en el proyecto de dirección, que faciliten la autoevaluación del mismo así como la rendición de cuentas ante distintas instancias o agentes.

Contenidos Esta unidad considera seis apartados o segmentos: 1. La evaluación del proyecto de dirección en el acceso a la función directiva 2. La evaluación del proyecto de dirección como recurso para la evaluación del desempeño directivo y sus efectos 3. Los indicadores en el proyecto de dirección 4. Tipos de indicadores, tendencia y relevancia de los mismos en el periodo de desempeño del director basado en el proyecto de dirección 5. Seguimiento y evaluación interna y externa del proyecto de dirección Actividades La unidad considera dos actividades, vinculadas a la elaboración práctica de los apartados del proyecto de dirección personal, tal como se han planteado en las unidades 2 y 3 de este módulo: a) Incorporación de indicadores de logro a las actuaciones consideradas para cada uno de los objetivos en el plan de actuación del proyecto de dirección, como continuación de la actividad iniciada en la unidad anterior, de elaboración del plan. b) Diseño de un plan de seguimiento y evaluación del proyecto de dirección en el que se consideren distintas fases y aspectos de las mismas. Evaluación Con carácter general, la evaluación considera tres criterios, aplicados a las actividades, para valorar el logro de los resultados esperados y la adquisición de las competencias a cuya adquisición contribuye la unidad:

2

•

Los fundamentos de las actividades planteadas en la sistematización del conocimiento adquirido con el desarrollo de la unidad. En este caso, para la consideración de los indicadores de logro en el proyecto de dirección, la definición del proceso de seguimiento y evaluación del proyecto, y el informe final de resultados.

•

La coherencia entre los distintos apartados del proyecto que se estiman en las actividades, derivada de la reflexión en el diseño del mismo. En este sentido, se estima especialmente el proceso compartido de evaluación del proyecto y su constancia en el informe de resultados.

•

La transferencia verificada en la adecuada realización de las actividades, como resultado de la habilidad general de planificación y evaluación de proyectos, de las habilidades específicas para el manejo de indicadores de logro y de la actitud de rendición personal de cuentas.

3

UNIDAD 4 Seguimiento y evaluación del proyecto de dirección. Indicadores de logro Segmento 1 La evaluación del proyecto de dirección en el acceso a la función directiva Bien sabido es que la presentación de un proyecto de dirección constituye un requisito para participar en el concurso de méritos mediante el que se realiza la selección del director o directora del centro, además de mérito relevante en los baremos de las convocatorias. Estimada, entonces, la naturaleza del proyecto de dirección como requisito y mérito para el acceso al ejercicio directivo, el resultado de su evaluación por las comisiones de selección determina de manera clara dicho acceso. Así se constata tras el análisis de las convocatorias realizadas por las distintas Administraciones educativas, en las que la puntuación máxima del proyecto de dirección alcanza, en muchos casos, entre el 40 y 50% de la puntuación total de los baremos. Tal como puede apreciarse en el gráfico siguiente, que considera dos convocatorias singulares: la primera (curso 2003-2004) tras la promulgación de la LOCE (2002) y la primera (curso 2006-2007) una vez publicada la LOE (2006); que podrán compararse, asimismo, con las que se promulguen como desarrollo de la LOMCE (2013). Relevancia de la evaluación del proyecto de dirección en las convocatorias de acceso a la dirección de los centros. Puntuación máxima del proyecto de dirección con respecto a la puntuación total de los baremos 100 90 80 70 60 50 40 30 20 10 0

AND ARA AST CAN CAT CLM CMA CVA CYL CYM EXT

GAL

IBA

ICA

MUR NAV

RIO

2003-2004

39

35

40

40

30

25

40

50

50

26

44

40

38

50

40

50

33

2006-2007

50

35

40

40

70

40

40

50

40

30

44

44

43

56

42

50

33

AND (Andalucía), ARA (Aragón), AST (Asturias), CAN (Cantabria), CAT (Cataluña), CLM (Castilla-La Mancha), CMA (Comunidad de Madrid), CVA (Comunidad de Valencia), CYL (Castilla y León), CYM (Ceuta y Melilla), EXT (Extramadura), GAL (Galicia), IBA (Islas Baleares), ICA (Islas Canarias), MUR (Murcia), NAV (Navarra), RIO (La Rioja).

Fuente: Montero, A. (2007), De la potencia a los actos. Evaluación del proyecto de dirección y del ejercicio, Organización y Gestión Educativa, núm. 5, pág. 21

Ahora bien, si presentar el proyecto satisface sólo un requisito de los aspirantes, su alcance, además de limitado, conculca el principio de dirigir, y de ser evaluado, conforme al proyecto que

4

el candidato presentó a la comisión de selección. En definitiva, no es lo mismo “dirigir por proyecto”, circunstancia que casi puede entenderse como modelo de dirección, que “presentar un proyecto” en tanto que recurso más o menos instrumental para el acceso. En el primer caso, el proyecto de dirección da referencia continua al desempeño directivo y, como se estima en esta unidad, es objeto de evaluación -preferentemente a partir de indicadores de logro- en distintos momentos y con diversos efectos. Mientras que presentar un proyecto, solo con el carácter de un requisito para participar en la correspondiente convocatoria, sin que el ejercicio posterior se sostenga en tal proyecto, desvirtúa el sentido y el alcance mayor de su elaboración. Puesto que se ha adelantado la relevancia del proyecto de dirección mérito para el acceso, interesa bastante conocer los criterios de evaluación del mismo por las comisiones de selección, así como la consideración de estos en la propia realización del proyecto. No son frecuentes ni sistemáticos, sin embargo, los criterios de evaluación del proyecto de dirección en las convocatorias de acceso, pero en el cuadro adjunto se aporta, a modo de propuesta, una muestra de interés. Algunos de tales criterios, estimados en las convocatorias de acceso, pueden relacionarse con los principios que inspiran el contenido del proyecto de dirección, expuestos en la primera unidad de este módulo. Es el caso de la autonomía, la profesionalidad, la eficiencia, la organización, la coherencia, la integración, la evaluación y la rendición de cuentas. A fin de que la satisfactoria elaboración del proyecto de dirección conlleve una evaluación inicial del mismo que resulta determinante en el acceso al desempeño directivo. Adviértase, por último, que uno de los criterios de evaluación inicial del proyecto tiene relación con el modo en que se estima la propia evaluación del proyecto, a partir de un adecuado establecimiento de los indicadores para llevarla a cabo, de los órganos o agentes que participarán en su realización, de los calendarios para la misma, los medios y recursos, así como los fines y los efectos de la evaluación, generalmente vinculados a la revisión y mejora de las actuaciones previstas para el logro de los objetivos. Aspectos a los que se presta atención en los segmentos de esta unidad.

Para profundizar más - Montero, A. (2009), ¿Dirección por proyecto o proyecto de dirección?, Escuela, núm. 3832, pág. 33.

Artículo entre cuyos contenidos se considera que dirigir por proyecto no es solo presentar un proyecto como mérito para el acceso a la dirección.

5

Criterios de evaluación del proyecto de dirección como mérito para el acceso 1 

-



-

 -



-

-



-

Análisis de la organización, funcionamiento y situación interna del centro ¿El proyecto parte del análisis del centro en cuanto a sus elementos personales, materiales, organizativos y funcionales, así como de la relación con el entorno y los resultados que obtiene, utilizando los documentos institucionales para analizar la organización y funcionamiento del centro? Coherencia con el proyecto educativo del centro ¿Los objetivos del proyecto de dirección hacen referencia a los del proyecto educativo del centro, desarrollándolos en todas sus facetas? ¿Se recogen medidas concretas que faciliten e impulsen la colaboración entre los distintos sectores de la comunidad educativa? ¿Contempla la revisión de los documentos institucionales del centro? ¿Se ofrecen objetivos y actuaciones concretas para que los padres y otras instituciones escolares (FAPA, Consejo Escolar Municipal, AMPAS de otros centros, etc.) puedan participar en la vida escolar del centro? Línea pedagógica y modelo de gestión propuesto ¿Se establecen líneas de actuación e indicadores concretos referidos a optimizar la eficacia didáctica de las áreas pedagógicas y los sistemas de evaluación del alumnado? ¿Se contempla la introducción de medidas para optimizar el funcionamiento de los órganos de coordinación didáctica? ¿Se concretan las líneas de actuación para desarrollar el plan de acogida al alumnado? ¿Se contemplan las personas u órganos sobre quién/quiénes recae la responsabilidad de la ejecución de las actuaciones previstas para la consecución de objetivos? Objetivos y pertinencia de los mismos ¿Se establecen objetivos generales para la mejora del centro? (calidad de enseñanza, desarrollo y expansión del centro, favorecer relaciones, etc.) ¿Contempla el proyecto objetivos específicos para mantener y mejorar las dependencias del centro, espacios físicos comunes y las aulas específicas (laboratorios, aulas de informática, gimnasio, idiomas, audiovisuales, etc.)? ¿Se consideran adecuados los objetivos planteados en orden a la motivación y participación de todos los miembros de la comunidad educativa en el ámbito escolar? Actuaciones para favorecer la convivencia escolar ¿Se propone fomentar hábitos que mejoren las relaciones y el respeto entre los alumnos?

-

¿Existe la intención de crear sistemas de prevención y resolución de conflictos derivados de la convivencia escolar, así como líneas de actuación concretas para intervenir con alumnos y familias determinadas?



Actuaciones en el ámbito de la prevención de riesgos ¿Contempla el proyecto la realización de simulacros de evacuación ante posibles situaciones de emergencia, así como elementos para evaluar los objetivos y acciones realizadas dentro del área de prevención de riesgos?

-

1

Estos criterios corresponden a los desarrollados por la Comunidad Autónoma de la Región de Murcia en la Orden de 12 de mayo de 2011 (BORM de 14 de mayo, núm. 109), por la que se convoca el procedimiento para la renovación del nombramiento de directores así como el concurso de méritos para la selección y el nombramiento de los mismos en centros docentes públicos.

6



-



-





-



-



-



-

Actuaciones para la atención a la multiculturalidad y la diversidad educativa ¿Aparecen en el proyecto líneas de actuación que busquen la adecuada coordinación entre los órganos del centro para optimizar las acciones realizadas con alumnos de culturas distintas? ¿Contempla el proyecto objetivos destinados al desarrollo de actuaciones que favorezcan la integración, comunicación y/o participación en actividades de los alumnos con necesidades educativas especiales? Adecuación entre los objetivos propuestos y las actuaciones que realizar ¿Contempla el proyecto una estimación temporal de cumplimiento para cada objetivo? ¿Se contemplan claramente la relación entre los objetivos propuestos y las actuaciones previstas para su consecución? Innovación y propuestas de mejora ¿Se establecen objetivos específicos que favorezcan la participación del profesorado en actividades de innovación educativa? ¿Contempla el proyecto propuestas de mejora en los sistemas de evaluación? Carácter realista del proyecto ¿En relación a la situación y el entorno tanto interior como exterior del centro, se parte de unos recursos reales existentes con los que abordar la consecución de los objetivos? Carácter innovador ¿Introduce el proyecto acciones innovadoras? ¿Se proponen medidas de actuación que permiten nuevos enfoques en la valoración y evaluación del proceso enseñanza-aprendizaje de los alumnos (autoevaluación, comisiones, instrumentos de revisión, etc.)? Claridad y concisión ¿Tras la lectura y revisión del proyecto se desprende una idea clara, breve y concisa de las pretensiones del candidato? Evaluación del proyecto de dirección mediante indicadores claros y evaluables de los resultados obtenidos ¿Se establecen indicadores claves para la evaluación del logro de los objetivos del propio proyecto? ¿Se determina quiénes van a evaluar los diferentes aspectos del proyecto? Temporalización para dicha evaluación ¿Se determinan los medios y recursos para la evaluación? ¿Se indican los fines que se pretenden con la evaluación del proyecto?

7

Segmento 2 La evaluación del proyecto de dirección como recurso para la evaluación del desempeño directivo y sus efectos

En el segmento anterior se ha considerado la evaluación del proyecto de dirección en el acceso al desempeño como director y se trata, en este caso, de estimar esa misma evaluación del proyecto en los procesos de evaluación continua y final de la dirección. De ahí que, tal como figura en el cuadro siguiente, puedan apreciarse tres efectos de la evaluación. Los de carácter selectivo, ya descritos para el acceso pero que se extienden, a su vez, para la evaluación del periodo de prácticas habitualmente regulado en las convocatorias de acceso. Los efectos descriptivos, formativos y de mejora derivan tanto de los procesos de evaluación interna en el centro como de los externos por distintas instancias, principalmente orientados a la revisión y mejora del desempeño. Mientras que los efectos acreditativos de la evaluación del proyecto se producen tras la propia evaluación final del mandado, vinculados a la renovación del mismo y a las consolidaciones, reconocimientos y méritos consiguientes. La evaluación del proyecto de dirección: continuidad y efectos

Selectivos - Requisito para el acceso - Mérito del baremo para la selección - Criterio de evaluación de las prácticas directivas en el marco del programa de formación inicial para el desempeño de la dirección

Descriptivos/formativos/ de mejora

Acreditativos

- Autoevaluación y evaluación por órganos del centro (equipo directivo, consejo escolar, claustro)

- Renovación del mandato

- Evaluación por órganos de la Administración (Inspección educativa)

- Mérito para el acceso a la Inspección educativa

- Otras evaluaciones

- Consolidación de complementos retributivos

- Otros reconocimientos personales y profesionales

Con carácter general, la evaluación del ejercicio directivo, tal como acaba de referirse para el proyecto de dirección, no tiene solo un carácter final, llegada la conclusión del mandato, sino que se realiza a los largo del mismo, generalmente por la Inspección de Educación. Por ese carácter continuo de la evaluación, con los adelantados efectos formativos y de mejora, es de utilidad considerar, como se hará en los siguientes segmentos de esta unidad, el propio seguimiento de las líneas de actuación consideradas en el proyecto, a partir de los calendarios y de los indicadores establecidos. Por otra parte, la evaluación realizada tras concluir el ejercicio directivo, si bien de manera todavía no general en las distintas Administraciones, considera la renovación del proyecto de dirección que presentó el director para el acceso al desempeño, así como una memoria de

8

autoevaluación que considere el grado de consecución de los objetivos propuestos en el proyecto de dirección. Los efectos de evaluación final, tal como se acaba de exponer, son de tipo acreditativo y permiten consolidaciones económicas así como algunos reconocimientos y posibilidades de desarrollo profesional. El cuadro adjunto detalla todos estos aspectos, considerando, además, su evolución en la ordenación básica del sistema educativo español hasta la promulgación de la Ley Orgánica para la Mejora de la Calidad Educativa (LOMCE, 2013). La Administración educativa, por tanto, nombra al director del centro que corresponda, tras el procedimiento de selección por concurso de méritos, por un periodo de cuatro años, que puede renovarse, por periodos de igual duración, previa evaluación positiva del trabajo desarrollado al final de los mismos (las Administraciones educativas podrán fijar un límite máximo para la renovación de los mandatos). De particular interés es una posibilidad de promoción interna, establecida en la disposición adicional duodécima de la Ley Orgánica de Educación (LOE, 2006), no modificada por la Ley Orgánica para la Mejora de la Calidad Educativa (LOMCE, 2013), por la que, en las convocatorias de acceso al Cuerpo de Inspectores de Educación, las Administraciones educativas podrán reservar hasta un tercio de las plazas para la provisión mediante concurso de méritos, en lugar del procedimiento general de concurso-oposición, destinado a los profesores que, reuniendo los requisitos generales, hayan ejercido con evaluación positiva, al menos durante tres mandatos, el cargo de director. Resulta significativa, entonces, la relación directa entre la evaluación del proyecto de dirección y del ejercicio directivo, con sus distintos efectos. Así como la importancia de establecer, de manera adecuada, los procesos de seguimiento y evaluación del proyecto de dirección a partir de indicadores de logro, a lo que se dedican los segmentos siguientes.

Para profundizar más Referencia de lectura obligatoria -

Montero, A. (2012), Selección y evaluación de directores de centros educativos, Madrid, Wolters Kluwer Educación. El capítulo 3 de este libro analiza la evaluación del ejercicio directivo en el sistema educativo español, los desarrollos de la misma en las distintas Administraciones educativas, y concluye (págs. 220 a 223) con algunas consideraciones generales al respecto.

Otras referencias bibliográficas -

Murillo, F. J., García, R. y Ortega, P. (2010), Marco normativo de la evaluación del desempeño de la función directiva escolar en España, Avances en Supervisión Educativa, 12.

9

Reconocimientos al ejercicio de la dirección en los centros públicos y efectos de su evaluación positiva LOPEG 1995

LOCE 2002

LOE 2006

LOMCE 2013

X

X

X

X

Valoración especial del ejercicio de cargos directivos, especialmente el de director, a efectos de la provisión de puestos de trabajo en la función pública docente, así como para otros fines de carácter profesional, dentro del ámbito docente.

X

X

X

Procedimientos para eximir, total o parcialmente, al equipo directivo y, especialmente, al director de la docencia directa en función de las características del centro, con objeto de facilitar el desarrollo de las funciones directivas.

X

Favorecer la incorporación de los directores a órganos de carácter consultivo y participativo

X

Adquisición de la categoría de director, para los centros públicos del nivel educativo y régimen de que se trate, con efectos en el ámbito de todas las Administraciones educativas, por los directores que obtengan evaluación positiva al final del mandato para el que fueron seleccionados.

X

X

X

Retribuciones diferenciadas por el ejercicio de cargos directivos, en especial el de director, en función de la responsabilidad y dedicación exigidas.

Reconocimiento personal y profesional a los directores, en los términos que establezcan las Administraciones educativas, tras la evaluación positiva al final del mandato para el que fueron seleccionados.

X

Renovaciones del mandato, por periodos de igual duración, previa evaluación positiva del trabajo desarrollado al final de los mismos.

X

X

X

Mantenimiento de una parte del complemento retributivo correspondiente, mientras permanezcan en situación de activo, a los directores que hayan ejercido su cargo con valoración positiva durante el periodo que cada Administración educativa determine, en la proporción, condiciones y requisitos que tales Administraciones establezcan.

X

X

X

X

X

Reserva en los concursos-oposición de acceso al Cuerpo de Inspectores de Educación de hasta un tercio de las plazas para la provisión mediante concurso de méritos destinado a los profesores que, reuniendo los requisitos generales, hayan ejercido con evaluación positiva, al menos durante tres mandatos, el cargo de director.

- LOPEG: Ley Orgánica 9/1995, de 20 de noviembre, de la Participación, la Evaluación y el Gobierno de los centros docentes (BOE de 21 de noviembre, núm. 278).

- LOCE: Ley Orgánica 10/2002, de 23 de diciembre, de Calidad de la Educación (BOE de 24 de diciembre, núm. 307). - LOE: Ley Orgánica 2/2006, de 3 de mayo, de Educación (BOE de 4 de mayo, núm. 106). - LOMCE: Ley Orgánica 8/2013, de 9 de diciembre, para la Mejora de la Calidad Educativa (BOE de 10 de diciembre, núm. 295)

10

Segmento 3 Los indicadores en el proyecto de dirección

En el plan de actuación del proyecto de dirección, estimado en la unidad 3, se consideran distintos elementos en su estructura: las dimensiones, ámbitos o líneas de mejora, los objetivos, las actuaciones, los agentes o responsables, los calendarios y los indicadores de logro. Estos últimos, a los que se presta atención especial ahora, son los referentes principales para la evaluación del proyecto de dirección; y su naturaleza, aunque seguidamente se aporten algunas definiciones, se aproxima a la de las evidencias del grado de logro de los resultados. De tal modo que pudieran identificarse junto a las intenciones y las concreciones del proyecto de dirección, Intenciones, concreciones y evidencias en el proyecto de dirección Intenciones OBJETIVOS Fines o propósitos que pretenden conseguirse con el desarrollo del proyecto de la dirección

Concreciones

Evidencias

ACTUACIONES INDICADORES Acciones o tareas que desglosan Resultados, en términos de logro, o concretan los fines establecidos que se esperan de las actuaciones en los objetivos relacionadas con los objetivos

Una definición de indicador de educación que suele referirse es la formulada por la OCDE (1996) para caracterizarlo como “un dato (generalmente una medida estadística) que proporciona información acerca de la condición y el estado del sistema educativo, describe sus rasgos fundamentales y es útil para la toma de decisiones”. García y Aguirregaribia (2006) entienden como indicador un instrumento que proporciona información relevante de algún aspecto significativo de la realidad educativa: “Aquellos aspectos del sistema educativo de los cuales se puede obtener información que nos posibilite hacer una valoración, cuantitativa o cualitativa, y a partir de ella tomar decisiones cuyo objetivo sea la mejora de la institución, en su totalidad o en alguna de sus partes”. Así, aunque la valoración estadística y cuantitativa es predominante, los sistemas de indicadores también incorporan evidencias cualitativas, tales como la elaboración de documentos, la recogida de percepciones o valoraciones, o la adopción de acuerdos. A su vez, se dispone de sistemas de indicadores a gran escala, que afectan al conjunto del sistema educativo en sus distintos ámbitos (es el caso del Sistema Estatal de Indicadores de la Educación), y cabe considerar indicadores más propios, específicos y operativos en el ámbito, como aquí nos ocupa, del proyecto de dirección. Luego, con esta perspectiva, podemos entender como indicador: el resultado de las actuaciones previstas para el desarrollo de los objetivos del proyecto de dirección, expresado en términos cuantitativos o cualitativos de logro, con el que es posible realizar una evaluación de proceso y final de la que deriven descripciones, justificaciones de los logros y, sobre todo, medidas o decisiones vinculadas al rendimiento de cuentas, al reconocimiento y a la mejora. La elaboración de indicadores cuenta, asimismo, con características básicas. Se destacan (AGAEVE, 2014), entre estas, que los indicadores resulten:

11

-

Explícitos y comprensibles Fidedignos, porque de su medición se obtiene información rigurosa y sistemática de datos válidos y fiables Fácilmente medibles y con flexibilidad para el desglose de sus resultados Aceptados por los diferentes sectores, mediante el consenso en su elaboración

Por lo que, como criterios, han de estimarse: - Relevancia, por atender a aspectos significativos - Globalidad, por afectar a varios ámbitos o dimensiones - Fiabilidad, por reflejar lo que se quiere medir y sostenerse en evidencias objetivas - Concisión, a partir de una redacción breve, explícita y comprensiva - Operatividad, para que la medición resulte factible y eficiente - Consenso, para que la definición sea asumida y compartida Una cuestión importante, por otra parte, es el análisis comparado de los indicadores, puesto que en el proyecto de dirección pueden estimarse, por ejemplo, indicadores cuyo logro se establezca en función de la mejora de los resultados escolares, tomando como referencia medias de comparación. De ahí la consideración de índices socio-económicos y culturales, a partir de datos de contexto, socio-económicos y familiares, generalmente obtenidos mediante cuestionarios, que permiten situar las comparaciones de manera más equilibrada y pertinente. Tales índices no son elaborados directamente por los centros, pero, a partir de las evaluaciones externas de diagnóstico hasta ahora realizadas, es habitual que los informes den cuenta de tales índices. Como forma sintética de estimar la utilidad y calidad de los indicadores, es bastante oportuno considerar las características de los indicadores clave de de rendimiento (KPI por denominación en inglés, Key Performance Indicator), que se definen con el término, aunque en este caso acrónimo, SMART.

ESpecíficos (Specific) Temporales (Timely)

Indicadores SMART Relevantes (Relevant)

Medibles (Measurable)

Alcanzables (Achievable)

12

Una muestra de indicadores, aproximados o distantes a la caracterización SMART, se facilita seguidamente, elaborada para este segmento a fin de que quepa percibir, de manera práctica, la mayor o menor adecuación de los indicadores. Muestra de indicadores a partir de su menor (-) o mayor (+) ajuste a las características SMART

Específicos

Medibles

Alcanzables

Relevantes

Temporales

−

Elaborar un documento para la revisión de las actividades culturales realizadas en el entorno del centro por distintas instituciones.

+

Celebrar al menos una reunión, en el curso escolar, con las entidades y asociaciones del entorno del centro que desarrollen actividades útiles para distintos ámbitos del proyecto educativo del centro, a fin de recabar su participación y colaboración con el centro.

− +

Incrementar las sesiones de tutoría con las familias del alumnado.

−

Mejorar las condiciones socioeconómicas del entorno y de las familias del alumnado

+

Asegurar que el alumnado con desventaja sociocultural disponga semanalmente, al menos, de dos horas de refuerzo y apoyo en pequeño grupo.

− +

Asegurar que se homologuen las características formales de las pruebas escritas.

− +

Incrementar el uso de la biblioteca del centro.

Celebrar de al menos una sesión de tutoría, durante el curso escolar, con las familias del 90% del alumnado de la clase.

Incrementar en un 15% el porcentaje de alumnado que alcanza los niveles altos en las pruebas de evaluación externa.

Catalogar los fondos de la biblioteca en el primer trimestre del curso. Disponer de un programa de gestión que permita valorar su uso, a lo largo del curso, por el alumnado.

Considerados los criterios y orientaciones anteriores, pueden evitarse, además de las disfunciones que se advierten en la muestra de indicadores, algunas confusiones tales como la de asimilar, o elaborar con escasas diferencias, objetivos del proyecto e indicadores. Se comenzó caracterizando los primeros, los objetivos (también referidos en algunos casos como áreas o propuestas de mejora tras el diagnóstico inicial), a modo de intenciones, y los segundos, los indicadores, como evidencias del grado de logro de las actuaciones que concretan los objetivos. Luego es necesario cuidar la redacción de unos y otros, objetivos e indicadores, en función de su distinta naturaleza. Los indicadores, por tanto, se vinculan a las actuaciones. Y los objetivos, por su parte, pueden organizarse a partir de líneas de actuación, dimensiones o ámbitos generales del plan de actuación del proyecto de dirección

13

Ámbitos, objetivos, actuaciones e indicadores

Actuación … Objetivo … Actuación … Ámbito A Actuación … Objetivo … Actuación …

Indicador … Indicador … Indicador … Indicador … Indicador … Indicador … Indicador … Indicador …

Para profundizar más -

AGAEVE (2014), Guías de indicadores homologados, Sevilla, Agencia Andaluza de Evaluación Educativa. Mediante el enlace que se facilita, pueden localizarse guías de indicadores homologados, referidos a diversos ámbitos y en función de las enseñanzas impartidas en los centros. En los primeros apartados de estas guías se alude a distintas características de los indicadores de evaluación en educación. http://www.juntadeandalucia.es/educacion/agaeve/biblioteca-guias-indicadores.html

14

Segmento 4 Tipos de indicadores, tendencia y relevancia de los mismos en el periodo de desempeño del director basado en el proyecto de dirección Dos criterios pueden estimarse para establecer tipos generales de indicadores: el objeto de medición al que se aplican y la orientación del logro que conllevan: Muestra de indicadores por tipos

Indicadores de proceso Objeto de medición

Realizar un curso de formación, en el primer trimestre del curso, para el profesorado del centro, sobre la utilización de la pizarra digital en el aula. Establecen la referencia final del logro esperado de una actuación

Indicadores de rendimiento

Progresivos Orientación del logro

Informan sobre el resultado de las acciones encaminadas al logro final de una actuación.

Diseñar al menos tres unidades didácticas, de las distintas materias, durante el curso, para la enseñanza mediante la pizarra digital en el aula. El resultado o logro adecuado conlleva un incremento de los valores. Incrementar en un 15% el préstamo de libros de la biblioteca del centro El resultado o logro adecuado conlleva una disminución de valores.

Regresivos

Reducir en un 20% el porcentaje de alumnado que obtiene resultados en los niveles bajos de las pruebas de evaluación externas.

También pueden considerarse indicadores de percepción, en el ámbito del objeto de medición, cuando se utilizan cuestionarios, encuentras o entrevistas para recabar información sobre las percepciones (satisfacciones-insatisfacciones, acuerdos-desacuerdos) de distintos sectores. Otros dos rasgos son de especial interés para apreciar la evolución de los indicadores en el periodo de ejercicio de la dirección: la tendencia y la relevancia. Tendencias en los indicadores

Tendencia Evolución, a lo largo de los cursos, del logro establecido en el indicador

Continua Los registros del logro del indicador evolucionan sin oscilaciones y en un mismo sentido a lo largo de los cursos

Discontinua Se verifican oscilaciones en los registros de los distintos cursos

15

Positiva - En los indicadores progresivos se constata incremento de los valores - En los indicadores regresivos se constata disminución de valores Negativa - En los indicadores progresivos se constata disminución de los valores - En los indicadores regresivos se constata aumento de los valores

Indicador progresivo con tendencia continua positiva (TCP) y negativa (TCN) Porcentaje de alumnado que alcanza el titulo de Graduado en ESO con todas las materias superadas 2010-2011

2011-2012

2012-2013

2013-2014

TCP

58%

62%

68%

72%

TCN

68%

64%

59%

55%

Indicador regresivo con tendencia continua positiva y negativa Porcentaje de alumnado que presenta conductas contrarias a la convivencia 2010-2011

2011-2012

2012-2013

2013-2014

TCP

14%

12%

9%

6%

TCN

8%

11%

13%

15%

Indicador discontinuo (ID) Porcentaje de alumnado con faltas injustificadas de asistencia ID

2010-2011

2011-2012

2012-2013

2013-2014

9%

12%

7%

11%

La relevancia, por su parte, deriva de la comparación de los logros finales del indicador, tanto curso a curso como en la media de todo el periodo, considerando los obtenidos en centros con el mismo índice socioeconómico y cultural. Datos que se obtienen, generalmente, a partir de informes realizados por agencias de evaluación o departamentos de las Administraciones educativas. La relevancia de los indicadores

Relevancia Comparación de los logros del indicador con los obtenidos en centros con el mismo índice socioeconómico y cultural (ISC)

Positiva

- En los indicadores progresivos, logros por encima de la media de los obtenidos en centros con el mismo ISC. - En los indicadores regresivos, logros por debajo de la media de los obtenidos en centros con el mismo ISC

Negativa

- En los indicadores progresivos, logros por debajo de la media de los obtenidos en centros con el mismo ISC. - En los indicadores regresivos, logros por encima de la media de los obtenidos en centros con el mismo ISC.

Por su interés para identificar indicadores útiles en el proyecto de dirección, así como para el análisis de la tendencia y la relevancia a lo largo del desempeño directivo, se facilitan en anexos: −

Un análisis de la evolución del resultado de los indicadores a lo largo de los cursos, que permite identificar áreas de mejora.

16

−

Una muestra de indicadores de distintos ámbitos (enseñanza y aprendizaje, clima y convivencia, atención a la diversidad), que pueden tomarse como referencia para el proyecto de dirección.

Para profundizar más -

AGAEVE (2014), Guía de Indicadores Homologados, Sevilla, Agencia Andaluza de Evaluación Educativa. En la guía correspondiente a los centros de Educación Secundaria –pero la estructura de los contenidos es idéntica en las guías del resto de centros- puede revisarse un informe de resultados de los indicadores (págs. 25 a 28), así como un recurso –hoja de cálculo- para el registro de la evolución de los indicadores y el análisis y la evaluación a partir de los logros obtenidos. (págs. 61-65). http://www.juntadeandalucia.es/educacion/agaeve/docs/Guia_Indicadores_Homologados_Secundaria.pdf

17

Segmento 5 Seguimiento y evaluación interna y externa del proyecto de dirección

En segmentos anteriores de esta unidad, se consideró la evaluación inicial del proyecto de dirección, en el proceso de selección para el acceso, así como la evaluación continua y final, y los efectos de esta, en el marco de la evaluación del ejercicio directivo. Corresponde a este segmento, ahora, una vez estimados los indicadores de logro como referentes principales para la evaluación del proyecto, describir cómo se lleva a cabo esta y facilitar algunas herramientas para realizarla. Älvarez y Santos (1996) analizan, en este sentido, tanto la evaluación de los procesos como la evaluación final de resultados, a partir de distintos enfoques o modelos que se resumen en el cuadro siguiente: Evaluación de proceso y final del proyecto de dirección Evaluación de proceso •

Interna

•

Evaluación final de resultados Administrativa

•

Participativa

•

Institucional

•

Externa

•

Objetiva de experto

La evaluación de proceso interna corresponde de manera directa al director que presentó el proyecto, junto a su equipo directivo, para la que pueden recabarse asimismo informaciones o valoraciones de distintas instancias u órganos del centro, a fin de revisar el grado de cumplimiento de los objetivos y adoptar las medidas que resultarán necesarias. Suele realizarse en los momentos finales del curso, coincidiendo con la elaboración de la memoria final. La evaluación de proceso participativa concierne a los órganos y equipos de coordinación docente, teniendo en cuenta los indicadores del proyecto de dirección en el marco de las revisiones trimestrales de los resultados de los procesos de enseñanza y de aprendizaje. Y la evaluación de proceso externa, por último, se entiende como tal cuando, en el modelo anterior de evaluación participativa, un experto o asesor externo en evaluación de procesos, a solicitud del director o del equipo de coordinación pedagógica, interviene para desbloquear o facilitar el avance en el proceso de evaluación. Por su parte, la evaluación final administrativa de los resultados concierne a la Administración educativa; si bien, como ya se adelantó, la consideración del proyecto de dirección no se estima, de manera general, en los criterios de evaluación que las Administraciones establecen y hacen públicos para la valoración del ejercicio directivo. La evaluación final institucional corresponde a la realizada por el Consejo Escolar del centro, a efectos de la valoración del ejercicio directivo, y su grado de desarrollo es desigual: desde el resultado de una valoración general que se resuelve con la votación favorable por la mayoría –suele aludirse a que sea absoluta- de sus miembros, hasta el análisis más pormenorizado en función de una guía o protocolo de actuación para

18

considerar la valoración, entre otros aspectos, del logro de los objetivos del proyecto de dirección. El modelo de la evaluación objetiva de experto suele aplicarse en el ámbito de los centros privados o en sistemas con amplia autonomía o descentralización, generalmente para tomar decisiones relevantes como una nueva selección del director del centro. Del mismo que, en algunos casos, el experto, sobre todo en el caso de los sistemas educativos que subrayan el modelo de dirección por proyectos, puede asesorar y facilitar los procesos de evaluación final de los resultados. En los procesos y estrategias de evaluación suelen considerarse además, y en función de los modelos anteriores, aspectos y elementos que conciernen a quiénes evalúan, y a qué, cuándo y cómo se evalúa. Como principio de partida, el referente básico para evaluación de un proyecto son los indicadores de logro establecidos en el mismo. Así lo sostienen tanto Álvarez y Santos (1996) como García y Aguirregabiria (2006) cuando dan respuesta a las cuestiones anteriores. A su vez, la responsabilidad de la evaluación del ejercicio directivo guarda relación directa con la configuración del sistema educativo. En nuestro caso, aunque tiende a la descentralización, esta es más propia de la distribución de competencias entre el Estado y las Comunidades Autónomas que de la autonomía real conferida a los centros, ya que en el ámbito de las Comunidad Autónomas se adoptan tendencias asimismo centralizadoras. La responsabilidad de la evaluación suele atribuirse a la Inspección educativa, si bien en los desarrollos que adoptan las distintas Administraciones también se estima la realización de una memoria de autoevaluación del director, que suele incluir su valoración sobre el grado de los logro de los objetivos del proyecto, así como el pronunciamiento favorable del Consejo Escolar del centro. El qué evaluar se relaciona con los criterios de evaluación del ejercicio directivo. Generalmente, estos criterios de evaluación se vinculan con las competencias directivas y se asocian a ámbitos de gestión como los sugeridos por Álvarez y Ramos (1996) para la elaboración del proyecto de dirección: ejecutivo, administración, innovación e integración. Los momentos del cuándo ya se han adelantado al considerar el propio carácter de proceso y final que adopta la evaluación del proyecto de dirección. Y, con respecto al cómo, esos mismos autores consideran la utilidad de un informe escrito, preferentemente realizado por la dirección del centro y en los momentos de la evaluación final, donde se deje constancia de los antecedentes, de la evolución del proyecto, de la valoración con respecto al alcance de los objetivos en función de los indicadores, de la justificación de las acciones y los resultados, así como de una reflexión y propuesta personal. Tal informe correspondería a una fase previa de evaluación de la dirección, considerada en el marco de un proceso, ajustado a las realidades del centro, que estima una fase de preparación del plan de evaluación, de aplicación del mismo y de información de los resultados, tal como se recoge en el cuadro siguiente. La estructura de este plan, además de a la realidad del centro, puede adaptarse el propio proceso institucional de evaluación del ejercicio directivo, dado que la elaboración de un informe o memoria del director -que toma como referencia el proyecto de dirección- así como la valoración del Consejo Escolar, también estimada en algunos desarrollos, pueden vincularse a las fases previstas en el plan.

19

Finalmente, se aportan dos modelos a modo de instrumentos para realizar tanto la evolución de proceso como la final del proyecto de dirección. Recursos que puede resultar de interés, asimismo, para la autoevaluación del director, la elaboración de la memoria de su ejercicio, o en el plan de evaluación del proyecto que se establezca en el centro. Se toma como referencia, en los modelos, una actuación considerada para el desarrollo de un objetivo del proyecto de dirección. Plan de evaluación del proyecto de dirección Informe de la Dirección Fase Previa

• • • • •

• • •

Preparación del proceso Definición del plan de actuación (tiempos, instrumentos, fases, apoyos, contenidos, responsables) Selección de instrumentos (cuestionarios, encuestas, guías de entrevistas) Recogida de datos (aplicación de instrumentos, recogida de datos o de documentos) Sistematización y valoración de los datos

• • •

Aplicación del Plan Elaboración del informe previo sobre la evaluación Recepción del informe de la Dirección Entrevista de contraste con la Dirección

•

Fase Primera

Fase Segunda

Fase Tercera

Antecedentes: situación de partida del centro (problemática, objetivos) Descripción de la evolución del proyecto (constancia documental, informes) Valoración (grado de logro de los indicadores) Justificación de las acciones y resultados (en función de los recursos, los apoyos y las dificultades) Reflexiones y propuestas (satisfacciones, insatisfacciones y sugerencias)

• •

Información de resultados Elaboración del informe definitivo negociado y asumido por las partes Elaboración del informe definitivo y de la documentación a la autoridad institucional

Fuente: Álvarez, M. y Santos, M (1996), Dirección de centros docentes. Gestión por proyectos, Madrid, Escuela Española

Para profundizar más Referencia de lectura obligatoria - Álvarez, M. y Santos, M (1996), Dirección de centros docentes. Gestión por proyectos, Madrid, Escuela Española. El apartado 3 del capítulo tercero de la primera parte de este libro considera la evaluación del proyecto de dirección

Otras referencias bibliográficas - García, A. M.ª y Aguirregabiria, J. (2006), El proyecto de dirección, Bilbao, Ediciones Mensajero.

20

Evaluación de proceso de las actuaciones del plan para el desarrollo de los objetivos del proyecto de dirección Objetivo

Definir la mejora de los resultados educativos del alumnado como referencia y objeto principal del proyecto educativo y de la actividad del centro

Actuación  Elaboración y manejo de un modelo de análisis de los resultados que pueda aplicarse, entre otros aspectos, a la revisión trimestral de la programación general anual y a la memoria final. El modelo tendrá en cuenta, de manera especial, las posibles causas “internas” (coordinación, prácticas docentes...) de los resultados.

Responsables -

-

Director Jefe de Estudios Equipo de Coordinación Pedagógica Claustro Consejo Escolar

Recursos Sesiones de trabajo Documentos teóricoprácticos para el estudio y el análisis Experiencias de otros centros

Calendarios Curso 1

Indicadores

Trimestre

•

Elaboración del modelo de análisis de resultados de la evaluación del alumnado.

•

Constancia, en las actas del Claustro, del Consejo Escolar y en los documentos de las sesiones trimestrales de evaluación, de mejoras en el análisis de los resultados de la evaluación; sobre todo, en lo que respecta a las causas “internas” de los mismos.

2

Evaluación de proceso del grado de consecución de los indicadores (Primer trimestre) •

Elaboración del modelo de análisis de resultados de la evaluación del alumnado.

Desarrollo de la actuación en función el indicador -

-

Aunque en el plan de reuniones del equipo de coordinación pedagógica se incluyeron tareas para la elaboración del modelo de análisis de los resultados en el plazo previsto, la revisión del proyecto educativo, tras la implantación de las nuevas enseñanzas, ha acaparado más tiempo del inicialmente previsto, por lo se produce una demora en el desarrollo de la actuación relacionada con la elaboración del modelo de análisis de los resultados. Se han conseguido, sin embargo, documentos de otros centros que, con ligeras adecuaciones, pueden resultar de suficiente actualidad.

Decisiones y medidas adoptadas -

-

•

Encomendar de manera expresa al Jefe de Estudios la elaboración de una propuesta, como borrador avanzado, de modelo de análisis de los resultados escolares del centro, para estimarla en la sesión de equipo de coordinación pedagógica y de los ciclos/departamentos didácticos antes del mes de febrero. Convocar una sesión de claustro, antes de las sesiones de evaluación del segundo trimestre, para la presentación del modelo de análisis de los resultados escolares, una vez recogidas las aportaciones de los órganos de coordinación. Constancia, en las actas del Claustro, del Consejo Escolar y en los documentos de las sesiones trimestrales de evaluación, de mejoras en el análisis de los resultados; sobre todo, en lo que respecta a las causas “internas” de los mismos.

Desarrollo de la actuación en función del indicador -

Si bien se aprecia retraso en la elaboración del modelo de análisis de los resultados, con las medidas adoptadas se pretende que el Claustro y el Consejo Escolar puedan considerar la aplicación del modelo de análisis para las sesiones correspondientes a la segunda evaluación trimestral.

Decisiones y medidas adoptadas -

Se adoptarán una vez cumplido el plazo y realizadas las sesiones de Claustro y Consejo Escolar en el segundo y tercer trimestres.

21

Evaluación final de las actuaciones del plan para el desarrollo de los objetivos del proyecto de dirección Objetivo

Definir la mejora de los resultados educativos del alumnado como referencia y objeto principal del proyecto educativo y de la actividad del centro

Actuación  Elaboración y manejo de un modelo de análisis de los resultados que pueda aplicarse, entre otros, a la revisión trimestral de la programación general anual y a la memoria final. El modelo tendrá en cuenta, de manera especial, las posibles causas “internas” (coordinación, prácticas docentes...) de los resultados.

Responsables Director Jefe de Estudios Equipo de Coordinación Pedagógica Claustro Consejo Escolar

Recursos Sesiones de trabajo Documentos teórico-prácticos para el estudio y el análisis Experiencias de otros centros

Calendarios Curso 1

Indicadores

Trimestre

•

Elaboración del modelo de análisis de resultados de la evaluación del alumnado.

•

Constancia, en las actas del Claustro, del Consejo Escolar y en los documentos de las sesiones trimestrales de evaluación, de mejoras en el análisis de los resultados de la evaluación; sobre todo, en lo que respecta a las causas “internas” de los mismos

2

Seguimiento del grado de consecución de los indicadores Grado de logro

Indicadores

•

C

Elaboración del modelo de análisis de resultados de la evaluación del alumnado

EP

NC

X

Descripción y justificación del grado de logro del indicador -

Se ha elaborado el modelo de análisis de los resultados escolares y pudo utilizarse en las sesiones de evaluación del último trimestre del curso.

Consideraciones y decisiones para, en su caso, la renovación del proyecto . •

Constancia, en las actas del Claustro, del Consejo y en los documentos de las sesiones trimestrales de evaluación, de mejoras en el análisis de los resultados de la evaluación; sobre todo, en lo que respecta a las causas “internas” de los mismos

X

Descripción y justificación del grado de logro del indicador -

Los equipos docentes se ocupan, sobre todo, del análisis estadístico, sin incluir aportaciones relevantes sobre las causas “internas” de los mismos.

Consideraciones y decisiones para, en su caso, la renovación del proyecto -

En el plan de formación del próximo curso debe incluirse una actividad formativa, desarrollada en el propio centro, para considerar las causas internas (contenidos, metodologías, criterios e instrumentos de evaluación) que influyen en los resultados escolares.

C: Conseguido, EP: En Proceso, NC: No Conseguido

22