Story Transcript
Evaluación externa del “Programa 3x1 para migrantes 2007”
Informe Final
Anexo VII: Calificación CREMA de los indicadores de la MML (Pregunta 14) En la siguiente tabla se califican cada uno de los indicadores de la MML según las siguientes características: C corresponde a Claridad: el indicador deberá ser preciso e inequívoco. R corresponde a Relevancia: el indicador deberá reflejar una dimensión importante del logro del objetivo. E corresponde a Economía: la información necesaria para generar el indicador deberá estar disponible a un costo razonable. M corresponde a Monitoreable: el indicador debe poder sujetarse a una comprobación independiente A corresponde a Adecuado: el indicador deberá aportar una base suficiente para evaluar el desempeño. La calificación asignada corresponde a 1 si el indicador Cumple con la característica, 0.5 si Cumple parcialmente con la característica y 0 si No Cumple con la característica. En caso de que la calificación sea 0.5 ó 0 se justifica la opinión del evaluador. Nivel en el Resumen Narrativo Fin
Nombre del Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Porcentaje de las localidades intervenidas por el programa que mejoraron sus índices de Marginación absoluta (por Localidad, IML). (Eficacia)
0.0
No se puede hacer referencia al Índice de marginación debido a que su agregación impediría captar los resultados precisos de las obras realizadas por el Programa que son esporádicas. En cambio se tendrá que enumerar los componentes del Índice.
0.5
Carece de indicadores para medir el incremento en la infraestructura productiva
1
Es obtenido de Conapo, por lo que el Programa no incurre no costos
1
Tanto Inegi como Conapo son instituciones independientes del funcionamiento del Programa
0.5
Deja fuera los logros en infraestructura social
24 de marzo de 2008
150
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el Resumen Narrativo Propósito
Informe Final
Nombre del Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Variación de las variables de infraestructura social básica y productiva que componen los índices de marginación y de rezago social en las localidades atendidas por el programa. (Eficacia)
0.5
No se entiende a que variables se hace referencia. Sólo se deberá tomar en cuenta los componentes en los que el Programa haya tenido impacto en la localidad específica.
0.5
Dado que se pretende capturar el cambio en la infraestructura social básica y productiva se considera relevante. Sin embargo, la fórmula hace sólo referencia a la infraestructura básica.
1
Es obtenido de Conapo, por lo que el Programa no incurre no costos
1
Tanto Inegi como Conapo son instituciones independientes del funcionamiento del Programa
0.5
Deja fuera los logros en infraestructura social y sólo se deberá tomar en cuenta los componentes en los que el Programa haya tenido impacto en la localidad específica.
24 de marzo de 2008
151
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el Resumen Narrativo Componentes
Informe Final
Nombre del Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
a)Tasa de aprobación de proyectos
1
Se pretende identificar cuál es la tasa de aprobación del Programa.
0.5
El indicador no permite determinar si los proyectos aprobados o rechazados tienen alguna relación con la focalización hacia las localidades objetivo del Programa
1
La información debe de ser capturada en l expediente técnico de las obras por lo que la institución no incurre en costos adicionales para recolectarla
0
No se tiene información acerca de los medios de comprobación independientes
1
b)Orientación a obras de impacto social
1
Se pretende identificar cuál es la proporción de proyectos enfocados a la infraestructura social
0.5
El indicador deja fuera el componente de infraestructura productiva
1
0
No se tiene información acerca de los medios de comprobación independientes
0.5
c) Orientación a localidades de alta y muy alta marginación
1
Se pretende identificar cuál es la proporción de proyectos creado en las
1
Dado que son las localidades objetivo del programa, es importante
1
La información debe de ser capturada en l expediente técnico de las obras por lo que la institución no incurre en costos adicionales para recolectarla La información debe de ser capturada en l expediente técnico de las
Es importante a fin de medir la oferta de proyectos y el éxito del programa. Sin embargo, dado que se carece de adjetivos de focalización no se aporta información sor el éxito del Programa en las localidades objetivo No existe indicador para capturar los logros en la creación de infraestructura social
0
No se tiene información acerca de los medios de comprobación
0.5
24 de marzo de 2008
Tal como está funcionado el Programa actualmente, este indicador
152
Evaluación externa del “Programa 3x1 para migrantes 2007”
localidades de los municipios objetivo del Programa
d)Multiplicador de la inversión federal
24 de marzo de 2008
1
Se pretende identificar cuál es la proporción con la que el gobierno federal contribuye del costo de las obras
Informe Final
averiguar el impacto que éste tiene en ellas.
0
Las reglas de operación indican que la aportación será de 25%
obras por lo que la institución no incurre en costos adicionales para recolectarla
1
La información debe de ser capturada en l expediente técnico de las obras por lo que la institución no incurre en costos adicionales para recolectarla
independientes
0
No se tiene información acerca de los medios de comprobación independientes
0
sólo capta características probables de las localidades beneficiarias, pero no hay garantías de que los migrantes elijan a aquellas con alta o muy alta marginación No se encuentra la utilidad de este indicador
153
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el Resumen Narrativo Actividades
Informe Final
Nombre del Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Atención a organizaciones de migrantes a través de talleres y asambleas informáticas, TAI (Eficacia)
1
0.5
Es importante saber si la demanda por información del Programa está satisfecha, pues es lo que incentivará la recepción de propuestas
1
No existe información
0
El indicador no es adecuado para medir “organizar, difundir y coordinarlas actividades del programa en el extranjero”
1
1
Es necesario saber si los talleres están siendo bien impartidos, pues la recepción de proyectos y el éxito del Programa se basarán en ello.
1
La información es obtenida de las actas de registro de las representaciones en el extranjero del Programa por lo que no incurre en gastos adicionales para obtenerla La información es obtenida de las actas de registro de las representaciones en el extranjero del Programa, por lo que no incurre en gastos adicionales para obtenerla
0
El porcentaje de clubes que recibieron capacitación o asesoría sobre el programa CCapAs) y tienen proyectos aprobados (CCapAs PA) (Eficacia).
Se pretende medir la capacidad administrativa para satisfacer la demanda de talleres y asambleas informativas sobre el Programa Pretende medir cuál es la tasa de éxito en la aceptación de los programas de aquellos grupos migrantes que tomaron un curso
0
No existe información
0.5
El indicador sólo permite medir una de las actividades enunciadas: Recepción de propuestas de inversión. Las “sesiones informativas sobre la operación del Programa”; “Taller para la elaboración de proyectos” carecen de indicador. Es necesario recordar que la metodología utilizada propone se utilice un
24 de marzo de 2008
154
Evaluación externa del “Programa 3x1 para migrantes 2007”
Porcentaje de clubes que por primera vez presentan proyectos (CPP) en relación con el total de clubes (C) en el periodo (Eficacia)
1
Pretende medir la captación de nuevos participantes en el Programa.
1
Porcentaje de instancias ejecutoras capacitadas Eficacia).
1
Pretende medir la proporción de instancias ejecutoras que cuentas con la preparación para desarrollar sus respectivas tareas.
1
Porcentaje del personal capacitado respecto del total involucrado en las
1
Pretende medir la proporción del personal que cuenta con la preparación para desarrollar sus respectivas
1
24 de marzo de 2008
Informe Final
Es importante saber si se están integrando nuevos grupos de migrantes al Programa, pues esto podría implicar se están atendiendo diversas zonas geográficas y no sólo las mismas. Es importante que las instancias ejecutoras cuenten con la capacidad necesaria para llevar acabo cada proyecto, pues sin ello el éxito del Programa sería nulo Es importante que el personal tenga la capacitación necesaria para llevar acabo cada proyecto,
indicador por actividad a realizar. Sería un indicador más adecuado para medir el éxito en “organizar, difundir y coordinar actividades” (la primera actividad propuesta en la matriz.
1
La información es obtenida de los nexos técnicos de las propuestas de inversión, por lo que no incurre en gastos adicionales para obtenerla.
0
No existe información
0.5
1
La información es obtenidas de la memoria de la capacitación y listas de asistencia por lo que el Programa no incurre en gastos adicionales para obtenerla
0
No existe información
1
El indicador mide de manera satisfactoria el éxito en la tarea a realizar
1
La información es obtenidas de la memoria de la capacitación y listas de asistencia por lo que el Programa
0
No existe información
1
El indicador mide de manera satisfactoria el éxito en la tarea a realizar
155
Evaluación externa del “Programa 3x1 para migrantes 2007”
delegaciones. (Eficacia).
tareas.
Tiempo promedio entre aprobación del proyecto e inicio de obra (Eficacia)
0
No está claro que actividad pretende evaluar este indicador o qué tareas se deben de realizar en el lapso a medir.
0
Porcentaje de obras y acciones validadas por el COVAM respecto del total de las propuestas presentadas. (Eficacia).
0.5
No está claro a qué se refiere con “acciones validadas por el COVAM”
0.5
Porcentaje de cumplimiento físicofinanciero en las obras y acciones (Eficacia)
1
Como parte de la contraloría social, es necesario vigilar se de cumplimiento de la obra, de acuerdo al presupuesto y tiempo previamente
1
24 de marzo de 2008
Informe Final
pues sin ello el éxito del Programa sería nulo No se establece que actividades pretende medir.
Se considera que la validación del COVAM es necesaria, sin embargo no está claro a que se refiere con acciones y por lo tanto no se puede determinar que tan relevante es medirlo. Esta actividad es de alta relevancia pues vigila se ejerza el presupuesto en tiempo y forma y se satisfagan las necesidades de los
1
no incurre en gastos adicionales para obtenerla La información es obtenidas de las actas del COVAM, por lo que no se incurre en gastos adicionales para obtenerla
0
No existe información
0
1
La información es obtenidas de las actas del COVAM, por lo que no se incurre en gastos adicionales para obtenerla
0
No existe información
0.5
1
La información es obtenidas del Formato 3x1 C por lo que no se incurre en gastos adicionales para obtenerla
0
No existe información
1
Dado que no establece con precisión la actividad a evaluar no se puede considerar sea un indicador adecuado. Es importante saber cuantas obras valida el COVAM. Sin embargo no está claro a qué se refiere con acciones y, por lo tanto, es difícil determinar si es un indicador adecuado. Dado que el funcionamiento del Programa se basa en la contraloría social, es importante saber el éxito de ésta
156
Evaluación externa del “Programa 3x1 para migrantes 2007”
establecido.
Porcentaje de obras y acciones monitoreadas (Eficiencia)
24 de marzo de 2008
1
Como parte de la contraloría social, es necesario vigilar se de cumplimiento de la obra, de acuerdo al presupuesto y tiempo previamente establecido.
1
Informe Final
beneficiarios y los deseos de los migrantes Esta actividad es de alta relevancia pues vigila se ejerza el presupuesto en tiempo y forma y se satisfagan las necesidades de los beneficiarios y los deseos de los migrantes
1
La información es obtenidas de los informes trimestrales de la DGS por lo que no se incurre en gastos adicionales para obtenerla
0
No existe información
1
Dado que el funcionamiento del Programa se basa en la contraloría social, es importante saber el éxito de ésta
157