el nuevo sistema de m&e en el bidsiteresources.worldbank.org/intlacregtoppovana/... ·...
TRANSCRIPT
El nuevo sistema
de M&E en el BID
VII Conferencia de la Red de Monitoreo y Evaluación en América Latina y el Caribe Santo Domingo, República Dominicana
Noviembre 15, 2011
El Marco de Efectividad en el Desarrollo (DEF)
Dos factores principales:
2
» “trabajar en los temas correctos” (Do the right things). “Cualquier intervención es una elección que prioriza unos temas sobre otros. Las
elecciones estratégicas del Banco deben reflejar la forma en la que el Banco puede contribuir, de forma eficiente y demostrable, a ciertas prioridades mas amplias definidas por cada uno de los países miembros.”
» “y hacer las cosas bien” (Do things right). Asegurarse que las operaciones del Banco puedan demostrar sus resultados, de forma
rigurosa, involucra :
-diagnósticos sustentados en evidencia empírica,
-evidencia de la eficacia de las soluciones propuestas,
-insumos y productos entregados en tiempo y costo,
-los riesgos de las operaciones son gestionados y las medidas de mitigacion son monitoreadas.
-utilización de métodos de evaluación rigurosos para demostrar que los insumos y productos se transforman en los resultados buscados.
El Marco de Efectividad en el Desarrollo (DEF)
3
•En Agosto 2008, el Directorio del Banco aprobó el Marco de Efectividad en el Desarrollo (MED)
•Incrementar la capacidad del Banco de demostrar los resultados de sus intervenciones •Cumplir con estándares internaciones para la evaluaciones de las intervenciones de desarrollo OECD-DAC Evaluation Cooperation Group
MED
Estrategias de Países
Operaciones con garantía
Soberana
Operaciones sin garantía Soberana
Productos no Financieros
4
IDB – 9 Prioridades
Prioridades de las
Estrategias de País
» cuales son y como elegimos?…
Prioridades Institucionales y sus métricas– El Marco de Resultados del BID
Las Prioridades de Desarrollo de los Países, el rol del BID y sus métricas – La Matriz de Resultados
de la Estrategia de País
1er Paso: Trabajar en los temas correctos…
2
Lo
w
H
igh
IDB
Str
ate
gic
Pri
ori
ties
4
3
Low High
Country Strategic Priorities
1
2
Trabajar en los temas correctos….
Mapeo de nuestros productos a las prioridades
5
2 Hacer las cosas bien… la Matriz de Efectividad
en el Desarrollo (DEM)
6
» Mide la evaluabilidad de los proyectos propuestos
El nivel en el cual una actividad o un programa podrá ser evaluado de manera confiable y creíble
» Es una lista de verificación sobre requerimientos analíticos y de información » Sistema de respuesta: Si/No » Calificaciones parciales por dimensión de evaluabilidad
2 Hacer las cosas bien… la Matriz (DEM)
» Esta la operación directamente relacionada con los acuerdos del CS-CP?
» Esta la operación alineada a las prioridades del IDB-9 ?
4
3 1
2
Alineación
Estratégica
» Si no, justificar su
importancia
» Por que es esta
intervención lo correcto
para el Banco?
7
Sección 1 de la DEM
Monitoreo & Evaluación
Análisis Económico
Gestión de Riesgos
Lógica del Programa
Hacer las cosas bien… la Matriz (DEM) Sección 2 de la DEM
Evaluabilidad
» Podemos demostrar los resultados de la operación de forma
rigurosa?
» El diagnostico y la solución propuesta tiene sustento empírico?
» Son los riesgos y sus medidas de mitigacion gestionables?
SG
Riesgos y Mitigantes Ambiental/Social
Contribución al Desarrollo Económico
Desarrollo del Sector Privado
Desempeño del Proyecto o de la Compañía
NSG
8
Indice de Evaluabilidad (DEM-SGO)
» Para las secciones que conforman la dimensión de evaluabilidad se ha
desarrollado un índice, en el cual dichas secciones tienen los siguientes pesos:
» Los Gobernadores en el BID-9 acordaron un nivel mínimo de evaluabilidad (el
100% de las operaciones deben obtener mínimo 5 en el índice de
evaluabilidad) Escala de Puntajes: Altamente Evaluable (7 - 10); Evaluable (6 – 6.99); Parcialmente Evaluable (5 –
5.99); Parcialmente No Evaluable (4 – 4.99); No Evaluable (2 – 3.99); Altamente No Evaluable (0 –
1.99)
9
Monitoreo & Evaluación
Gestión de Riesgo
Lógica del Programa
El proyecto tiene metodologías específicas
para monitorear y evaluar el cambio esperado?
El proyecto tiene riesgos identificados? Si es así, tiene indicadores
para monitorear la implementación de las medidas de mitigación?
El proyecto está empíricamente sustentado?
El proyecto tiene métricas para medir cada hipótesis?
25%
25%
25%
Desempeño Económico El proyecto cuenta con un análisis costo-beneficio
o costo-efectividad para la solución propuesta? 25%
Resultados 2008-2010
10
Resultados 2008-2010
11
Resultados 2008-2010
12
Informe de Seguimiento del Progreso (PMR): Que medir para monitorear la implementación del
proyecto
Matriz de Resultados
Resultados
Productos
Planificación de
indicadores
Monitoreo Resultados (n) Puntos de Control y Fin
de proyecto
Monitoreo Productos Progreso en el avance de
metas físicas y sus costos
totales
Diseño Ejecución
Plan de avance
físico y
financiero
PMR
Indice Desempeño
DEM XPMR
Riesgos, Problemas, Lecciones
13
ID Productos
Fin del
Programa
Costos
2009 2010 2011 2012 2013
Total Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso
$(000) $ $ $ $ $ $ $ $ $ $
1.0 Producto1…
2.0 Producto 2
3.0 Producto 3
4.0 Producto 4
5.0 Producto 5
TOTAL $0
DESEMBOLSOS
Fin del
Programa 2009 2010 2011 2012 2013
Total Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso
$(000) $ $ $ $ $ $ $ $ $ $
TOTAL
Informe de Seguimiento del Progreso (PMR): Que medir para monitorear la implementación del
proyecto
14
2 Ventajas y Desafíos para el Monitoreo
Mejorar capacidad de planificación (Banco y Agencias Ejecutoras)
Asegurar mejor calidad de la información (cuantitativa y cualitativa)
Mejorar los sistemas de control interno en sectores
Mejorar la claridad de los productos (estandarización) y su unidad de
medida
Asegurar la recolección de la información de datos (incluyendo los
corporativos) para facilitar el reporte y visualización de resultados
Introducir incentivos para la colaboración (Plan de Supervisión) y
Recursos para Ejecución
15
