monitoreo y evaluación: definición, funciones y · pdf filediplomado...
TRANSCRIPT
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Monitoreo y evaluación:
definición, funciones y usos…
Dr. Rafael Arana Picado [email protected]
83911601
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Introducción
• No dejes apagar el entusiasmo, virtud tan
valiosa como necesaria; trabaja, aspira, tiende
siempre hacia la altura.
• Pues si te empeñas en soñar te empeñas en
aventar la llama de tu vida.
• . Félix Rubén García Sarmiento
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Tres grandes área que cuidar…
Evaluación Supervisión Monitoreo
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Por qué debemos monitorear?
• Nos brinda pistas de las entradas y salidas
y los compara con el plan
• Identifica y aborda los problemas
• Garantiza el uso eficaz de los recursos
• Garantiza la calidad y el aprendizaje para
mejorar las actividades y servicios
• Fortalece la rendición de cuentas
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Qué es Monitoreo?
• Es un proceso continuo y sistemático en el cual
verificamos la eficiencia y la eficacia de un
proyecto, programa etc
• Permite identificar logros y debilidades y en
consecuencia, recomendamos medidas
correctivas para optimizar los resultados
esperados
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Antes de elaborar el plan de M&E
responda… • A quién remitiremos la información?
– Mapas de procesos, actividades críticas
• Cuáles son las necesidades de información
cuantitativa y cualitativa? – Revisar contratos o convenios, compromisos de país
• Lista de indicadores
• Elaborar instrumentos para recolección y
reporte a utilizar
• Tiempo, espacio y persona
• Cómo se deben procesar los datos?
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
En qué se centra el monitoreo?
• A lo interno:
– Eficacia
– Eficiencia
– La focalización
• A lo externo:
– Los efectos
– El impacto
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Qué es evaluación?
• Es un proceso integral y continuo de
investigación y análisis de cambios más o
menos permanentes en el mediano y largo
plazo, ocasionado de forma directa o
indirecta por un proyecto, la población y las
organizaciones participantes
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Qué es evaluación?
• Evaluación ocasional del rendimiento
global y los impactos
• Diseñada específicamente con la intención
de atribuir los cambios a la intervención en
sí
• Responde a la pregunta, "¿qué hemos
logrado y qué impacto tiene lo que hicimos
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Tipos de evaluación
Tipo Propósito
Formativa Evaluación de las poblaciones objetivo y el medio
ambiente contextual. Determina el concepto y diseño
De proceso Busca identificar el grado en que las actividades
planificadas se han logrado y se evalúa la calidad de
las actividades / servicios
De resultado Examina los resultados específicos del programa y
sus logros. ¿Qué cambios se han observado, ¿qué
significa, y si los cambios son el resultado de las
intervenciones?
Impacto Medidores generales del programa de impacto y
eficacia. Tiene como objetivo fortalecer el diseño y la
replicación de los programas y estrategias eficaces
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Diferencias..
Monitoreo Evaluación
Continuo: día a dia Periodico: hitos
imporantantes
Documenta los progresos Análisis en profundidad de
los logros
Se focaliza en las entradas y
salidas
Se focaliza en los resultados
y el impacto
Alerta a los administradores
de los problemas
Proporciona opciones de
estrategia y política
Auto evaluación Análisis externo
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Nivel Description Frecuencia
Entrada Recursos que se ponen en el proyecto.
Conducir a la consecución de los productos
Continua
Salida Actividades o servicios que ofrece el proyecto.
Salidas conducen a resultados
Trimestral
Resultados Cambios en los comportamientos o habilidades
como resultado de los proyectos
implementados. Los resultados se espera que
generan impactos
2-3 years
(a corto y mediano
plazo)
Impactos Cambios mensurables en el estado de salud,
particularmente redujo la transmisión de
ITS/VIH y reducir el impacto del SIDA.
Resultados de impacto son efectos de la
intervención
3-5 años
(a largo plazo)
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
MARCO DE TRABAJO EN M y E
FINALIDAD CONTEXTO PROCESO
DISEMINACION
Y USO DE
INFORMACIÓN
ESTRATÉGICA
PERSONAS
ALIANZAS
PLANIFICACION
RECOLECCION
VALIDACION
ANÁLISIS
Comunicación
oportuna
Perfil de audiencias
Capacidad de
• Síntesis
• Traducción lenguaje
técnico a lenguaje
político
Estructura y funciones
Recursos humanos
Alianzas para
coordinar y gerenciar
Plan Multi-sectorial
Plan Operativo
Cultura
Monitoreo
Vigilancia
Epidemiológica
Base de datos
Supervisión y
Auditoría
Evaluación
Investigación
Marco de Trabajo para un Sistema Nacional Funcional de MyE en VIH – 12 Componentes
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Supervisión..
• “Mirar desde lo alto“
• Proceso que una persona con conocimentos y
experiencias, asume la responsabilidad de dirigir
a otras para obtener con ellos resultados que les
sean comunes.
• Proceso en el cual una o más personas con
conocimientos y experiencias, asumen la
responsabilidad de acompañar a otras para
obtener los que les sean comunes..
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Carácterísticas de un(a) supervisor
• Conocimiento del trabajo
y responsabilidades
• Habilidad para innovar y
mejorar día a día
• Liderazgo
• Actitud positiva
• Conocimiento del trabajo
y competencia técnica
• Capacidad de aprender y
re-aprender Habilidad
para resolver problemas.
• Ética
• Capacidad para
desarrollar buenas
relaciones personales,
profesionales y resilencia
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Tipos de supervisión
Liberal Autocrático Democrático
Deja que
otros
tomen
control del
problema
Señala qué
debe hacerse,
cómo y
cuándo,
personalismo
exagerado
Permite que
los
trabajadores
analicen los
problemas y
las soluciones
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Qué elementos debe tener un plan de
supervisión?
• Objetivos e indicadores
• Guía de supervisión estandarizada
• Cronograma
• Presupuesto
• Informes anteriores de supervisiones efectuadas
• Información de apoyo (normas, descripción de
funciones, informes previos, estadísticas, otros).
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Otras definiciones en M&E
¿Qué es una meta?
Establece lo que se busca lograr a través del proyecto.
Provee dirección general.
Sienta la base para desarrollar los objetivos.
Establece la población a alcanzar
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
¿Qué es un objetivo?
Sirve como base para monitorear el progreso para el
logro de las metas.
Describe los resultados esperados, la forma en que
estos se van a lograr, y establece una fecha límite
Describe los resultados de manera medible
Indica el logro parcial de la meta
21
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
La Diferencia entre Metas y Objetivos
22
Una escalera de objetivos nos conduce a la meta
META
Objetivo2
Objetivo1
Objetivo3
Característica de un objetivo
Específico (S)
Medible (M)
Alcanzable (A)
Relevante (R)
Temporal (T)
Objetivos SMART
S especifico
Identifica eventos concretos o acciones que van a
ocurrir, Población meta, Área geográfica.
Medible Cuánto se va a hacer
Cuánto cambio se espera
Alcanzable Factible tomando en cuenta el tiempo y los recursos
disponibles
Relevante
El objetivo se relaciona con la metas
¿Hace sentido el objetivo en términos de lo que estamos
tratando de lograr?
Temporal ¿Para cuándo? Define un tiempo especifico para
alcanzar el objetivo
24
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Ejemplos
• Para enero de 2012, garantizar la disponibilidad de la
prueba de VIH a 90% de personas que la soliciten de
acuerdo con la normativa nacional, a través de
capacitación y equipamiento de centros de salud
25
¿Este enunciado cumple con las características de un buen objetivo?
Objetivo
• Al finalizar el 2007, existirá un sistema de información
automatizado en línea para el manejo de la información
del sistema de vigilancia de VIH/SIDA.
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
¿Qué son actividades?
Acciones que se llevan a cabo para lograr los objetivos.
Es necesario diferenciarlas de las TAREAS, dimensión,
alcance, inversión
¿Qué son resultados?
Efectos que se esperan causar con el programa de
vigilancia y sus componentes.
Deben ser:
Relevantes
Importantes
Discretos
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
¿Qué es un indicador?
Nos permite medir el grado de progreso hacia un objetivo
28
0% 100% 50%
Lograr que el 100% de las empresas que tienen planes de salud
ocupacional incluyen el tema de VIH y sida para el 2010
Porcentaje de INSTITUCIONES y ONG que
cuentan e implementan una política de VIH y
sida en el ámbito laboral
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Ejemplos de indicadores
Recursos Porcentaje del presupuesto nacional dedicado a
actividades de prevención de contagio de VIH
Productos # trabajadoras sexuales capacitadas en uso
correcto del condón masculino
Resultados
corto plazo
Porcentaje de trabajadoras sexuales que reportan
usar condón con su último cliente
Resultados
largo plazo
Prevalencia de VIH en trabajadoras sexuales en
Nicaragua
29
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Atributos de un indicador
• Fácil de entender para todos
• Consistente
• Oportuno
• Pertinencia
• Relacionado en lo posible con la sostenibilidad
económica, social y ambiental
• Confiabilidad
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Estructura de una matriz de indicadores
Indicador
Objetivo
Resultado esperado
Fuente y mecanismo
de recolección
Responsable
Tiempo de reporte
Numerador Denominador
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Que es un dato?
• Son hechos aislados y en bruto, los cuales
situados en un contexto significativo mediante
una o varias operaciones de procesamiento,
permiten obtener deducciones relacionadas con la
evaluación e identificación de personas, eventos
y objetos
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Que es información?
• Es un acontecimiento a una serie de
acontecimientos, que llevan un mensaje y
que la ser percibida por el receptor
mediante alguno de sus sentidos , amplia
sus conocimientos
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Un abordaje de preguntas de salud pública para
M&E en VIH
34
INSUMOS
7. Están funcionando las intervenciones/haciendo
una diferencia?
Estudios de evaluación de resultados
6. Estamos implementando el programa tal y como se
planificó?
Monitoreo de productos
5. Que estamos haciendo? Lo estamos haciendo bien?
Monitoreo de procesos y evaluación, evaluación de calidad
4. Qué internviones y recursos se necesitan?
Análisis de necesidades, recursos y respuestas; Monitoreo de insumos
3. Cuáles intervenciones pueden funcionar (eficacia y efectividad)? Estamos haciendo
lo correcto?
Estudios especiales, investigación operativa, foramtiva y de síntesis
2. Cuáles son los factores contribuyentes?
Investigación sobre determinantes
Comprendiendo
las respuetas
potenciales
8. Se están implementando esfuerzos
coletivos a una escala lo suficientemente
grande para tener un impacto en la
epidemia (cobertura-impacto)?
Estudios y vigilancia epidemiológica
Determinar efectividad
colectiva
MONITOREO DE
RESULTADOS E
IMPACTO
RESULTADOS
ACTIVIDADES
PRODUCTOS
M y E de
Programas
Nacionales
Estamos haciendo
las cosas bien?
Estamos desarrollando las
intervenciones correctas a una
escala lo suficientemente
grande?
1. Cuál es el problema?
Análisis de situación y vigilancia epidemilógica
Identificación del
problema
Estamos haciendo lo
correcto?
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Diplomado Centroamericano en Monitoreo y Evaluación para la gestión de Políticas y Programas de VIH-sida. Nicaragua
Muchísimas gracias