Concepto Datos generales

Nombre del Programa evaluado: Programa para la Constitución de Garantías Líquidas

Modadlidad y clave presupuestal F-001

Dependencia/Entidad: Secretaría de Hacienda y Crédito Público

Unidad Responsable: Financiera Rural

Tipo de Evaluación Consistencia y Resultados

Nombre de la instancia evaluadora: C230 Consultores, S.C.

Nombre del coordinador de la evaluación: Mtro. Raúl Abreu Lastra

Nombres de los principales colaboradores: Mtro. Marco López Silva y Lic. Juan Carlos López Bórquez

Nombre de la unidad administrativa responsable

de dar seguimiento a la evaluación:Dirección General Adjunta de Planeación Estratégica y Análisis Sectorial

Nombre del titular de la unidad administrativa

responsable de dar seguimiento a la evaluación:Mtro. Javier Warman Diamant

Forma de contratación de la instancia

evaluadora:

Invitación Nacional a Cuando Menos Tres Personas Mixta

No. IA-006HAN001-N57-2011

Costo total de la evaluación: $445,000.00 (incluye IVA)

Fuente de financiamiento: Presupuesto asignado para evaluación 2011

2

Evaluación de Consistencia y Resultados 2011 Programa para la Constitución de Garantías Líquidas

Entregable Final

Preparado para Financiera Rural Abril de 2012

3

RESUMEN EJECUTIVO En cuanto a su diseño, el Programa contribuye al logro de los objetivos estratégicos de Financiera Rural. El Propósito del Programa está vinculado con el Programa Sectorial. Además, el objetivo sectorial del Programa está vinculado con el Programa Nacional de Desarrollo (PND). Existe cierta correspondencia entre las Reglas de Operación (ROP) y la Matriz de Indicadores para Resultados (MIR); se cuenta con un padrón de beneficiarios y las metas de los indicadores de la MIR cuentan con unidad de medida e impulsan el desempeño. La población potencial y objetivo del Programa está definida y cuantificada en términos generales, sin embargo, falta cuantificar la población objetivo de los subgrupos de población que atiende el programa. El problema o necesidad prioritaria que busca resolver el Programa no está claramente identificado. No existe un diagnóstico adecuado del problema que atiende el Programa, lo que impide contar con una justificación teórica o empírica que sustente la intervención del Programa; asimismo, no hay vinculación del Programa con los Objetivos de Desarrollo del Milenio (ODM). Además, las poblaciones, potencial y objetivo, no están cuantificadas. Sin embargo, sí se cuenta con la cuantificación de la población potencial y objetivo para el otorgamiento de crédito. FinRural se basa en el VII Censo Agropecuario y Forestal de 2007 para estimar el universo de unidades de producción rural que no tienen crédito. La cuantificación de la población potencial del Programa no se ha realizado debido a su costo. En planeación y orientación a resultados, el Programa recolecta en el tiempo información de los apoyos dados a los beneficiarios. Además, recolecta información para monitorear su desempeño de manera oportuna, confiable y actualizada. Sin embargo, el Programa no cuenta con un plan estratégico de acciones, resultado de ejercicios de planeación institucionalizados, que contemple el mediano y largo plazo. No cuenta con planes de trabajo anuales publicados para alcanzar sus objetivos. No recolecta información socioeconómica de beneficiarios y no beneficiarios. En el tema referente a cobertura y focalización, el Programa cuenta con metas de cobertura anual con un horizonte de mediano plazo. Sin embargo, la población objetivo no está cuantificada. Debido a esto, no es posible cuantificar la cobertura del Programa. Sobre la operación, el Programa tiene procedimientos adecuados para recibir, registrar y dar trámite a las solicitudes. Además tiene mecanismos documentados para verificar dicho procedimiento. Los procedimientos del Programa para la selección de beneficiarios, para el otorgamiento de apoyos y sus respectivos mecanismos de verificación, están contenidos en el documento normativo. Estos procedimientos están estandarizados y son difundidos públicamente en su página electrónica. Las aplicaciones informáticas (SIPRO y SIA) cuentan con información confiable. Además, cuentan con mecanismos adecuados de transparencia y rendición de cuentas. Sin embargo, el Programa no cuenta con información sistematizada que permita conocer la demanda total de apoyos. No cuantifica ni desglosa los gastos en los que se incurre para generar los Componentes. Acerca de la percepción de la población atendida, el Programa cuenta con instrumentos adecuados y representativos para medir el grado de satisfacción de su población atendida. A su vez, el programa no cuenta con evaluaciones de impacto en donde se compare un grupo de beneficiarios con uno de no beneficiarios de características similares, ni cuenta con evaluaciones que no sean de impacto que permitan identificar hallazgos relacionados con el Fin y Propósito del Programa.

4

CONTENIDO

I. Introducción ................................................................................................................................ 8

II. Diseño del programa .................................................................... ¡Error! Marcador no definido.

1. El problema o necesidad prioritaria que busca resolver el programa está identificado en un documento que cuenta con la siguiente información: ................................................................. 10

2. Existe un diagnóstico del problema que atiende el programa que describa de manera específica: ...................................................................................................................................... 11

3. ¿Existe justificación teórica o empírica documentada que sustente el tipo de intervención que el programa lleva a cabo? ...................................................................................................... 12

4. El Propósito del programa está vinculado con los objetivos del programa sectorial, especial o institucional considerando que: ................................................................................................. 13

5. ¿Con cuáles objetivos, ejes y temas del Plan Nacional de Desarrollo vigente está vinculado el objetivo sectorial relacionado con el programa? ...................................................................... 14

6. ¿Cómo está vinculado el Propósito del programa con las Metas del Milenio? .................... 15

7. Las poblaciones, potencial y objetivo, están definidas en documentos oficiales y/o en el diagnóstico del problema y cuentan con la siguiente información y características: .................. 16

8. Existe información que permita conocer quiénes reciben los apoyos del programa (padrón de beneficiarios) que: .................................................................................................................... 17

9. Si el programa recolecta información socioeconómica de sus beneficiarios, explique el procedimiento para llevarlo a cabo, las variables que mide y la temporalidad de las mediciones. 18

10. ¿En el documento normativo del programa es posible identificar el resumen narrativo de la Matriz de Indicadores para Resultados (Fin, Propósito, Componentes y Actividades)? ........... 19

11. Las Fichas Técnicas de los indicadores del programa cuentan con la siguiente información: .................................................................................................................................. 20

12. Las metas de los indicadores de la MIR del programa tienen las siguientes características: 21

13. ¿Con cuáles programas federales y en qué aspectos el programa evaluado podría tener complementariedad y/o coincidencias? ....................................................................................... 22

14. La Unidad Responsable del programa cuenta con un plan estratégico con las siguientes características: .............................................................................................................................. 23

15. El programa cuenta con planes de trabajo anuales para alcanzar sus objetivos que: ..... 24

16. El programa utiliza informes de evaluaciones externas: .................................................. 25

17. Del total de los Aspectos Susceptibles de Mejora (ASM) clasificados como específicos y/o institucionales de los últimos tres años, ¿qué porcentaje han sido solventados acorde con lo establecido en los documentos de trabajo y/o institucionales? .................................................. 26

18. ¿Con las acciones definidas en los documentos de trabajo e institucionales, que a la fecha se han implementado, provenientes de los Mecanismos para el seguimiento a los

5

aspectos susceptibles de mejora derivados de informes y evaluaciones a los programas presupuestarios de la Administración Pública Federal de los últimos tres años, se han logrado los resultados establecidos? ............................................................................................................... 27

19. ¿Qué recomendaciones de la(s) evaluación(es) externa(s) de los últimos tres años no han sido atendidas y por qué? ............................................................................................................. 28

20. A partir del análisis de las evaluaciones externas realizadas al programa y de su experiencia en la temática ¿qué temas del programa considera importante evaluar mediante instancias externas? ...................................................................................................................... 29

21. El Programa recolecta información acerca de: ................................................................. 30

22. El programa recolecta información para monitorear su desempeño con las siguientes características: .............................................................................................................................. 31

23. El programa cuenta con una estrategia de cobertura documentada para atender a su población objetivo con las siguientes características: .................................................................. 32

24. ¿El programa cuenta con mecanismos para identificar su población objetivo? En caso de contar con estos, especifique cuáles y qué información utiliza para hacerlo. ............................. 33

25. A partir de las definiciones de la población potencial, la población objetivo y la población atendida, ¿cuál ha sido la cobertura del programa? .................................................................... 34

26. Describa mediante Diagramas de Flujo el proceso general del programa para cumplir con los bienes y los servicios (Componentes), así como los procesos clave en la operación del programa. ...................................................................................................................................... 35

27. ¿El programa cuenta con información sistematizada que permite conocer la demanda total de apoyos y las características de los solicitantes? (socioeconómicas en el caso de personas físicas y específicas en el caso de personas morales). .................................................................. 36

28. Los procedimientos para recibir, registrar y dar trámite a las solicitudes de apoyo cuentan con las siguientes características: ................................................................................... 37

29. El programa cuenta con mecanismos documentados para verificar el procedimiento para recibir, registrar y dar trámite a las solicitudes de apoyo con las siguientes características: ...... 38

30. Los procedimientos del programa para la selección de beneficiarios y/o proyectos tienen las siguientes características: ........................................................................................................ 39

31. El programa cuenta con mecanismos documentados para verificar el procedimiento de selección de beneficiarios y/o proyectos y tienen las siguientes características: ........................ 40

32. Los procedimientos para otorgar los apoyos a los beneficiarios tienen las siguientes características: .............................................................................................................................. 41

33. El programa cuenta con mecanismos documentados para verificar el procedimiento de entrega de apoyos a beneficiarios y tienen las siguientes características: ................................... 42

34. Los procedimientos de ejecución de obras y/o acciones tienen las siguientes características: .............................................................................................................................. 43

35. El programa cuenta con mecanismos documentados para dar seguimiento a la ejecución de obras y acciones y tienen las siguientes características: ......................................................... 44

36. ¿Cuáles cambios sustantivos en el documento normativo se han hecho en los últimos tres años que han permitido agilizar el proceso de apoyo a los solicitantes? .............................. 45

6

37. ¿Cuáles son los problemas que enfrente la unidad administrativa que opera el programa para la transferencia de recursos a las instancias ejecutoras y/o a los beneficiarios y, en su caso, qué estrategias ha implementado? .............................................................................................. 46

38. El programa identifica y cuantifica los gastos en los que incurre para generar los bienes y los servicios (Componentes) que ofrece y los desglosa en los siguientes conceptos: .................. 47

39. ¿Cuáles son las fuentes de financiamiento para la operación del programa y qué proporción del presupuesto total del programa representa cada una de las fuentes? ............... 48

40. Las aplicaciones informáticas o sistemas institucionales con que cuenta el programa tienen las siguientes características: ............................................................................................. 49

41. ¿Cuál es el avance de los indicadores de servicios y de gestión (Actividades y Componentes) y de resultados (Fin y Propósitos) de la MIR del programa respecto de sus metas? 50

42. El programa cuenta con mecanismos de transparencia y rendición de cuentas con las siguientes características: ............................................................................................................. 51

43. El programa cuenta con instrumentos para medir el grado de satisfacción de su población atendida con las siguientes características: ................................................................. 52

44. ¿Cómo documenta el programa sus resultados a nivel de Fin y de Propósito? ............... 53

45. En caso de que el programa cuente con indicadores para medir su Fin y Propósito, inciso

46. En caso de que el programa cuente con evaluación(es) externa(s) que no sea(n) de impacto y que permite(n) identificar hallazgo(s) relacionados con el Fin y el Propósito del programa, inciso b) de la pregunta 44, dichas evaluaciones cuentan con las siguientes características: .............................................................................................................................. 55

47. En caso de que el programa cuente con evaluación(es) externa(s), diferente(s) a evaluaciones de impacto, que permite(n) identificar uno o varios hallazgos relacionados con el Fin y/o el Propósito del programa, ¿cuáles son los resultados reportados en esas evaluaciones? 56

48. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestren impacto de programas similares, inciso c) de la pregunta 44, dichas evaluaciones cuentan con las siguientes características: ............................ 57

49. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestran impacto de programas similares ¿qué resultados se han demostrado? .......................................................................................................................... 58

50. En caso de que el programa cuente con evaluaciones de impacto, con qué características de las siguientes cuentan dichas evaluaciones: ............................................................................ 59

51. En caso de que se hayan realizado evaluaciones de impacto que cumplan con al menos las características señaladas en los incisos a) y b) de la pregunta anterior, ¿cuáles son los resultados reportados en esas evaluaciones? .............................................................................. 60

Anexo 1: Descripción General del Programa ............................................................................ 63

Anexo 2: Metodología para la cuantificación de las Poblaciones Potencial y Objetivo ............ 66

Anexo 3: Procedimiento para la actualización de la base de datos de beneficiarios ............... 67

Anexo 4: Resumen Narrativo de la Matriz de Indicadores para Resultados ............................. 68

7

Anexo 5: Indicadores ................................................................................................................. 69

Anexo 6: Metas del Programa ................................................................................................... 71

Anexo 7: Complementariedad y coincidencias entre programas federales ............................. 72

Anexo 8: Avance de las acciones para atender los aspectos susceptibles de mejora .............. 75

Anexo 9: Resultado de las acciones para atender los aspectos susceptibles de mejora .......... 77

Anexo 10: Análisis de recomendaciones no atendidas derivadas de evaluaciones externas ... 78

Anexo 11: Evolución de la Cobertura ........................................................................................ 79

Anexo 12: Información de la Población Atendida ..................................................................... 80

Anexo 13: Diagramas de flujo de los Componentes y procesos claves .................................... 81

Anexo 14: Gastos desglosados del programa ........................................................................... 82

Anexo 15: Avance de los Indicadores respecto de sus metas ................................................... 83

Anexo 16: Instrumentos de Medición del Grado de Satisfacción de la Población Atendida (Formato libre). ......................................................................................................................... 86

Anexo 17: Principales Fortalezas, Oportunidades, Debilidades, Amenazas y Recomendaciones. ................................................................................................................................................... 87

Anexo 18: Comparación con los resultados de la Evaluación de Consistencia y Resultados anterior. ..................................................................................................................................... 88

Anexo 19: Valoración Final del programa ................................................................................. 89

Anexo 20: Ficha Técnica con los datos generales de la instancia evaluadora y el costo de la evaluación. ................................................................................................................................ 91

8

I. INTRODUCCIÓN El presente documento corresponde al Entregable Final de la Evaluación de Consistencia y Resultados del Programa de Reducción de Costos de Acceso al Crédito (PRCAC), a cargo de la Financiera Rural (FinRural). Los Términos de Referencia de la evaluación fueron determinados por el Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL). La evaluación consta de 51 preguntas. En total, 34 preguntas debieron ser respondidas con un esquema binario (Sí/No) y el resto son abiertas. En la evaluación, se analizaron: La lógica y congruencia en el diseño del Programa; La vinculación del Programa con los instrumentos de planeación nacional y sectorial, así como

con la normatividad aplicable; Los instrumentos de planeación con que cuenta el Programa, incluyendo la existencia o no de

una estrategia de cobertura; El funcionamiento de los principales procesos y de los sistemas de información con que se

cuenta; La existencia o ausencia de mecanismos de recolección de la satisfacción de los beneficiarios; y Los resultados en la atención del problema que busca resolver. Para realizar la evaluación, fue necesario recolectar y analizar diversas evidencias documentales, tales como el Plan Nacional de Desarrollo, el Plan Nacional de Financiamiento para el Desarrollo, las Reglas de Operación del Programa, sus manuales de operación, Matriz de Marco Lógico e indicadores. Asimismo, se sostuvieron reuniones con los servidores públicos encargados del diseño y de la operación del Programa, durante las cuales se obtuvo información valiosa relativa a la manera en la que éste opera. El equipo evaluador desea agradecer las atenciones de los funcionarios de FinRural que facilitaron la información necesaria para la ejecución de los análisis; especialmente Javier Warman Diamant (Director General Adjunto de Planeación Estratégica y Análisis Sectorial) y Marco Antonio del Río Chivardi (Gerente de Planeación Estratégica).

9

II. DESCRIPCIÓN SINTÉTICA DEL PROGRAMA El Programa para la Constitución de Garantías Líquidas (PCGL) es uno de los cuatro programas presupuestales sujetos a Reglas de Operación a cargo de la Financiera Rural (FinRural). Tiene tres objetivos:

a) Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que le permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como constituir reservas preventivas a los Intermediarios Financieros Rurales;

b) Otorgar apoyos que permitan a los Acreditados de la Financiera Rural, amortizar parcial o totalmente financiamientos de la Financiera Rural ante caídas en los precios de sus productos atribuibles a variaciones en los mercados, cambios en las condiciones de producción, o por desastres naturales.

Para lograr dichos objetivos, la sección 3.4 de las Reglas de Operación 2010 del PCGL indica que el Programa ofrece los siguientes apoyos:

a) Apoyo para constituir garantías líquidas a través del Fondo de Garantías Líquidas

b) Apoyo para el otorgamiento de Garantías Líquidas Capitalizables

c) Apoyo para la constitución de Reservas Preventivas

d) Apoyo para enfrentar Contigencias de Mercado o Desastres Naturales

10

1. El problema o necesidad prioritaria que busca resolver el programa está identificado en un

documento que cuenta con la siguiente información: a) El problema o necesidad se formula como un hecho negativo o como una situación

que puede ser revertida. b) Se define la población que tiene el problema o necesidad. c) Se define el plazo para su revisión y su actualización.

No. FinRural cuenta con un documento denominado “Programas de Apoyo para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”, que contiene cierta información análoga a la necesaria en un Diagnóstico formal. Sin embargo, dicho documento corresponde a un análisis de la problemática general del crédito en el sector rural. No identifica el problema que el PI, en específico, busca resolver. No identifica la población que presenta el problema a atender por el PI, ni el plazo necesario para su revisión y actualización. Cabe mencionar que las Reglas de Operación del Programa (ROP) tampoco contienen la información requerida por esta pregunta. Esta situación constituye una debilidad relevante del Programa. Se recomienda elaborar un documento que estime la magnitud del problema planteado por el PI, con base en evidencia empírica o revisión de literatura especializada. El Diagnóstico que hoy tienen se refiere al quehacer de la FinRural en general, y no identifica cuál es el problema que los programas de subsidio buscan resolver. Sería aceptable que hubiera un solo Diagnóstico, e incluso que éste se refiera al problema general de bajo nivel de crédito para el sector rural, siempre que éste cumpliera con las siguientes condiciones: a) Demostrar que, en efecto, existe un bajo nivel de toma de crédito. Para esto habría que estimar cuál es la demanda, cuál es la oferta, y cuál es el nivel de toma de crédito actual - el Diagnóstico que hoy tienen sólo identifica (aunque bien claramente) el tercer elemento. Para el primer elemento, podrían usar o hacer encuestas, o comparativos internacionales. b) Identificar las causas y los efectos del problema, demostrando la existencia de cada uno mediante análisis estadísticos. Las causas deberían estar ordenadas en niveles - inmediatas, estructurales, etc. c) Identificar qué causa busca resolver cada uno de los Programas de subsidio con que cuentan, y cuáles son las sub-causas que explican cada causa, de modo que los programas de subsidio tengan claro qué es lo que tiene que resolver cada uno. Al no quedar clara cuál es la problemática que se busca resolver, se presenta el riesgo de distraer recursos públicos escasos en la búsqueda de solución de problemáticas múltiples – algunas de las cuales pueden no ser relevantes - por medios que no sean óptimos, eficaces o eficientes. Fuentes de información utilizadas: documento denominado “Programas de Apoyo para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”, Reglas de Operación.

11

2. Existe un diagnóstico del problema que atiende el programa que describa de manera específica:

a) Causas, efectos y características del problema. b) Cuantificación, características y ubicación territorial de la población que presenta el

problema. c) El plazo para su revisión y su actualización.

No. Como se comentó en la respuesta a la pregunta anterior, el documento que la Financiera Rural utiliza a manera de diagnóstico corresponde a un análisis de la problemática general del crédito en el sector rural; no contiene una descripción de las causas, efectos y características del problema específico que el PCGL buscaría resolver. En consecuencia, tampoco contiene información relativa a la población que presenta el problema, ni el plazo necesario para la revisión y actualización. Esta situación constituye una debilidad relevante del Programa. A efectos de atender lo señalado en la presente pregunta y la anterior, se considera necesario que FinRural emprenda la elaboración de un Diagnóstico formal por programa, que contenga:

La identificación del problema específico que cada programa busca resolver;

Un árbol de problemas, en que se identifique de forma clara cuáles son las causas y los efectos del mismo;

Una justificación de la existencia del problema, así como de sus causas y efectos, fundamentada en datos estadísticos públicos (como son los arrojados por los Censos Económicos, el Censo de Población y Vivienda o la Encuesta Nacional de Ingreso-Gasto de los Hogares) o en recolección primaria de información;

La identificación de la población que presenta el problema; su cuantificación, características y ubicación territorial;

El plazo necesario para su revisión y actualización. Dicho documento podría complementarse con un análisis que se enfoque en el problema que la Financiera Rural – a través del conjunto de sus programas de crédito y subsidio – busca resolver, y que aclare cuál es la relación apropiada entre sus distintos instrumentos. Fuentes de información utilizadas: documento denominado “Programas de Apoyo para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”, Reglas de Operación.

12

3. ¿Existe justificación teórica o empírica documentada que sustente el tipo de intervención que el programa lleva a cabo?

No. Como se comentó anteriormente, no se encontró un documento que definiera con claridad el problema que el PCGL buscaría resolver. A falta de lo anterior, el equipo evaluador decidió identificar los objetivos del Programa, sus tipos de apoyo, y analizar si existe evidencia de que los segundos tengan efectos positivos sobre los primeros. En esta línea, las Reglas de Operación aplicables al Programa (sección 2.2.3) indican que los objetivos del PCGL son los siguientes:

a) Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que le permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como constituir reservas preventivas a los Intermediarios Financieros Rurales.

b) Otorgar apoyos que permitan a los Acreditados de la Financiera Rural, amortizar parcial o totalmente financiamientos de la Financiera Rural ante caídas de los precios de sus productores atribuibles a variaciones en los mercados, cambios en las condiciones de producción, o por desastres naturales.

Por otra parte, la sección 3.4 del documento antes referido indica que el Programa ofrece los siguientes apoyos o componentes:

1. Apoyo para la constitución de garantías líquidas otorgado a través del fondo de garantías líquidas

2. Apoyo para el otorgamiento de garantías líquidas capitalizables 3. Apoyo para la constitución de reservas preventivas 4. Apoyo para enfrentar contingencias de mercado o desastres naturales

En este sentido, no fue posible encontrar evidencia teórica o empírica documentada que indicara que el otorgamiento de apoyos como los ofrecidos por el programa tiene efectos positivos sobre la consecución de objetivos similares a los del Programa. Cabe resaltar que el PGCL no ha sido sujeto a una evaluación de impacto. Fuentes de información utilizadas: documento denominado “Programas de Apoyo para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”, Reglas de Operación.

13

4. El Propósito del programa está vinculado con los objetivos del programa sectorial, especial o institucional considerando que:

a) Existen conceptos comunes entre el Propósito y los objetivos del programa sectorial, especial o institucional, por ejemplo: población objetivo.

b) El logro del Propósito aporta al cumplimiento de alguna(s) de la(s) meta(s) de alguno(s) de los objetivos del programa sectorial, especial o institucional.

Si. Nivel 3. De acuerdo a la Matriz de Indicadores de Resultados, el Programa para la Constitución de Garantías Líquidas (PCGL) es un programa sectorial vinculado al Programa Nacional de Financiamiento del Desarrollo 2008-2012. Específicamente, está vinculado con el Objetivo 2.4: “Fortalecer el papel de los mercados de deuda y capitales en el financiamiento al sector privado, promoviendo el desarrollo de nuevos vehículos de ahorro, inversión y manejo de riesgos”, y con su respectiva Estrategia 3.5: “Reorientar la actuación de la banca de desarrollo”. En la Matriz de Indicadores de Resultados, el PCGL tiene como propósito que “Los productores e intermediaros financieros rurales cuenten con apoyos que garanticen la liquidez oportuna para acceder u operar un crédito.” El programa también lista el siguiente objetivo estratégico de la dependencia: “Coadyuvar a realizar la actividad prioritaria del Estado de impulsar el desarrollo de las actividades agropecuarias, forestales, pesqueras y todas la demás actividades económicas vinculadas al medio rural, con la finalidad de elevar la productividad, así como de mejorar el nivel de vida de su población.” Se encuentra una vinculación clara con el cumplimiento del Objetivo 2.4 del Programa Nacional de Financiamiento del Desarrollo 2008-2012 y el propósito del programa, dado que un incremento en el número de productores e intermediarios financieros capaces de acceder u operar un crédito fortalece el papel en el financiamiento al sector privado. Además, existen conceptos comunes entre el PCGL y el Programa Nacional de Financiamiento del Desarrollo 2008-2012 tales como fortalecer el papel de los mercados de financiamiento al sector privado, y el desarrollo de vehículos de inversión y manejo de riesgos. El logro del propósito del programa no es suficiente por si solo para cumplir alguna de las metas del Programa Nacional de Financiamiento del Desarrollo 2008-2012, dado su limitado alcance como promotor de acceso u operación al crédito financiero. Fuentes: Programa Nacional de Financiamiento del Desarrollo 2008-2012. Matriz de Indicadores de Resultados.

14

5. ¿Con cuáles objetivos, ejes y temas del Plan Nacional de Desarrollo vigente está vinculado el objetivo sectorial relacionado con el programa?

De acuerdo a la Matriz de Indicadores de Resultados, el Programa para la Constitución de Garantías Líquidas está vinculado con el Eje 2 del Plan Nacional de Desarrollo: “Economía Competitiva y Generadora de Empleos”, con el Objetivo 2: “Democratizar el sistema financiero sin poner en riesgo la solvencia del sistema en su conjunto, fortaleciendo el papel del sector como detonador del crecimiento, la equidad y el desarrollo de la economía nacional” y con la Estrategia 2.2: “Promover la competencia en el sector financiero a través de la entrada de nuevos participantes, la promoción de una mayor diversidad de productos, vehículos y servicios financieros, enfatizando la información y la transparencia como medios para que los usuarios de la banca puedan tomar decisiones con toda la información necesaria, así como la promoción de la educación financiera de los segmentos de la población que han accedido más recientemente a los servicios bancarios.” Las Reglas de Operación del Programa (ROP) para la Constitución de Garantías Líquidas establece en la sección 2.2.3 el objetivo del programa es “Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios financieros Rurales y Entidades Dispersoras de Crédito que le permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como construir reservas preventivas a los Intermediarios Financieros Rurales.” Además, un segundo objetivo es “Otorgar apoyos que permitan a los Acreditados de la Financiera Rural, amortizar parcial o totalmente financiamientos de la Financiera Rural ante caídas en los precios de sus productos atribuibles a variaciones en los mercados, cambios en las condiciones de producción, o por desastres naturales.” Finalmente, las ROP de Financiera Rural establecen como objetivo general “facilitar el acceso y uso óptimo de los recursos crediticios.” Dado que los objetivos generales, y del programa buscan promover eficiencias en el sistema financiero y mayor otorgamiento de crédito para productores del sector primario de la economía, lo cual tiene como consecuencia los objetivos de la estrategia 2.2 del Plan Nacional de Desarrollo, y por ende de su Objetivo y Eje correspondientes, se encuentra que las ROP y la Matriz de Indicadores para Resultados (MIR) del Programa para la Constitución de Garantías Líquidas está correctamente relacionado con el Plan Nacional de Desarrollo. Fuentes: ROP, Matriz de Indicadores para Resultados, Programa Nacional de Desarrollo 2007-2012.

15

6. ¿Cómo está vinculado el Propósito del programa con las Metas del Milenio?

El Propósito del PCGL es “los productores e intermediarios financieros rurales cuentan con apoyos que garanticen la liquidez oportuna para acceder u operar un crédito”. El evaluador considera que no existe relación entre el Programa para la Constitución de Garantías Líquidas y el cumplimiento de los Objetivos de Desarrollo del Milenio (ODMs). Cabe señalar que el Informe de Avances 2010 sobre los Objetivos de Desarrollo del Milenio en México, emitido por la Presidencia de la República en agosto de 2011, identifica en sus páginas 24 a 28 los programas y políticas establecidos por el gobierno federal para alcanzar los ODMs; el PCGL no se encuentra dentro de ellos. El Informe tampoco hace referencia a programa alguno de la banca de desarrollo. Fuentes consultadas: MIR, ROP, Informe de Avances 2010 sobre los Objetivos de Desarrollo del Milenio en México

16

7. Las poblaciones, potencial y objetivo, están definidas en documentos oficiales y/o en el diagnóstico del problema y cuentan con la siguiente información y características:

a) Unidad de medida. b) Están cuantificadas. c) Metodología para su cuantificación y fuentes de información. d) Se define un plazo para su revisión y actualización.

No. Las Reglas de Operación del Programa (ROP) definen diversos conjuntos de población objetivo, en función de los apoyos que ofrece. Las diversas poblaciones objetivos, se pueden clasificar en dos tipos. En primer lugar están los acreditados, que pueden ser personas físicas o morales, que tienen el común denominador de solicitar crédito directamente a FR, o a través de un intermediario. En segundo lugar están organizaciones que obran como intermediarios financieros. Existe un documento denominado “Determinación y cuantificación de la población potencial y objetivo para el otorgamiento de crédito”. En éste, se define la población potencial de acreditados de la FR, y se hace una estimación de la misma. También se define y cuantifica la población objetivo para el período 2008-2012. Dado que la población potencial del Programa está demarcada por los usuarios que han tenido acceso a los servicios de FR, se podría esperar que al definir la población potencial de dicha institución, quede también definida y cuantificada. Sin embargo, la información con la que cuenta el programa resulta incompleta. Por un lado, en el documento antes mencionado, no se presentan datos o estimaciones sobre los intermediarios financieros que podrían ser parte de la población potencial, ni se define una población objetivo para ellos. Por otro lado, a pesar que está cuantificada la población potencial de los posibles productores que pueden recibir apoyo, no están cuantificados los subgrupos de esta que constituyen la población objetivo de los acreditados. Estos subgrupos son: • Acreditados de Financiera rural que reciban financiamiento para la capitalización de sus unidades productivas. • Acreditados de financiera rural con fondeo de otras instituciones. • Acreditados a los que se hubiese otorgado el apoyo pero por falta de recursos no se les otorgo. • Empresas de intermediación financiera que otorguen financiamientos con fondeo de la Financiera Rural. • Personas físicas o morales acreditados de la Financiera Rural afectadas por variaciones en los mercados p por desastres naturales. Se recomienda a la FR elaborar un documento que además de cuantificar la población potencial de acreditados, haga una estimación sobre los intermediarios financieros que forman parte de su población objetivo. Así mismo, que identifique los subgrupos de la población potencial que son susceptibles de los apoyos del PCGL y cuantifique cada uno de ellos por separado. Fuentes: Documento titulado “Determinación y cuantificación de la población potencial y objetivo para el otorgamiento de crédito” y Reglas de Operación del Programa

17

8. Existe información que permita conocer quiénes reciben los apoyos del programa (padrón de beneficiarios) que:

a) Incluya las características de los beneficiarios establecidas en su documento normativo.

b) Incluya el tipo de apoyo otorgado. c) Esté sistematizada e incluya una clave única de identificación por beneficiario que

no cambie en el tiempo. d) Cuente con mecanismos documentados para su depuración y actualización.

Sí. Nivel 3. FinRural cuenta con dos principales sistemas en que se capturan información sobre beneficiarios de la Financiera Rural: el Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). La información relevante al PCGL está en el SIA. El SIA permite identificar el tipo de beneficiario atendido, ya sea intermediario financiero o una persona física, y capturan datos tales como RFC, CURP, localidad, entre otros de acuerdo a las ROP. El SIA también recompilan información sobre el tipo de apoyo otorgado, permitiendo diferenciar cuando fue otorgado un apoyo, en cuantas ministraciones, entre otros datos financieros. Sin embargo, el SIA no tiene una clave única por beneficiario. Existe una clave única por contrato, pero esta no identifica únicamente a quién beneficia. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). Por otra parte, en su página de Internet, FinRural publica reportes que incluyen el nombre de las organizaciones que han recibido apoyos del programa, así como el total de los apoyos autorizados por componente. No publica el importe que cada organización recibió. Se encontró que el la información se encuentra actualizada y depurada. Todos los contratos abiertos por un intermediario financiero deben ser capturados electrónicamente y enviados a la agencia local de FinRural. Esta agencia en turno entrega los archivos a la coordinación regional, la cual remite la información al corporativo central. Este proceso tarda aproximadamente 15 días en completarse. Todos los contratos tienen fechas claras indicando cuando fue la apertura de un contrato, cuando fueron hechas las ministraciones de recursos, y cuando fue concluida la operación. Finalmente, el SIA parece no contener duplicidades significativas. Fuentes de información utilizadas: Página de internet de la Financiera Rural; Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA)

18

9. Si el programa recolecta información socioeconómica de sus beneficiarios, explique el procedimiento para llevarlo a cabo, las variables que mide y la temporalidad de las mediciones.

No procede valoración cuantitativa. El SIA no recolecta información socioeconómica de sus beneficiarios, la información que recompila es de carácter financiero y administrativo. Las solicitudes para apertura de contrato incluyen esta información, sin embargo no está disponible de forma sistematizada en forma electrónica, y no se tiene acceso a ella. Dado que sólo tres componentes de uno de los cuatro grupos de apoyo se administran a través del SIPRO se considera los programas no recolectan información socioeconómica de sus beneficiarios. Fuentes de información utilizadas: Página de internet de la Financiera Rural; Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA)

19

10. ¿En el documento normativo del programa es posible identificar el resumen narrativo de la Matriz de Indicadores para Resultados (Fin, Propósito, Componentes y Actividades)?

Si. Nivel 2. El Programa para la Constitución de Garantías Líquidas en las Reglas de Operación, Anexo 8 “Indicadores de Evaluación” identifica cuatro indicadores de resultados. La Matriz de Indicadores de Resultados indica cinco indicadores de resultados, sin embargo, únicamente dos indicadores coinciden con los indicadores listados en las ROP. Estos están listados como Fin y Propósito en la MIR. Ni las ROP ni otro documento normativo especifican que indicador mide el desempeño del fin, propósito, componentes o actividades. Esto representa una debilidad del programa. Se recomienda a FinRural elabore un documento normativo donde se establezca claramente las MIR del programa, las cuales deben guardar correspondencia con los indicadores listados en las ROP. FinRural indica que las MIR 2011 están validadas en su totalidad: en concordancia con la “Guía para la Construcción de la Matriz de Indicadores de Resultados y Guía para la Construcción de Indicadores Estratégicos”, evaluadas por la Secretaría de Hacienda y Crédito Público (SHCP), por la Comisión Económica para América Latina (CEPAL) y la Unidad de Evaluación de la Gestión y el Desempeño Gubernamental (UEGDG) con el apoyo de las áreas de Auditoría para el Desarrollo y Mejora de la Gestión de los Órganos Internos de Control (OIC). Fuentes. Matriz de Indicadores de Resultados. Reglas de Operación, Historia MIR e Indicadores de FinRural – Nota 2011.

20

11. Las Fichas Técnicas de los indicadores del programa cuentan con la siguiente información: a) Nombre. b) Definición. c) Método de cálculo. d) Unidad de Medida. e) Frecuencia de Medición. f) Línea base. g) Metas. h) Comportamiento del indicador (ascendente, descendente, regular ó nominal).

Si. Nivel 4. Existen cinco fichas técnicas, una para cada uno de los indicadores en la Matriz de Indicadores de Resultados. Todos estos indicadores cuentan con Fichas Técnicas que incluyen una definición, método de cálculo, unidad de medida, frecuencia de medición, línea base, metas y una indicación relativa al comportamiento deseable del indicador. Sin embargo, como se mencionó en la pregunta 10, la MIR y las fichas técnicas no coinciden con los indicadores establecidos en las ROP. Además, tres de los indicadores no se consideran adecuados.

El indicador de Propósito, por ejemplo, supone que es deseable una situación en la que un mayor porcentaje de los créditos de FinRural tengan asociado un apoyo del PCGL; para el equipo evaluador no resulta evidente la razón por la cual tal situación sería necesariamente positiva.

El indicador de Componente, Satisfacción de los beneficiarios que constituyen garantías líquidas, se basa en la percepción de los beneficiarios respecto de si los apoyos recibidos resultan en un fortalecimiento de capacidades; el equipo evaluador no lo considera apropiado dado que, como resulta evidente, los beneficiarios tienen el incentivo de manifestar una opinión positiva a efectos de continuar recibiendo los apoyos.

En cuanto al indicador de Actividad, Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la Constitución de Garantías Líquidas, éste mide la cobertura del Programa respecto a las personas que solicitan apoyo, sin embargo sería de mucha mayor utilidad – por ejemplo, para efectos de juzgar sobre la suficiencia presupuestal del Programa – medir la cobertura respecto de toda la población que presenta el problema (es decir, de la población potencial).

Fuente: MIR. Fichas Técnicas.

21

12. Las metas de los indicadores de la MIR del programa tienen las siguientes características: a) Cuentan con unidad de medida. b) Están orientadas a impulsar el desempeño, es decir, no son laxas. c) Son factibles de alcanzar considerando los plazos y los recursos humanos y

financieros con los que cuenta el programa. Si. Nivel 2. Los indicadores para Fin, propósito, los dos componentes y actividad cuentan con unidad de medida, son factibles de alcanzar considerando los plazos y los recursos del programa. Los indicadores para Fin, propósito y el segundo componente están orientados a impulsar el desarrollo. El indicador de actividad es laxo. Este indicador mide que porcentaje de las solicitudes es atendido, la línea base es 100 y la meta es 100. Sin embargo, dado el funcionamiento de SIA – la base de datos del PCGL –no se permite agregar una solicitud de garantía líquida una vez que se agotaron los recursos, por lo cual no es posible contabilizar correctamente las solicitudes del programa El indicador del componente 1 es laxo. Este indicador mide el porcentaje de usuarios con opiniones favorables del programa. La línea base es de 93 y la meta es de 94. Se encuentra la meta es demasiado cercana a la línea base y por lo tanto no impulsa el desempeño del programa. Financiera Rural no presento un documento donde se presente la metodología utilizada para establecer cada meta. Fuentes de información utilizadas: Matriz de Indicadores para Resultados 2011; Fichas Técnicas de Indicadores 2011

22

13. ¿Con cuáles programas federales y en qué aspectos el programa evaluado podría tener complementariedad y/o coincidencias?

La nota informativa “Análisis de complementariedad o duplicidad” de noviembre 2011 de la Dirección General Adjunta de Fomento y Promoción de Negocios (DGAFPN) indica que con el catálogo de Programas que emite cada año la Secretaría de Gobernación para que las entidades locales puedan aprovechar cabalmente los apoyos federales y el documento de “Análisis de los instrumentos de política agropecuaria, rural y pesquera en México” publicado por la Food and Agriculture Organization (FAO) en el 2010 se identifica duplicidades y complementariedades entre programas de la Administración Pública Federal y la Financiera Rural que a continuación se presenta:

• Que los programas de apoyo muestran complementariedad con programas operados por la Secretaría de Agricultura, Ganadería, Desarrollo Rural, Pesca y Alimentación (SAGARPA).

• Se identificaron relaciones de duplicidad en función del tipo de apoyos que otorgan los programas específicos operados por FIRA y Financiera Rural como agentes técnicos en contraste con otros programas que otorgan apoyos similares y que son operados por otras dependencias federales.

• Se identificó que tanto el Banco del Ahorro Nacional y Servicios Financieros (BANSEFI) como la Secretaría de Economía (SE) otorgan apoyos del mismo tipo a través de tres programas: BANSEFI: El Programa de Apoyo para Fomentar la Inclusión Financiera y el Fortalecimiento del Sector de Ahorro y Crédito Popular; SE: El Programa del Fondo de micro financiamiento a Mujeres Rurales (FOMMUR), al igual que el Programa de Fomento Tecnológico Esquema de Fortalecimiento de las Competencias Financiera y Empresarial para Intermediarios Financieros no Bancarios.

• Se recomienda diseñar esquemas en los programas de financiamiento que promuevan, de manera coordinada, una cultura financiera entre productores del medio rural y los temas relacionados con las formas de acceder a los instrumentos financieros que ofrecen las diferentes instituciones de financiamiento, se trate de la banca de desarrollo y/o de los programas de micro financiamiento que ofrece la SE.

Puede también existir sinergia y complementariedad con el Fondo Nacional de Apoyos para Empresas en Solidaridad (FONAES) de la Secretaría de Economía (SE), que busca impulsar la generación de empleos, mediante el apoyo a la creación, el desarrollo y la consolidación de proyectos productivos, comerciales o de servicios. También pueden existir complementariedades con el FOMMUR de la SE que en su Propósito busca: “Mujeres rurales emprendedoras en condiciones de pobreza que crean y desarrollan microempresas a través del acceso al financiamiento”. También pueden encontrarse complementariedades en el PRONAFIN de la SE que en su propósito indica: “Emprendedores en condición de pobreza crean y desarrollan microempresas a través del acceso al financiamiento”

[Fuentes de información utilizadas: Evaluación de Diseño 2008, Seguimiento a Aspectos Susceptibles de Mejora 2007, Nota Informativa DGAFPN 28/Nov./2011]

23

14. La Unidad Responsable del programa cuenta con un plan estratégico con las siguientes características:

a) Es resultado de ejercicios de planeación institucionalizados, es decir, sigue un procedimiento establecido en un documento.

b) Contempla el mediano y/o largo plazo. c) Establece los resultados que quieren alcanzar, es decir, el Fin y Propósito del

programa. d) Cuenta con indicadores para medir los avances en el logro de sus resultados.

No. Información inexistente. Esta carencia constituye una debilidad relevante del Programa, por lo cual se le recomienda la elaboración de un Plan Estratégico, de actualización periódica, que cumpla con las características señaladas en la pregunta.

24

15. El programa cuenta con planes de trabajo anuales para alcanzar sus objetivos que: a) Son resultado de ejercicios de planeación institucionalizados, es decir, siguen un

procedimiento establecido en un documento. b) Son conocidos por los responsables de los principales procesos del programa. c) Tienen establecidas sus metas. d) Se revisan y actualizan.

No. Información inexistente. FinRural no proporcionó ningún documento con las características solicitadas. Se recomienda Financiera Rural elabore planes de trabajos anuales que establezcan sus metas.

25

16. El programa utiliza informes de evaluaciones externas: a) De manera regular, es decir, uno de los elementos para la toma de decisiones sobre

cambios al programa son los resultados de evaluaciones externas. b) De manera institucionalizada, es decir, sigue un procedimiento establecido en un

documento. c) Para definir acciones y actividades que contribuyan a mejorar su gestión y/o sus

resultados. d) De manera consensada, participan operadores, gerentes y personal de la unidad de

planeación y/o evaluación. Si. Nivel 3. El PCGL fue evaluado por la Universidad Nacional Autónoma de México (UNAM) con respecto a su Diseño y Funcionamiento y Operación en 2007. Esta evaluación externa concluyó sin dar recomendaciones. De acuerdo al documento institucional de “Seguimiento a aspectos susceptibles de mejora derivados de las evaluaciones externas 2007”, el PCGL tuvo cambios sustanciales a fin de 2007, lo cual culminó con nuevas ROP. Esto indica que las evaluaciones externas se utilizan para definir acciones y actividades que contribuyan a mejorar su gestión y/o sus resultados. De acuerdo al documento institucional de “Seguimiento a aspectos susceptibles de mejora derivados de las evaluaciones externas 2008”, la Dirección General Adjunta de Planeación Estratégica y Análisis Sectorial se comprometió a implementar acciones que permitan cuantificar apropiadamente la población objetivo. Sin embargo, este mismo documento citado omite cualquier referencia a la segunda recomendación realizada en la evaluación externa de diseño sobre posibles duplicidades y complementariedades. El documento Aspectos Susceptibles de Mejora (ASM) 2011 reporta la cuantificación de la población objetiva del PCGL está en curso, y se planea completar en Junio de 2012. Tampoco existe una evaluación externa después de 2008 con lo cual indique el programa las realiza de forma regular. Las ROP en la sección 6.2 establecen el programa deberán ser evaluados por instituciones académicas, de investigación u otros organismos especializados. Lo cual indica un documento establece un procedimiento para proceder con respecto a evaluaciones externas. Respecto a este tema, cabe notar que la sección 6.2 de las ROP requiere apegarse al Artículo 78 de la Ley Federal de Presupuesto y Responsabilidad Hacendaria y no existe un procedimiento institucional adicional a seguir con respecto a las evaluaciones externas. Fuentes: Seguimiento a aspectos susceptibles de mejora derivados de las evaluaciones externas 2007. Seguimiento a aspectos susceptibles de mejora derivados de las evaluaciones externas 2008. Evaluación de Diseño del Programa para la Constitución de Garantías Líquidas realizada por la Universidad Nacional Autónoma de México (UNAM) en 2007. Evaluación de Funcionamiento y Resultados del Programa para la Constitución de Garantías Líquidas realizada por la UNAM en 2008. Evaluación de Diseño del Programa para la Constitución de Garantías Líquidas realizada por la UNAM en 2008. Ley Federal de Presupuesto y Responsabilidad Hacendaria.

26

17. Del total de los Aspectos Susceptibles de Mejora (ASM) clasificados como específicos y/o

institucionales de los últimos tres años, ¿qué porcentaje han sido solventados acorde con lo establecido en los documentos de trabajo y/o institucionales?

Si. Nivel 2. El documento de Aspectos Susceptibles de Mejora (ASM) 2007 cita una evaluación externa de diseño realizada por la UNAM en 2007. No existe ninguna mención a la evaluación externa de diseño, funcionamiento y operación de 2007 en el documento ASM 2007. La falta de atención a esta evaluación es una seria falta en los ASM 2007. El documento de ASM 2007 indica se realizaron cambios extensos a los programas después de las evaluaciones externas, los cuales culminaron en nuevas ROP. No obstante, no se menciona ningún cambio especificó al PCGL. El documento ASM 2008 hace referencia únicamente a una de las dos recomendaciones hechas en la evaluación de diseño 2008. En los ASM se reporta el seguimiento a la carencia de cuantificación de la población objetivo, más no se reporta sobre la falta de análisis de duplicidades y complementariedades con otros programas federales. El documento ASM 2011 reporta la cuantificación de la población objetiva del PCGL está en curso, y se planea completar en Junio de 2012. De la evaluación de diseño 2008 se tiene las observaciones: a) La población objetivo y potencial se encuentran definidas falta su caracterización y cuantificación b) Existen posibles duplicidades y complementariedades con otros programas El único aspecto susceptible de mejora que se incorporó en el Documento institucional (Evaluaciones 2008) fue que: “El programa carece de la cuantificación de la población objetivo.” Fuente: ASM 2007. ASM 2008. Evaluación de Diseño del Programa para la Constitución de Garantías Líquidas realizada por la UNAM en 2007. Evaluación de Funcionamiento y Operación del Programa para la Constitución de Garantías Líquidas realizada por la UNAM en 2008. Evaluación de Diseño del Programa para la Constitución de Garantías Líquidas realizada por la UNAM en 2008.

27

18. ¿Con las acciones definidas en los documentos de trabajo e institucionales, que a la fecha se han implementado, provenientes de los Mecanismos para el seguimiento a los aspectos susceptibles de mejora derivados de informes y evaluaciones a los programas presupuestarios de la Administración Pública Federal de los últimos tres años, se han logrado los resultados establecidos?

El documento ASM 2011 reporta el seguimiento a la carencia de cuantificación de la población objetivo, el cual se espera completar en Junio 2012. Sin embargo, ni los ASM 2008, ni el ASM 2011 reportan sobre la falta de análisis de duplicidades y complementariedades con otros programas federales. Fuentes de información utilizadas: Informes de las Evaluaciones de Diseño 2008, Documento Institucional relativo a la Evaluación 2008; Documentos de Posicionamiento Institucional relativos a las Evaluaciones 2007 y 2008

28

19. ¿Qué recomendaciones de la(s) evaluación(es) externa(s) de los últimos tres años no han sido atendidas y por qué?

La evaluación externa de diseño 2008 recomienda realizar un análisis de posibles duplicidades y complementariedades con otros programas federales. Esta recomendación no se encuentra en los ASM 2008, ni en los ASM 2011. No existe tampoco otro documento donde se explique si la recomendación ha sido atendida, o en su caso, porque no ha sido atendida. Esta recomendación afecta directamente el propósito del programa, ya que si existen duplicidades o complementariedades con otros programas federales, el impacto del PCGL puede ser mayor al centralizarse y/o coordinarse acciones con otros programas. Fuente: ASM 2008. ASM 2011. Evaluación de diseño del PCGL realizada por la UNAM.

29

20. A partir del análisis de las evaluaciones externas realizadas al programa y de su experiencia en la temática ¿qué temas del programa considera importante evaluar mediante instancias externas?

Como se ha comentado a lo largo del documento, conviene contar con un diagnóstico adecuado sobre el problema que el PCGL está buscando resolver. Este Programa, en conjunto con todos los que se incluyen dentro de los “Programas de Apoyo de la Financiera Rural para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”, busca reducir barreras de acceso al crédito para productores rurales. Por esta razón, se quiere de un documento que identifique y cuantifique los efectos de contar con este tipo de obstáculos. También es indispensable contar con un análisis que muestre evidencia de que cada uno de los apoyos está atacando las causas de la falta de acceso a crédito. Dada la variedad de componentes del PCGL, y del resto de los Programas de que lo acompañan, es pertinente llevar a cabo un análisis a detalle para identificar si dichos apoyos se complementan, si son sustitutos, o bien generan incentivos que se contraponen entre sí. En la ausencia de un diagnóstico a profundidad, no se ha podido contestar a la pregunta de cuál es el cuello de botella que experimenta la población objetivo para acceder a crédito. Es decir no se conoce la importancia relativa de problemas como la falta de capacitación, el desarrollo de unidades de crédito, la existencia de garantías o la reducción de costos en el acceso al crédito. Dicho análisis debería poner en perspectiva cada uno de los apoyos, para determinar su presupuesto y ponderar su pertinencia, en relación con resolver el problema que la población potencial está experimentando. La pregunta que se debe aspirar a contestar es cuánta “adicionalidad” están generando los programas a los usuarios finales, sean empresas, o productores individuales. Es decir, cuánto acceso a crédito se está generando, que en la ausencia del Programa no existiría. En principio, se tendría que distinguir entre dos tipos de impactos:

a. Monto adicional de crédito: Se presume que los productores, tanto empresas como individuos, que tienen acceso a servicios financieros, podrían estar incurriendo en altos costos de transacción y que por esta razón, éstos podrían estar subutilizando el crédito. Conviene contar con una evaluación externa que mida si en efecto los productores están accediendo a la cantidad de crédito que les resulte óptima para maximizar su producción, gracias a contar con los apoyos del Programa.

b. Acceso a crédito a nuevos usuarios: Se presume que la mitigación de problemas de acceso a crédito debería causar que ciertos productores que actualmente no cuentan con servicios financieros puedan acceder a los mismos. En principio, una evaluación de impacto robusta, debería ser capaz de identificar si la población atendida por los Programas, son productores o empresas que en caso de no contar con los apoyos aquí descritos no tendrían crédito.

Como paso previo a la evaluación de impacto, sería de gran relevancia, contar con una evaluación que caracterice a los beneficiarios de todos los apoyos y verifique los supuestos vertidos en las reglas de operación de los Programas. En principio, esto se puede llevar a cabo haciendo un análisis de las bases de los datos capturados para acceder a los apoyos. Sería de gran relevancia identificar en la práctica cuál de los apoyos es el más utilizado, distinguiendo por aquellos que ya cuentan con acceso a crédito de los productores que no lo tienen. De igual forma, para cada grupo, sería relevante identificar en qué medida un mismo usuario requiere de los diversos apoyos. Esto permitirá identificar la importancia relativa de cada uno de los apoyos, según el tipo de productor.

Fuente: ASM 2007. ASM 2008. Evaluación de diseño 2008. Evaluación de diseño 2007. Evaluación de funcionamiento y operación 2007.

30

21. El Programa recolecta información acerca de:

a) La contribución del programa a los objetivos del programa sectorial, especial o institucional.

b) Los tipos y montos de apoyo otorgados a los beneficiarios en el tiempo. c) Las características socioeconómicas de sus beneficiarios. d) Las características socioeconómicas de las personas que no son beneficiarias, con

fines de comparación con la población beneficiaria. Si. Nivel 2. Financiera Rural recolecta regularmente información sobre el tipo de apoyo entregado a los beneficiarios. La primera captura de información se realiza con la solicitud de apertura de contrato, y se actualiza con cada cambio en el proceso de aprobación o con cada ministración de recursos. Se recolecta información detallada sobre el monto otorgado por ministración, monto total a otorgar, y fechas programadas de ministraciones. No se recolectan datos sobre las características socioeconómicas de sus beneficiarios en la base de datos SIA. No se recolectan datos sobre las características socioeconómicas de las personas que no son beneficiarias. La base de datos SIA recolecta datos sobre factores que influyen en los objetivos del programa, sin embargo existe una debilidad en su forma de captura. La base de datos SIA permite introducir nuevas solicitudes de apertura de contrato siempre y cuando existan fondos presupuestales remanentes para el programa de apoyo. Si no existen fondos disponibles, la solicitud de apertura de contrato no se puede registrar, por lo cual no se puede medir correctamente el número de solicitudes al programa. Dada esta limitante no se considera que la información recopilada sea suficiente para medir los indicadores de desempeño, ya que el indicador para actividades requiere se mida el “Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la Constitución de Garantías Líquidas”, lo cual se puede hacer únicamente si se registra adecuadamente la demanda por el apoyo.

31

22. El programa recolecta información para monitorear su desempeño con las siguientes características:

a) Es oportuna. b) Es confiable, es decir, está validada por quienes las integran. c) Está sistematizada. d) Es pertinente respecto de su gestión, es decir, permite medir los indicadores de

Actividades y Componentes. e) Está actualizada y disponible para dar seguimiento de manera permanente.

Si. Nivel 3. El SIA recolecta la información más reciente de las solicitudes de apertura de contrato, en la mayoría de los casos sistematizando la información dentro de un periodo de 15 días. Esta información se archiva en el sistema, es oportuna y se encuentra disponible para consulta permitentemente, permitiendo su seguimiento. El SIA no recolecta información socioeconómica del beneficiario final, ni cuenta con una clave única por beneficiario. La información presentada a Financiera Rural debe ser validada por los intermediarios financieros que la proveen, por lo tanto es confiable. El PCGL recolecta información de manera sistematizada, la cual puede ser acceda en forma electrónica a través del SIA. Los indicadores respectivos a las Actividades y componentes del PCGL no son pertinentes respecto de su gestión ya que no pueden ser debidamente medidos. El indicador de actividades requiere se contabilice el número total de solicitudes al programa, esto no se realiza en el SIA ya que una vez que se agotó el presupuesto para el programa no se permite agregar una solicitud adicional, aunque esta sea rechazada. Al no permitir ingresar solicitudes de apoyo, el indicador de actividades no puede ser debidamente medido.

32

23. El programa cuenta con una estrategia de cobertura documentada para atender a su población objetivo con las siguientes características:

a) Incluye la definición de la población objetivo. b) Especifica metas de cobertura anual. c) Abarca un horizonte de mediano y largo plazo. d) Es congruente con el diseño del programa.

Si. Nivel 3. En la sección 3.4.1 de las Reglas de Operación 2010, se incluye la definición de la población objetivo para cada uno de los cuatro tipos de apoyo que otorga el PCGL, que son:

1. Apoyo para constituir garantías líquidas a través del Fondo de Garantías Líquidas. 2. Apoyo para el otorgamiento de Garantías Líquidas Capitalizables. 3. Apoyo para la Constitución de Reservas Preventivas. 4. Apoyo para enfrentar Contingencias de Mercado o Desastres Naturales.

Para el ciclo presupuestario de 2011 la MIR del PCGL especifica las “metas anuales relativas” de cada uno de sus indicadores. Además en las Fichas Técnicas se incluyen tanto las metas del ciclo presupuestario en curso como las metas sexenales de todos los indicadores por lo que el PCGL sí tiene un horizonte de mediano plazo, es decir, el programa contempla metas que abarcan la presente administración federal. Sin embargo, no se encontró información sobre una estrategia de cobertura para atender la población objetivo de largo plazo, es decir, que trascienda la administración federal. Como se explicó en la pregunta siete de la presente evaluación, FinRural cuenta con un documento titulado “Determinación y cuantificación de la población potencial y objetivo para el otorgamiento de crédito”. Dicho documento no identifica claramente cuál es el problema que el PCGL busca resolver. Por lo anterior, no es posible determinar si las definiciones contenidas en las Reglas de Operación son adecuadas o no. De acuerdo a FinRural, no se puede contar con una estrategia de cobertura en ausencia de la cuantificación de la población objetivo. Fuentes: Documento titulado “Determinación y cuantificación de la población potencial y objetivo para el otorgamiento de crédito”, Fichas Técnicas, Matriz de Indicadores para Resultados y Reglas de Operación del Programa.

33

24. ¿El programa cuenta con mecanismos para identificar su población objetivo? En caso de contar con estos, especifique cuáles y qué información utiliza para hacerlo.

No procede valoración cuantitativa. Como se mencionó anteriormente, el PCGL cuenta con el Sistema Integral de Apoyos, el cual recopila información de contacto del beneficiario, así como del tipo de apoyo otorgado. La primera captura de información se realiza con la solicitud de apertura de contrato, y se actualiza con cada cambio en el proceso de aprobación o con cada ministración de recursos. Se recolecta información detallada sobre el monto otorgado por ministración, monto total a otorgar, y fechas programadas de ministraciones. Sin embargo, el SIA no tiene una clave única por beneficiario. Existe una clave única por contrato, pero esta no identifica únicamente a quién beneficia. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G).

34

25. A partir de las definiciones de la población potencial, la población objetivo y la población atendida, ¿cuál ha sido la cobertura del programa?

No procede valoración cuantitativa. En el documento con nombre “Determinación y cuantificación de la población potencial y objetivo para el otorgamiento de crédito” se dice que la población potencial son “los productores responsables de la unidad de producción que se encuentran activos; en segundo lugar, a las personas contratadas por menos o más de seis meses, en tercer lugar, a los familiares mayores de 18 años que trabajan en las unidades de producción y en cuarto lugar a la población que se encuentra en comunidades rurales y que lleva a cabo actividades de manufactura, servicios y comercios”. Dicha definición discrepa con la definición de población objetivo que se encuentra en el apartado 3.4.1 de las Reglas Operación para el Programa para la Constitución de Garantías Líquidas. Por lo tanto, no se puede determinar la cobertura del programa debido a que las poblaciones potencial y objetivo no han sido bien cuantificadas y a su vez, hay una discrepancia en sus definiciones.

35

26. Describa mediante Diagramas de Flujo el proceso general del programa para cumplir con los bienes y los servicios (Componentes), así como los procesos clave en la operación del programa.

No procede valoración cuantitativa. Conforme a la sección 3.4.2.2 de las Reglas de Operación del PCGL se describe uno de los procesos

clave en la operación del programa, es decir, el procedimiento de selección de los beneficiarios.

Dicho proceso consiste principalmente en los siguientes pasos:

Los beneficiarios deberán presentar la “Solicitud de Apoyos y Servicios”, que se encuentra en el

Anexo 1 de las Reglas Operación.

FinRural evaluará y dictaminará la viabilidad de las solicitudes de Apoyo. Los solicitantes deberán

pertenecer a la población objetivo y sus solicitudes deberán cumplir con los requisitos que se

estipulan en las Reglas de Operación.

Las respuestas a las solicitudes se dará en un plazo de 30 días hábiles contados a partir de su

ingreso. Cuando las solicitudes estén incompletas, FinRural informará al solicitante en un plazo no

mayor a siete días que debe completar la solicitud en un plazo no mayor a cinco días hábiles, en

caso contrario la solicitud será rechazada automáticamente.

La Dirección General Adjunta de Fomento y Promoción de Negocios podrá autorizar un monto

menor al solicitado o rechazar las solicitudes.

Cabe mencionar que en las Reglas de Operación no se mencionan procesos clave que se

encuentran en los Componentes y Actividades de la MIR. En las ROP no se estipula el momento en

que se recopilará la información para conocer la satisfacción de los beneficiarios.

El diagrama de flujo se incluye en el Anexo 13 “Diagramas de flujo de los Componentes y

procesos clave” de la presente evaluación.

[Fuentes: Fichas Técnicas, Matriz de Indicadores para Resultados, Informes Trimestrales y Reglas de Operación del Programa]

36

27. ¿El programa cuenta con información sistematizada que permite conocer la demanda total de apoyos y las características de los solicitantes? (socioeconómicas en el caso de personas físicas y específicas en el caso de personas morales).

No

El PCGL cuenta con un Informe Semestral 2011 que incluye el Padrón de Beneficiarios cuenta con las siguientes características:

1) Nombre del beneficiario 2) Tipo de apoyo otorgado 3) Monto total otorgado por apoyo para todos los beneficiarios.

Sin embargo, carece de los siguientes elementos: 1) Características de los beneficiarios establecidas en las Reglas de Operación. 2) No incluye una clave única de identificación invariable en el tiempo. 3) No cuenta con mecanismos documentados para su depuración y actualización.

En su página electrónica, FinRural publica reportes que incluyen el nombre de las organizaciones que han recibido apoyos del Programa, así como el total de los apoyos autorizados por Componente. No publica el importe que cada organización recibió. FinRural cuenta con dos sistemas en que se captura información sobre las personas y organizaciones que reciben apoyos de sus programas: el Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). Los datos correspondientes a los beneficiarios del PI están depositados en el SIA. En dicho sistema se puede consultar el tipo de beneficiario, su RFC, localidad, tipo y monto de apoyo recibido, fecha en que se entregaron los apoyos y el número de ministraciones, entre otra información. No incluye una clave de identificación única por beneficiario. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). La base de datos SIA recolecta datos sobre factores que influyen en los objetivos del Programa. Sin embargo, existe una debilidad en su forma de captura. La base de datos SIA permite introducir nuevas solicitudes de apertura de contrato siempre y cuando existan fondos presupuestales remanentes para el Programa de apoyo. Si no existen fondos disponibles, la solicitud de apertura de contrato no se puede registrar, por lo cual no se puede medir correctamente el número de solicitudes al Programa. Esto implica que la demanda total de apoyos no puede ser conocida a través de información sistematizada. [Fuentes de información utilizadas: Página de internet de la Financiera Rural; Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA)]

37

28. Los procedimientos para recibir, registrar y dar trámite a las solicitudes de apoyo cuentan con las siguientes características:

a) Corresponden a las características de la población objetivo. b) Existen formatos definidos. c) Están disponibles para la población objetivo. d) Están apegados al documento normativo del programa.

Sí, nivel 4 La “Solicitud de apoyos y servicios” se encuentra en el Anexo 1 de las ROP. El solicitante debe proporcionar la siguiente información: datos generales, tipo de apoyo solicitado específico por Programa y tipo de población objetivo a la que pertenece específica de cada Programa. El documento de solicitud indica las opciones de población objetivo a las que puede atender y el solicitante debe identificarse en alguna de ellas. Están en concordancia con las definiciones de las ROP. El formato está estandarizado para los cuatro Programas en el Anexo 1 de las ROP. Además se encuentra accesible, a tres clics en la página de Internet de FinRural bajo el título de Anexo 4 de las ROP de diciembre de 2011.1 Sin embargo, se recomienda etiquetar claramente en la página de Internet el formato de solicitud. Debido a los puntos anteriores, se considera que el procedimiento para recibir, registrar y dar trámite a las solicitudes de apoyo está apegado al documento normativo. FinRural cuenta con dos sistemas en que se captura información sobre las personas y organizaciones que reciben apoyos de sus programas: el Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). Los datos correspondientes a los beneficiarios del PI están depositados en el SIA. En dicho sistema se puede consultar el tipo de beneficiario, su RFC, localidad, tipo y monto de apoyo recibido, fecha en que se entregaron los apoyos y el número de ministraciones, entre otra información. No incluye una clave de identificación única por beneficiario. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). [Fuentes de información utilizadas: Reglas de Operación del Programa, 29/Dic./2010]

1 ttp://www.financierarural.gob.mx/ApoyosProductoresIntermediarios/Programas/Paginas/Programas.aspx

38

29. El programa cuenta con mecanismos documentados para verificar el procedimiento para recibir, registrar y dar trámite a las solicitudes de apoyo con las siguientes características:

a) Son consistentes con las características de la población objetivo. b) Están estandarizados, es decir, son utilizados por todas las instancias

ejecutoras. c) Están sistematizados. d) Están difundidos públicamente.

Sí, nivel 3 FinRural cuenta con dos sistemas en que se captura información sobre las personas y organizaciones que reciben apoyos de sus programas: el Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). Los datos correspondientes a los beneficiarios del PCGL están depositados en el SIA. En dicho sistema se puede consultar el tipo de beneficiario, su RFC, localidad, tipo y monto de apoyo recibido, fecha en que se entregaron los apoyos y el número de ministraciones, entre otra información. No incluye una clave de identificación única por beneficiario. Por otra parte, en su página de Internet, FinRural publica reportes que incluyen el nombre de las organizaciones que han recibido apoyos del programa, así como el total de los apoyos autorizados por componente. No publica el importe que cada organización recibió. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). [Fuentes de información utilizadas: Página de internet de la Financiera Rural; Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA)]

39

30. Los procedimientos del programa para la selección de beneficiarios y/o proyectos tienen las siguientes características:

a) Incluyen criterios de elegibilidad claramente especificados, es decir, no existe ambigüedad en su redacción.

b) Están estandarizados, es decir, son utilizados por todas las instancias ejecutoras.

c) Están sistematizados. d) Están difundidos públicamente.

Sí, nivel 3. El artículo 3.4.2.2 de las ROP indica el procedimiento de selección para los apoyos del PCGL. Indica que la Financiera Rural evaluará y dictaminará la elegibilidad de las solicitudes de Apoyo considerando como criterios de selección: que los solicitantes pertenezcan a la población objetivo; que el Apoyo solicitado se encuentre enmarcado en las ROP y que el presupuesto del Apoyo solicitado corresponda a los montos establecidos en las ROP. En el documento de 2011 titulado: “Manual de procedimientos de operación del Programa para la Constitución de Garantías Líquidas” en su artículo 5 en sus fracciones 5.11 y 5.13 se estipula que la Dirección General Adjunta de Fomento y Promoción de Negocios será la encargada de “determinar los procedimientos técnicos y administrativos para la operación de los apoyos y servicios sujetos a reglas de operación” y “autorizar los apoyos y servicios incluidos en las Reglas de Operación de los Programas de la FinRural para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural”. A su vez, en dicho Manual de Procedimientos se especifica detalladamente el proceso de selección de beneficiarios, ya que se describe en cada paso el responsable y la actividad por realizar. Sin embargo, el procedimiento del Programa no está sistematizado. Esta situación implica el riesgo de que ciertas personas, a través de organizaciones de productores distintas (intermediarios), puedan estar recibiendo apoyos duplicados en el tiempo sin que FinRural pueda detectarlo de forma automática y oportuna. La falta de sistematización de información relativa a las personas físicas que finalmente reciben los beneficios del Programa es una debilidad que FinRural debería corregir en los siguientes ejercicios fiscales. [Fuentes de información utilizadas: Manual de procedimientos de operación del PCGL, 28/marzo/2011. Anexo 1 Reglas de Operación del Programa 29/Dic./2011]

40

31. El programa cuenta con mecanismos documentados para verificar el procedimiento de selección de beneficiarios y/o proyectos y tienen las siguientes características:

a) Permiten identificar si la selección se realiza con base en los criterios de elegibilidad y requisitos establecidos en los documentos normativos.

b) Están estandarizados, es decir son utilizados por todas las instancias ejecutoras.

c) Están sistematizados. d) Son conocidos por operadores del programa responsables del proceso de

selección de proyectos y/o beneficiarios. Si, nivel 4. El artículo 3.4.2.2 de las ROP indica el procedimiento de selección para los apoyos del PCGL. Indica que la Financiera Rural evaluará y dictaminará la elegibilidad de las solicitudes de Apoyo considerando como criterios de selección: que los solicitantes pertenezcan a la población objetivo; que el Apoyo solicitado se encuentre enmarcado en las ROP y que el presupuesto del Apoyo solicitado corresponda a los montos establecidos en las ROP. La evaluación y el análisis de la viabilidad de la solicitud dependerán del orden de entrada de la solicitud, así como de la disponibilidad presupuestal del PCGL. El manual de procedimientos del programa enuncia que después de haber ingresado su solicitud el beneficiario, la Coordinación Regional, Agencia, Corporativo o DGAFPN deben realizar un Dictamen de Elegibilidad y posteriormente un Dictamen de Viabilidad o carta de validación para la autorización de las ministraciones. La Coordinación Regional / Agencia deberá capturar en el SIA el monto del apoyo a ministrar, asignando un número de solicitud por cada tipo de apoyo solicitado por el beneficiario. Sin embargo, el procedimiento del Programa no está sistematizado. Esta situación implica el riesgo de que ciertas personas, a través de organizaciones de productores distintas (intermediarios), puedan estar recibiendo apoyos duplicados en el tiempo sin que FinRural pueda detectarlo de forma automática y oportuna. La falta de sistematización de información relativa a las personas físicas que finalmente reciben los beneficios del Programa es una debilidad que FinRural debería corregir en los siguientes ejercicios fiscales. [Fuentes de información utilizadas: Manual de procedimientos de operación del PCGL, 28/marzo/2011. Anexo 1 Reglas de Operación del Programa 29/Dic./2011]

41

32. Los procedimientos para otorgar los apoyos a los beneficiarios tienen las siguientes características:

a) Están estandarizados, es decir, son utilizados por todas las instancias ejecutoras.

b) Están sistematizados. c) Están difundidos públicamente. d) Están apegados al documento normativo del programa.

Sí, nivel 3. Los procedimientos sí están difundidos públicamente a través de las Reglas de Operación. En dichas reglas se indica en su apartado 3.4.2.1 los requerimientos que debe presentar el beneficiario para recibir los apoyos. A través de las ROP los solicitantes pueden consultar los requisitos para la obtención de los apoyos. Para el PCGL existen cuatro apoyos, que son:

a) Apoyo para la Constitución de Garantías Líquidas otorgado a través del Fondo de Garantías Líquidas.

b) Apoyo para el Otorgamiento de Garantías Capitalizables. c) Apoyo para la Constitución de Reservas Preventivas. d) Apoyo para Enfrentar Contingencias de Mercado o Desastres Naturales

Para cada uno de los apoyos antes mencionados se describen sus características así como el proceso de selección que deberán seguir los solicitantes para obtener dichos apoyos. Sin embargo, como se ha mencionado en preguntas anteriores el procedimiento para el otorgamiento de apoyos no está sistematizado, por lo que FinRural deberá tomarlo en cuenta para próximos ejercicios fiscales. [Fuente de información utilizada: Reglas de Operación del Programa 29/Dic./2011]

42

33. El programa cuenta con mecanismos documentados para verificar el procedimiento de entrega de apoyos a beneficiarios y tienen las siguientes características:

a) Permiten identificar si los apoyos a entregar son acordes a lo establecido en los documentos normativos del programa.

b) Están estandarizados, es decir, son utilizados por todas las instancias ejecutoras.

c) Están sistematizados. d) Son conocidos por operadores del programa.

Sí, nivel 3. El manual de procedimientos del PCGL indica las acciones que deben llevar a cabo la Coordinación Regional, Agencia, Corporativo y/o DGAFPN para la recepción de requerimientos, verificación en SIA, solicitud de autorización a la DEPNIFR, autorización del Apoyo en SIA, captura de la solicitud de apoyo, validación del pago en el sistema, recepción de oficio de autorización y notificación al beneficiario. Esto de acuerdo a lo establecido en las ROP. Las ROP se encuentran en la página electrónica de FinRural. El manual de procedimientos no se encuentra en la página electrónica de FinRural. De acuerdo a dicho manual, la Dirección General Adjunta de Fomento y Promoción de Negocios es la responsable de difundir al personal involucrado en la operación de los apoyos el documento que describe los procesos operativos a seguir para la solicitud, en su caso aprobación, autorización, instrumentación y pago de los apoyos y servicios sujetos a Reglas de Operación. Sin embargo, el procedimiento para el otorgamiento de apoyos no está sistematizado. [Fuentes de información utilizadas: Manual de procedimientos de operación del PCGL, 28/marzo/2011. Reglas de Operación del Programa 29/Dic./2011]

43

34. Los procedimientos de ejecución de obras y/o acciones tienen las siguientes características: a) Están estandarizados, es decir, son utilizados por todas las instancias

ejecutoras. b) Están sistematizados. c) Están difundidos públicamente. d) Están apegados al documento normativo del programa.

Sí, nivel 4. Los procedimientos de ejecución de obras y acciones están estandarizados y sí están difundidos públicamente a través de las Reglas de Operación. En dichas reglas se indica en su apartado 3.4.2.1 los requisitos que debe presentar el beneficiario para recibir los apoyos. A través de las ROP se pueden determinar los procesos de ejecución de los operadores del programa que están involucrados para cada uno de los tipos de apoyo, que son:

a) Apoyo para la Constitución de Garantías Líquidas otorgado a través del Fondo de Garantías Líquidas.

b) Apoyo para el Otorgamiento de Garantías Capitalizables. c) Apoyo para la Constitución de Reservas Preventivas. d) Apoyo para Enfrentar Contingencias de Mercado o Desastres Naturales

Sin embargo, como se ha comentado con anterioridad en la presente evaluación, los procedimientos del PCGL no se encuentran sistematizados. [Fuente de información utilizada: Reglas de Operación del Programa 29/Dic./2011]

44

35. El programa cuenta con mecanismos documentados para dar seguimiento a la ejecución de obras y acciones y tienen las siguientes características:

a) Permiten identificar si las obras y/o acciones se realizan acorde a lo establecido en los documentos normativos del programa.

b) Están estandarizados, es decir, son utilizados por todas las instancias ejecutoras.

c) Están sistematizados. d) Son conocidos por operadores del programa.

Sí, nivel 3. El manual de procedimientos del PCGL indica las acciones que deben llevar a cabo la Coordinación Regional, Agencia, Corporativo y/o DGAFPN para la recepción de requerimientos, verificación en SIA, solicitud de autorización a la DEPNIFR, autorización del Apoyo en SIA, captura de la solicitud de apoyo, validación del pago en el sistema, recepción de oficio de autorización y notificación al beneficiario. Esto de acuerdo a lo establecido en las ROP. Las ROP se encuentran en la página electrónica de FinRural. El manual de procedimientos no se encuentra en la página electrónica de FinRural. De acuerdo a dicho manual, la Dirección General Adjunta de Fomento y Promoción de Negocios es la responsable de difundir al personal involucrado en la operación de los apoyos el documento que describe los procesos operativos a seguir para la solicitud, en su caso aprobación, autorización, instrumentación y pago de los apoyos y servicios sujetos a Reglas de Operación. Sin embargo, el procedimiento para el otorgamiento de apoyos no está sistematizado. [Fuentes de información utilizadas: Manual de procedimientos de operación del PCGL, 28/marzo/2011. Reglas de Operación del Programa 29/Dic./2011]

45

36. ¿Cuáles cambios sustantivos en el documento normativo se han hecho en los últimos tres años que han permitido agilizar el proceso de apoyo a los solicitantes?

Con respecto a los cambios en las ROP se observa que de las ROP del 24 de diciembre de 2008 a las últimas evaluadas del 29 de diciembre de 2010, los objetivos del Programa, la población objetivo, los requisitos para acceder a los beneficios y los tipos de apoyos no han sufrido modificaciones. Sin embargo, los apoyos que otorga el Programa han cambiado entre 2008 y 2010. Los apoyos que sufrieron cambios para las Reglas de Operación 2011 (publicadas el 29 de diciembre

de 2010) son:...

Apoyo para el Otorgamiento de Garantías Líquidas Capitalizables. Las garantías líquidas podrán ser hasta “el 10% del monto del crédito solicitado sin exceder un monto acumulado a partir del inicio su otorgamiento de 2,560,000 unidades de inversión por acreditado”.

Apoyo para la Constitución de Reservas Preventivas. El apoyo podrá ser hasta “el 50% del requerimiento de constitución de reservas, respecto de la cartera de créditos que pretenda colocar la Empresa de Intermediación Financiera con recursos de la Financiera Rural y preferentemente en créditos de largo plazo que fomenten la capitalización de las unidades productivas en el medio rural”.

[Fuentes de información utilizadas: Reglas de Operación del Programa, 24/Dic./2008, 11/Jun./2009/, 31/Dic./2009, 15/Jul./2010, 29/Dic./2010]

46

37. ¿Cuáles son los problemas que enfrente la unidad administrativa que opera el programa para la transferencia de recursos a las instancias ejecutoras y/o a los beneficiarios y, en su caso, qué estrategias ha implementado?

No procede valoración cuantitativa. El manual de procedimientos del PCGL indica las acciones que deben llevar a cabo la Coordinación Regional, Agencia, Corporativo y/o DGAFPN para la recepción de requerimientos, verificación en SIA, solicitud de autorización a la DEPNIFR, autorización del Apoyo en SIA, captura de la Solicitud de Apoyo, validación del pago en el sistema, recepción de oficio de autorización y notificación al beneficiario. Esto de acuerdo a lo establecido en las ROP. Las ROP se encuentran en la página electrónica de FinRural pero no así el manual de procedimientos. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). [Fuentes de información utilizadas: Manual de procedimientos de operación del PCGL, 28/marzo/2011, Sistema Integral de Apoyos (SIA)]

47

38. El programa identifica y cuantifica los gastos en los que incurre para generar los bienes y los servicios (Componentes) que ofrece y los desglosa en los siguientes conceptos:

a) Gastos en operación: Directos e Indirectos. b) Gastos en mantenimiento: Requeridos para mantener el estándar de calidad

de los activos necesarios para entregar los bienes o servicios a la población objetivo (unidades móviles, edificios, etc.). Considere recursos d elos capítulos 2000 y/o 3000.

c) Gastos en capital: Son los que se deben afrontar para adquirir bienes cuya duración en el programa es superior a un año. Considere recursos de los capítulos 5000 y/o 6000 (Ej: terrenos, construcción, equipamiento, inversiones complementarias).

d) Gasto unitario: Gastos Totales/población atendida (Gastos totales=Gastos en operación + gastos en mantenimiento). Para programas en sus primeros dos años de operación se deben de considerar adicionalmente en el numerador los Gastos en capital.

Sí, nivel 1. La información contable proporcionada por FinRural permite apreciar que los gastos de operación pueden ser clasificados en: gastos de operación, viáticos y reembolso por reclasificación. Sin embargo, no se cuenta con documentos que identifiquen y cuantifiquen los gastos en los que incurre el PCGL para generar los bienes y servicios que ofrece, desglosados específicamente como lo indica la pregunta. [Fuentes de información utilizadas: Gastos de operación PCGL 2011, Dictamen de estados financieros al 31 de diciembre de 2010 y 2009]

48

39. ¿Cuáles son las fuentes de financiamiento para la operación del programa y qué proporción del presupuesto total del programa representa cada una de las fuentes?

La única fuente de financiamiento del Programa es el Presupuesto de Egresos de la Federación. Para el ejercicio fiscal 2011, el Programa tuvo un presupuesto original de $46’510,200 pesos. [Fuentes de información utilizadas: Presupuesto de Egresos de la Federación 2011]

49

40. Las aplicaciones informáticas o sistemas institucionales con que cuenta el programa tienen las siguientes características:

a) Cuenta con fuentes de información confiables y periten verificar o validar la información capturada.

b) Tienen establecida la periodicidad y las fechas límites para la actualización de los valores de las variables.

c) Proporcionan información al personal involucrado en el proceso correspondiente.

d) Están integradas, es decir, no existe discrepancia entre la información de las aplicaciones o sistemas.

Sí, nivel 1. FinRural cuenta con dos sistemas en que se captura información sobre las personas y organizaciones que reciben apoyos de sus programas: el Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). Los datos correspondientes a los beneficiarios del PCGL están depositados en el SIA. En dicho sistema se puede consultar el tipo de beneficiario, su RFC, localidad, tipo y monto de apoyo recibido, fecha en que se entregaron los apoyos y el número de ministraciones, entre otra información. No incluye una clave de identificación única por beneficiario. Se encontró que la información está sistematizada, actualizada y depurada. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G). Por otra parte, en su página de Internet, FinRural publica reportes que incluyen el nombre de las organizaciones que han recibido apoyos del programa, así como el total de los apoyos autorizados por componente. No publica el importe que cada organización recibió. [Fuentes de información utilizadas: Página de internet de la Financiera Rural; Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA)]

50

41. ¿Cuál es el avance de los indicadores de servicios y de gestión (Actividades y Componentes)

y de resultados (Fin y Propósitos) de la MIR del programa respecto de sus metas? En la siguiente tabla se describen las metas (anual y sexenal) de los indicadores de desempeño. En la tercera columna se menciona el valor para el año evaluado y en la cuarta columna el porcentaje de avance respecto a la meta.

Nivel de Objetivo

Indicador de desempeño Meta

Sexenal

Meta del año

evaluado* (2011)

Valor para el

año evaluado

Porcentaje de avance

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo.

6 5.90 6.30 106.78%

Propósito

Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural.

5.5 5.00 5.00 100%

Componentes

Cobertura Incrementada. 0.8 0.60 50.40 8,400%

Satisfacción de los beneficiarios que constituyen garantías líquidas.

95 94.00 100 106.38%

Actividades

Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la Constitución de Garantías Líquidas

100 100 49.10 49.10%

*Corresponde a la meta anual modificada presentada en la MIR 2011 del Programa.

[Fuentes de información utilizadas: Reglas de Operación del PCGL 29/Dic./2010; Matriz de Indicadores para Resultados 2011, reporte anual 2011]

51

42. El programa cuenta con mecanismos de transparencia y rendición de cuentas con las

siguientes características: a) Las ROP o documento normativo están disponibles en la página electrónica

de manera accesible, a menos de tres clics. b) Los resultados principales del programa son difundidos en la página

electrónica de manera accesible, a menos de tres clics. c) Cuenta con un teléfono o correo electrónico para informar y orientar tanto

al beneficiario como al ciudadano en general, disponible en la página electrónica, accesible a menos de tres clics.

d) La dependencia o entidad que opera el Programa no cuenta con modificación de respuesta a partir de recursos de revisión presentados ante el Instituto Federal de Acceso a la Información Pública (IFAI).

Sí, nivel 3. Es posible acceder a las ROP del 27 de diciembre de 2011 del Programa en la página electrónica de FinRural a menos de tres clics.2 Las ROP previas también se pueden encontrar ahí. La página electrónica de FinRural cuenta con un teléfono y un correo electrónico para informar y orientar tanto al beneficiario como al ciudadano en general a menos de tres clics. FinRural es sujeto obligado de la Ley Federal de Transparencia y Acceso a la Información Pública Gubernamental en su artículo 7°. De acuerdo a esta Ley, los sujetos obligados deberán poner a disposición del público y actualizar, entre otra, la información siguiente: su estructura orgánica; facultades de cada unidad administrativa; directorio; remuneración; domicilio; metas y objetivos; servicios que ofrecen, trámites, requisitos y formatos; presupuesto; auditorías; diseño, ejecución, montos asignados y criterios de acceso a los programas de subsidio; contrataciones; marco normativo; informes; mecanismos de participación ciudadana y cualquier otra información que se considere relevante o de utilidad. Los resultados principales del programa en cuanto a Fin, Propósito y/o Componentes no se encuentran en la página electrónica. Se recomienda publicar los avances en el cumplimiento de las metas de la MIR. [Fuentes de información utilizadas: Ley Ley Federal de Transparencia y Acceso a la Información Pública Gubernamental 2002.]

2 ttp://www.financierarural.gob.mx/ApoyosProductoresIntermediarios/Programas/Paginas/Programas.aspx

52

43. El programa cuenta con instrumentos para medir el grado de satisfacción de su población

atendida con las siguientes características: a) Su aplicación se realiza de manera que no se induzcan las respuestas. b) Corresponden a las características de sus beneficiarios. c) Los resultados que arrojan son representativos.

Sí, nivel 4 De acuerdo a la MIR, el indicador de desempeño del primer componente es: “Satisfacción de los beneficiarios que constituyen garantías líquidas”. Su meta para el año evaluado es 94. En la “Guía metodológica para la aplicación de encuestas de opinión en los programas que maneja la Financiera Rural” se especifican los parámetros de diseño de la encuesta de satisfacción: Que definan los objetivos a medir, que sean claros y concisos, que incrementen el porcentaje de respuesta y que las preguntas se refieran a una sola idea. En dicho documento también se establece el proceso de cálculo de los resultados de la encuesta: 1. Extraer de base de dispersiones de cada uno de los programas, los beneficiarios y sus correos electrónicos a los que se les otorgaron los apoyos. 2. Enviar correos con la encuesta a cada beneficiario 3. En un periodo de tres a cinco días se reciben los cuestionarios contestados. 4. Se capturan en la herramienta. 5. Se elabora un reporte con los datos obtenidos al cierre del mes y el avance del periodo en el ejercicio. El análisis metodológico para el PCGL contiene las siguientes observaciones: La encuesta cuenta con seis preguntas, es necesario focalizar la encuesta en tipo de usuario, no se identifican preguntas de la satisfacción del servicio ni en la permanencia del programa. [Fuente de información utilizada: Guía metodológica para la aplicación de Encuestas de Opinión en los Programas que maneja la Financiera Rural]

53

44. ¿Cómo documenta el programa sus resultados a nivel de Fin y de Propósito? a) Con indicaciones de la MIR. b) Con hallazgos de estudios o evaluaciones que no son de impacto. c) Con información de estudios o evaluaciones rigurosas nacionales o

internacionales que muestran el impacto de programas similares. d) Con hallazgos de evaluaciones de impacto.

No procede valoración cuantitativa. El indicador de Fin en la MIR es el “Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo”. Éste se define como el “porcentaje de participación de financiera rural respecto de la banca de desarrollo a través del otorgamiento del crédito”. Se calcula de la siguiente manera: (Crédito colocado por financiera rural / crédito colocado por la banca de desarrollo) *100. De acuerdo con la MIR, las fuentes de información disponibles para este indicador son: Instituto Nacional de Estadística y Geografía (INEGI), Banco de México y Bases Administrativas de Financiera Rural. Para este indicador es necesario dar seguimiento a la colocación crediticia de la Financiera Rural. El denominador de este indicador para su disponibilidad cuenta con un mes de rezago para su publicación. El indicador de Propósito en la MIR es el “Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural”. Este indicador mide el peso que representan las garantías líquidas respecto al total de créditos que brinda FinRural. Su forma de cálculo es la siguiente: (Crédito asociado al programa de garantías líquidas / total de crédito otorgado por Financiera Rural)* 100. Para documentar los resultados del indicador de Propósito, FinRural hace uso de los Informes de Avance de Colocación. Además el indicador cumple en términos de claridad, pertinencia, factibilidad y relevancia; tal y como se explica en su Ficha Técnica. Si bien el Programa documenta sus avances para los indicadores de Fin y Propósito en la MIR, los operadores de FinRural no tienen información de estos indicadores a partir de evaluaciones de impacto ni de otras evaluaciones que no sean de impacto.

[Fuentes de información utilizadas: Matriz de Indicadores de Resultados. Fichas técnicas de los indicadores. Evaluaciones externas del Programa]

54

45. En caso de que el programa cuente con indicadores para medir su Fin y Propósito, inciso a) de la pregunta anterior, ¿cuáles han sido sus resultados?

Sí. Nivel 4. En la siguiente tabla se describen las metas (anual y sexenal) de los indicadores de desempeño.

Nivel de Objetivo

Indicador de desempeño Meta

Sexenal

Meta del año

evaluado* (2011)

Valor para el

año evaluado

Porcentaje de avance

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo.

6 5.90 6.30 106.78%

Propósito

Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural.

5.5 5.00 5.00 100%

*Corresponde a la meta anual modificada presentada en la MIR 2011 del Programa.

[Fuentes de información utilizadas: Reglas de Operación del PCGL 29/Dic./2010; Matriz de Indicadores para Resultados 2011, reporte anual 2011]

55

46. En caso de que el programa cuente con evaluación(es) externa(s) que no sea(n) de impacto y que permite(n) identificar hallazgo(s) relacionados con el Fin y el Propósito del programa, inciso b) de la pregunta 44, dichas evaluaciones cuentan con las siguientes características:

a) Se compara la situación de los beneficiarios en al menos dos puntos en el tiempo, antes y después de otorgado el apoyo.

b) La metodología utilizada permite identificar algún tipo de relación entre la situación actual de los beneficiarios y la intervención del Programa.

c) Dados los objetivos del Programa, la elección de los indicadores utilizados para medir los resultados se refieren al Fin y Propósito y/o características directamente relacionadas con ellos.

d) La selección de la muestra utilizada garantiza la representatividad de los resultados entre los beneficiarios del Programa.

No. La única evaluación que se ha realizado para el PCGL es de diseño por lo que no cuenta con alguna de las características anteriores. [Fuentes de información utilizadas: Evaluaciones externas del Programa]

56

47. En caso de que el programa cuente con evaluación(es) externa(s), diferente(s) a evaluaciones de impacto, que permite(n) identificar uno o varios hallazgos relacionados con el Fin y/o el Propósito del programa, ¿cuáles son los resultados reportados en esas evaluaciones?

No procede valoración cuantitativa. El Programa no cuenta con evaluaciones externas diferentes a evaluaciones de impacto que permitan conocer resultados relacionados con el Fin y/o Propósito del Programa. [Fuentes de información utilizadas: Evaluaciones externas del Programa]

57

48. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestren impacto de programas similares, inciso c) de la pregunta 44, dichas evaluaciones cuentan con las siguientes características:

a) Se compara un grupo de beneficiarios con uno de no beneficiarios de características similares.

b) La(s) metodología(s) aplicadas son acordes a las características del programa y la información disponible, es decir, permite generar una estimación lo más libre posible de sesgos en la comparación del grupo de beneficiarios y no beneficiarios.

c) Se utiliza información de al menos dos momentos en el tiempo. d) La selección de la muestra utilizada garantiza la representatividad de los

resultados. Sí. Nivel 3. El Programa sí cuenta con información de evaluaciones internacionales que muestran el impacto de al menos un programa similar. Se tiene información de la “Evaluación de Impacto del Programa de Crédito a Microempresarios” realizada en 2005 por el Centro de Microdatos del Departamento de Economía de la Universidad de Chile. En esta evaluación se hace una comparación entre un grupo de control y uno de tratamiento. Para la realización de esta evaluación se utilizaron técnicas econométricas como el de Diferencias en Diferencias (DID), DID con Covariables y DID-Matching. Se obtuvieron resultados de las características de los clientes tratados en el tiempo, por lo que se sí se utilizó información de al menos dos momentos en el tiempo. Con la información disponible en esta evaluación, no se puede determinar si la muestra seleccionada por el evaluador garantiza la representatividad de los resultados. Además los resultados de dicha evaluación no son comparables con el Programa de FinRural ya que el Programa evaluado en Chile está enfocado para créditos a microempresarios en general, es decir, no están enfocados a créditos en zonas rurales como lo es en el caso de los créditos que otorga FinRural. A su vez, el Programa cuenta con información de evaluaciones sobre créditos realizadas en Nicaragua (2006) y Argentina (2007). Sin embargo, estas evaluaciones no cuentan con una metodología rigurosa para ser consideradas evaluaciones de impacto sino que hacen un diagnóstico de la situación de las microfinanzas en dichos países. [Fuentes de información utilizadas: Departamento de Economía de la Universidad de Chile. Evaluación de Impacto del Programa de Crédito a Microempresarios. Análisis de Resultados / Resumen Ejecutivo. Chile, 2005. Bekerman Mara, Rodríguez Santiago. Acceso al Crédito para Sectores Carenciados. Microcréditos y su situación en Argentina. Argentina, 2007. Araica, Ricardo. Papel del Financiamiento Rural y su impacto en la seguridad alimentaria y nutricional en Nicaragua. Managua, 2006.]

58

49. En caso de que el programa cuente con información de estudios o evaluaciones nacionales e internacionales que muestran impacto de programas similares ¿qué resultados se han demostrado?

No procede valoración cuantitativa. Los principales resultados que se obtuvieron de la “Evaluación de Impacto del Programa de Crédito a Microempresarios” en Chile se agrupan en cuatro temas:

1. Acceso al crédito. “Los clientes habituales del programa acceden a tasas de interés del orden de 10.6% más bajas y a montos (50%) y plazos (30%) superiores”.

2. Impacto en el trabajo. “Los clientes habituales del programa muestran en general un marcado mejoramiento en las características de su negocio, crecimiento de los volúmenes de venta e inversión en activos que, en conjunto con reducción de costos, y disminución de los pasivos, ha permitido un crecimiento patrimonial importante”.

3. Salud y Previsión. “Entre los clientes habituales se ha verificado la migración desde el sistema estatal de salud, parcialmente, hacia el sistema Privado”.

4. Trabajo y Hogar. “Se aprecia un leve incremento de las horas trabajadas. El porcentaje de menores que trabaja, tanto fuera del hogar como dentro de él, ha disminuido en hogares soportados por Microempresarios”.

Para la obtención de estos resultados, el evaluador hizo una comparación entre un grupo de control y uno de tratamiento. Además, se utilizaron técnicas econométricas como el de Diferencias en Diferencias (DID), DID con Covariables y DID-Matching. Sin embargo, la información que se tiene de esta evaluación es escasa, ya que sólo se contó con el Resumen Ejecutivo de dicha evaluación. [Fuente de información utilizada: Departamento de Economía de la Universidad de Chile. Evaluación de Impacto del Programa de Crédito a Microempresarios. Análisis de Resultados / Resumen Ejecutivo. Chile, 2005.]

59

50. En caso de que el programa cuente con evaluaciones de impacto, con qué características de las siguientes cuentan dichas evaluaciones:

a) Se compara un grupo de beneficiarios con uno de no beneficiarios de características similares.

b) La(s) metodología(s) aplicadas son acordes a las características del programa y la información disponible, es decir, permite generar una estimación lo más libre posible de sesgos en la comparación del grupo de beneficiarios y no beneficiarios.

c) Se utiliza información de al menos dos momentos en el tiempo. d) La selección de la muestra utilizada garantiza la representatividad de los

resultados. No. El Programa no cuenta con evaluaciones de impacto que cumplan con alguna de las características antes mencionadas. Sin embargo, FinRural cuenta con el documento: “Propuesta de Evaluación de Impacto de los Programas de Apoyo de la Financiera Rural para Acceder al Crédito y Fomentar la Integración Económica y Financiera para el Desarrollo Rural.” Este documento indica la necesidad de este tipo de evaluación y la metodología seleccionada.

60

51. En caso de que se hayan realizado evaluaciones de impacto que cumplan con al menos las características señaladas en los incisos a) y b) de la pregunta anterior, ¿cuáles son los resultados reportados en esas evaluaciones?

No. El Programa no cuenta con evaluaciones de impacto que cumplan con alguna de las características antes mencionadas en la pregunta 50.

61

VII. Conclusiones Para cada uno de los temas considerados en la presente evaluación el Programa presenta tanto puntos a favor como áreas de mejora. El diseño del Programa es aceptable ya que el propósito del Programa está vinculado con el Programa Sectorial, cuenta con padrón de beneficiarios, porque hay cierta coincidencia entre las ROP y la MIR, porque las fichas técnicas cuentan con toda la información de los indicadores, las metas de los indicadores de la MIR cuentan con unidad de medida e impulsan el desempeño, el objetivo sectorial del Programa está vinculado con el PND. Sin embargo, el problema o necesidad prioritaria que busca resolver el programa no está claramente identificado. No existe un diagnóstico adecuado del problema que atiende el Programa. No existe No existe un diagnóstico adecuado del problema que atiende el Programa, lo que impide contar con una justificación teórica o empírica que sustente la intervención del Programa. Asimismo, no hay vinculación del Programa con los Objetivos de Desarrollo del Milenio (ODM). Además, las poblaciones, potencial y objetivo, no están cuantificadas. Sin embargo, sí se cuenta con la cuantificación de la población potencial y objetivo para el otorgamiento de crédito. FinRural se basa en el VII Censo Agropecuario y Forestal de 2007 para estimar el universo de unidades de producción rural que no tienen crédito. La cuantificación de la población potencial del Programa no se ha realizado debido a su costo. Sobre el tema Planeación y Orientación a Resultados, el Programa sí utiliza informes de evaluaciones externas. Se han solventado la mayoría de los ASM de los últimos años. Recolecta información de los apoyos dados a los beneficiarios en el tiempo. Recolecta información para monitorear su desempeño de manera oportuna, confiable y actualizada Sin embargo, la unidad responsable del Programa no cuenta con un plan estratégico, resultado de ejercicios de planeación institucionalizados, que contemple el mediano y largo plazo. No cuenta con planes de trabajo anuales para alcanzar sus objetivos. No recolecta información socioeconómica de beneficiarios y no beneficiarios. En el tema de Cobertura y Focalización no se cuenta con una estrategia de cobertura con metas de cobertura anual para la población objetivo con un horizonte de mediano plazo. Además, dado que la población objetivo no está cuantificada, no es posible cuantificar la cobertura del Programa. En cuanto a la operación del Programa, los procedimientos para recibir, registrar y dar trámite a las solicitudes de apoyo son adecuados. El Programa cuenta con mecanismos documentados adecuados para verificar el procedimiento para recibir, registrar y dar trámite a las solicitudes de apoyo. Los procedimientos del Programa para la selección de beneficiarios y sus mecanismos de verificación están sistematizados y difundidos públicamente. Los procedimientos para otorgar los apoyos y sus mecanismos de verificación están estandarizados y apegados al documento normativo. Las aplicaciones informáticas cuentan con información confiable. Hay un porcentaje de avance superior a 100 en la mayoría de los indicadores. Cuenta con mecanismos adecuados de transparencia y rendición de cuentas. Sin embargo, el Programa no cuenta con información sistematizada que permita conocer la demanda total de apoyos. No cuantifica y desglosa los gastos en los que incurre para generar los Componentes. En el tema de Percepción de la Población Atendida, los operadores del Programa sí cuentan con instrumentos adecuados y representativos para medir el grado de satisfacción de la población atendida. Por último, el Programa documenta sus resultados de Fin y Propósito con indicaciones de la MIR. A su vez, el Programa cuenta con una evaluación internacional que muestra el impacto de un programa similar aunque los resultados no son comparables ya que la evaluación está enfocada a microempresarios en general. El Programa no cuenta con evaluaciones de impacto en donde se compare un grupo de beneficiarios con uno de no beneficiarios de características similares, ni

62

cuenta con evaluaciones que no sean de impacto que permitan identificar hallazgos relacionados con el Fin y Propósito del Programa. C-230 recomienda que se tomen acciones de mejoría respecto a los siguientes temas: a) La necesidad de volver a hacer el Diagnóstico o adaptarlo, de modo que cumpla con: identificar que existe un bajo nivel de toma de crédito; identificar causas y efectos del problema; identificar qué causa busca resolver cada uno de los Programas. b) La necesidad de hacer planes estratégicos de largo plazo para los programas, explicando que éstos deben incluir una revisión de las evaluaciones externas, la identificación de las áreas de mejora, una programación de largo plazo sobre cómo atenderlas, identificar otras áreas de mejora que la FinRural considere relevantes y un plan de atención de largo plazo, un plan gradual de ampliación de cobertura - si el Diagnóstico arroja que hay subcobertura, lo que es probable -, una estimación de los recursos necesarios para ampliar la cobertura como se planea. Estos planes son distintos de los planes estratégicos de las áreas de la FinRural; deben referirse a los programas; c) La necesidad de que se mejore la definición de la población potencial y objetivo, tanto en las MMLs como en las ROs. Se recomienda que se exprese en términos de individuos que experimentan el problema que el Programa busca resolver. El hecho de que se les atienda a través de instituciones (como FinRural) u organizaciones (de productores) no hace a esta última parte de la población objetivo sino vehículos o Instancias Ejecutoras formales. d) Llevar a cabo la evaluación de impacto de acuerdo al plan de propuesta presentado; e) La necesidad de una Matriz de Marco Lógico (MML) que aclare de forma adecuada cuáles son el Fin, Propósito, componentes y actividades, y ésta debe estar alineada con las ROP - los objetivos de las ROP con Fin y Propósito; los componentes con los tipos de apoyo, etc. Los evaluadores consideramos excesiva la exigencia de que cada actividad tenga un indicador, ya que hay algunas que sólo podrían medirse con indicadores muy poco útiles, puede haber indicadores por grupo de actividad. Pero sí debe haber una relación lógica entre ROP y MML. La importancia de una buena MML no debe dejarse de lado: en su ausencia, es común que los operadores agreguen componentes no relacionados con el problema, o no identifiquen componentes faltantes para resolver el problema.

63

Anexo 1: Descripción General del Programa Identificación General del Programa

Programa para la Constitución de Garantías Líquidas, PCGL.

Operador por Financiera Rural (FinRural) desde 2008

Problema o necesidad que pretende atender

No identificado.

Objetivos nacionales y sectoriales a los que se vincula

En el nivel nacional (Plan Nacional de Desarrollo 2007-2012): Eje 2 de Política Pública “Economía Competitiva y Generadora de Empleos”; Objetivo Nacional “Democratizar el sistema financiero sin poner en riesgo la

solvencia del sistema en su conjunto, fortaleciendo el papel del sector como detonador del crecimiento, la equidad y el desarrollo de la economía nacional”;

Tema “Sistema Financiero Eficiente”; y Estrategia 2.2 “Promover la competencia en el sector financiero a través de la

entrada de nuevos participantes, la promoción de una mayor diversidad de productos, vehículos y servicios financieros, enfatizando la información y la transparencia como medios para que los usuarios de la banca puedan tomar decisiones con toda la información necesaria, así como la promoción de la educación financiera de los segmentos de la población que han accedido más recientemente a los servicios bancarios”.

En el nivel sectorial (Programa Nacional de Financiamiento del Desarrollo 2008-2012): Objetivo 2.4: “Fortalecer el papel de los mercados de deuda y capitales en el

financiamiento al sector privado, promoviendo el desarrollo de nuevos vehículos de ahorro, inversión y manejo de riesgos”

Estrategia 3.5: “Reorientar la actuación de la banca de desarrollo”.

Objetivos del programa

a) Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que le permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como constituir reservas preventivas a los Intermediarios Financieros Rurales.

b) Otorgar apoyos que permitan a los Acreditados de la Financiera Rural, amortizar parcial o totalmente financiamientos de la Financiera Rural ante caídas de los precios de sus productores atribuibles a variaciones en los mercados, cambios en las condiciones de producción, o por desastres naturales.

Bienes y servicios que ofrece:

Apoyo para constituir garantías líquidas a través del Fondo de garantías líquidas

Apoyo para el otorgamiento de Garantías Líquidas Capitalizables Apoyo para la Constitución de Reservas Preventivas Apoyo para enfrentar contingencias de mercado o desastres naturales

Identificación y cuantificación de la población potencial

No se tiene identificada apropiadamente, ni cuantificada.

Identificación y cuantificación de la población objetivo

Para el Apoyo para constituir garantías líquidas a través del Fondo de garantías líquidas:

1) Personas físicas o morales. 2) Intermediarios financieros rurales y entidades dispersoras de crédito. 3) Acreditados de Financiera rural que reciban financiamiento para la

capitalización de sus unidades productivas. 4) Acreditados de financiera rural con fondeo de otras instituciones.

64

5) Acreditados a los que se hubiese otorgado el apoyo pero por falta de recursos no se les otorgo.

Para el Apoyo para el otorgamiento de Garantías Líquidas Capitalizables: 1) Intermediarios financieros rurales y entidades dispersoras de crédito.

Para el Apoyo para la Constitución de Reservas Preventivas: 1) Empresas de intermediación financiera que otorguen financiamientos con

fondeo de la Financiera Rural. Para el Apoyo para enfrentar contingencias de mercado o desastres naturales:

1) Acreditados de la Financiera Rural afectadas por variaciones en los mercados, o por desastres naturales

2) Personas físicas o morales por variaciones en los mercados, o por desastres naturales

La población objetivo no se encuentra cuantificada.

Identificación y cuantificación de la población atendida

La población atendida son los intermediarios financieros rurales, entidades dispersoras de crédito y demás personas físicas y morales que reciben apoyos del Programa. Durante 2010 el PCGL entrego apoyos a 182 intermediarios financieros rurales y entidades dispersoras de crédito, lo cual se estima llego a beneficiar a 44,194 productores.

Cobertura y mecanismos de focalización

El Programa tiene cobertura nacional en comunidades de hasta 50 mil habitantes. No prevé mecanismos de focalización socioeconómica.

Presupuesto aprobado en el ejercicio fiscal sujeto a evaluación

El presupuesto aprobado para el PCGL de acuerdo al PEF en 2010 fue de 100 millones de pesos. De estos 89.8 millones fueron ejercidos, después de traspasos al programa para la constitución y operación de unidades de promoción de crédito, y una disminución de gastos de operación.

Principales metas de Fin, Propósito y Componentes

Porcentaje del crédito asociado de los apoyos con respecto al crédito colocado de la Financiera Rural (Meta 2010: 5.9%; Avance 2010: 5.9%, Línea base 2010: 5.9%)

Valoración del diseño del programa respecto a la atención del problema o necesidad

1. Los objetivos del PCGL están alineados con los del Plan Nacional de Desarrollo 2007-2017 y con el Programa Nacional de Financiamiento del Desarrollo 2008-2012 (que hace las veces de Programa Sectorial).

2. El Programa no cuenta con un Diagnóstico formal que identifique el problema que busca resolver. En ausencia de lo anterior, no puede considerarse que su diseño sea apropiado. Es necesario que FinRural emprenda la elaboración de un Diagnóstico que incluya:

La identificación del problema específico que cada programa busca resolver;

Un árbol de problemas, en que se identifique de forma clara cuáles son las causas y los efectos del mismo;

Una justificación de la existencia del problema, así como de sus causas y efectos, fundamentada en datos estadísticos públicos (como son los arrojados por los Censos Económicos, el Censo de Población y Vivienda o la Encuesta Nacional de Ingreso-Gasto de los Hogares) o en recolección primaria de información;

La identificación de la población que presenta el problema; su cuantificación, características y ubicación territorial;

Una definición adecuada de Población Potencial y Objetivo; y El plazo necesario para su revisión y actualización.

Al no quedar clara cuál es la problemática que se busca resolver, se presenta el riesgo de distraer recursos públicos escasos en la búsqueda de solución de

65

problemáticas múltiples – algunas de las cuales pueden no ser relevantes - por medios que no sean óptimos, eficaces o eficientes.

3. La Matriz de Indicadores para Resultados no guarda correspondencia con lo estipulado en las Reglas de Operación del Programa.

De acuerdo a la normatividad aplicable, los objetivos señalados en las Reglas de Operación (ROs) deben estar alineados con el Fin y/o el Propósito de la Matriz de Indicadores para Resultados (MIR); los tipos de apoyo previstos en las ROs deben corresponder a los Componentes detallados en la MIR; finalmente, las actividades descritas en la sección de Operación de las ROs deben guardar correspondencia con las Actividades incluidas en la MIR. Ello no se cumple en el caso del PCGL

66

Anexo 2: Metodología para la cuantificación de las Poblaciones Potencial y Objetivo

No existe una cuantificación apropiada de las Poblaciones Potencial y Objetivo.

67

Anexo 3: Procedimiento para la actualización de la base de datos de beneficiarios Financiera Rural cuenta con dos principales sistemas de captura de información sobre beneficiarios: Sistema Integral de Promoción (SIPRO) y el Sistema Integral de Apoyos (SIA). La información relevante a los cuatro programas de apoyo están en el SIA con la excepción de los siguientes tres componentes del Apoyo para reducir costos de acceso a que están en el SIPRO: Apoyo para el pago de los servicios por consulta a las sociedades de información crediticia Apoyo para la verificación de datos en el registro público Apoyo para el pago de avalúos Tanto el SIPRO como el SIA permiten identificar el tipo de beneficiario atendido, ya sea intermediario financiero o una persona física, y capturan datos tales como RFC, CURP, localidad, entre otros de acuerdo a lo establecido en las ROP. Ambos sistemas recompilan información sobre el tipo de apoyo otorgado, permitiendo diferenciar cuando fue otorgado un apoyo, en cuantas ministraciones, entre otros datos financieros. El SIPRO asigna un número de crédito único de nueve dígitos a cada contrato realizado, donde los primeros tres números indican el intermediario financiero, los siguientes cuatro son números consecutivos reservados para operaciones distintas de un intermediario financiero y los últimos dos dígitos son el año del contrato. El SIA asigna un número de crédito único de 18 dígitos a cada contrato realizado, donde los primeros tres números indican el intermediario financiero, y los últimos tres números son consecutivos reservados para operaciones distintas de un intermediario financiero. Los demás números se asignan por otros factores. Existen además 2 números adicionales al número de crédito los cuales corresponden al número de ministración de los recursos al beneficiario. Todos los contratos abiertos por un intermediario financiero deben ser capturados electrónicamente y enviados a la agencia local de FinRural. Esta agencia en turno entrega los archivos a la coordinación regional, la cual remite la información al corporativo central. Este proceso tarda aproximadamente 15 días en completarse. Todos los contratos tienen fechas claras indicando cuando fue la apertura de un contrato, cuando fueron hechas las ministraciones de recursos, y cuando fue concluida la operación. Tanto el SIA como el SIPRO indican no contener duplicidades significativas. Los datos sobre los beneficiarios se capturan de forma única al ingresarse al sistema. El SIA no permite añadir solicitudes de crédito una vez que se agotaron los recursos presupuestales para los programas de apoyo. Esto se considera una debilidad desde el punto de vista del evaluador ya que no permite contabilizar apropiadamente el número de solicitudes para cada programa. El SIPRO recolecta información de beneficiarios directos e indirectos, e incluye el generó, edad, y pertenencia a un grupo indígena de los beneficiarios directos e indirectos. Este sistema también recolecta el grado de marginación del municipio donde se otorgó el apoyo. El SIA no recolecta ningún tipo de información socioeconómica.El sistema de datos SIPRO ofrece una mayor cantidad de información sobre el funcionamiento y desempeño de los programas de apoyo de FinRural. Se recomienda el sistema SIA se actualice para que tenga al menos las mismas capacidades que el SIPRO. FinRural sistematiza la información de los beneficiarios en el Sistema Integral de Información de Padrones de Programas Gubernamentales (SIIPP-G).

68

Anexo 4: Resumen Narrativo de la Matriz de Indicadores para Resultados Elementos de la Matriz de Indicadores para Resultados Elementos de las Reglas de Operación ¿Existe

correspondencia?

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo.

Objetivos a) Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como constituir reservas preventivas a los Intermediarios Financieros Rurales.

b) Otorgar apoyos que permitan a los Acreditados de la Financiera Rural, amortizar parcial o totalmente financiamientos de la Financiera Rural ante caídas en los precios de sus productos atribuibles a variaciones en los mercados, cambios en las condiciones de producción, o por desastres naturales.

No

Propósito Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural.

Componentes 1.Satisfacción de los beneficiarios que constituyen garantías líquidas 2, Cobertura Incrementada

Componentes Apoyo para constituir garantías líquidas a través del Fondo de garantías líquidas

Apoyo para el otorgamiento de Garantías Líquidas Capitalizables

Apoyo para la Constitución de Reservas Preventivas

Apoyo para enfrentar contingencias de mercado o desastres naturales

No

Actividades Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la constitución de garantías liquidas

Actividades De la lectura de las ROPs (sección 3) se identifican actividades como las siguientes:

Recepción de solicitudes de apoyo (3.3.2.1)

Evaluación y análisis de factibilidad de las solicitudes de apoyo (3.3.2.2)

Entrega de apoyos.

Recepción de documentación probatoria de avances.

Etc.

No

69

Anexo 5: Indicadores Nombre del Programa: Programa para la Constitución de Garantías Líquidas Modalidad: Garantías de crédito Dependencia/Entidad: Dirección General Adjunta de Fomento y Promoción de Negocios Unidad Responsable: Consistencia y Resultados Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 Nivel de Objetivo

Nombre del Indicador Método de Cálculo Claro

Relevante

Económico

Monitoreable

Adecuado

Definición

Unidad de Medida

Frecuencia de Medición

Línea Base

Metas

Comportamiento del indicador

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo.

(Crédito colocado por financiera rural / crédito colocado por la banca de desarrollo) *100

Si No Si Si No Si Si Si Si Si Si

Propósito Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural

(Crédito asociado al programa de garantías líquidas / total de crédito otorgado por Financiera Rural)* 100

Si No Si Si No Si Si Si Si Si Si

Componentes Satisfacción de los beneficiarios que constituyen garantías líquidas

(Número de opiniones favorables en el Programa para la con situación de garantías liquidas / número de opiniones recibidas en el Programa para la constitución de garantías liquidas )*100

Si No Si Si No Si Si Si Si Si Si

Cobertura Incrementada

(Número de beneficiarios nuevos en el Programa para la constitución de garantías liquidas/ número total de beneficiarios en el Programa para la constitución de garantías liquidas).*100

Si Si Si Si Si Si Si Si Si Si Si

Actividades Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la constitución de garantías liquidas

(Número de apoyos otorgados en el Programa para la constitución de garantías liquidas/ total de solicitudes recibidas en el Programa para la constitución de garantías liquidas.) * 100

Si No Si No No Si Si Si Si Si Si

Tres de los indicadores no se consideran adecuados ni relevantes:

El indicador de Propósito supone que es deseable una situación en la que un mayor porcentaje de los créditos de FinRural tengan asociado un apoyo del PCGL; para el equipo evaluador no resulta evidente la razón por la cual tal situación sería necesariamente positiva.

El indicador de Componente, Satisfacción de los beneficiarios que constituyen garantías líquidas, se basa en la percepción de los beneficiarios respecto de si los apoyos recibidos resultan en un fortalecimiento de capacidades; el equipo evaluador no lo considera apropiado dado que, como resulta evidente, los beneficiarios tienen el incentivo de manifestar una opinión positiva a efectos de continuar recibiendo los apoyos.

70

En cuanto al indicador de Actividad, Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la constitución de garantías liquidas, éste mide la cobertura del Programa respecto a las personas que solicitan apoyo, sin embargo sería de mucha mayor utilidad – por ejemplo, para efectos de juzgar sobre la suficiencia presupuestal del Programa – medir la cobertura respecto de toda la población que presenta el problema (es decir, de la población potencial).

Un indicador no se considera monitoreable:

El indicador de Actividad busca medir el porcentaje de solicitudes atendidas. Sin embargo, el SIA, sistema de base de datos del PCGL, sólo registra

solicitudes de garantías líquidas si existen presupuesto disponible. Una vez que se agotó el presupuesto no es posible añadir una solicitud más al

sistema. Por esta razón no se considera que este indicador sea monitoreable.

71

Anexo 6: Metas del Programa Nombre del Programa: Programa para la Constitución de Garantías Líquidas Modalidad: Garantías de crédito Dependencia/Entidad: Dirección General Adjunta de Fomento y Promoción de Negocios Unidad Responsable: Consistencia y Resultados Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 Nivel de Objetivo

Nombre del Indicador Meta

Unidad de Medida

Justificación

Orientada a impulsar el desempeño

Justificación

Factible

Justificación

Propuesta de mejora de la Meta

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca de desarrollo.

5.9 Si Porcentaje No La meta es tan sólo 0.01% mayor a la línea base

(5.8)

Si La meta es tan sólo 0.01% mayo a la línea base

(5.8)

No se considera apropiado proponer mejoras sin contar con: a) información histórica sobre el comportamiento del indicador; y b) una justificación relativa a la selección de la meta original por parte de FinRural

Propósito Porcentaje del crédito asociado por el programa de garantías líquidas respecto del crédito otorgado por Financiera Rural

5 Si Porcentaje Si La meta es 13.6% mayor a la línea base (4.4)

Si La mejora propuesta respecto de la línea base no parece excesiva

No se considera apropiado proponer mejoras sin contar con: a) información histórica sobre el comportamiento del indicador; y b) una justificación relativa a la selección de la meta original por parte de FinRural

Componentes Satisfacción de los beneficiarios que constituyen garantías líquidas

94 S Porcentaje No La meta es tan sólo 0.01% mayor a la línea base (93)

Si La meta es tan sólo 0.01% mayor a la línea base

No se considera apropiado proponer mejoras sin contar con: a) información histórica sobre el comportamiento del indicador; y b) una justificación relativa a la selección de la meta original por parte de FinRural

Cobertura Incrementada

0.6 Si Porcentaje Si La meta es 30% mayor a la línea base

(0.46)

Si La mejora propuesta respecto de la línea base no parece excesiva

No se considera apropiado proponer mejoras sin contar con: a) información histórica sobre el comportamiento del indicador; y b) una justificación relativa a la selección de la meta original por parte de FinRural

Actividades Porcentaje de atención a la demanda de los apoyos recibidos en el Programa para la constitución de garantías liquidas

100 Si Porcentaje No La meta es igual a la línea base

Si La meta es igual a la línea base

No se considera apropiado proponer mejoras sin contar con: a) información histórica sobre el comportamiento del indicador; y b) una justificación relativa a la selección de la meta original por parte de FinRural

72

Anexo 7: Complementariedad y coincidencias entre programas federales Nombre del Programa: Programa para la Constitución de Garantías Líquidas. Modalidad: Garantías de Crédito Dependencia/Entidad: Financiera Rural Unidad Responsable: Dirección General Adjunta de Fomento y Promoción de Negocios Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011

Nombre del

programa Modalidad

Dependencia/entidad

Propósito Población objetivo

Tipo de apoyo

Cobertura Geográfica

Fuentes de Informació

n

¿Con cuáles programas federales coincide?

¿Con cuáles programas

federales se complementa?

Justificación

PCGL Garantías de crédito

FinRural Otorgar apoyos a Productores preferentemente de bajos ingresos, Empresas Rurales, Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que le permitan garantizar en forma líquida los créditos que soliciten a Financiera Rural, así como constituir reservas preventivas a los Intermediarios Financieros Rurales.

1) Personas físicas o morales que preferentemente no tengan la posibilidad de constituir garantías reales o suficientes para acceder a créditos con la Financiera Rural; 2) Intermediarios Financieros Rurales y Entidades Dispersoras de Crédito que inicien operaciones con Financiera Rural y que no hayan recibido

Garantías de crédito

Nacional 1. ROP 2.Evaluación de Diseño 2008. 3.Seguimiento a ASM 2007. 4.Nota informativa DGAFPN 2011

1.Programa de Servicios de Asistencia Técnica Integral (SATI) FIRA.

5.PIDEFIMER de la SAGARPA

1. Busca fomentar y promover que los productores elegibles contraten servicios de asesoría y consultoría a fin de mejorar la rentabilidad y competitividad de sus empresas, e impulsar el desarrollo del mercado de servicios de asistencia técnica en el sector rural y pesquero. Dirigido a productores de bajos ingresos y empresas rurales;

2. Programa de Fortalecimiento de Competencias a Empresas,

2. Tiene como objeto, impulsar y dinamizar la integración de empresas y organizaciones económicas a las redes de valor en que participan;

73

previamente financiamiento de alguna otra institución financiera o que busquen ampliar sus operaciones hacia nuevos segmentos de mercado; 3) acreditados que reciban financiamiento de la Financiera Rural para la capitalización de sus unidades productivas; 4) acreditados que reciban financiamiento de la Financiera Rural a través de alguno de los Programas Especiales clasificados de esa forma por acuerdo de la Dirección General; 5) acreditados de la Financiera

Organizaciones Económicas y Empresas de Servicios Especializados – FIRA

3.Programa de Esquema de Fortalecimiento de las Competencias Financieras y Empresariales para Intermediarios Financieros No Bancarios- FIRA

3. Busca fortalecer las competencias financiera y empresarial de la población objetivo de este esquema para lograr una mayor penetración y expansión de los servicios financieros en el sector rural y pesquero

4. Programa de Capacitación Empresarial y Transferencia de Tecnología. FIRA

4. Busca inducir el desarrollo de los mercados de servicios de capacitación en el sector, así como la generación y fortalecimiento de estructuras técnicas especializadas, que favorezcan la atención de las necesidades

74

Rural que puedan acceder a financiamientos en condiciones preferenciales con fondeo de otras Instituciones, y 6) acreditados a los que se les hubiera autorizado dicho Apoyo y que por falta de recursos presupuestales del Fondo no se hubiera constituido la garantía.

crediticias de los productores

5.PIDEFIMER de la SAGARPA 6.FONAES de la SE 7.FOMMUR de la SE 8.PRONAFIN de la SE

5. Se encuentra documentada, ya que incluso existe un Convenio entre ambas instituciones que contemplan la suma de esfuerzos 6.Busca impulsar la generación de empleos, mediante el apoyo a la creación, el desarrollo y la consolidación de proyectos productivos, comerciales o de servicios 7. Mujeres rurales emprendedoras en condiciones de pobreza que crean y desarrollan microempresas a través del acceso al financiamiento 8. Emprendedores en condición de pobreza crean y desarrollan microempresas a través del acceso al financiamiento

75

Anexo 8: Avance de las acciones para atender los aspectos susceptibles de mejora AVANCE DEL DOCUMENTO DE TRABAJO Nombre del Programa: Programa para la Constitución de Garantías Líquidas Modalidad: Garantías de crédito Dependencia/Entidad: Dirección General Adjunta de Fomento y Promoción de Negocios Unidad Responsable: Consistencia y Resultados Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 No.

Evaluación de la que se deriva

Aspectos susceptibles de mejora

Actividades

Área Responsable

Fecha de Término

Resultados Esperados

Productos y/o Evidencias

Avance (%)

Identificación del documento probatorio

Observaciones

1 Evaluación de Diseño 2008

El programa carece de cuantificación detallada de la población objetivo

Acción 1: Se implementarán las acciones que permitan determinar la viabilidad de cuantificar la población objetivo de los programas de apoyo y servicios que opera la Financiera Rural con recursos fiscales. Acción 2: Cuantificar la población objetivo

Dirección General Adjunta de Planeación Estratégica y Análisis Sectorial

Acción 1: terminada el 31/Mar/2010 Actividad 2: Se prevé terminar en Junio 2012

1. Dictaminación relativa a la factibilidad de cuantificar la Población Objetivo 2. Cuantificación de la Población Objetivo.

1. Plan de trabajo para cuantificar la población objetivo 2. Población objetivo cuantificada

1. 100% 2. En proceso, se estima un 25%

1 y 2: Oficio DGAPEAS/053/2011, dirigido a CONEVAL

C230 Consultores considera que la población potencial y objetivo no está definida adecuadamente

2 Evaluación de Diseño 2008

Posibles duplicidades o complementariedades con otros programas

La Evaluación de Diseño 2008 reporta que existen posibles duplicidades o complementariedades con otros programas

Dirección General Adjunta de Planeación Estratégica y Análisis Sectorial

N/A N/A N/A N/A N/A C230 Consultores reporta que no se recibió ningún documento por parte de FinRural que realice un análisis de duplicidades o complementariedades

76

AVANCE DEL DOCUMENTO INSTITUCIONAL Nombre del Programa: Programa para la Constitución de Garantías Líquidas Modalidad: Garantías de crédito Dependencia/Entidad: Dirección General Adjunta de Fomento y Promoción de Negocios Unidad Responsable: Consistencia y Resultados Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 No.

Evaluación de la que proviene

Aspectos susceptibles de mejora

Área Coordinadora

Acciones a Emprender

Área responsable

Fecha de Término

Resultados Esperados

Productos y/o Evidencias

Avance (%)

Identificación del documento probatorio

Observaciones

2 Evaluación de Diseño 2008

El programa carece de cuantificación detallada de la población objetivo.

Gerencia de Evaluación y Gerencia de Planeación Estratégica

Acción 1: Se implementarán las acciones que permitan determinar la viabilidad de cuantificar la población objetivo de los programas de apoyo y servicios que opera la Financiera Rural con recursos fiscales. Acción 2: Cuantificar la población objetivo

Dirección General Adjunta de Planeación Estratégica y Análisis Sectorial

Acción 1: terminada el 31/Mar/2010 Actividad 2: Se prevé terminar en Junio 2012

1. Dictaminación relativa a la factibilidad de cuantificar la Población Objetivo 2. Cuantificación de la Población Objetivo.

1. Dictaminación relativa a la factibilidad de cuantificar la Población Objetivo 2. Cuantificación de la Población Objetivo.

1. 100% 2. En proceso, se estima un 25%

1 y 2: Oficio DGAPEAS/053/2011, dirigido a CONEVAL

77

Anexo 9: Resultado de las acciones para atender los aspectos susceptibles de mejora El Programa presenta tres Aspectos que dio por solventados sin que lo estén realmente:

Aspecto Posición FinRural Consideraciones del evaluador

El Programa no cuenta con un diagnóstico adecuado y actualizado sobre la problemática detectada.

FinRural reporta que se realizó un diagnóstico donde se incluyen los cuatro programas que se operan en 2008, entre ellos el PCOUPC.

El documento que FinRural utiliza a manera de Diagnóstico no cumple con las características mínimas necesarias (ver respuestas a las preguntas 1, 2 y 3)

El Programa no cuenta con un número suficiente de indicadores para demostrar si se logró el efecto esperado en la población objetivo

FinRural reporta que se consideró para la MIR 2008.

C230 Consultores considera que la MIR 2011 sigue adoleciendo de la misma problemática.

El Programa debe contar con instrumentos (encuestas) más adecuados que permitan conocer más aspectos en el impacto del programa en la población objetivo

En la página Web de la Financiera Rural se insertó un aplicativo para conocer la opinión de la Población Objetivo sobre los Programas de Apoyo que opera esta Institución.

C230 Consultores no encontró el aplicativo en la página web de FinRural. Se encontró un formato de encuesta de opinión ; sin embargo, se refiere a los programas de crédito y no a los de subsidio.El Programa lleva a cabo una encuesta de satisfacción de manera periódica y cuenta con un indicador de satisfacción en su Matriz de Indicadores de Resultados.

Existen dos aspectos dados por solventados: “El Programa no ha identificado ni cuantificado costos unitarios en función del Propósito y Componentes del Programa”, que consideró ya no

relevante dados los cambios en las Reglas de Operación del Programa original; y “No existe evidencia documental de la estimación sistemática de los indicadores a Nivel Fin y Propósito y de su verificación”, que ha sido

solventado en la versión 2011 de la Matriz de Indicadores para Resultados. Finalmente, un aspecto está en proceso de atención (“El programa carece de cuantificación detallada de la población objetivo”).

78

Anexo 10: Análisis de recomendaciones no atendidas derivadas de evaluaciones externas

Evaluación que contiene la recomendación

Recomendación no atendida

Estatus actual, en opinión del evaluador 2010-2011

Referencias para la opinión del evaluador

Evaluación de Diseño 2008 (UNAM)

Identificar las duplicidades por componente y buscar la complementariedad en la atención de los beneficiarios.

FinRural no cuenta con un documento en que se analicen a detalle otros programas federales con los que probablemente se presenten duplicidades conceptuales a nivel componente o subcomponente. Por ejemplo: el Programa operado por FIRA, Fondo Nacional de Garantías de los Sectores Agropecuario, Forestal, Pesquero y Rural (FONAGA), se constituye con recursos aportados por el gobierno federal a través de SAGARPA, para facilitar que productores que no cuentan con garantías suficientes, puedan obtener un crédito de los Intermediarios Financieros; lo anterior

es muy similar al Apoyo para constituir garantías líquidas a través del Fondo de garantías líquidas del PCGL. En ausencia de una correcta identificación de duplicidades conceptuales y de un mecanismo de coordinación para atenderlas, existe el riesgo de que una misma persona (física o moral) reciba apoyos tanto del PCGL como del FONAGA para el mismo concepto en el mismo período, configurándose una duplicidad efectiva.

Reglas de Operación del Programa FONAGA

Reglas de Operación de los Programas de Apoyo de la Financiera Rural.

79

Anexo 11: Evolución de la Cobertura Nombre del Programa: Programa para la Constitución de Garantías Líquidas. Modalidad: Garantías de Crédito Dependencia/Entidad: Financiera Rural Unidad Responsable: Dirección General Adjunta de Fomento y Promoción de Negocios Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 No es posible evaluar la cobertura porque la población potencial y la población objetivo no se encuentran cuantificadas.

Tipo de

Población Unidad de

Medida Año 1 Año 2 Año 3 Año … Año… Año… 2011

P. Potencial N/A

P. Objetivo N/A

P. Atendida N/A

(P. A x 100)/P.O N/A

80

Anexo 12: Información de la Población Atendida Nombre del Programa: Programa para la Constitución de Garantías Líquidas. Modalidad: Garantías de Crédito Dependencia/Entidad: Financiera Rural Unidad Responsable: Dirección General Adjunta de Fomento y Promoción de Negocios Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011 Si bien el Programa cuenta con un padrón de beneficiarios, no se cuenta con información suficiente para la elaboración de este anexo ya que no se tienen las características de la población atendida como sexo y edad.

81

Anexo 13: Diagramas de flujo de los Componentes y procesos claves

H. Consejo Directivo de la FinRural autoriza las Reglas de Operación

Publicación de las Reglas de Operación en el DOF

Población Objetivo presenta solicitud de

Apoyo y documentación complementaria

Agencia de Crédito Rural o área de la FinRural verifica

que la información está completa, dictamina la

elegibilidad del solicitante

Agencia de Crédito Rural o área de la FinRural, que

recibe la solicitud, turna a la instancia de

autorización la Solicitud

Instancia de autorización evalúa y autoriza en su

caso, la Solicitud de Apoyo y los recursos

presupuestales

Agencia de Crédito Rural procede a la ejecución del

Apoyo y realiza su seguimiento hasta la

conclusión

La Agencia de Crédito coordina y regula la

operación, seguimiento y control de los apoyos y la

calidad del Programa

82

Anexo 14: Gastos desglosados del programa El Programa no cuenta con información desglosada sobre sus gastos, sólo se tiene información sobre el monto total que se le asigna a partir del Presupuesto de Egresos de la Federación.

83

Anexo 15: Avance de los Indicadores respecto de sus metas Nombre del Programa: Programa para la Constitución de Garantías Líquidas. Modalidad: Garantías de Crédito Dependencia/Entidad: Financiera Rural Unidad Responsable: Dirección General Adjunta de Fomento y Promoción de Negocios Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011

Nivel de Objetivo

Nombre del Indicador Frecuencia

de Medición

Meta (Año

evaluado)

valor alcanzado

(Año evaluado)

Avance (%)

Justificación

Fin Porcentaje del crédito impulsado por Financiera Rural respecto de la banca

de desarrollo. Anual 5.90 6.30 106.78%

El aumento de este indicador se debe a la

aplicación de diferentes estrategias de

financiamiento que coadyuvan al

crecimiento financiero en el sector rural

Propósito

Porcentaje del crédito asociado por el programa de garantías líquidas

respecto del crédito otorgado por Financiera Rural.

Semestral 5.00 5.00 100%

Durante el ejercicio 2011, la FinRural continuó con el

otorgamiento de apoyos de este Programa, que

permiten a los productores la contratación o

ampliación de líneas de crédito

Componentes Cobertura Incrementada. Trimestral 0.60 50.40 8,400% Se superó la meta

establecida para este

84

indicador, debido, principalmente, a que

durante el primer semestre se ministraron apoyos que se tenían autorizados en el

ejercicio 2010, corresponde a productores que fueron afectados por

eventos climatológicos ocurridos durante el

segundo semestre del 2010 en el norte, (en los Estados de Tamaulipas, Zacatecas,

Durango y San Luis Potosí) y sur del país (en los Estados

de Oaxaca y Veracruz) y que por falta de disponibilidad

presupuestal y de la evaluación del daño no se

pudieron atender en el ejercicio correspondiente.

Satisfacción de los beneficiarios que constituyen garantías líquidas.

Trimestral 94.00 100 106.38%

Durante el año evaluado se recibieron 10 encuestas de

las 22 enviadas, mismas que fueron respondidas en sentido favorable, con

respecto al servicio que otorgó la FinRural, así como con la atención recibida en el trámite y resolución de

sus solicitudes; por lo que la percepción de los

85

beneficiarios que responden a la misma,

tanto en el servicio recibido en el trámite y resolución,

como la finalidad del apoyo, cumplen con las

expectativas de los solicitantes.

Actividades

Porcentaje de atención a la demanda de los apoyos recibidos en el Programa

para la constitución de garantías liquidas

Trimestral 100 49.10 49.10%

Derivado de que se encuentra en proceso de valoración del daño y la

aplicación de los seguros para continuar con el

trámite para el otorgamiento del apoyo de

desastres naturales, proceso que no puede ser

realizado de manera inmediata, se quedaron

pendientes de atender 167 solicitudes al cierre del

2011.

86

Anexo 16: Instrumentos de Medición del Grado de Satisfacción de la Población Atendida (Formato libre). En la “Guía metodológica para la aplicación de encuestas de opinión en los programas que maneja la financiera rural” se especifican los parámetros de diseño de la encuesta de satisfacción:

*Que definan los objetivos a medir, *que sean claros y concisos, *que incrementen el porcentaje de respuesta y *que las preguntas se refieran a una sola idea.

En dicho documento también se establece el proceso de cálculo de los resultados de la encuesta: 1. Extraer de base de dispersiones de cada uno de los programas, los beneficiarios y sus correos electrónicos a los que se les otorgaron los apoyos. 2. Enviar correos con la encuesta a cada beneficiario 3. En un periodo de 3 a 5 días se reciben los cuestionarios contestados. 4. Se capturan en la herramienta. 5. Se elabora un reporte con los datos obtenidos al cierre del mes y el avance del periodo en el ejercicio. El análisis metodológico para el PCGL contiene las siguientes observaciones: La encuesta cuenta con seis preguntas, es necesario focalizar la encuesta en tipo de usuario, no se identifican preguntas de la satisfacción del servicio ni en la permanencia del programa.

87

Anexo 17: Principales Fortalezas, Oportunidades, Debilidades, Amenazas y Recomendaciones.

Tema de evaluación: Fortaleza u Oportunidad/Debilidad o amenaza Referencia (pregunta)

Recomendación

Fortaleza u Oportunidad

Diseño El programa está vinculado con el programa sectorial,

cuenta con padrón de beneficiarios y el objetivo sectorial del Programa está vinculado con el PND.

4, 5, 8 No aplica

Planeación y Orientación

Se recolecta información para monitorear su desempeño de manera oportuna, confiable y actualizada

22 No aplica

Percepción de la Población Atendida

El Programa cuenta con instrumentos adecuados y representativos para medir el grado de satisfacción de su

población atendida 12, 17, 43 No aplica

Operación Los procedimientos para recibir, registrar y dar trámite a las

solicitudes de apoyo son adecuados. Además están sistematizados y son difundidos públicamente

28 No aplica

Debilidad o Amenaza

Diseño El problema no está claramente identificado 1 Realizar un diagnóstico formal que identifique la problemática específica del Programa.

Planeación y Orientación a

Resultados

El Programa no recolecta información socioeconómica de beneficiarios y no beneficiarios.

9 Incluir en las solicitudes de apoyo, rubros que brinden información socioeconómica de los solicitantes.

Cobertura y Focalización

La población objetivo y potencial no están cuantificadas, por lo que no es posible cuantificar la cobertura del

Programa. 25

Hacer un análisis que cuantifique tanto la población objetivo como potencial. La cual deberá tener las mismas características que se describen en las Reglas de Operación.

Operación El Programa no cuenta con información sistematizada que

permite conocer la demanda total de apoyos. 27

Al momento de que el solicitante introduzca su solicitud de apoyo, se deberá recolectar la información de dicha solicitud aún en los casos en que al solicitante no se le otorgue el apoyo.

88

Anexo 18: Comparación con los resultados de la Evaluación de Consistencia y Resultados anterior. No existe Evaluación de Consistencia y Resultados anterior.

89

Anexo 19: Valoración Final del programa Nombre del Programa: Programa para la Constitución de Garantías Líquidas. Modalidad: Garantías de Crédito Dependencia/Entidad: Financiera Rural Unidad Responsable: Dirección General Adjunta de Fomento y Promoción de Negocios Tipo de Evaluación: Consistencia y Resultados Año de la Evaluación: 2011

Tema Nivel Justificación

Diseño 1

Porque el propósito del programa está vinculado con el programa sectorial, cuenta con padrón de beneficiarios, porque hay cierta coincidencia entre las ROP y la MIR, porque las fichas técnicas cuentan con toda la información de los indicadores, las metas de los indicadores de la MIR cuentan con unidad de medida e impulsan el desempeño, el objetivo sectorial del Programa está vinculado con el PND. Sin embargo, el problema o necesidad prioritaria que busca resolver el Programa no está claramente identificado. No existe un diagnóstico adecuado del problema que atiende el Programa. No existe justificación teórica o empírica que sustente la intervención del Programa. No hay vinculación del Programa con los ODM. Las poblaciones potencial y objetivo no están cuantificadas.

Planeación y Orientación a Resultados 2

El Programa utiliza informes de evaluaciones externas. Se han solventado la gran mayoría de los ASM de los últimos años. Recolecta información de los apoyos dados a los beneficiarios en el tiempo. Recolecta información para monitorear su desempeño de manera oportuna, confiable y actualizada. Sin embargo, la unidad responsable del Programa no cuenta

90

con un plan estratégico resultado de ejercicios de planeación institucionalizados que contemple el mediano y largo plazo. No cuenta con planes de trabajo anuales para alcanzar sus objetivos. No recolecta información socioeconómica de beneficiarios y no beneficiarios.

Cobertura y Focalización 1

El Programa cuenta con una estrategia de cobertura con metas de cobertura anual para la población objetivo con un horizonte de mediano plazo. Sin embargo, la población objetivo no está cuantificada por lo que no es posible cuantificar la cobertura del Programa.

Operación 3

Los procedimientos para recibir, registrar y dar trámite a las solicitudes de apoyo son adecuados. El programa cuenta con mecanismos documentados adecuados para verificar el procedimiento para recibir, registrar y dar trámite a las solicitudes de apoyo. Los procedimientos del programa para la selección de beneficiarios y sus mecanismos de verificación están sistematizados y difundidos públicamente. Los procedimientos para otorgar los apoyos y sus mecanismos de verificación están estandarizados y apegados al documento normativo. Las aplicaciones informáticas cuentan con información confiable. Hay un porcentaje superior a 100 en la mayoría de los indicadores. Cuenta con mecanismos adecuados de transparencia y rendición de cuentas. Sin embargo, el Programa no cuenta con información sistematizada que permite conocer la demanda total de apoyos. No cuantifica y desglosa los gastos en los que incurre para generar los Componentes.

Percepción de la Población Atendida 4

El programa cuenta con instrumentos adecuados y representativos para medir el grado de satisfacción de su población atendida

91

Resultados 1

El Programa documenta sus resultados de Fin y Propósito con indicaciones de la MIR y han tenido avances mayores a 100. A su vez, el Programa cuenta con una evaluación internacional que muestra el impacto de un programa similar aunque los resultados no son comparables ya que la evaluación está enfocada a microempresarios en general. El programa no cuenta con evaluaciones de impacto en donde se compare un grupo de beneficiarios con uno de no beneficiarios de características similares, ni cuenta con evaluaciones que no sean de impacto que permitan identificar hallazgos relacionados con el Fin y Propósito del Programa.

Valoración Final Nivel promedio del total de temas

Nivel= Nivel promedio por tema Justificación= Breve descripción de las causas que motivaron el nivel por tema o el nivel total (Máximo 100 caracteres por Módulo)

Anexo 20: Ficha Técnica con los datos generales de la instancia evaluadora y el costo de la evaluación.

92

Nombre de la instancia evaluadora: C-230 Consultores, S. C.

Nombre del coordinador de la evaluación: Raúl Abreu Lastra.

Nombres de los principales colaboradores: Raúl Abreu Lastra, Pedro Velasco, Giulia Salieri, Juan Carlos López.

Nombre de la unidad administrativa responsable de dar seguimiento a la evaluación: Financiera Rural.

Nombre del titular de la unidad administrativa responsable de dar seguimiento a la evaluación: Lic. Javier Warman Diamant

Forma de contratación de la instancia evaluadora: Invitación Nacional a cuando menos tres personas.

Costo total de la evaluación de los cuatro Programas de FinRural: $1,780,000.

Fuente de financiamiento: N/D