Oficina de Evaluacin Independiente del FIDA Evaluacin de los Resultados del Proyecto de Manejo de Recursos Naturales en el Chaco y Valles

Altos en Bolivia (2012)

Trminos de referencia 1. Antecedentes La Oficina de Evaluacin Independiente del FIDA (IOE) llevar a cabo en 2012 una evaluacin de los resultados del Proyecto de Manejo de Recursos Naturales en el Chaco y Valles Altos (PROMARENA) en el Estado Plurinacional de Bolivia. Una Evaluacin de los Resultados de un Proyecto (ERP) es una evaluacin a nivel de proyecto encaminada a: i) proporcionar una valoracin independiente de los resultados globales, y ii) generar conclusiones y recomendaciones tiles para el diseo y la implementacin de operaciones en curso y futuras. Este tipo de evaluacin, que se efecta despus de la validacin del informe final del proyecto, tiene por objeto proporcionar nuevos datos sobre las realizaciones del mismo y validar las conclusiones del Informe Final del Proyecto (IFP). La IOE lleva a cabo tanto las validaciones de los IFP como las Evaluaciones de los Resultados de los Proyectos. La validacin del IFP consiste en un examen del IFP y otros informes y documentos disponibles sobre el proyecto. La ERP comprende una visita al pas para complementar las conclusiones de la validacin del IFP y colmar posibles lagunas de conocimientos e informacin identificadas en dicha validacin. Al igual que en la validacin mencionada, en la evaluacin de los resultados se aplican los criterios de evaluacin descritos en el manual de evaluacin (cf. 2. Metodologa abajo). Dado el tiempo y los recursos disponibles, generalmente en esta evaluacin no se prev que se realicen estudios cuantitativos, sino ms bien que se aadan datos analticos al IFP, basados en la interaccin con las partes nacionales interesadas, las observaciones directas sobre el terreno y la informacin obtenida de las entrevistas con los beneficiarios y otros informantes clave. Descripcin del proyecto. El propsito del PROMARENA fue detener y revertir los procesos de desertificacin atacando la base material de la pobreza rural y permitiendo a grupos de beneficiarios mejorar significativamente su situacin econmica. Tena dos objetivos principales: i) mejorar los recursos naturales mediante su recuperacin y el aumento de las capacidades de los pequeos productores rurales para gestionar dichos recursos de un modo sostenible y racional, y ii) facilitar el acceso de estos productores a mercados de servicios rurales no financieros en relacin con sus actividades de produccin y comercializacin . El proyecto fue aprobado en septiembre de 2000 y entr en vigor en agosto de 2003. La ejecucin del proyecto se bas en la asignacin de fondos para incentivos (a travs de un sistema de concursos) y un fondo para el fortalecimiento de los recursos humanos, as como en el suministro de recursos no rembolsables a organizaciones de pequeos productores, mujeres rurales y grupos indgenas para que identificaran y contrataran los servicios de apoyo tcnico que necesitaban y para que supervisaran la prestacin de estos servicios. El proyecto tena tres componentes: i) el manejo de los recursos naturales (56% de los costos bsicos); ii) el desarrollo de servicios rurales (34%), y iii) la gestin del proyecto (10%). Los posibles beneficiarios formaban un grupo objetivo de 58 000 familias en 26 municipios, pero en diciembre de 2008 la zona y el grupo objetivo del proyecto se ampliaron para incluir a

otras 40 000 familias de otros 26 municipios, la mayora de los cuales eran indgenas. El proyecto se cerr en mayo de 2011. Costos del proyecto. Cuando se dise el proyecto, los costos totales se haban estimado en USD 14,9 millones, de los cuales USD 12,0 millones iban a estar cubiertos por el prstamo del FIDA. Al final de la ejecucin, los costos totales del proyecto ascendieron a USD 13,9 millones, de los cuales USD 12,2 millones procedieron del prstamo del FIDA, USD 0,4 millones, de los beneficiarios y USD 1,3 millones, del Estado Plurinacional de Bolivia. 2. Metodologa La evaluacin de los resultados del proyecto se llevar a cabo en consonancia con la poltica de evaluacin del FIDA. En esta actividad se aplicarn los principales conceptos metodolgicos establecidos en el manual de evaluacin del FIDA,1 las nuevas orientaciones en materia de gnero, ampliacin de escala y cambio climtico, as como las directrices relativas a las validaciones de los IFP y las evaluaciones de los resultados de los proyectos. La evaluacin se basar en el examen terico de los documentos disponibles elaborados para preparar la validacin del IFP. Durante la misin de evaluacin, se recogern nuevas pruebas y datos para verificar la informacin disponible y lograr a una evaluacin independiente del desempeo y los resultados. Los principales criterios de evaluacin que sern utilizados son los siguientes: i. Pertinencia, medida en que los objetivos del proyecto son congruentes con las polticas del pas y del FIDA para la agricultura y el desarrollo rural y las necesidades de los pobres rurales; comporta asimismo realizar una evaluacin de la coherencia del proyecto en el logro de sus objetivos. ii. Eficacia, medida en que se lograron los objetivos inmediatos del proyecto, tomando en cuenta su importancia relativa. iii. Eficiencia, medida en que los recursos/insumos se han convertido econmicamente en resultados. iv. Impacto en la pobreza rural, definido como los cambios que se han producido o se espera que se produzcan en las vidas de la poblacin rural pobre (ya sean positivos o negativos, directos o indirectos, deliberados o involuntarios) a raz de intervenciones de desarrollo; son cinco los mbitos de anlisis del impacto en la pobreza rural: activos e ingresos de los hogares; capital humano y social; seguridad alimentaria y productividad agrcola; recursos naturales, medio ambiente y cambio climtico; instituciones y polticas. v. Sostenibilidad, probabilidad de que los beneficios netos producidos por una intervencin de desarrollo continen ms all de la fase de prestacin de apoyo financiero externo. Comporta tambin evaluar la probabilidad de que los resultados efectivos y previstos consigan superar los riesgos que se presenten una vez finalizado el proyecto. vi. Innovacin y ampliacin de escala, medida en que las intervenciones de desarrollo asistidas por el FIDA han contribuido a introducir enfoques innovadores de reduccin de la pobreza rural, y han sido o es probable que sean ampliadas por las autoridades pblicas, el sector privado y otros organismos.

http://www.ifad.org/evaluation/process_methodology/doc/manual_s.pdf

vii. Igualdad de gnero y empoderamiento de la mujer, pertinencia del diseo en trminos de igualdad de gnero y empoderamiento de la mujer, nivel de recursos comprometidos y cambios producidos por el proyecto. viii. Desempeo de los asociados, desempeo del FIDA y del gobierno valorado de forma individual con miras a establecer la funcin y responsabilidad previstas del asociado en el ciclo de vida del proyecto. Dado el tiempo y los recursos disponibles, y en consonancia con la finalidad de la evaluacin de los resultados del proyecto, los mtodos de recopilacin de datos consistirn principalmente en tcnicas cualitativas y participativas y se centrarn en un conjunto especfico de temas. Los mtodos que se utilizarn sern las entrevistas individuales, los debates en grupos de discusin con los beneficiarios y la observacin directa. En el marco de la evaluacin tambin se har uso, cuando proceda, de los datos que se hallan a disposicin gracias al sistema de seguimiento y evaluacin (SyE). Se recurrir a la triangulacin para validar las conclusiones derivadas de las distintas fuentes de informacin. De este modo, se reducir el riesgo de sesgo que puede surgir cuando se recurre a una sola fuente de informacin o errores de medicin asociados a la adopcin de un solo mtodo de recopilacin de datos. 3. Objetivos Los objetivos de la evaluacin de los resultados del proyecto son los siguientes: 1) proporcionar una evaluacin independiente del impacto y los resultados globales, a los fines de la rendicin de cuentas y la gestin, y 2) extraer enseanzas de la experiencia adquirida mediante la identificacin de los principales factores que explican los resultados y los logros en materia de reduccin de la pobreza, a los fines del aprendizaje y la autoevaluacin. En consonancia con estos objetivos, la finalidad principal de la evaluacin es recopilar datos adicionales sobre posibles lagunas de informacin, incoherencias o deficiencias analticas del IFP correspondiente. Considerando los hallazgos preliminares de la validacin del IFP, la decisin de realizar una evaluacin de los resultados del PROMARENA se debe a que este proyecto ha terminado recientemente y sus operaciones han abarcado varias zonas del pas con distintas caractersticas socioculturales, econmicas y ecolgicas. Esta evaluacin se llevar a cabo en el contexto de la evaluacin del programa en Bolivia, que se efectuar en 2013, de conformidad con la decisin adoptada por la Junta Ejecutiva del FIDA en diciembre de 2011. El IFP facilita datos tiles sobre los productos y resultados de la intervencin, pero proporciona menos informacin sobre su impacto, su sostenibilidad y la influencia de factores externos, as como sobre las iniciativas de reproduccin. Por consiguiente, en la evaluacin de los resultados se evaluarn las realizaciones del proyecto en relacin con todos los criterios de evaluacin del manual de evaluacin del FIDA (as como elementos adicionales en materia de gnero, cambio climtico y ampliacin de escala), al tiempo que se prestar atencin a las siguientes esferas especficas sealadas en la validacin del IFP. Impacto. En vista del lapso de tiempo necesario para demostrar el impacto de las intervenciones relacionadas con el medio ambiente y los pocos datos disponibles al respecto en el IFP, es importante evaluar el alcance del impacto del proyecto, por lo que se refiere tanto al medio ambiente como a los medios de vida de los beneficiarios, incluso las mujeres, mediante la observacin directa y los grupos de discusin. Dado que las actividades ejecutadas se llevaron a cabo en varias zonas y con diferentes grupos objetivo, se podrn analizar las razones especficas de los casos de xito o fracaso, (por ejemplo, para planes de negocios calificados en el sistema de SyE).

Sostenibilidad. Especialmente en las zonas donde las actividades ejecutadas se concluyeron hace varios aos, la evaluacin de los resultados permitir valorar los factores de sostenibilidad y colmar los vacos de informacin, sobre todo a nivel institucional, comunitario y ambiental. Se analizar principalmente la adopcin a largo plazo de tcnicas de manejo de recursos naturales por parte de los agricultores y evaluar su capacidad para adquirir servicios rurales, el apoyo de las autoridades locales en materia de manejo de los recursos mencionados y la sostenibilidad de los beneficios ambientales del proyecto. Pertinencia de los planes de incentivos y subsidios. En la evaluacin de los resultados se examinarn las caractersticas especficas de los planes de incentivos y subsidios del PROMARENA para el manejo de los recursos naturales y los servicios no financieros de las zonas rurales, respectivamente. Se analizarn las razones que explican los resultados satisfactorios y menos satisfactorios (por ejemplo, cambios del contexto), y la pertinencia para las necesidades de la poblacin rural pobre. 4. Proceso La misin de evaluacin de los resultados del proyecto se realizar del 28 de septiembre al 12 de octubre de 2012. Esta misin comprender un programa de visitas a las reas abarcadas por el PROMARENA y reuniones con autoridades gubernamentales, beneficiarios e informantes clave. Al finalizar la misin, se celebrar en La Paz una reunin recapitulativa con representantes del Gobierno, en la que se har una presentacin en PowerPoint para resumir los hallazgos preliminares de la misin y las cuestiones estratgicas clave, y recoger comentarios e insumos para la redaccin del informe de evaluacin. Cuando se concluya la visita al pas, se preparar un borrador de informe de la evaluacin, que se presentar a la IOE para su examen interno. A continuacin, ese informe de evaluacin se distribuir a la Divisin de Amrica Latina y el Caribe del FIDA y, posteriormente, al Gobierno de Bolivia para obtener sus observaciones. Tras recibir las mismas, la IOE finalizar el informe y preparar el registro de los comentarios recibidos. Los actores principales del PROMARENA sern involucrados en todo el proceso de la evaluacin para asegurar que los evaluadores comprendan plenamente el contexto en el que se llev a cabo el proyecto, as como las oportunidades y dificultades con que se enfrentaron las organizaciones encargadas de la ejecucin. Se establecern intercambios de informacin y estrechas relaciones de cooperacin, empezando por la distribucin de este mandato al inicio del proceso. Se dispondr de oportunidades formales e informales para analizar las conclusiones, las recomendaciones y las enseanzas extradas del proceso. 5. Equipo de evaluacin La misin est integrada por la Sra. Cecile Berthaud, Oficial de Evaluacin de la IOE y evaluadora principal, y el Sr. Carlos Prez Arrarte, consultor agrnomo y especialista en manejo de recursos naturales. De conformidad con el Manual de Evaluacin de la IOE, el consultor evaluar los resultados del proyecto en relacin con todos los criterios de evaluacin establecidos sealados anteriormente. En coordinacin con la evaluadora principal, el consultor elaborar la evaluacin general de las realizaciones del proyecto y contribuir a formular las conclusiones y recomendaciones. La evaluadora principal estar encargada del diseo y la gestin de la evaluacin, as como de la entrega del informe final. Proporcionar apoyo y orientacin y, en particular, dirigir el anlisis del desempeo de los asociados y la formulacin de las conclusiones y recomendaciones.

6. Calendario propuesto para la misin y el informe 28 de septiembre 12 de octubre de 2012 2 de noviembre 9 de noviembre 23 de noviembre 23 de noviembre 19 de diciembre Enero de 2013

Misin a Bolivia Primer borrador Proceso interno de examen inter pares Presentacin a la Divisin de Amrica Latina y el Caribe del FIDA Presentacin al Gobierno por observaciones y comentarios Finalizacin del Informe