Seminario Regional

Introduccin a la Evaluacin de Impacto de

Polticas y Programas Pblicos
Ciudad de Mxico, del 23 al 25 de agosto de 2017

PROSPECTO
1. FUNDAMENTACIN

La evaluacin es un componente indispensable de la rendicin de cuentas en un Estado democrtico y un

imperativo de la gestin pblica moderna. Los ejercicios de evaluacin permiten identificar si los propsitos
de una intervencin gubernamental se estn alcanzando y ponderar la idoneidad de los mecanismos e
instrumentos destinados para la resolucin de un problema pblico. En la medida en que toda poltica
pblica implica una teora o modelo causal de transformacin social, la carga de la prueba sobre la efectividad
y el impacto de los programas corresponden, en primera instancia, al poder pblico, que est obligado a
proveer elementos de juicio y canales para que la ciudadana conozca, cuestione y valide el quehacer
gubernamental. A pesar de que la evaluacin de impacto es la ms apegada a los criterios cientficos de
comprobacin de hiptesis (impacto esperado del programa), como todo ejercicio de evaluacin, se realiza
en un contexto poltico y organizacional que determina su vnculo con los procesos de toma de decisiones, la
mejora continua de los programas y la capacidad de la ciudadana para exigir polticas pblicas que agreguen
valor al ciudadano, y maximicen la tasa de retorno de las inversiones pblicas. A diferencia de los anlisis
clnicos, la evaluacin de impacto opera en contextos polticos y sociales complejos, que imponen desafos
singulares para la identificacin rigurosa y metodolgicamente sofisticada de los resultados de las
intervenciones. Por esta razn, se espera que una buena evaluacin de impacto responda no slo a los
estndares metodolgicos ms robustos, sino que asuma un compromiso expreso de tica pblica y una
orientacin clara a la utilizacin.

1
 Se espera que una evaluacin tenga transparencia y rigor metodolgico, pero tambin debe
demostrar que tiene clara cul es su intencin (qu se va a evaluar, por qu, para qu y qu resultados se
esperan obtener); debe ser oportuna; debe ser accesible para los tomadores de decisin y, finalmente, debe
ser aplicable.

La Carta Iberoamericana de Calidad en la Gestin Pblica estableci dos pilares fundamentales para la
calidad en la gestin pblica:

1) Toda gestin pblica debe estar referenciada a la satisfaccin del ciudadano, ya sea
como usuario o beneficiario de servicios y programas pblicos, o como legtimo
participante en el proceso de formulacin, ejecucin y control de las polticas pblicas
bajo el principio de corresponsabilidad social; y 2) la gestin pblica tiene que orientarse
a resultados, por lo que debe sujetarse a diversos controles sobre sus acciones,
suponiendo entre otras modalidades la responsabilizacin del ejercicio de la autoridad
pblica por medio del control social y la rendicin peridica de cuentas (2008: 21-26).

Atendiendo a lo estipulado en la Carta Iberoamericana y a la urgencia de construir una administracin

pblica capaz de hacer frente a los nuevos desafos de la sociedad la cual, a la vez de asegurar el
cumplimiento de los contratos sociales y econmicos, sea garante de los derechos sociales el ejercicio de la
evaluacin cobra especial relevancia. Lo anterior se debe a que el buen funcionamiento de las polticas
requiere del aprendizaje de los errores y los aciertos de las distintas experiencias, los cuales slo pueden ser
identificados a travs de la medicin y la revisin de los instrumentos de la poltica pblica. Ms an, una
gestin pblica de calidad requiere de una evaluacin permanente, interna y externa, basada en el principio
de eficacia. Esto es, debe estar centrada en los resultados y debe crear sistemas de monitoreo que permitan
verificar el curso adecuado de los programas pblicos.

Una gestin pblica orientada a resultados es impensable sin la generacin de evidencia e

informacin creble y confiable en torno al efecto/cambios social estrictamente atribuibles a la presencia de
los programas: el contrafactual. Slo a partir de la evaluacin de impacto es posible determinar qu habra
ocurrido con los beneficiarios de un programa en la ausencia del mismo.

En este marco, la formacin de slidas capacidades para la utilizacin de evaluaciones de impacto

como instrumento de rendicin de cuentas y como herramienta para la mejora continua de los programas
implica una serie de necesidades diferenciadas de capacitacin que se fundan en el conocimiento tcnico-
metodolgico, pero no se agoten en l. Para que las evaluaciones de impacto sean demandadas y
debidamente utilizadas, los tomadores de decisiones, sin ser expertos en medicin de impacto, deben contar
con suficientes elementos para 1) identificar el tipo de respuesta que ofrece este tipo de evaluacin y sus
limitaciones; 2) conocer los pre-requisitos de informacin y manejo gerencial que impone este tipo de
evaluacin; 3) realizar un anlisis costo-beneficio de la realizacin de este tipo de evaluaciones frente a su

2
alternativas menos costosas; una vez tomada la decisin de evaluar, 4) valorar la solidez de la propuesta
metodolgica y la validez de las conclusiones que de ella se derivan.

El curso se vincula con el rea No. 1 "Profesionalizacin de la

El curso se vincula con los objetivos No. 4
funcin pblica / gestin estratgica del talento humano /
"Educacin de calidad", No. 16 "Promover
liderazgo e integridad en la organizacin pblica", No. 5
sociedades, justas, pacficas e inclusivas" y
Seguimiento y evaluacin de polticas pblicas / metodologas
No. 17 "Alianzas para lograr los objetivos" de
/ indicadores y No. 7 "Gestin de la formacin del servidor
los Objetivos de Desarrollo Sostenible (ODS)
pblico" del Programa Acadmico Regional 2017-2018 de la
2030 de las Naciones Unidas
EIAPP

2. OBJETIVOS

1) Capacitar a los participantes en el manejo y dominio de algunas de las herramientas necesarias para la
gestin, seguimiento y evaluacin de impacto de las polticas pblica
2) Intercambiar experiencias entre los copartcipes del proceso de formulacin de polticas pblicas.

3. DESTINATARIOS O PERFIL

El curso va dirigido a funcionarios pblicos, ejecutores de poltica, tomadores de decisin y evaluadores de

programas de Amrica Latina que requieran conocimiento intermedio sobre evaluacin de impacto.

4. ORGANISMOS COAUSPICIANTES

La Escuela Iberoamericana de Administracin y Polticas Pblicas (EIAPP) del CLAD, el Sistema Econmico
Latinoamericano y del Caribe, la Direccin de Evaluacin de Impacto de CAF Banco de Desarrollo de Amrica
Latina y el Centro Regional para el Aprendizaje en Evaluacin y Resultados para Amrica Latina y el Caribe
(CLEAR LAC, por sus siglas en ingls)

5. COORDINADOR ACADMICO

Dra. Laura Atuesta

Doctora en Economa Agrcola y Aplicada de la Universidad de Illinois en Urbana-Champaign. Antes de unirse

al CIDE, trabaj en la Oficina de Evaluacin y Supervisin del Banco Interamericano de Desarrollo en
Washington, DC. Profesora-Investigadora Invitada en el Programa de Poltica de Drogas en el CIDE Regin
Centro. Sus intereses de investigacin estn relacionados con la economa de las drogas ilcitas y sus efectos
sobre la desigualdad del ingreso, la migracin interna y los conflictos armados. Combinando su conocimiento
en poltica de drogas con su experiencia en economa regional y urbana, busca estudiar el comportamiento
no-econmico de los hogares cuando se enfrentan a las amenazas (u oportunidades) de los mercados ilegales
en sus comunidades.

3
6. PERSONAL DOCENTE

Dra. Laura Atuesta

Doctora en Economa Agrcola y Aplicada de la Universidad de Illinois en Urbana-Champaign. Antes de unirse
al CIDE, trabaj en la Oficina de Evaluacin y Supervisin del Banco Interamericano de Desarrollo en
Washington, DC. Profesora-Investigadora Invitada en el Programa de Poltica de Drogas en el CIDE Regin
Centro. Sus intereses de investigacin estn relacionados con la economa de las drogas ilcitas y sus efectos
sobre la desigualdad del ingreso, la migracin interna y los conflictos armados. Combinando su conocimiento
en poltica de drogas con su experiencia en economa regional y urbana, busca estudiar el comportamiento
no-econmico de los hogares cuando se enfrentan a las amenazas (u oportunidades) de los mercados ilegales
en sus comunidades.

Dra. Lesbia Maris

Economista por la Universidad Central de Venezuela (UCV), Mster en Polticas Pblicas por la University of
Chicago Harris School of Public Policy (EEUU). Especialista de la Direccin de Evaluacin de Impacto y
Aprendizaje de Polticas de CAF Banco de Desarrollo de Amrica Latina, donde participa en la gerencia de
proyectos de evaluacin de impacto y de aprendizaje desde la planificacin del diseo experimental, pasando
por la implementacin y monitoreo, hasta la realizacin de productos finales de difusin de conocimiento.
Tambin es profesora de Principios de Economa 2 (Introduccin a la macroeconoma), Microeconoma 2 y
Microeconoma 3 en la Universidad Central de Venezuela Caracas, Venezuela, y profesora de Evaluacin de
Impacto (Maestra de Gerencia Pblica) en el Instituto de Estudios Superiores de Administracin Caracas
(IESA) en Caracas, Venezuela. Entre sus publicaciones se encuentran: - Reporte de Economa y Desarrollo
2015: Un Estado ms efectivo: capacidades para el diseo, la implementacin y el aprendizaje de polticas
pblicas. CAF - Banco de Desarrollo de Amrica Latina. Captulo 5: Polticas pblicas, aprendizaje y gestin
(con Daniel Ortega). - Maris, L. y Ortega, D. (2015). Policy Learning and the quality of public policy. Manuscrito
no publicado. - Maris, L. y Ortega, D. (2013). Crime perceptions and reality in Latin America. Manuscrito no
publicado

7. ACOMPAAMIENTO, SEGUIMIENTO Y EVALUACIN

Con el fin de acompaar al alumno en su labor posterior al curso, la EIAPP har un seguimiento y evaluacin a
las actividades que haya realizado en favor de la aplicacin de los contenidos aprendidos, desde actividades
formales o institucionalizadas, tales como la presentacin de propuesta de mejora ante autoridades de su
institucin, solicitudes de audiencia, entre, a actividades informales o poco institucionalizadas, por ejemplo,
reuniones entre compaeros de trabajo, envo del material del curso a autoridades y compaeros, entre otras
iniciativas.

La creatividad, base de la innovacin, debe ser un valor transversal a cualquier actividad de las
administraciones pblicas evidenciando una actitud curiosa, propositiva, emprendedora y de liderazgo
organizacional1.

1
Al respecto ver el Banco de las Innovaciones Pblicas del INAP de Espaa, Novagob La Comunidad para la Innovacin
Pblica, la publicacin del BID Innovando para una mejor gestin: La contribucin de los laboratorios de innovacin
pblica, entre otros documentos que se encuentran en la base de datos Informacin Bibliogrfica sobre Estado,

4
Estas evaluaciones sern realizadas a los alumnos y a las autoridades que avalaron la postulacin en
diferentes momentos al finalizar el curso, a saber: 1er corte: al mes de la ltima actividad; 2do corte: a los 6
meses luego de la ltima actividad del curso; 3er corte: a los 12 meses luego de la ltima actividad del curso.

8. METODOLOGA

El curso ser realizado en modalidad presencial en las instalaciones del CIDE-CLEAR en Mxico D.F., Mxico,
con el apoyo de un repositorio digital. Ser dividida en 3 sesiones de 8 horas cada una. Se realizarn ejercicios
individuales y por equipos durante las sesiones para poner prctica los conceptos y metodologas analizadas.
Con antelacin al curso se proporcionar a los participantes las lecturas bsicas.

9. PROGRAMA

1. Repositorio Mdulo Virtual / Opcional

Presentacin del curso y Gestin pblica para resultados: antecedentes y conceptos
El proceso de las polticas pblicas y La evaluacin de polticas pblicas: bases tericas y
conceptuales
La evaluacin y el seguimiento como poltica pblica
Los tipos de evaluacin

2. Agenda Mdulo Presencial

Evaluacin de impacto: causalidad y el problema de atribucin
Definicin del sesgo de seleccin y probabilidad de seleccin
Diseo experimental: probabilidad, seleccin aleatoria y contrafactual. Alcances y lmites del
diseo experimental.
Semi-experimentos: modelo de diferencias en diferencias.
Metodologas no experimentales: Qu pasa cuando no hay aleatoriedad?
Mtodo de emparejamiento
Mtodo de variables experimentales
Mtodo de regresin discontinua

3. Repositorio Agenda Mdulo Virtual / Opcional

Presentacin de casos
Introduccin (discusin grupal I): presentaciones
Introduccin (discusin grupal II): presentaciones y cierre
Mtodos mixtos y el problema de la "caja negra" en la toma de decisiones

Administracin y Sociedad del SIARE del CLAD.

5
 Implicaciones de la evaluacin de impacto y retroalimentacin del curso

10. BIBLIOGRAFA MNIMA RECOMENDADA

Introduccin
P. Rossi, H. Freeman y M. Lipsey, Identifying Issues and Formulating Questions, Expressing and
Assessing Program Theory, en op. cit. (caps. 3 y 5), en su libro Evaluation: A Systematic Approach,
Thousand Oaks, Sage, 2004.
Kathryn E. Newcomer et al., Planning and Designing Useful Evaluations (cap. 1), en Joseph Wholey,
Harry Hatry y Kathryn Newcomer (eds.), Handbook of Practical Program Evaluation, San Francisco,
Jossey-Bass, 3.a ed., 1994.

Metodologas de evaluacin de impacto

Mtodo experimental
Martin Ravallion, The Mistery of Vanishing Benefits: An Introduction to Impact Evaluation, The World
Bank Economic Review, 15:1 (2001), pp. 115-140.
Leonard Wantchekon, Clientelism and Voting Behavior: Evidence from a Field Experiment in Benin,
World Politics, 55:3 (2003), pp. 399-422.

Metodologas de evaluacin de impacto

Mtodos cuasiexperimentales
Shahidur R. Khandker, Gayatri B. Koolwal y Hussain A. Samad, Propensity-score matching, Double
difference, Instrumental Variable Estimation, Regression Discontinuity and Pipeline Methods,en
su libro Handbook on Impact Evaluation: Quantitative Methods and Practices, Washington, D. C.,
Banco Mundial, 2010 (captulos 4- 7).

Evaluacin cualitativa de impacto

Fernando Corts, Agustn Escobar y Mercedes Gonzlez de la Rocha, Mtodo cientfico y poltica social. A
propsito de las evaluaciones cualitativas de los programas sociales, Mxico, El Colegio de Mxico,
2008 (caps. 1, 2 y 3).
Michael Bamberger, Vijayendra Rao y Michael Woolcock, Using Mixed Methods in Monitoring and
Evaluation, Washington, D. C., Banco Mundial, 2010 (Policy Research Working Paper, 5245).

11. BECAS

La Secretara Permanente del SELA otorgar 20 becas completas para candidatos de Amrica Latina y el
Caribe a seleccionar segn el mejor perfil entre los postulados de los Estados Miembros del SELA y del CLAD.

6
 La beca incluye:

Matrcula
Acceso al Aula virtual del CLAD.
Pasaje areo internacional en clase econmica (participantes no mexicanos) desde la ciudad
CAPITAL de su pas hasta Mxico D.F., y regreso.
Hospedaje, desayuno y almuerzo durante los das de clases.
Traslados del aeropuerto al hotel y viceversa.

No incluye:
Consumos personales dentro del hotel de alojamiento, cenas y otros gastos no contemplados en
estas bases

12. REQUISITOS PARA LAS POSTULACIONES

1. Cumplir con el perfil descrito en la seccin DESTINATARIOS O PERFIL.

2. Los candidatos que deseen postularse y cumplan el perfil, debern completar el Formulario de
Registro que se encuentra disponible en la pgina web de convocatorias.

3. Las postulaciones provenientes de la representacin del CLAD deben ser obligatoriamente

avaladas mediante una nota oficial suscrita por el Representante Titular o el Representante
Alterno del CLAD (consultar la seccin Consejo Directivo), y ser remitida antes del mircoles 2
de agosto del 2017 (inclusive) va electrnica eiapp@clad.org

3.1 El interesado(a) puede completar y enviar el formulario de registro e ir gestionando la solicitud del aval
correspondiente. No necesariamente debe esperar el envo del aval para completar el formulario.

3.2 El aval es una nota oficial (en formato de imagen o PDF) del representante Titular y/o Alterno del CLAD en
el pas respectivo, enviada por ste a la Secretara Permanente de la Escuela (eiapp@clad.org), donde se
indica el apoyo del Representante a la postulacin del interesado(a) al curso sealado.

3.3 Para el envo del aval el interesado(a) debe comunicarse por los distintos medios que se dispone en la
seccin "Consejo Directivo" solicitando al Representante Titular y/o Alterno la nota aval para completar la
postulacin.

3.4 Para os candidatos do Brasil, o processo seletivo feito na Escola Nacional de Administrao Pblica
(Enap) e necessrio enviar curriculum vitae e carta-aval da chefia imediata, com justificativa de participao
no curso, para o e-mail internacional@enap.gov.br Aps a seleo, o candidato ser informado e orientado a
fazer o preenchimento do cadastro no site do Clad. A carta-aval para os pr-selecionados ser providenciada
pela Enap, Representante Alterno do Brasil junto ao CLAD.

7
13. LOGSTICA

La ubicacin del evento ser en la sede del Centro Regional para el Aprendizaje en Evaluacin y
Resultados para Amrica Latina y el Caribe (CLEAR LAC), la cual queda en el Centro de Investigacin y
Docencia Econmicas (CIDE). Carretera Mxico-Toluca 3655, Lomas de Santa F, 01210 lvaro
Obregn. Ciudad de Mxico, Mxico.

Idioma del evento

El idioma de este evento ser el espaol, pero se contar con traduccin simultnea para los asistentes
angloparlantes.

Alojamiento

Hotel Comfort Inn Santa f

Prolongacin Paseo de la Reforma 557, Santa F, Paseo de las Lomas, 01219. Ciudad de Mxico-
Mxico.
Telfono: (52-55) 4748-2100
Contacto: Sra. Carolina Solano. Ejecutiva de Ventas.
Telfono: (52-55) 4748-2129
E-mail: carolina.solano@comfortinnsantafe.com

En caso de requerir apoyo de la Secretara Permanente se agradece contactar a la Seora Cora Romero,
Oficial de Trmites y Viajes del SELA (Telfono: (58-212) 9557111 y 9557124; Fax: (58-212) 9516901 y
9515292; Correo electrnico: cromero@sela.org).

14. DUDAS, PREGUNTAS Y/O COMENTARIOS

Si desea comunicarse con la Secretara Permanente de la Escuela Iberoamericana de Administracin y

Polticas Pblicas (EIAPP) lo puede hacer por:
Tel. (58212) 2709211/Fax: (58212) 2709214 (Horario de trabajo: Lunes a Viernes entre 08:30 - 12:30 y 13:00 -
16:00 / Hora de Venezuela)
Correo electrnico: eiapp@clad.org

Secretara Permanente del Sistema Econmico Latinoamericano y del Caribe (SELA)

Coordinacin por la Secretara Permanente del SELA:

Javier Gordon
Director (ai) de Relaciones para la Integracin y Cooperacin del Sistema Econmico Latinoamericano y del
Caribe (SELA)
Telfonos: 58-212-955-7111/ 955 7135
Fax: 58-212-951 5292 / 951-6901

8
Correo electrnico: jgordon@sela.org

Daniel Roa
Analista de Relaciones del Sistema Econmico Latinoamericano y del Caribe (SELA)
Telfonos: 58-212-955-7111/ 955 7103
Fax: 58-212-951 5292 / 951-6901
Correo electrnico: droa@sela.org