Herramientas de monitoreo en el contexto del nuevo Ministerio de Desarrollo Social

Matas Claro Jefe Divisin Monitoreo Programas Sociales Seminario Proyecciones y desafos del Desarrollo Social en Chile Desafos para la implementacin del Ministerio de Desarrollo Social. 20 de mayo 2011

I. Contenido

Herramientas de monitoreo en el contexto del nuevo Ministerio de Desarrollo Social

Mayo de 2011

Rol del nuevo Ministerio de Desarrollo Social | MDS

Monitoreo de Programas | Evaluacin ex-dure

Avances a la fecha y Desafos

Gobierno de Chile | Ministerio de Planificacin

Principales funciones del nuevo Ministerio de Desarrollo Social

I. Rol del nuevo Ministerio de Desarrollo Social | MDS

1 FUNCIONES DEL NUEVO MINISTERIO DE DESARROLLO SOCIAL | MDS

COORDINACIN DEL DISEO DE POLTICAS PBLICAS

COORDINACIN DE LOS PROGRAMAS QUE BENEFICIAN A GRUPOS VULNERABLES EVALUACIN DE LA RENTABILIDAD SOCIAL DE LOS PROYECTOS

Gobierno de Chile | Ministerio de Planificacin

Institucionalidad del nuevo

Ministerio de Desarrollo Social

I. Rol del nuevo Ministerio de Desarrollo Social | MDS

COORDINACIN DEL DISEO DE POLTICAS PBLICAS

MDS asume rol coordinador de polticas sociales: Colabora en el diseo Evaluacin y monitoreo de programas

Comit Interministerial de Desarrollo Social: Instancia de coordinacin, orientacin, informacin y acuerdo para los ministerios que lo integran.

MDS entrega una mirada adicional a la discusin presupuestaria anual.

Gobierno de Chile | Ministerio de Planificacin

Institucionalidad del nuevo

Ministerio de Desarrollo Social

I. Rol del nuevo Ministerio de Desarrollo Social | MDS

COORDINACIN DE LOS PROGRAMAS QUE BENEFICIAN A GRUPOS VULNERABLES

Actualmente existen ms de 330 programas sociales sin coordinacin.

MDS desarrollar: Evaluacin exante de programas sociales nuevos o reformulados. Monitoreo de todos los programas sociales en ejecucin. Evaluacin exdure. Banco Integrado de Programas Sociales (BIPS). MDS estudia, evala y define instrumentos de focalizacin: Comit de Expertos Ficha de Proteccin Social (FPS).

Gobierno de Chile | Ministerio de Planificacin

Principios sobre los cuales se trabajar la coordinacin de programas sociales

I. Rol del nuevo Ministerio de Desarrollo Social | MDS

COORDINACIN DE LOS PROGRAMAS QUE BENEFICIAN A GRUPOS VULNERABLES

Pertinencia de los programas. Evaluaciones ex-ante

Evitar duplicidades, mejorar la focalizacin del gasto y permitir comparaciones entre los distintos programas. Evaluaciones ex-dure (Ficha de Monitoreo)

Mejorar la transparencia con el compromiso de tener la mayor informacin disponible para la sociedad. Banco Integrado de Programas Sociales (BIPS). Informe de Desarrollo Social (IDS) con publicacin anual.

Gobierno de Chile | Ministerio de Planificacin

Institucionalidad del nuevo

Ministerio de Desarrollo Social

I.Rol del nuevo Ministerio de Desarrollo Social | MDS

EVALUACIN DE LA RENTABILIDAD SOCIAL DE LOS PROYECTOS

MDS desarrollar: Evaluacin exante proyectos de inversin. Actualizacin de Metodologas Mejora de procesos internos Reforzar el Banco Integrado de Proyectos de Inversin (BIP).

Gobierno de Chile | Ministerio de Planificacin

Mirada adicional del nuevo Ministerio de Desarrollo Social a la discusin presupuestaria anual
I. Rol del nuevo Ministerio de Desarrollo Social | MDS

Nueva Institucionalidad intreacta en proceso presupuestario, a travs de: Trabajo coordinado con DIPRES y Comit de Ministros. Evaluaciones ex-ante de programas nuevos como insumo para la Direccin de Presupuestos (DIPRES). Informe de Desarrollo Social (IDS) para la discusin presupuestaria en el Congreso. Evaluacin de impacto (ex-post) en Futura Agencia de Calidad de Polticas Pblicas.

Gobierno de Chile | Ministerio de Planificacin

Relaciones Institucionales de la

evaluacin y monitoreo de programas

I.Rol del nuevo Ministerio de Desarrollo Social | MDS

Servicio

Ministerio De DesarrolloSocial

Productos

Clientes
PRESIDENTE

Estudios (Evaluacin Ex-Ante)

Informe Evaluacin Ex-Ante

DIPRES CONGRESO MINISTERIOS

Programa

Nuevo?

Banco Integrado de Programas Sociales

Informe de Desarrollo Social

MUNICIPALIDADES UNIVERSIDADES

No
Monitoreo (Evaluacin Ex-dure)

Ficha de Monitoreo

CENTROS DE ESTUDIOS CIUDADANA

Gobierno de Chile | Ministerio de Planificacin

I. Contenido

Herramientas de monitoreo en el contexto del nuevo Ministerio de Desarrollo Social

Mayo de 2011

Rol del nuevo Ministerio de Desarrollo Social | MDS

Monitoreo de Programas | Evaluacin ex-dure

Avances a la fecha y Desafos

Gobierno de Chile | Ministerio de Planificacin

10

Objetivos del Monitoreo de Programas

II.Monitoreo de programas / Evaluacin ex-dure

OBJETIVOS

Tener una rpida evaluacin de diagnstico por divisin y ministerio. Evaluar el diseo e implementacin de los programas gubernamentales vigentes. Seguimiento peridico de todos los programas sociales. Identificar duplicidades, buenas prcticas y posibles mejoras. Priorizar evaluaciones y redefiniciones.

Gobierno de Chile | Ministerio de Planificacin

11

Descripcin de la metodologa de Monitoreo

II.Monitoreo de programas / Evaluacin ex-dure

PROGRAMA Pilar

FICHA DE MONITOREO

I
Objetivos del programa

II
Focalizacin

III

Medicin y Logro de Resultados

IV
Gasto Social Efectivo

Gobierno de Chile | Ministerio de Planificacin

12

Elementos que identifica la ficha de Monitoreo

II.Monitoreo de programas / Evaluacin ex-dure

Identifiacin De un problema

Definicin

Pertinencia

Diseo de un programa social

Objetivo
Estructura

Focalizacin
Procesos

Indicadores de Producto (output)

Resultados de la invencin

Gesto Social Efectivo

Indicadores de resultados inmediatos (outcome)

Indicadores de impacto

1 3 El gasto Social Efectivo se puede identificar con el dinero, las especies y los servicios de carcter social que reciben las personas por parte del estado en calidad de subsidios. (Haindl, Budinich e Irarrazaval; 1989).

13

Ejemplo Ficha de Monitoreo:

Programa XX / Servicio Responsalbe
Descripcin del programa
Presupuesto Ley

258 MM$ (2010)

Beneficiarios 2010 15.000 personas mbito de Accin Trabajo Dependiente

O O OD OD M$MM Problema a solucionar: Brechas en el acceso a la informacin M A :A laboral, cultural y comunitaria, que afecta a mujeres en situacin LO : LO de vulnerabilidad . MP MP JE EJE E

O O TI V TI V A A TR ST R Costos Totales del programa U LU S IL I

65 puntos

Grupo Objetivo
Ciclo de Vida 18 a 64 aos Condicin de Vulnerabilidad Pobreza Puntaje FPS 1er, 2do y 3er quintil

Metodologa de la Intervencin: Implementacin y ejecucin de encuentros masivos, donde otras instituciones difunden contenidos vinculados a tres ejes: poltica social, misin institucional e intereses y necesidades de las mujeres. Asistencia promedio por encuentro: 50 a 60 mujeres.

70.5% 69.9% 54.9%

Tiempo de la Intervencin: 4 encuentros al ao por provincia, con una duracin promedio de 2 horas por encuentro.

Tipo de Beneficio: Apoyo psicosocial Informacin sobre Redes de Apoyo Ao de Inicio: 2010 (ex. Agendas Locales de Equidad y Gnero)

70/100 40/100 55/100

80/100
Puntaje =< 50% 50% < Puntaje <85% 85% =< Puntaje Fecha Monitoreo: Noviembre 2010

14

Ejemplo Ficha de Monitoreo:

Evaluacin de Estrategia
I

Objetivo
Definicin del Objetivo: Difundir contenidos vinculados a los intereses y necesidades de las mujeres en cada territorio, la poltica social y la misin institucional Lnea de Base: No tiene Poblacin Objetivo: Mujeres adultas con menos de 13.484 puntos en la FPS.

O VO TI V AT I RA ST R ST LU ILU I O DO OD MO III A M II A Focalizacin Medicin O: O: L PL MP EM Tipos de indicadores: Criterios de Seleccin: EJ E EJ

Mujer. Tener entre 18 y 64 aos. Tener menos de 13.484 puntos en la FPS. Herramientas de Priorizacin: No tiene Cuantificacin de la poblacin objetivo: 3.295.379 personas Alcance 2010: 3,5% (28 aos en cubrir poblacin objetivo)
Resultado: % de mujeres que identifican derechos y beneficios de la oferta pblico-privada Producto: Avance de cobertura asignada a programas Satisfaccin de Usuarios: Nota de 1 a 7 en 3 reas del programa: Principales aportes, Caractersticas generales y personal (Institucin externa) Periodicidad mediciones: Anual y Mensual Relacin de los indicadores con la gestin y cumplimiento del objetivo: Media Convenio RIS: Si Cumplimiento Convenio RIS: Si

Certificacin Inclusin: No tiene herramientas.

70 /100

40 /100

55 /100

Ejemplo Ficha de Monitoreo:

Evaluacin del Gasto Social Efectivo
Descripcin 28% -20%

O VO TI V AT I RA ST R ST LU ILU I O DO OD MO A M A Evaluacin O: O: L PL MP M EJE EJE

2008 2009 2010 Servicio (p.p ) Gasto Social Efectivo/ total costos1 (%)
3

80 /100

69,9%

70,5% 54,9% 53,7%

Remuneracin promedio por funcionario admin2. ($MM)

6,7

8,7

10,7

7,9

GSE promedio por funcionario admin. ($MM)

20,0

26,3

16,1

11,9

Indicador de Resultado
Realizados por una consultora externa (2009, Universidad de Chile). Se aplica aproximadamente 6 meses despus del cierre. Muestra de 400 personas, sobre un total de 15.000 (2,7%)

Funcionarios Administrativos (#)

12

12

11

719

Funcionarios Totales (#)

32

32

31

1.138

GSE promedio por beneficiarios ($M)

16,6

21,0

13,3

191,4

Beneficiarios (#)

15.001 15.305 15.000 43.650

1 Costos totales (nominales) de programa incluye presupuesto (ejecutado para 2008, 2009), gastos indirectos vinculados con el programa y (si existen) aportes de ejecutores (municipalidades, etc.) 2 Funcionarios administrativos del programa. El gasto que se incurre en ellos no es considerado como una transferencia (gasto social efectivo) para los beneficiarios(as) del programa. 3 Promedio ponderado por el presupuesto de cada programa. Fuente:Equipo de Monitoreo MIDEPLAN

Ejemplo Ficha de Monitoreo:

Evaluacin Anteriores y Comentarios Finales
Institucin Evaluadora: Dipres1
DO DO O O TI V TI V A A TR ST R U LU S IL I

O O Fecha: 2008 AM AM : : Principales Conclusiones: O LO MP L La oferta programtica carece de: MP E JE EJ E Indicadores especficos de focalizacin, indicadores de resultado e indicadores relevantes para la medicin de niveles de logro de los programas. Posee: Una inadecuada definicin de la poblacin potencial, una caracterizacin incompleta de beneficiarias por ausencia de informacin (indicadores de acceso y control de recursos) y una caracterizacin inadecuada de las mujeres asignadas y de las egresadas (por datos perdidos). Recomendaciones del panel de expertos Correcta definicin de la poblacin potencial de la Fundacin. Definicin de la poblacin objetivo. Rediseo de la oferta programtica en torno al concepto del empoderamiento de las mujeres en situacin de pobreza. Rediseo del Componente 3. Acciones que se tomaron posteriormente: Se define poblacin potencial y objetivo (Dipres, Estado de compromisos, 2010) Rediseo de oferta programtica. Se mejora calidad de informacin del programa. Link a documento: http://www.dipres.cl/574/articles-38674_doc_pdf.pdf (Minuta Ejecutiva)

Comentarios Finales del Jefe del Servicio

1 NOTA: Esta evaluacin cubre los aos 2004-2007. La oferta programtica actual difiere significativamente de la oferta correspondiente a estos aos, la que se divida en 3 componentes: Capacidad Emprendedora y Redes, Capital Social y Ciudadana y Autonoma Econmica Fuente: Equipo de Monitoreo MIDEPLAN

Ejemplo: Resumen de la evaluacin por servicio

Servicio xx
NOMBRE DEL PROGRAMA
Programa 1 Tamao 2010 (suma de gastos) % de Ppto. Total Servicio Crecimiento anual promedio (2008-2010)

O VO TI V AT I RA ST R ST LU ILU I O DO OD MO M :A :A 3 4 Gasto LO PL O 2 P 1 Social EM JE M Focalizacin Medicin Descripcin EJ E y Logros Efectivo

100 30 85 85 60 80 40 25 40 60 40 40 65 55 100 25 65 20 27,5 80 12,5 67,5 22,5 30

Total (max. 100)

264.690 258.161 2.674.655 1.799.425 291.350 1.213.940

2,6% 2,6% 26,6% 17,9% 2,9% 12,1%

8,7% -6,5% -8,8% 4,5% 22,0%

58 48 59 59 47 43

Programa 2

Programa 3

Programa 4

Programa 5

Programa 6

Suma programas (promedio ponderado)

6.502.221

65%

16,2%

81,5

45,0

59,5

34,8

55

Otros programas Gastos indirectos (GI) Suma del Servicio

320.749 3.219.580 10.042.550

3% 32% 100%

-16,7% 212,6% 18,9%

Ejemplo: Perspectiva Integral de Inversin Servicio xx

II.Monitoreo de programas / Evaluacin ex-dure

O VO TI V AT I RA ST R ST LU ILU I O DO OD MO M :A :A LO PL O MP M EJE EJE

No es necesaria una intervencin inmediata

Aumentar Recursos

Programa 5 Programa 1 Programa 4

Programa 3

Programa 2

Evaluacin profunda y/o reduccin de recursos Evaluacin profunda

1 Fundacin para la Superacin de la Pobreza. Fuente: Equipo de Monitoreo Mideplan

Fichas de Monitoreo como Catastro Oficial de Programas Gubernamentales

II.Monitoreo de programas / Evaluacin ex-dure

Fichas de Monitoreo

BBDD nica | Banco Integrado de Programas Sociales (BIPS)

Registro de Informacin Social

Objetivo BBDD nica

Recopilar unificadamente la informacin de la oferta programtica

social (fuente de informacin nica y formal).

Categorizacin y Mapeo de programas segn variables claves. Dar acceso de esta informacin a los distintos actores pblicos.
Gobierno de Chile | Ministerio de Planificacin

20

Ejemplo de cruce de Datos en BBDD

II.Monitoreo de programas / Evaluacin ex-dure

Tipo de Beneficio: mbito: Emprendimiento /

Fomento Productivo Capacitacin, cursos, talleres

Ciclo de Vida: 18 a 29 aos

Gobierno de Chile | Ministerio de Planificacin

21

Presupuesto de Programas y Puntajes obtenidos

II.Monitoreo de programas / Evaluacin ex-dure

Ejemplo 1
NOMBRE DEL PROGRAMA SERVICIO RESPONSABLE PPTO. GUB VIGENTE 2010 ($M) PUNTAJE OBJETIVO (mx. 20)

Total Programas: 11
PUNTAJE FOCALIZACIN (mx. 20) PUNTAJE MEDICIN (mx. 20) PUNTAJE GSE1 (mx. 40) PUNTAJE TOTAL (mx. 100)

APOYO A ACTIVIDADES ECONMICAS APOYO A EMPRENDIMIENTOS SOCIALES APOYO AL MICROEMPRENDIMIENTO EMPRENDE MS FOMENTO DE LA ECONOMA INDGENA URBANA Y RURAL MICROEMPRENDIMIENTO INDIGENA URBANO MUJERES TRABAJADORAS JEFAS DE HOGAR PROGRAMA DE EMPLEABILIDAD Y EMPRENDIMIENTO (P. PILOTO) PROGRAMA DE FORMACIN Y CAPACITACIN PARA MUJERES RURALES (INDAP) PROGRAMA LNEA FORMATIVA SERVICIO PAS RURAL
TOTAL3

FOSIS FOSIS FOSIS FOSIS CONADI CONADI SERNAM PRODEMU PRODEMU PRODEMU FSP2

6.050.898 774.246 14.143.757 1.158.645 2.339.354 299.349 s/i 715.425 1.213.940 2.674.655 1.713.000

90 90 100 35 40 100 s/i 95 70 75 45 84,5

70 55 85 70 55 90 s/i 60 55 45 50 71,5

45 15 25 25 5 10 s/i 85 20 65 40 32,5

42,5 62,5 67,5 50 30 7,5 s/i 67,5 30 12,5 37,5 50,5

62 56 69 45 33 52 s/i 77 44 49 43

31.083.268

60

1 Gasto Social Efectivo 2 Fundacin para la Superacin de la Pobreza 3 Promedio ponderado por el presupuesto gubernamental vigente de cada programa Fuente: Equipo de Monitoreo Mideplan

22

Gasto Social Efectivo (GSE) de Programas

II.Monitoreo de programas / Evaluacin ex-dure

Ejemplo 2
FOSIS CONADI

Total Programas: 11
PRODEMU FSP1

GSE / Costos totales

Gobierno de Chile | Ministerio de Planificacin

23

Productos a Entregar y Difusin de Resultados

II.Monitoreo de programas / Evaluacin ex-dure

PRODUCTOS

CLIENTES Universidades y Centros de Estudio Ciudadana Legisladores Gobierno

FECHAS Piloto: Agosto 2011

Banco Integrado de Programas Sociales | BIPS

Informe Desarrollo Social| IDS

Universidades y Centros de Estudio Ciudadana Legisladores

Publicacin: Junio 2011

Informe de Oferta Agregada | IOA

Mideplan: Junio 2011 Legisladores Gobierno Vivienda: Julio 2011

Trabajo: Agosto 2011 Educacin: Octubre 2011 Salud: Noviembre 2011

Gobierno de Chile | Ministerio de Planificacin

24

Contenido

Herramientas de monitoreo en el contexto del nuevo Ministerio de Desarrollo Social

1 2 3

Rol del nuevo Ministerio de Desarrollo Social | MDS

Monitoreo de Programas | Evaluacin ex-dure

Avances a la fecha y Desafos

Gobierno de Chile | Ministerio de Planificacin

25

Avances por Ministerio

III. Avances a la Fecha y Desafos

MINISTERIO

GRADO DE AVANCE

TOTAL PROGRAMAS A MONITOREAR

Ministerio de Vivienda

80%

11

Ministerio de Educacin

19%

162

Ministerio de Salud

40%

25 33

Ministerio del Trabajo

40%

Ministerio del Planificacin Otros1

90%

66 43

58%

1 Fundacin Artesanas de Chile, Fundacin de la Familia, Fundacin Museo Interactivo Mirador, Prodemu, Sename y Conace. Fuente: Equipo de Monitoreo Mideplan

Metas y Desafos
III. Avances a la Fecha y Desafos

Metas 2011
TOTAL PROGRAMAS MONITOREADOS A JUNIO DEL 2011 TOTAL PROGRAMAS MONITOREADOS A DICIEMBRE DEL 2011

272
(80% de la oferta programtica del Estado)

340
(100% de la oferta Programtica del Estado)

Desafos
Validar y difundir el trabajo de la Divisin de Monitoreo de Mideplan como la centralizadora de la informacin de la Oferta Programtica Social. Entregar productos que permitan mejorar los programas existentes y disear programas nuevos de mayor calidad. Que los distintos servicios y Ministerios reconozcan la utilidad de la Ficha de Monitoreo como herramienta para la evaluacin ex-dure de programas. Tener una visin integral de la oferta social del Estado.
27

Gracias