Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
Conpes
Consejo Nacional de Política Económica y Social
3188
República de Colombia
Departamento Nacional de Planeación
DAPRE - FIP
DNP: PE-DEGR
Versión aprobada
I. INTRODUCCIÓN 2
II. ANTECEDENTES 2
B. Esquema operativo 13
i. Coordinación de la evaluación de impacto 13
ii. Implementación 15
iii. Difusión y participación 15
V. RECOMENDACIONES 17
1
I. INTRODUCCIÓN
II. ANTECEDENTES
En Colombia, el gasto público social como porcentaje del gasto total se ha incrementado a lo
largo de la década de los años noventa, pasando de 25% en 1990 a 29% en 20021. Como porcentaje del
PIB, durante este período el gasto social ha crecido de niveles cercanos al 5% a 8.5% (ver Gráfica 1).
En el período 1998-2002 esta tendencia se mantuvo, logrando niveles históricamente altos de gasto
social, aun en condiciones ajuste estructural conjugadas con la más grave recesión económica de los
últimos 70 años. Esto demuestra un compromiso del gobierno con la inversión social, priorizándola
además sobre otros tipos de gasto.
1 DNP-DEE, 2002
2
Gráfica 1. GASTO SOCIAL 1990 - 2002
(% PIB)
9,0
8,0
6,0
5,0
4,0
3,0
1990 1991 1992 1993 1994 1995 1996 1997 1998 1999 2000 2001 2002
Años
Fuente: DNP - DEE
En términos de su composición, la salud y la educación han tenido el mayor peso dentro del gasto
público social total. Con relación al PIB, estos dos rubros pasaron de un 3,8% en 1995 a un 6,1% en
el año 2002. Los demás componentes han mantenido su nivel porcentual estable con relación al PIB
(ver Tabla 1).
Tabla 1
GASTO SOCIAL A CARGO DEL SECTOR PUBLICO
1990 - 2002 (PIB %)
Total Gasto Social 6,0 7,2 7,3 7,4 8,3 7,7 8,5 8,5
El esfuerzo fiscal por mantener el nivel de gasto social ha estado acompañado por un énfasis
complementario hacia una orientación racional de su asignación, con el objetivo de maximizar los
beneficios sociales generados. Los avances del gobierno nacional en este sentido han sido importantes,
3
destacándose la expedición de la Ley 715 de 2001, la cual viene fortaleciendo la inversión social y las
entidades territoriales, para hacer de estas últimas un soporte eficiente de la actuación institucional del
Estado. Esta Ley distribuye con criterios de equidad y eficiencia los recursos para inversión social con
el fin de cubrir las necesidades básicas de la población pobre. Un ejemplo de esto es la nueva fórmula
de asignación de recursos en educación en función de los alumnos a ser atendidos, reemplazando la
fórmula previa que orientaba los recursos con base en el tamaño de la planta docente en cada
departamento.
Igualmente, las inversiones sociales recientes, como la Red de Apoyo Social –RAS-, dirigida a
mitigar los impactos de la crisis económica, han incorporado un componente de evaluación de impacto
que busca, entre otros aspectos, identificar los impactos más importantes de los programas, realizar
comparaciones de efectividad con otros programas de inversión social y establecer el nivel de
focalización de los mismos hacia las poblaciones más pobres y vulnerables del país.
Una evaluación de impacto identifica de manera sistemática los efectos (positivos o negativos,
esperados o no) sobre los hogares e instituciones, generados por un programa de desarrollo social. Se
distingue de las evaluaciones de procesos, gestión y resultados, al determinar la causalidad entre la
intervención y sus efectos observados. Así, permite entender la magnitud de los cambios generados por
dicha acción sobre el bienestar y, en especial, sobre la reducción de la pobreza. Concretamente, apunta
a retroalimentar y a mejorar la efectividad de los programas sociales, comparándolos con intervenciones
alternativas. Sus resultados proveen información para la toma de decisiones relacionadas con mantener,
ampliar, reorientar o eliminar un programa existente, o diseñar una nueva política pública.
Adicionalmente, sus resultados hacen posible la rendición de cuentas al público.
4
Existen diversas metodologías para evaluar el impacto de programas sociales2. Estas se basan en
la construcción de grupos de comparación o control. Los grupos de comparación son grupos de
individuos, núcleos familiares o comunidades que ostentan las mismas características socioeconómicas,
demográficas y de ubicación geográfica de los beneficiarios pero que no hacen parte de los programas.
Los grupos sirven para aislar los efectos sobre los beneficiarios (grupo tratamiento), atribuibles
exclusivamente a los programas a ser evaluados. Como parte de esta estrategia de comparación, en las
evaluaciones de impacto se realizan mediciones de línea de base (antes del inicio de los programas) y
otras posteriores con los grupos mencionados de tal forma que se pueden medir las variaciones de los
efectos generados por los programas en el tiempo.
La evaluación de impacto incluye el uso de encuestas directas aplicadas a los distintos actores
involucrados en la ejecución de los programas y de información secundaria. Igualmente incluye
métodos cualitativos como las entrevistas a profundidad, los grupos focales, la observación no
participante y la revisión documental, los cuales proveen de información a profundidad que permite
entender los procesos y condiciones detrás de los impactos observados, así como la percepción y
prioridades de los individuos acerca de su bienestar.
2 Baker, 2000; “Evaluación de impacto de los proyectos de desarrollo en la pobreza”. Banco Mundial
5
III. EXPERIENCIAS DE APLICACIÓN DE LA EVALUACIÓN DE IMPACTO
Los programas de choque, concebidos para mitigar los efectos sociales negativos de las políticas
de ajuste estructural y de las crisis económicas, han incorporado este instrumento como componente
integral. Los hallazgos y resultados de las evaluaciones de impacto han orientado una aplicación
posterior en otros países y contribuido a la formulación y orientación de políticas en los países
respectivos.
3 Choksi, 1995. “Evaluation in the Bank: taking stock of 50 years of development work”. En: “Evaluation and Development,
6
sino también de los procesos y la implementación del mismo. Esta experiencia ha servido como
ejemplo para el diseño y la puesta en marcha del programa “Jóvenes en Acción” de la RAS en
Colombia.
4 Esta evaluación estudio principalmente el efecto del programa “Hogares Comunitarios” sobre el bienestar de los niños de
0 a 6 años. Además, analizó la incidencia del desempeño del programa y de factores exógenos (eg. ambiente familiar) sobre dicho
efecto. Como resultado se desarrollaron indicadores integrales de bienestar y de desempeño.
5 La evaluación del PACES estudió aspectos de focalización, calidad y cobertura de la educación, y capacidad institucional
en el sector educativo. Sus resultados apoyaron el diseño de una estrategia de financiación y desarrollo institucional de las
entidades sectoriales del orden territorial, departamental y local.
7
Laboral en Colombia6. Sin embargo, la experiencia reciente más importante la constituye la evaluación
de la RAS. La forma como se estructuraron las evaluaciones de la RAS y las metodologías que
utilizarán representan una novedad en el país para la estimación de impactos de programas sociales. Se
trata de la evaluación de una estrategia de intervención integral en la cual, la ejecución de las
evaluaciones ha acompañado la de los programas, haciendo énfasis en la visión estratégica de la RAS.
Es además, la primera experiencia en la que el diseño de un programa se realiza paralelamente con el
diseño de su evaluación. Las evaluaciones de la RAS generarán información de calidad para una mejor
concepción de éstos programas, y servirán como base para el montaje de una institucionalidad
permanente para la gestión del riesgo en la población vulnerable.
La RAS es una forma de intervención social focalizada hacia los más pobres. Los programas de
la RAS suponen inversiones por más de 500 millones de dólares, constituyéndose así en un nuevo
instrumento del Gobierno para combatir los niveles de pobreza. Con este objetivo se formularon tres
subprogramas: “Empleo en Acción”, encaminado a brindar ocupación transitoria a la población más
pobre; “Familias en Acción”, destinado a mejorar mediante subsidios monetarios las condiciones de
nutrición de las familias más necesitadas y garantizar la asistencia al colegio de los niños en edad
escolar; “Jóvenes en Acción”, destinado a mejorar las condiciones de acceso e inserción al mercado
laboral de jóvenes desempleados de bajos recursos a través de acciones de capacitación en un oficio y
con una experiencia laboral efectiva en un puesto de trabajo en el sector formal.
Como parte de los programas, se diseñó un esquema de evaluación de impacto, cuyo objetivo ha
sido: i) permitir una reorientación de recursos y acciones hacia un mayor logro de resultados; ii)
6 Este estudio evaluó el impacto de la provisión pública de capacitación laboral pública y privada sobre los ingresos y
empleabilidad de los beneficiarios, con énfasis en el SENA. Para su desarrollo se empleó principalmente la sección de capacitación
laboral de la Encuesta Nacional de Calidad de Vida (ECV).
8
asegurar la transparencia en la ejecución de recursos; iii) producir información para mejorar la
implementación del programa sobre la marcha; iv) medir el impacto de cada uno de los programas y de
la estrategia en su conjunto, sobre la pobreza, el capital humano y social, de tal forma que permita
cuantificar el beneficio directo del esquema de intervención sobre la población vulnerable.
Con las evaluaciones se obtendrá información pertinente sobre la gestión y las operaciones de los
tres programas. Igualmente, se obtendrá un análisis de la eficiencia en la focalización de los mismos.
Otro componente de las evaluaciones es el análisis costo/beneficio. Además de comparar los costos
con los beneficios de los programas, se realizarán comparaciones con otras alternativas de intervención
desarrolladas en Colombia y en otros países. Adquieren así gran importancia, los resultados que
arrojen las evaluaciones sobre los efectos a nivel de formación y/o protección del capital humano y
social, y reducción de la pobreza.
9
Las evaluaciones las realizan firmas externas y la interventoría técnica es igualmente
responsabilidad del DNP. Para este fin cuenta con el apoyo de un Comité Asesor, conformado por tres
(3) expertos internacionales en temas de evaluación de impacto, redes de protección social y
focalización de programas, entre otros. Al interior del DNP se institucionalizó un Comité Técnico -
instancia decisoria- la cual se apoya en un Equipo Técnico, que actuará dentro del DNP como enlace
con el Comité Asesor, las firmas evaluadoras y los operadores del Programa.
10
La primera fase de evaluación de programas sociales debe iniciarse con aquellos considerados
estratégicos, tanto al interior de la oferta de programas sociales, como del Sistema Social de Riesgo,
debido a su relevancia en la política social, recursos destinados, cobertura, y tiempo de consolidación
de sus operaciones. Los programas más sobresalientes según estas características son los manejados
por el Instituto Colombiano de Bienestar Familiar –ICBF- y los del Servicio Nacional de Aprendizaje –
SENA-.
i. El ICBF
Este instituto ejecuta programas dirigidos a la atención de las familias más pobres y vulnerables,
tales como “Hogares Comunitarios de Bienestar Familiar”. Así mismo, lleva a cabo programas para
mejorar la nutrición de los menores como: “Restaurantes Escolares”, “Asistencia Nutricional al Escolar
y al Adolescente” -ANEA-, y “Adquisición y Distribución de Alimentos de Alto Valor Biológico”
Bienestarina-.
Para el año 2001 hubo 80.019 unidades de servicio de “Hogares Comunitarios”, llegando a
atender más de un millón doscientos mil usuarios a lo largo del país. Esto implicó una ejecución
presupuestal superior al 40% de presupuesto total del ICBF en ese año. De otro lado, el programa de
“Restaurantes Escolares” ha venido ganando espacio dentro de la institución, pues pasó de atender
menos de ochocientos mil beneficiarios en 1998 a atender cerca de dos millones doscientos setenta mil
7 Las contribuciones parafiscales son asumidas completamente por el empleador y suman 9% del salario base del trabajador.
Los recursos son distribuidos así: 2% SENA, 3% ICBF, 4% Cajas de Compensación Familiar.
8 DNP-DEE, 2002
11
en el 2001. En términos de la ejecución del ICBF, pasó de representar el 8% en 1995 al 12% en el
20019.
La evaluación actual del programa “Familias en Acción” incluye una comparación a nivel
nacional sobre nutrición infantil entre los beneficiarios de dicho programa y los beneficiarios SISBEN 1
del programa “Hogares Comunitarios de Bienestar Familiar”. Por ende, sus resultados y avances se
constituyen en insumos centrales para la realización de una evaluación de impacto complementaria de
éste último programa. La evaluación tendría un carácter integral, e incluiría diferentes beneficios
asociados, tales como el cuidado y desarrollo del menor.
ii. El SENA
El SENA, es la institución pública más importante en el país en la formación para el trabajo. Sus
componentes principales son: 1) la formación reglada de trabajadores calificados, técnicos y tecnólogos
9 ICBF, 2002
10 Crédito de Préstamo de Cooperación Técnica No. 1382 / OC-CO suscrito entre el Gobierno de Colombia y el BID.
12
(cursos largos) y 2) la formación continua (cursos cortos). En el año de 1999, los cursos largos
contaron con casi cien mil participantes y los cursos cortos con cerca de novecientos mil. Así, puede
concebirse como dos instituciones en una. Por un lado, es una universidad pública. Por otro, un centro
de capacitación financiado por los empleadores.
El presupuesto del SENA se ha ubicado durante la última década en 0,3 puntos del PIB11. Su
financiación no ha sufrido las consecuencias del ajuste fiscal dado que proviene de contribuciones
parafiscales.
Aunque se han realizado esfuerzos en términos de evaluar la institución, los resultados de las
mismas no se han incorporado suficientemente en su operación, ni han generado reorientaciones
importantes de recursos. Adicionalmente, en la evaluación de impacto de Jóvenes en Acción, se
realizará un análisis comparativo de los programas del SENA con similares objetivos. Al igual que en
el caso de “Familias en Acción”, la evaluación de “Jóvenes en Acción” será un buen punto de partida
para llevar a cabo una evaluación más profunda y extensa del SENA, en la cual se asegure la
incorporación de resultados en la operación del mismo.
B. Esquema operativo
11 DNP-DEE, 2002
13
El DNP identificará, de manera concertada con las instituciones del sector, los programas objeto
de evaluación, y someterá a consideración del CONPES aquellos priorizados para su implementación.
Como una primera fase se han priorizado los programas en cabeza del ICBF y el SENA.
Una vez definidos los programas objeto de evaluación, el DNP adelantará los procesos de
licitación; incluyendo el diseño de los términos de referencia, convocatoria, evaluación técnica de
propuestas, selección y negociación de la contratación. La entidad ejecutora del programa objeto de
evaluación, acompañará estos procesos.
La interventoría técnica de las evaluaciones será adelantada por el DNP. Los reportes, informes
y recomendaciones que surjan en desarrollo de esta responsabilidad, serán presentados y discutidos con
la entidad ejecutora. Para ello se conformará un Comité de Seguimiento, el cual acompañará el
desarrollo de la evaluación de impacto, garantizando el flujo oportuno de la información, la reflexión,
difusión y apropiación institucional de los resultados generados. El Comité estará integrado por
representantes del nivel directivo del Departamento Nacional de Planeación, por representantes de la
Junta Directiva y el Director de la entidad ejecutora del programa evaluado.
Esta instancia será el espacio de revisión y discusión de los diferentes reportes e informes
generados; asesorará a la entidad ejecutora en la toma de decisiones gerenciales, relacionadas con la
ejecución del programa evaluado y sus planes estratégicos. Adicionalmente, revisará y tomará medidas
relacionadas con el buen desempeño operativo de la evaluación y el cumplimiento de las
responsabilidades y compromisos institucionales de las partes.
Por último, el DNP generará, de manera concertada con la entidad ejecutora del programa,
recomendaciones estratégicas a nivel programático y de política. En el primer caso contribuirán en la
14
orientación, adaptación y/o revisión de los programas evaluados. En materia de política social,
contribuirán en la formulación y orientación de políticas y planes de gobierno que asimilen las lecciones
y aprendizajes alcanzados. Tales recomendaciones serán sometidas al CONPES para su aprobación e
implementación.
ii. Implementación
Las evaluaciones de impacto podrán ser realizadas por firmas nacionales y/o internacionales, y
contarán con el apoyo de equipos técnicos especializados en el DNP. Las firmas serán seleccionadas
bajo procedimientos de licitación abierta por mérito, a cargo del DNP.
15
Adicionalmente, SINERGIA desarrollará el Sistema de Participación Ciudadana, el cual permitirá
a la sociedad ejercer una acción efectiva en la evaluación de resultados de la gestión pública, en la
definición de prioridades de evaluación, el monitoreo y seguimiento a la ejecución de planes, programas
y proyectos, y en este sentido, de las evaluaciones de impacto adelantadas. El sistema garantizará el
acceso y apropiación de la información generada en las evaluaciones por parte de la población
beneficiaria, e incluirá mecanismos de retroalimentación que permitan su participación en los procesos
de toma de decisiones relacionados.
16
V. RECOMENDACIONES
17
• Apoyar y participar en los procesos de evaluación de los programas que se
identifiquen como parte de la primera fase de institucionalización de la evaluación
de impacto.
• Cumplir con las funciones consignadas en el esquema operativo a ser reglamentado
por el DNP.
18