Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
Introduccin
La evaluacin es una de las actividades necesarias en la planificacin de la poltica social,
traducida en proyectos, permite identificar los logros obtenidos por la implementacin de
estos, en ese sentido la evaluacin muestra mltiples aperturas, como seala Prez Gmez
(1983b, p. 431, citado en Jimnez, s.f., citado en Secundino y Matus, s.f.), puede
concentrarse en cuatro aspectos: conceptual, de enfoque, metodolgico y tico-poltico, lo
cual significa obtener informacin, opiniones e interpretaciones sobre la ejecucin de un
determinado proyecto, en este proceso se identifican modelos de evaluacin que permiten
tener un diseo general de la investigacin evaluativa se pueden clasificar de acuerdo a los
paradigmas o enfoques, metodologas, etc. Distintos autores desde distintas perspectivas
caracterizan la forma de la investigacin evaluativa que ha de realizarse, las tcnicas y
procedimientos para la recoleccin y anlisis de la informacin, el conocimiento final que se
desea obtener y los usuarios principales de los resultados del estudio.
En este contexto, la temtica que abordaremos en esta Unidad 3, se enfoca en distinguir los
modelos analticos y globales que permiten evaluar el funcionamiento de los proyectos
sociales; as como los tipos de evaluacin para distintos momentos del ciclo de gestin de un
proyecto. Otro aspecto importante de anlisis es el concepto de autora social, sus
implicaciones y su relacin con Trabajo Social.
Temario
1. Modelos de evaluacin
Modelos analticos
Modelos globales
2. Tipos de evaluacin en la gestin del ciclo de los proyectos sociales
3. Conceptualizacin de auditora social y vinculacin con trabajo social
Unidad 3/ Pg. 1
1. MODELOS DE EVALUACIN
Bienvenidos, la temtica que abordaremos se enfocan en los distintos modelos que existen
en la evaluacin, su propsito, caractersticas y la metodologa que utiliza cada uno para
evaluar los proyectos, con el fin de aplicar un modelo a algn proyecto especfico.
Para empezar, por supuesto, hay que acudir a los conceptos bsicos, as que el primer
punto es responder:
Qu es un modelo?
Es un esquema o diseo general que caracteriza la forma de la investigacin evaluativa que
ha de realizarse, las tcnicas y procedimientos para la recoleccin y anlisis de la
informacin, el conocimiento final que desea obtener y los usuarios principales de los
resultados del estudio (Briones, 1998).
Los modelos de evaluacin pueden dividirse, segn su naturaleza, en modelos analticos y
globales, teniendo como caractersticas las siguientes:
Modelos analticos
Relacionados con paradigmas epistemolgicos. Se caracterizan por abordar con mayor o
menor desagregacin los componentes estructurales del programa. La evaluacin consiste
en proporcionar explicaciones del funcionamiento del programa.
Modelos globales
Se basan en paradigmas interpretativos o comprensivos. Pretenden hacer una evaluacin
holstica y totalizadora de tal manera que se pueda establecer el significado de las acciones
y actividades que se desarrollan dentro del programa.
Dentro de estos dos grandes apartados, es posible ubicar las aportaciones de distintos
autores.
Unidad 3/ Pg. 2
TIPO DE MODELOS
MODELOS ANLITICOS
MODELO CIPP (CONTEXTOINSUMO-PROCESOPRODUCTO)
Daniel Stufflebeam
REFERENTES ESPECFICOS
Guillermo Briones
MODELOS GLOBALES
EVALUACIN ILUMINATIVA
Parlett y Hamilton
EVALUACIN FOCALIZADA
Patton
Para contextualizar, los modelos analticos y globales, estn relacionados con paradigmas
epistemolgicos.
Un paradigma es una visin, esquema o enfoque de la realidad, en este sentido, desde la
perspectiva epistemolgica, los enfoques analticos son de corte racionalista con posiciones
realistas u objetivistas y utilizan tanto mtodos cuantitativos como cualitativos en el proceso
de evaluacin.
Los enfoques globales, desde la perspectiva epistemolgica, son en su mayora de corte
naturalista, subjetivista e idealista y emplean preferentemente mtodos cualitativos en el
proceso de evaluacin.
A continuacin podrs conocer las generalidades de cada uno de estos modelos, tomando en
cuenta su autor, cmo conciben a la evaluacin, el objetivo que persiguen y sus
caractersticas bsicas.
Unidad 3/ Pg. 3
MODELO ANALTICO
RACIONALISTA
CIPP
CONTEXTO-INSUMO-PROCESO-PRODUCTO
Daniel Stufflebeam
La evaluacin es el proceso de identificar, obtener y proporcionar informacin til y
descriptiva, a fin de servir de gua para la toma de decisiones, solucionar problemas de
responsabilidad y promover la comprensin de los fenmenos implicados.
Propsito
Proporcionar informacin til para la toma de decisiones respecto del programa, ya sea en la
planeacin, en la estructuracin, en la implementacin y en los resultados.
Caractersticas
Se integra de cuatro tipos de evaluacin:
1. Contexto: estudio exploratorio para ubicar el problema.
2. Insumo: los recursos para alcanzar los objetivos del programa.
3. Proceso: identificar o pronosticar, durante el proceso, los defectos de la planificacin del
procedimiento o de su realizacin.
4. Producto: busca recopilar descripciones y juicios acerca de los resultados y relacionarlos
con los objetivos.
Metodologa
Plantea cuatro niveles o etapas:
Unidad 3/ Pg. 4
PROCESO
PRODUCTO
Pretende determinar la
cantidad y el uso de
recursos que se necesitan
para el logro de los
objetivos del proyecto.
Tomado de: Stufflebeam y col., Educational Evaluation. Decision Making, 1972, p. 11, citado en
Correa, 2002, p. 100.
Financieros
Humanos
Tecnolgicos
Informacin
Tiempo
PROCESOS
(Productividad,
eficiencia, calidad)
Organizacin
Coordinacin
Relaciones
interorg.
Convocatorias
Seleccin
beneficiarios
Participacin social
RESULTADOS
(Eficacia,
consistencia,
oportunidad)
Cobertura
Crditos
Subsidios
Servicios
sociales
IMPACTO EN EL
PROBLEMA
PBLICO
Incremento
de
empleo
Incremento
de
ingresos
Mejoramiento de
la calidad de vida
Satisfaccin social
MODELO ANALTICO
RACIONALISTA DE REFERENTES ESPECFICOS
Guillermo Briones
La evaluacin que consiste en describir, medir, comparar y juzgar las
propiedades que
definen el contexto, los objetivos, los recursos, el funcionamiento, la poblacin y los
resultados de un programa.
Propsito
Proporcionar informacin til para tomar decisiones con respecto a un programa, bien sea
referida a sus objetivos, a su estructura, a su funcionamiento, a sus resultados o a los
usuarios.
Metodologa
Utiliza, tanto en la recoleccin de informacin como en el procesamiento de datos, tcnicas
cuantitativas y cualitativas, teniendo como criterios, para ello, los objetivos de la evaluacin.
Caractersticas
Plantea la necesidad de tener claridad respecto a cules son los referentes
especficos de la evaluacin que reciben el nombre de:
Unidad 3/ Pg. 7
Tomado de: Briones, G., Evaluacin, vol. 4, Bogot, 1985, citado en Correa, 2002, p. 103
MODELO GLOBAL
INTERPRETATIVO EVALUACIN ILUMINATIVA
Parlett y Hamilton
Evaluacin interpretativa, en tanto que recoge las interpretaciones de la realidad que hacen
las personas que participan en el programa.
Propsito
Descubrir y documentar lo que supone participar en el programa en cualquier rol, discernir y
discutir los rasgos ms importantes del programa, sus concomitantes recurrentes y sus
procesos crticos: cmo opera, cmo es influenciado por situaciones externas e internas, sus
ventajas e inconvenientes, etc.
Caractersticas
1) La fase de observacin, en la cual se investiga toda la amplia gama de variables que
afectan al resultado del programa o la innovacin.
2) La etapa de investigacin, en la cual el inters se desplaza desde el reconocimiento (de la
fase de observacin) hacia la seleccin y planteamiento de cuestiones de una manera
coherente y ecunime, con el fin de realizar una lista sistemtica y selectiva de los aspectos
ms importantes del programa en su contexto.
Unidad 3/ Pg. 8
etc.), as como los procedimientos de anlisis que se van a seguir. Se caracteriza a los
diferentes participantes para el estudio individualizado de los resultados a travs de
estudios de caso.
Esquema del modelo
Ordena la evaluacin de la siguiente forma:
1. Identificacin y organizacin de las personas relevantes que toman las decisiones y
de los usuarios de la informacin.
2. Identificacin y focalizacin de las preguntas de evaluacin relevantes.
3. Los mtodos de evaluacin se seleccionan para generar informacin til para las
personas que toman las decisiones y para los usuarios debidamente identificados y
organizados.
4. Las personas que toman las decisiones y los usuarios de la informacin participan con
los evaluadores en el anlisis e interpretacin de los datos.
5. Los evaluadores y las personas que toman las decisiones negocian y cooperan para la
diseminacin.
Unidad 3/ Pg. 10
2. TIPOS DE EVALUACIN
Objetivo del tema
Unidad 3/ Pg. 11
DIFERENCIA
INVESTIGACIN
Investigacin: es un proceso de recogida de
datos e informaciones
que debe seguir con
rigurosidad las exigencias del mtodo cientfico,
la finalidad es fundamentar e incrementar el
conocimiento.
Es til en la evaluacin porque, permite analizar
la estructura, el funcionamiento y los resultados
de los proyectos o programas con el fin de
proporcionar informacin que permita la toma
de decisiones concretas.
EVALUACIN
Investigacin
Evaluacin
Objeto
Cualquiera
Cualquiera
Carcter
Cientfico: cuantitativo y
cualitativo
Tecnolgico y tcnico
Agentes
Cientfico
Instrumentos
Cualquiera
Cualquiera
Finalidad
Acceder al conocimiento
Temporalidad
Costo
Medio y alto
Bajo y medio
Criterios
Cientficos
Normativos, criteriales,
personalizados
Unidad 3/ Pg. 12
A continuacin identificars los distintos tipos de evaluacin que se utilizan dentro del ciclo
de gestin del proyecto.
TIPOS DE EVALUACIN
Unidad 3/ Pg. 13
Evaluacin de proceso
Mira hacia adelante. Determina la medida en que los componentes del proyecto contribuyen
o son disfuncionales a los fines propuestos.
CONSEJO NACIONAL DE
EVALUACIN (CONEVAL)
Evaluacin de resultados
Se centra en la valoracin de los resultados comparando el estado actual y el estado
previsto en la planeacin inicial del proyecto.
En suma, determina qu tanto el proyecto ha logrado cumplir sus objetivos o bien que tanta
capacidad poseera para cumplirlos.
Unidad 3/ Pg. 14
Evaluacin de impacto
Puede realizarse durante o despus de finalizar el proyecto. Se enfoca en mirar
descubrir las causas del porqu el proyecto funcion o no, es decir, valorar
inicial versus situacin final operacionalizada a travs de la fijacin en
referencial de una lnea base y una lnea de comparacin (LB-LC), cuyos
levantamiento son antes de la aplicacin de la intervencin social (programa o
despus de la ejecucin de la misma.
hacia atrs,
la situacin
un sistema
tiempos de
proyecto) y
Evaluacin ex ante
(Antes)
Por el momento en que se realiza
Se realiza
programa
en cuenta
el proceso
Evaluacin ex post
(Despus)
Incluye a la evaluacin
impactos y al monitoreo.
de
Se basa en el informe
derivado
de
la
implementacin
del
programa (o proyecto) y
existen dos momentos
posibles de analizar el
impacto:
mientras
el
programa (o proyecto)
est en curso o despus
que ha concluido.
Unidad 3/ Pg. 15
Evaluacin Interna
la
Da ms importancia al mtodo de
evaluacin
que
al
conocimiento
sumativo del rea en el que se
desarrolla el proyecto.
Evaluacin participativa
El objetivo de este tipo de evaluacin es minimizar la distancia que existe entre el evaluador
y los beneficiarios.
Se utiliza particularmente para pequeos proyectos, que deseen los cambios programados
mediante la creacin de condiciones para que se genere una respuesta del grupo.
Unidad 3/ Pg. 16
De acuerdo a la metodologa
CUALITATIVA
Se enfoca en el anlisis de
la
eficacia,
eficiencia,
productividad,
equidad,
sustentabilidad,
sostenibilidad, etc.
CUANTITATIVA
Se enfoca en el anlisis de la
calidad,
satisfaccin
del
usuario
del
proyecto,
pertinencia,
oportunidad,
congruencia, etc.
Unidad 3/ Pg. 17
AUDITORA SOCIAL
CAMPO DE ACCIN DEL TRABAJADOR SOCIAL
CONCEPTUALIZACIN
Unidad 3/ Pg. 18
Unidad 3/ Pg. 19
Participacin ciudadana
Control o vigilancia
Co-gestin
Decisin
Consulta
Informacin
Gobernabilidad,
democracia,
transparencia, rendicin
de cuentas
Unidad 3/ Pg. 20
Objetivo
Rendicin de cuentas
Rendicin de cuentas
Refiere a hacer responsables a los sujetos de sus acciones
SCHEDLER
acceso
la
Capacidad
de
sancionar
a
polticos y funcionarios en caso
de que hayan violado sus
deberes pblicos.
Normatividad aplicable.
Secretara de la Funcin Pblica.
Unidad 3/ Pg. 21
Resumen
A lo largo de esta unidad se han identificado los paradigmas o enfoques, metodologas,
caractersticas y propsitos de los distintos modelos evaluacin para el funcionamiento del
proyecto social, considerando las tcnicas, los instrumentos y el anlisis de la informacin
para conocer el resultado final que se desea obtener y los beneficios que consiguen los
usuarios de los proyectos sociales.
Al respecto cabe, sealar, un modelo es un esquema o diseo general que caracteriza la
forma de la investigacin evaluativa que ha de realizarse, las tcnicas y procedimientos para
la recoleccin y anlisis de la informacin, el conocimiento final que desea obtener y los
usuarios principales de los resultados del estudio.
Los modelos permiten desagregar los distintos componentes estructurales de un programa o
proyecto, estos se clasifican de acuerdo a su naturaleza en analticos y globales.
Desde la perspectiva epistemolgica, los enfoques analticos son de corte racionalista con
posiciones realistas u objetivistas y utilizan tanto mtodos cuantitativos como cualitativos en
el proceso de evaluacin y los enfoques globales, son en su mayora de corte naturalista,
subjetivista e idealista y emplean preferentemente mtodos cualitativos en el proceso de
evaluacin.
Dentro de los modelos analticos se ubican el Modelo CIPP (contexto, insumo, proceso y
producto) de Daniel Stufflebeam y el Modelo de Referentes Especficos de Guillermo Briones,
cada uno de estos, permiten descubrir, identificar, medir y comparar la informacin para la
toma de decisiones; ambos modelos coinciden en la estructura, implementacin y en los
resultados.
En los modelos globales, se identifican el modelo de Evaluacin Iluminativa de Parlett y
Hamilton y la Evaluacin Focalizada de Patton, ambos modelos se enfocan en
interpretaciones cualitativas y utilizan los instrumentos de la observacin y entrevista como
medios para recolectar la informacin.
Por otra parte, se analizaron los distintos momentos en que se desarrolla la evaluacin en el
ciclo de todo proyecto, con la finalidad de identificar las fallas u omisiones que se pueden
presentar en cada una de estas etapas y poder actuar para mejorar la eficiencia y eficacia
del proyecto antes, durante y despus de su realizacin.
Cuando nos referimos a la eficacia y eficiencia de un proyecto se puntualiza en la adecuada
utilizacin o minimizacin de recursos y la maximizacin de los productos esperados
(eficacia) y el grado de cumplimiento de los objetivos propuestos inicialmente (eficiencia).
Por ello, la importancia de desarrollar la evaluacin en los distintas etapas del ciclo de
gestin de un proyecto.
Una forma de evaluar es responder a Qu evaluar? en el proceso de implementacin para
conocer los factores que sustentan la dinmica de operacin, o bien para cuantificar los
resultados o medir los impactos, es decir, valorar los resultados comparando el estado
actual y el estado previsto en la planeacin inicial del proyecto.
Unidad 3/ Pg. 22
Unidad 3/ Pg. 23
Glosario
Auditora social
Modalidad de participacin ciudadana basada en el ejercicio de derechos humanos, que
consiste en la vigilancia, el monitoreo y la evaluacin de la gestin de lo pblico, sea esta
estatal o privada, con la finalidad de lograr cambios en trminos de eficiencia, eficacia y
transparencia, y de contribuir a la prevencin, identificacin y sancin de la corrupcin. Todo
lo anterior, desde una perspectiva ciudadana autnoma e independiente (Hernndez, 2007,
p. 10).
Diseo experimental
Se compone de dos grupos uno experimental y otro de control, al primero de los cuales se le
aplica un estmulo o tratamiento y al otro no. El diseo tiene por objeto verificar el efecto de
una variable independiente -el programa, en nuestro caso- sobre una determinada variable
dependiente (Briones, 2006, p. 75).
Evaluacin
Es fijar el valor de una cosa; para hacerlo se requiere un procedimiento mediante el cual se
compara aquello a evaluar respecto de un criterio o patrn determinado (Franco, 1971, p.
3).
Evaluacin
Evaluacin tiene un carcter permanente y sistmico opera como un proceso de aprendizaje
institucional y generar informacin relevante para la toma de decisiones de los distintos
actores con la finalidad mejorar la calidad y la eficiencia de los resultados (SIEMPRO, 1999,
p. 53).
Evaluacin ex-ante
Tiene por finalidad proporcionar criterios racionales para una crucial decisin cualitativa, si
un proyecto debe o no implementarse. Tambin permite ordenar los proyectos segn su
eficiencia para alcanzar los objetivos perseguidos (Cohen y Franco, 2009, p. 109).
Evaluacin ex-post
Se lleva a cabo durante la etapa de operacin para determinar si es conveniente continuar
con el proyecto o definir los requerimientos de reprogramacin necesarios para lograr los
objetivos de impacto perseguidos. Esta evaluacin tambin se puede llevar a cabo una vez
concluida la operacin.
Consiste en la medicin o sistematizacin de los resultados acumulados de:
_ Cobertura
_ Focalizacin
_ Eficacia
_ Eficiencia
_ Efectos
_ Impacto
_ Relacin entre los costos y el impacto.
A diferencia de la evaluacin ex-ante, en que se trabaja con objetivos y metas a alcanzar
segn las estimaciones existentes, en la ex-post se utilizan los datos reales, medidos en el
proyecto (Cohen y Martnez, s.f., p. 103).
Unidad 3/ Pg. 24
Evaluacin de impacto
Es la que trata de establecer el logro de los objetivos del programa (Briones, 2006, p. 25).
Evaluacin de proceso
Determina la medida en que los componentes de un proyecto contribuyen o son
disfuncionales a los fines perseguidos. Se realiza durante la implementacin y, por tanto,
afecta a la organizacin y las operaciones (Cohen y Franco, 2009, p. 110).
Evaluacin interna
Proceso destinado a verificar el logro de objetivos y la relacin con la organizacin de
programas, la calidad de los instructores, los recursos utilizados, etc. (Briones, 2006, p. 28).
Modelo
Es un esquema o diseo general que caracteriza la forma de la investigacin evaluativa que
ha de realizarse, las tcnicas y procedimientos para la recoleccin y anlisis de la
informacin, el conocimiento final que desea obtener y los usuarios principales de los
resultados del estudio (Briones, 2006, p. 3).
Participacin social
Es el derecho y la oportunidad, individual o colectiva, que tienen los ciudadanos de
manifestar sus intereses y demandas a travs de actos y actitudes legales, a fin de influir en
la formulacin y toma de decisiones gubernamentales en los diferentes niveles: nacional,
regional o local, contribuyendo de esa manera a mejorar la gestin pblica y la calidad de
vida de los ciudadanos (Hernndez, 2007, p. 109).
Rendicin de cuentas
Es la accin, como deber legal y tico, de todo funcionario o persona de responder e
informar por la administracin, el manejo y los rendimientos de fondos, bienes o recursos
pblicos asignados y los resultados en el cumplimiento del mandato que le ha sido conferido
(Hernndez, 2007, p. 109).
Unidad 3/ Pg. 25
Fuentes de informacin