Manual Evaluacion EDH

APRENDER DE LA EXPERIENCIA MANUAL DE MONITOREO
Y EVALUACIN DEL TRABAJO
REALIZADO EN EDUCACIN EN DERECHOS HUMANOS
Amnesty International Publications Publicado en 2010 por Amnista Internacional Secretariado Internacional Peter Benenson House 1 Easton Street London WC1X 0DW Reino Unido Amnesty International Publications 2010 Edicin en espaol a cargo de: EDITORIAL AMNISTA INTERNACIONAL (EDAI) Valderribas, 13 28007 Madrid. Espaa www.amnesty.org ndice: POL 32/009/2010 SPANISH Idioma original: ingls Impreso por Amnista Internacional, Secretariado Internacional, Reino Unido Reservados todos los derechos. Esta publicacin tiene derechos de autor, si bien puede ser reproducida libremente por cualquier medio con fines educativos o para llevar a cabo acciones de proteccin y promocin de los derechos humanos, pero no para la venta. Los titulares de los derechos de autor solicitan que se les comuniquen los usos mencionados con el fin de evaluar su impacto. Para la reproduccin de este texto en cualquier otra circunstancia, su uso en otras publicaciones, o su traduccin o adaptacin, deber obtenerse el permiso previo por escrito de la editorial, que podr exigir el pago de un canon. Si desean solicitar un permiso, o realizar una consulta, pnganse en contacto con copyright@amnesty.org.
APRENDER DE LA EXPERIENCIA
MANUAL DE MONITOREO Y EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS
NDICE
INTRODUCCIN ............................................................................................................................... 2 SECCIN 1 MONITOREO Y EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS: ASPECTOS BSICOS....................................................................................................... 4 EDUCACIN EN DERECHOS HUMANOS DENTRO DE AMNISTA INTERNACIONAL................................ 5 PRINCIPIOS Y TRMINOS CLAVE ...................................................................................................... 8 LA LGICA DEL CAMBIO................................................................................................................. 14 SECCIN 2 MONITOREO Y EVALUACIN DENTRO DEL MARCO DE PROYECTO .................................. 20 INTRODUCCIN ............................................................................................................................. 21 INCORPORAR EL MONITOREO Y LA EVALUACIN A LA FASE DE DISEO DEL PROYECTO ................. 23 PREPARACIN DEL PLAN DE MONITOREO Y EVALUACIN............................................................... 30 LLEVAR A CABO LAS TAREAS DE MONITOREO Y EVALUACIN ......................................................... 43 VALORACIN DEL IMPACTO............................................................................................................ 48 SECCIN 3 MONITOREO Y EVALUACIN DE LA PLANIFICACIN DE EDUCACIN EN DERECHOS HUMANOS: EJEMPLOS PRCTICOS................................................................................................. 50 INTRODUCCIN ............................................................................................................................. 51 SESIN INICIAL DE FORMACIN O TALLER DE SENSIBILIZACIN (POR EJEMPLO, PARA PROFESORADO, ALUMNADO DE CENTROS DE ENSEANZA SECUNDARIA, ONG Y GRUPOS PROFESIONALES) .......................................................................................................................... 52 MLTIPLES SESIONES DE FORMACIN O TALLERES DE FOMENTO DE LAS CAPACIDADES (POR EJEMPLO, PARA PERSONAL ENCARGADO DE LA FORMACIN O MULTIPLICADORES) ....................... 54 REDES DE EDUCACIN EN DERECHOS HUMANOS .......................................................................... 57 MATERIALES ESCRITOS, RECURSOS Y OTROS PRODUCTOS DE LA EDUCACIN EN DERECHOS HUMANOS ..................................................................................................................................... 59 PROGRAMAS DE EDUCACIN EN DERECHOS HUMANOS BASADOS EN UN PLAN DE ESTUDIOS (POR EJEMPLO, EN ESCUELAS U OTROS ENTORNOS DE APRENDIZAJE, INCLUIDA LA EDUCACIN A DISTANCIA UTILIZANDO INTERNET) ............................................................................................... 62 PROYECTOS EXPERIMENTALES (POR EJEMPLO, CLUBES ESCOLARES, CAMPAMENTOS DE VERANO O VISITAS DE ESTUDIO DE AMNISTA INTERNACIONAL) ..................................................................... 67 ORGANIZACIONES O INSTITUCIONES ASOCIADAS QUE INCORPORAN LA EDUCACIN EN DERECHOS HUMANOS (POR EJEMPLO, COLEGIOS AMIGOS DE LOS DERECHOS HUMANOS, ORGANIZACIONES COMUNITARIAS U ORGANISMOS GUBERNAMENTALES) .................................................................. 68 CONTENIDO DEL CD-ROM............................................................................................................... 73 NOTAS FINALES............................................................................................................................. 74 REFERENCIAS BIBLIOGRFICAS..................................................................................................... 76
APRENDER DE LA EXPERIENCIA MANUAL DE MONITOREO Y EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS ndice: POL 32/009/2010
INTRODUCCIN
El monitoreo y la evaluacin son dos elementos indispensables en toda actividad de educacin en derechos humanos, pues nos ayudan a entender nuestra labor de educacin en este mbito, el impacto que sta genera y cmo contribuye a la creacin de una cultura de derechos humanos para que estos derechos sean protegidos y respetados. De ms est decir que el monitoreo y la evaluacin ayudan a mejorar nuestro trabajo de educacin en derechos humanos, ya que garantizan que respondemos a las necesidades y expectativas de las personas participantes y que somos sensibles a sus circunstancias y a los desafos de derechos humanos a los que se enfrentan.
Propsito de este manual

Este manual se ha elaborado con el objetivo de reforzar la capacidad de Amnista Internacional de integrar el monitoreo, la evaluacin y la valoracin del impacto en sus actividades y programas de educacin en derechos humanos, con el fin de mejorar su efectividad e impacto. Es un recurso prctico y de aplicacin directa que nos ayudar a conceptualizar nuestra planificacin de educacin en derechos humanos y a disear planes de monitoreo y evaluacin de los resultados. No tenemos que ser especialistas en monitoreo y evaluacin para llevar a cabo estas tareas. Las actividades y los enfoques contenidos en este manual no son difciles de comprender o aplicar. Este manual nos servir de gua durante el proceso de monitoreo y evaluacin y, con un poco de prctica y experiencia, ambas tareas se revelarn menos complejas y sern una parte ms de la planificacin y puesta en marcha de los proyectos de educacin en derechos humanos. El manual se inspira en recursos y mecanismos de apoyo elaborados y utilizados por Amnista Internacional -por ejemplo, el marco de las dimensiones del cambio, as como en herramientas de monitoreo y evaluacin ajenas a Amnista Internacional. Por tanto, parte de las buenas prcticas de monitoreo y evaluacin que son ms pertinentes para nuestro trabajo de educacin en derechos humanos. En este manual se tienen en cuenta los tipos de planificacin de educacin en derechos humanos que ya existen en el movimiento. Por ejemplo, la mayora de los programas de educacin en derechos humanos contienen procesos educativos destinados a influir en el conocimiento, las habilidades, las actitudes, los valores y el comportamiento (tanto particulares o individuales como pblicos o sociales). Nuestras evaluaciones tendrn que buscar indicios de cambio en estas reas. No obstante, tambin tendremos que buscar resultados no slo relacionados con el aprendizaje especfico de cada participante, sino con objetivos ms amplios de la educacin en derechos humanos dentro del movimiento, como el aumento de la membresa y del activismo y el fomento de las capacidades de las personas titulares de derechos. Si consideramos estos diversos niveles de resultados, podemos imaginarnos que la inversin de tiempo y energa para llevar a cabo tareas de monitoreo y evaluacin es tambin una inversin en planificacin y reflexin estratgicas, en nuestros valores de participacin y rendicin de cuentas y en nuestro compromiso de mantener un ciclo continuo de mejora de los programas.
Quines deben usar este manual?

Toda persona que emprenda proyectos y programas de Amnista Internacional sobre educacin en derechos humanos debe usar este manual para garantizar que el monitoreo y la evaluacin se incorporan al proceso de gestin de los proyectos con vistas a mejorar la eficacia y el impacto de la labor de educacin en derechos humanos. Este manual se ha elaborado especficamente en el contexto del trabajo y los enfoques de Amnista Internacional, pero tambin lo encontrarn til las personas ajenas al movimiento que emprendan actividades de educacin en derechos humanos, o quienes deseen explorar las diferentes perspectivas del monitoreo y la evaluacin en una disciplina distinta.
Sntesis del contenido de este manual

El manual est dividido en varias secciones e incluye un CD-ROM. La primera seccin ofrece un panorama general del trabajo y la prctica de educacin en derechos humanos dentro de Amnista Internacional, expone los principios bsicos y las definiciones de monitoreo y evaluacin, e introduce el concepto de la lgica del cambio. La segunda seccin aborda los pasos necesarios para incorporar el monitoreo, la evaluacin y la valoracin del impacto a la planificacin de un proyecto de educacin en derechos humanos. La tercera seccin da ejemplos de actividades concretas de educacin en derechos humanos llevadas a cabo en el seno de Amnista Internacional y propone los enfoques de evaluacin ms apropiados para dichas actividades. El manual incluye tambin una amplia lista de referencias bibliogrficas (con vnculos a pginas web) para quien desee obtener informacin complementaria sobre monitoreo y evaluacin. El CD-ROM que acompaa a este manual contiene una gran cantidad de herramientas y recursos prcticos de monitoreo y evaluacin que se pueden adaptar fcilmente a los programas de educacin en derechos humanos de Amnista Internacional.
Esta publicacin forma parte del Proyecto de Monitoreo, Evaluacin y Valoracin del Impacto de la Educacin en Derechos Humanos de Amnista Internacional, gestionado por el Equipo de Educacin en Derechos Humanos del Secretariado Internacional.
Agradecimientos
El Secretariado Internacional de Amnista Internacional est en deuda con todas las personas que han dedicado su tiempo y sus conocimientos a la preparacin de este manual. Damos las gracias, en particular, a Felisa Tibbitts, que ha redactado el manual. Asimismo agradecemos a las siguientes personas, que han revisado los borradores del manual y aportado valiosos comentarios y recursos, su generosa aportacin a la elaboracin de esta publicacin: Vibeke Eiks (Amnista Internacional Noruega), Anne Molloy (Amnista Internacional Irlanda), Sandra Reitz (Amnista Internacional Alemania), Judit Kende (Amnista Internacional Hungra), Maneesh Pradhan (Unidad de Aprendizaje y Evaluacin del Impacto del Secretariado Internacional), Sneh Aurora (Equipo de Educacin en Derechos Humanos del Secretariado Internacional), Helen Trivers (Equipo de Educacin en Derechos Humanos del Secretariado Internacional) y Dariusz Grzemny (Equipo de Educacin en Derechos Humanos del Secretariado Internacional), y a Andrs Vzquez y Maite Garmendia, que colaboraron en la revisin de la versin en espaol del Manual.
Lista de siglas y abreviaturas utilizadas en el manual

Anlisis FODA (tambin conocido como Anlisis DAFO) Anlisis de debilidades, amenazas, fortalezas y oportunidades Anlisis PEST Anlisis de las tendencias polticas, econmicas, sociales y tecnolgicas DUDH Declaracin Universal de Derechos Humanos EDH Educacin en Derechos Humanos GPS Declaracin de Prioridades Globales ONG Organizacin no gubernamental PEI Plan Estratgico Integrado REAP Programa de Educacin y Accin en Derechos Humanos SI Secretariado Internacional de Amnista Internacional UNESCO Organizacin de las Naciones Unidas para la Educacin, la Ciencia y la Cultura
EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS: ASPECTOS BSICOS
Seccin 1 MONITOREO Y
EDUCACIN EN DERECHOS HUMANOS DENTRO DE AMNISTA INTERNACIONAL

Definiciones de educacin en derechos humanos
La misin de Amnista Internacional consiste en emprender labores de investigacin y accin destinadas a impedir y erradicar los abusos graves contra los derechos humanos y en reclamar justicia para las personas cuyos derechos hayan sido vulnerados. La organizacin, que trabaja con y para las personas en todo el mundo, hace campaa para que toda persona disfrute de todos los derechos consagrados en la Declaracin Universal de Derechos Humanos (DUDH) de 1948. En este instrumento se menciona expresamente la necesidad de la educacin en derechos humanos: La Asamblea General proclama la presente Declaracin Universal de Derechos Humanos [...] a fin de que tanto los individuos como las instituciones, inspirndose constantemente en ella, promuevan, mediante la enseanza y la educacin, el respeto a estos derechos y libertades [...] El artculo 26 de la Declaracin Universal especifica en ms detalle el contenido de la educacin: 2) La educacin tendr por objeto el pleno desarrollo de la personalidad humana y el fortalecimiento del respeto a los derechos humanos y a las libertades fundamentales; favorecer la comprensin, la tolerancia y la amistad entre todas las naciones y todos los grupos tnicos o religiosos, y promover el desarrollo de las actividades de las Naciones Unidas para el mantenimiento de la paz.
1 En su Estrategia Internacional de Educacin en Derechos Humanos, Amnista Internacional define la educacin en derechos humanos del modo siguiente:
La educacin en derechos humanos es una prctica deliberada y participativa, destinada a potenciar a los individuos, grupos y comunidades mediante la promocin de conocimientos, habilidades y actitudes coherentes con los principios de derechos humanos internacionalmente reconocidos. Como proceso a medio y largo plazo, la educacin en derechos humanos pretende desarrollar e integrar las dimensiones cognitiva, afectiva y actitudinal de las personas, incluido el pensamiento crtico, en relacin con los derechos humanos. Su objetivo es la creacin de una cultura que promueva el respeto por los derechos humanos y la accin en la defensa y promocin de estos derechos para todos. En su Estrategia, Amnista Internacional afirma que aspira a promover la totalidad de los derechos humanos tal como estn consagrados en la Declaracin Universal, los Pactos Internacionales y otros convenios, normas y tratados adoptados internacionalmente, y que la organizacin considera la educacin en derechos humanos como una actividad bsica, por lo que pretende dirigir y llevar a cabo esta labor en todo el mundo con coherencia y planificacin. Las personas especialistas manejan habitualmente una definicin que describe este concepto como educacin sobre derechos humanos (conocer y entender normas, leyes y conceptos de derechos humanos), educacin mediante los derechos humanos (aprender y ensear de un modo respetuoso tanto hacia el personal docente como hacia el alumnado) y la educacin para los derechos humanos (empoderar a las personas para que acten con el fin de ejercer sus derechos o en nombre de los derechos de terceros).
Importancia de la educacin en derechos humanos para Amnista Internacional

La educacin en derechos humanos ha sido reconocida como un aspecto importante del esfuerzo de Amnista Internacional por construir una cultura de respeto a los derechos humanos y por impedir que se vulneren. A lo largo de los aos, la educacin en derechos humanos ha surgido en diversos documentos de estrategia internacional de la organizacin. En documentos recientes de Amnista Internacional ha aumentado la importancia de la educacin en derechos humanos. Se hace mencin expresa a ella en la Declaracin de Prioridades Globales para 2010
y 20112 en relacin con su funcin transversal en la promocin de la participacin activa y con la campaa Exige Dignidad. Con independencia de estas referencias formales, resulta evidente que la educacin en derechos humanos es vital para lograr el enfoque de reduccin de la pobreza basado en los derechos que Amnista 3 Internacional considera prioritario en su Plan Estratgico Integrado (PEI) 2010-2016. El enfoque basado en los derechos aboga, por un lado, por empoderar a las personas titulares de los derechos para que los reclamen y, por otro, por que las garantes de derechos cumplan sus obligaciones. La educacin, la formacin y la sensibilizacin son componentes necesarios de tal fomento de las capacidades. La educacin en derechos humanos tambin puede verse como un pilar bsico de otras metas del PEI, como hacer crecer y desarrollar el movimiento global de derechos humanos; promover la participacin activa de la membresa y personas simpatizantes de Amnista Internacional, e invertir en voluntariado, personal, lderes y sistemas. En pocas palabras: la educacin en derechos humanos es indispensable para Amnista Internacional.
Prctica de la educacin en derechos humanos dentro de Amnista Internacional

VALOR INTRNSECO E INSTRUMENTAL DE LA EDUCACIN EN DERECHOS HUMANOS Tal como se ha materializado en Amnista Internacional, la educacin en derechos humanos tiene un valor intrnseco e instrumental. Involucrando a quienes hacen parte de la membresa, del voluntariado, a quienes son titulares de derechos u otras formas de participacin en Amnista Internacional, se percibe como intrnsecamente valiosa por cuanto sensibiliza y fomenta las capacidades a la hora de promover una cultura de derechos humanos. Los proyectos de educacin en derechos humanos de Amnista Internacional, que trabajan con escuelas y comunidades locales, han sensibilizado eficazmente sobre los derechos humanos y han inspirado iniciativas destinadas a lograr cambios sociales y en las polticas pblicas. Asimismo, la educacin en derechos humanos dentro de Amnista Internacional es crucial en la medida en que abre un camino para expandir y reforzar las relaciones de la organizacin con su membresa y socios, lo cual permite al movimiento emprender acciones de campaa y movilizacin. Para Amnista Internacional, estos valores no son mutuamente excluyentes. ABANICO DE PROGRAMAS DE EDUCACIN EN DERECHOS HUMANOS A lo largo de los aos, las Secciones y Estructuras han llevado a cabo diversos programas de educacin, formacin y sensibilizacin. Los programas educativos a ms largo plazo destinados a fomentar un compromiso hondo en cuestiones de derechos humanos y un aprendizaje transformacional han tenido lugar principalmente en la esfera de la enseanza reglada, pero tambin en el mbito del aprendizaje informal, que ha incluido trabajo con grupos comunitarios y sectores vulnerables de la poblacin. Amnista Internacional ha llevado a cabo programas de formacin a corto y largo plazo de grupos profesionales, como la polica y el profesorado, con la intencin de promover la integracin de los valores de derechos humanos en su trabajo. La organizacin tambin ha realizado labores de desarrollo profesional interno en relacin con actividades educativas y formativas asociadas al trabajo de campaa. Asimismo, tanto el Secretariado Internacional como las Secciones y las Estructuras han elaborado diversos recursos educativos. Por ejemplo, gran parte del trabajo de la organizacin en campaas pblicas de educacin en donde intervienen los medios de comunicacin se pueden calificar de iniciativas de sensibilizacin. Estas diferencias en los programas son un rasgo del mbito general de la educacin en derechos humanos, que posee una diversidad de enfoques. A los efectos de este manual, se har referencia a todas estas prcticas de forma colectiva como educacin en derechos humanos. Sin embargo, habr que tener en cuenta las distintas metas y caractersticas de estos programas cuando se prepare el plan de monitoreo y evaluacin.
Importancia de evaluar la educacin en derechos humanos para Amnista Internacional

No es de extraar que, debido a la expansin de las prcticas de educacin en derechos humanos dentro de Amnista Internacional y a su creciente reconocimiento como pilar bsico del Plan Estratgico Integrado 2010-2016, hayan aumentado las exigencias de someter estos programas a un monitoreo y una evaluacin adecuados. La evaluacin debe llevarse a cabo para obligarnos a nosotros mismos a rendir cuentas ante las personas titulares de derechos y los donantes, e internamente, ante el movimiento y las metas y valores de los programas; para aprender y mejorar, y para abogar por la educacin de derechos humanos dentro de Amnista Internacional y externamente.4 Los procesos de monitoreo, evaluacin y valoracin del impacto en el seno de Amnista Internacional deben reflejar en s mismos los valores basados en los derechos, es decir, deben ser participativos, inclusivos y transparentes.
Por lo general, el monitoreo y la evaluacin facilita un proceso educativo y de empoderamiento que hace partcipes a las personas titulares de derechos y a otras partes interesadas; ayuda a mantener la rendicin de cuentas ante las partes interesadas; fomenta una cultura de aprendizaje; sirve de mecanismo de control de calidad; promueve una planificacin ms dirigida e informada; contribuye a dar relevancia al trabajo de educacin en derechos humanos, dentro de Amnista Internacional y, potencialmente, con actores externos; sistematiza la documentacin; institucionaliza la reflexin propia; y crea oportunidades de comunicacin entre colegas y en el seno de la organizacin. Dicho de otro modo, una evaluacin bien hecha de nuestras actividades de educacin en derechos humanos nos ayudar de mltiples formas.
PRINCIPIOS Y TRMINOS CLAVE

Principios del monitoreo y la evaluacin en el trabajo realizado en educacin en derechos humanos
Al igual que ocurre con todas las prcticas de planificacin basadas en los derechos humanos, el monitoreo y la evaluacin pueden regirse por diversos principios que nos ayudarn a mantener el factor humano en un lugar central de nuestro trabajo. 1. Nuestra labor de evaluacin debe caracterizarse por la participacin, el empoderamiento y la mxima transparencia posible, y promover el sentido de pertenencia y la inversin en la planificacin de una educacin de calidad en derechos humanos. Dicho de otro modo, los procesos importan tanto como el resultado. El ingrediente principal para organizar estos procesos es la participacin de las partes interesadas. Al disear una planificacin de educacin en derechos humanos y al elaborar el correspondiente plan de monitoreo, evaluacin y valoracin del impacto, tenemos que involucrar a las partes interesadas en los programas. No podemos asumir que sabemos cules son las prioridades ajenas de educacin en derechos humanos. Las actividades de educacin en derechos humanos deben reflejar no slo nuestra propia capacidad interna y nuestras estrategias de cara a las personas y al movimiento, sino tambin las verdaderas necesidades de las personas con las que trabajamos. El enfoque participativo nos ayudar a garantizar que se comparte el sentido de pertenencia a la planificacin y que se lleva a cabo una planificacin de un programa previsiblemente eficaz. Para iniciar un proceso participativo con las partes interesadas, posiblemente sea necesario facilitar conversaciones que no hemos mantenido en el pasado. Se podr reunir a grupos de discusin formados por potenciales partes interesadas para que pongan en comn sus pareceres sobre una nueva campaa y para que manifiesten sus propias necesidades y prioridades. Estos grupos sern los ms directamente afectados por el trabajo de educacin en derechos humanos de Amnista Internacional, por ejemplo profesorado y alumnado o dirigentes de ONG. La membresa podra trabajar con Amnista Internacional concibiendo actividades pertinentes de educacin en derechos humanos que no slo seran beneficiosas para una campaa concreta, sino que adems contribuiran a una educacin en derechos humanos a largo plazo y al fomento de las capacidades de la Seccin o de la Estructura. Asimismo, estos grupos pueden formular observaciones sobre los instrumentos que se usan para la recopilacin de datos, con el fin de asegurarse de que son sencillos y agradables de usar. Tras una consulta un poco ms amplia en la fase de planificacin de un programa de educacin en derechos humanos, podra organizarse un grupo asesor o de partes interesadas ms pequeo para que sirva de rgano participativo y consultivo durante el ciclo de vida del proyecto. Este grupo podr aportar ideas al diseo del plan de monitoreo y evaluacin, trabajar con los responsables en la revisin de los resultados intermedios y promover la vinculacin activa de las personas participantes (personal docente y alumnado) en los procesos de evaluacin.
DIAGRAMA 1 PROCESOS PARTICIPATIVOS DENTRO DEL CICLO DE PLANIFICACIN DEL PROYECTO
Amplia consulta: debates en grupos de discusin con las partes interesadas primarias sobre la planificacin del proyecto
Consulta continuada: el grupo asesor de partes interesadas aconseja sobre los procesos de la planificacin, incluidos el seguimiento y la evaluacin
Aprender y compartir: reflexin crtica y divulgacin de los resultados del proyecto con las partes interesadas
Otro efecto positivo de involucrar a personas no especialistas en la planificacin es que ello nos ayudar a hacer evaluaciones pertinentes y comprensibles y, por tanto, potencialmente ms tiles. Hay que tener en cuenta que, para facilitar la implicacin de las personas participantes y otras partes interesadas en los procesos de evaluacin, tal vez sea necesario proporcionar a las personas las herramientas necesarias. Este manual podr ser un recurso til para este fin. 2. Nuestras evaluaciones deben disearse para fundamentar el aprendizaje y mejorar la planificacin. Tal vez esto parezca obvio, pero, de hecho, tiene varias consecuencias prcticas. Una de las consecuencias es que desearemos entender los procesos de cambio, no slo los resultados. A consecuencia de ello, insistiremos en las preguntas por qu? y cmo? cuando examinemos nuestro propio trabajo. Otra consecuencia es que debemos estar dispuestos a hacer preguntas que tal vez saquen a relucir los defectos de nuestros programas que, de otro modo, no saldran a la luz. Por ejemplo, a menudo, cuando llevamos a cabo una actividad de formacin, al final del evento distribuimos una encuesta que suele arrojar resultados muy positivos. Qu ocurrira si distribuyramos la encuesta transcurridos seis meses desde el final del curso de formacin? Qu descubriramos respecto a lo que el alumnado ha retenido? Si los resultados no son los que esperbamos, averiguarlo nos ayudar a reflexionar sobre cmo redisear las actividades de formacin tanto en el contenido como en el formato para que los resultados de la evaluacin se ajusten mejor a los resultados que pretendamos alcanzar.
Amnesty International
Amnista Internacional
Por ltimo, tendremos que abordar la planificacin de forma reflexiva y flexible. Hemos de comprometernos personalmente a mejorar de forma continuada la calidad de nuestro trabajo, incluso a riesgo de tener que reconocer en ocasiones que nos equivocamos. Esto no siempre es fcil porque queremos que nuestros programas se perciban como un xito (por supuesto) y el fracaso de dichos programas puede dejarnos en mal lugar.
Sin embargo, cuantas ms consultas y planificacin estratgica tengan lugar al empezar a elaborar el programa, ms posibilidades habr de que la planificacin est realizada adecuadamente. Documentar estos procesos de planificacin estratgica nos ayudar tambin a entender qu circunstancias han podido contribuir a que nuestro trabajo de educacin en derechos humanos haya sido menos eficaz de lo previsto. En cualquier caso, nuestra mxima prioridad seguir siendo la promocin del movimiento de derechos humanos. Para estar en mejor situacin de alcanzar este objetivo, nuestros programas debern sufrir un proceso constante de adaptacin. 3. La profesionalidad es un principio definitivo del monitoreo y la evaluacin. Queremos que nuestras actividades de evaluacin nos proporcionen respuestas fiables a las preguntas relacionadas con los resultados de los programas de educacin en derechos humanos. Esto significa que, a partir de los recursos materiales y humanos a nuestra disposicin, debemos organizar nuestras evaluaciones de la manera ms sistemtica y rigurosa posible y conforme a las normas de conducta establecidas.5 Estas normas se aplicarn a la prctica en el apartado Preparacin del plan de monitoreo y evaluacin.
Conceptos y terminologa referidos a la evaluacin

Quienes ya hayan emprendido actividades de monitoreo y evaluacin posiblemente no tengan que revisar la lista de los principales conceptos y trminos sobre evaluacin que presentamos infra. En este manual aplicaremos a la prctica las definiciones que ofrecemos a continuacin; la mayora de ellas se han extrado de un documento distribuido por Amnista Internacional en noviembre de 2006 que se titula Evaluacin del trabajo de educacin en derechos humanos dentro del Secretariado Internacional y del movimiento.
QU ACTIVIDADES PODEMOS EMPRENDER PARA VALORAR NUESTRO PROGRESO?

Monitoreo es la recopilacin regular y metdica de informacin para comparar el rendimiento de un proyecto con los objetivos, el presupuesto y el programa de trabajo declarados. Por lo general tiene que ver con recursos, actividades y productos, y es parte esencial de la aplicacin del proyecto. La informacin reunida de manera ininterrumpida se utilizar tambin para informar, evaluar y valorar el impacto. Evaluacin es la valoracin sistemtica y analtica de un proyecto o programa, en curso o ya concluido, para determinar su pertinencia, eficacia y sostenibilidad. Incorpora lecciones aprendidas y recomendaciones. Se distingue del monitoreo en que no es una labor continua sino peridica, y en que conlleva un juicio crtico. As pues, mide la efectividad, el rendimiento de los recursos y los resultados del proyecto o programa. La evaluacin formativa tiene por objeto mejorar la planificacin y se emprende cuando el programa an est en fase de elaboracin o de implementacin. La informacin obtenida mediante la evaluacin formativa se utiliza para hacer cambios antes de que termine el proyecto con el fin de aumentar su efectividad. La evaluacin sumativa se lleva a cabo una vez concluido el proyecto o programa. Hay dos clases habituales de evaluacin sumativa: la evaluacin de resultados y la valoracin del impacto. La evaluacin de resultados compara los resultados de un programa o proyecto con los objetivos fijados. Valoracin del impacto es el anlisis sistemtico de los cambios duraderos o significativos ya sean positivos o negativos, intencionados/previstos o inesperados en la vida o el entorno de las personas participantes en el proyecto o programa. Por tanto, el impacto se refiere a algo ms que los productos inmediatos previstos o, incluso, los resultados. Se refiere a las consecuencias acumulativas del proyecto o programa para el mundo exterior a medio y largo plazo. No tiene que limitarse a juzgar el rendimiento en el pasado, sino que puede servir tambin para pronosticar resultados futuros en funcin de las diferentes opciones o situaciones posibles. La valoracin del impacto debe incorporarse desde el principio al diseo del proyecto junto con la aplicacin de un sistema adecuado de monitoreo.
10
QU DEBEMOS MEDIR?
Productos son las actividades o las herramientas concretas y cuantificables que se realizan en un determinado proyecto o programa. Por lo general, los productos no reflejan los objetivos ltimos de un proyecto, sino que son ms bien los medios para alcanzar un objetivo. Por ejemplo, la planificacin de educacin de derechos humanos puede incluir la organizacin de sesiones de formacin (productos), pero el resultado que se persigue es fomentar el aprendizaje de derechos humanos y la capacidad de accin (resultados). Resultados son los efectos de la planificacin que se pone en marcha. En el nivel ms inmediato, los resultados sern los beneficios y cambios que afecten a las personas participantes o a las partes interesadas primarias. El documento de planificacin de un programa suele incluir una lista de resultados previstos, que pueden ocurrir en mbitos muy diversos, como el de la persona, la organizacin, la comunidad o la sociedad. Por lo general, los resultados son ms difciles de medir que los productos, ya que a menudo son menos tangibles y deben articularse desde el punto de vista del participante. En la evaluacin de un programa, los resultados que se miden suelen ser de corto (menos de un ao) o medio plazo (uno a tres aos). Lo importante es que la evaluacin va ms all de las aportaciones, las actividades y los productos, y examina los resultados reales. Impacto es el resultado que persiste, duradero y significativo. Las evaluaciones o valoraciones de impacto tienen unas normas metodolgicas ms estrictas que las evaluaciones de programa. En el contexto de los programas de educacin en derechos humanos de Amnista Internacional, buscaramos indicios de que nuestros esfuerzos han contribuido a poner en marcha los procesos de cambio que generan el impacto que hemos documentado. Sin embargo, no tienen por qu ser la nica causa de los resultados que detectamos.
QU PODEMOS USAR PARA MEDIR?

Las herramientas y metodologas se refieren a todo lo que se emplea para emprender tareas de monitoreo, evaluacin o valoracin del impacto. Por ejemplo, los exmenes previos y posteriores a las sesiones de formacin son herramientas destinadas a valorar la adquisicin de conocimiento y el cambio de actitud. Hacer una valoracin inicial sera un mtodo para determinar el estado actual, a partir del cual pueden elaborarse indicadores de xito. Dicho de otro modo, teniendo en cuenta que partimos de este punto, hemos de averiguar adnde queremos llegar y cmo vamos a medir ese recorrido. Por tanto, la metodologa es un conjunto de mtodos, as como la filosofa que subyace a la seleccin y el uso de dichos mtodos. De este modo, las herramientas y metodologas de educacin en derechos humanos son los elementos que se emplean para hacer el monitoreo, la evaluacin y la valoracin del impacto de las actividades formativas en este mbito.
11
EJEMPLO DE CASO 1 INCORPORACIN DEL MONITOREO Y LA EVALUACIN A UN PROGRAMA DE FORMACIN DE FORMADORES
Una Seccin de Amnista Internacional est llevando a cabo una formacin de formadores sobre educacin en derechos humanos dirigida a membresa y voluntariado interesado con el fin de que puedan actuar de multiplicadores en ONG y escuelas de la zona. La sesin de formacin consistir en tres fines de semana de cursos en un periodo de seis meses. Una vez concluida la segunda sesin de formacin, las personas asistentes debern elaborar su propio plan de accin destinado a llevar a la prctica la educacin en derechos humanos, que se pondr en marcha durante el ao siguiente. El programa de formacin de formadores se cre como resultado de un proceso consultivo con membresa y voluntariado de Amnista Internacional que expresaron inters por asumir un compromiso ms profundo con la educacin en derechos humanos. La formacin forma parte de un programa ms amplio dirigido a promover ms educacin en derechos humanos (en general), potenciar la participacin de la membresa y el voluntariado de la organizacin en el movimiento, expandir la red y membresa de Amnista Internacional y aumentar la participacin en las acciones. El equipo de proyecto de Amnista Internacional ha hecho un esquema de las principales actividades de formacin de formadores y ha elaborado un plan de monitoreo. ste aborda la puesta en marcha de las principales actividades (productos) tal como se han planificado, concretamente las tres sesiones de formacin de formadores y el desarrollo de planes de accin sobre educacin en derechos humanos para cada una de las personas asistentes. El personal de Amnista Internacional se encargar informalmente del monitoreo, que valorar cun oportunas son las sesiones de formacin y prestar atencin a la seleccin del personal encargado de la formacin y del alumnado, a las caractersticas de ste, a su participacin en las tres sesiones de formacin, a los presupuestos y a otros detalles operativos. El equipo de proyecto tambin ha elaborado un plan de evaluacin que contiene elementos formativos y sumativos. En el mbito de la evaluacin formativa, el equipo se asegurar de que varias personas diferentes revisan el borrador del programa de trabajo de la primera sesin de formacin antes de ste sea definitivo. Se distribuirn encuestas a las personas asistentes antes de la sesin de formacin para determinar cules son sus necesidades y expectativas personales y para calcular sus conocimientos previos de derechos humanos, sus habilidades de facilitacin, su grado de confianza a la hora de emprender actividades de educacin en derechos humanos y su motivacin para hacerlo. Al trmino del primer fin de semana de curso se distribuirn las mismas encuestas (herramientas), que adems pedirn otras opiniones sobre los pormenores de la formacin. Los resultados de este primer grupo de encuestas anteriores y posteriores a la sesin de formacin, as como las observaciones del personal encargado de la formacin de Amnista Internacional sobre el funcionamiento del primer fin de semana de curso, forman el primer conjunto de datos para la evaluacin formativa. A partir de esta recopilacin formal e informal de datos, se harn ajustes a la segunda sesin de formacin. Este ciclo de recopilacin de datos se repetir en la segunda y tercera sesiones de formacin. Despus de la segunda, la evaluacin formativa incorporar el plan de accin preparado por cada alumno/a, del cual se har un monitoreo en la ltima sesin. Una vez concluida la ltima sesin de formacin, el equipo de Amnista Internacional prev llevar a cabo una evaluacin sumativa. Para ello, utilizar los datos de monitoreo que ha estado recopilando en torno a la aplicacin del programa, as como los datos de la evaluacin formativa asociados a cada sesin de formacin. El equipo distribuir una encuesta de monitoreo transcurridos seis meses desde el final de la ltima sesin de formacin para averiguar cmo sigue el alumnado percibiendo los efectos que ha tenido el programa en sus conocimientos, habilidades y conductas, as como en la aplicacin de sus planes de accin. Asimismo, el equipo podr realizar entrevistas, emprender tareas de observacin y hablar con las personas que conocen bien la labor educativa de la membresa y el voluntariado de Amnista Internacional que ha recibido formacin, con el fin de buscar los resultados en su entorno. En la evaluacin sumativa, el equipo de Amnista Internacional tambin investigar si hay algn aumento de la membresa o de la participacin en acciones relacionado con las personas asistentes a estos cursos de formacin de formadores.
12
Si esta Seccin de Amnista Internacional mantiene durante varios aos el programa de formacin de formadores y prev que su tamao y calidad tendr un impacto duradero en las personas asistentes y en sus comunidades, podr darse una evaluacin del impacto. sta se basara en los datos de monitoreo y evaluacin recopilados hasta el momento, que ya incorporan los datos de la valoracin inicial. Por tanto, los datos de la evaluacin del impacto examinaran detenidamente a las personas asistentes al programa de formacin para determinar si se han producido cambios duraderos y significativos (impacto) en ellos y en las personas en cuyas vidas influyen mediante la educacin en derechos humanos. En la evaluacin del impacto tambin se podrn buscar otros tipos de cambios generados por el programa de formacin a largo plazo, como los relacionados con la membresa y la movilizacin en el seno de la propia Amnista Internacional. Como ilustra este caso de estudio, los procesos de monitoreo, evaluacin y valoracin del impacto estn estrechamente relacionados entre s. Los datos de la evaluacin del impacto se basan en el trabajo previo de monitoreo y evaluacin, de igual modo que la evaluacin se fundamenta en los datos del monitoreo. Debemos empezar a prever todos estos elementos ya en la etapa de diseo del programa y en nuestros planes iniciales de monitoreo y evaluacin. Este aspecto se tratar infra en el apartado Preparacin del plan de monitoreo y evaluacin.
13
LA LGICA DEL CAMBIO

Los proyectos son catalizadores del cambio
Los proyectos son iniciativas que emprende Amnista Internacional para generar un cambio positivo, ya sea en el trabajo de derechos humanos o en otros mbitos relacionados con el crecimiento organizativo, el desarrollo del personal o cuestiones similares. Cada vez que creamos el marco de un proyecto, en realidad estamos construyendo un modelo de cambio para nuestro trabajo: es lo que hacemos cuando, en las etapas de definicin del marco del proyecto, concretamos de forma explcita nuestras ideas sobre cmo ocurre el cambio (a partir de premisas bien fundadas) y cuando delimitamos dentro del proyecto aquello que queremos lograr. Este apartado presenta diversas maneras de reflexionar sobre los procesos de cambio en nuestros proyectos de educacin en derechos humanos. Las premisas que barajamos sobre estos procesos de cambio se reflejarn en los planes de monitoreo, evaluacin y valoracin del impacto, que se exponen en la seccin 2 de este manual.
Qu cadena de acontecimientos producir los resultados que deseamos?

Uno de los muchos beneficios de las tareas de monitoreo y evaluacin es que obligan a los planificadores de los programas a reflexionar no slo sobre los resultados previstos de un proyecto y sobre cmo se podrn manifestar dichos resultados, sino tambin sobre la cadena concreta de acontecimientos que pueden generarlos. Por supuesto, no siempre podemos anticipar todos los resultados de nuestra planificacin, ni todos los resultados que veamos se pueden atribuir necesaria o exclusivamente a nuestro trabajo de educacin en derechos humanos. Sin embargo, cuando llevamos a cabo nuestra planificacin, ya albergamos algunas ideas sobre causa y efecto, que inevitablemente guiarn nuestras decisiones. En el mbito de la evaluacin existen numerosas maneras de modelar o representar esta lgica del cambio. Cuando preparamos nuestro plan de monitoreo o evaluacin, tal vez queramos utilizar una o varias de estas modalidades para ayudar a explicitar lo que podran ser creencias implcitas sobre la planificacin de educacin en derechos humanos y sus resultados potenciales. En este manual se presentan cinco modelos, que se abordarn en la seccin 3. DIMENSIONES DEL CAMBIO DE AMNISTA INTERNACIONAL: REAS DE IMPACTO POTENCIAL Amnista Internacional ha articulado cuatro dimensiones del cambio para poder clasificar los diversos mbitos en los que se espera que se produzcan transformaciones como consecuencia de los programas y proyectos. El propsito de estas dimensiones del cambio no es fijar objetivos o dirigir actividades, sino ayudar a analizar el impacto positivo (o negativo) en las personas a las que afecta el trabajo de Amnista Internacional, especialmente en las partes interesadas primarias, es decir, las personas o los grupos que se supone salen beneficiados del 6 proyecto en cuestin.
La principal dimensin del cambio prevista en este marco es cambios en la vida de las personas. Lograr mejoras en la vida de partes interesadas primarias especficas es uno de los objetivos bsicos de Amnista Internacional y de cada uno de sus proyectos y campaas. Las personas, que estn en el centro de nuestro trabajo, no son pasivas en el proceso de cambio. Amnista Internacional aspira a reconocer la participacin activa de estas personas como factor crtico en el proceso de cambio y sita sus propias intervenciones conforme a esta conviccin.
14
APRENDER DE LA EXPERIENCIA MANUAL DE MONITOREO Y EVALUACIN DEL TRABAJO Am REALIZADO EN EDUCACIN EN DERECHOS HUMANOS nes ndice: POL 32/009/2010 ty
Inte rnat ion al
Aunque todas las intervenciones de Amnista Internacional estn destinadas en ltimo trmino a lograr el cambio para las personas, no todas se dirigen directamente a ellas. Gran parte del trabajo de la organizacin pretende ejercer influencia sobre las acciones de quienes tienen poder para actuar de un modo que afecta a la vida de esas personas o para cambiar el entorno jurdico o social que repercute en la vida de las partes interesadas primarias. Este manual contiene el documento sobre las dimensiones del cambio elaborado por el Secretariado Internacional de Amnista Internacional para su uso en todo el movimiento. Cuando pensamos en actividades de educacin en derechos humanos, podemos imaginar los resultados potenciales en las cuatro dimensiones del cambio, dependiendo de las metas especficas y del mbito de aplicacin del programa en cuestin. Como ya se ha mencionado anteriormente en esta seccin, la Declaracin de Prioridades Globales para 2010 y 2011 ya considera importante la educacin en derechos humanos en relacin con las metas de participacin activa y la campaa Exige Dignidad. En el marco ms amplio del PEI 2010-2016 encontramos estas metas, as como las de desarrollar el movimiento global de derechos humanos e invertir en voluntariado, personal, lderes y sistemas. La valoracin del impacto de la planificacin de educacin en derechos humanos debe tener en cuenta estas dimensiones del cambio. DIAGRAMA 2 DIMENSIONES DEL CAMBIO DE AMNISTA INTERNACIONAL
Fuente: Amnista Internacional, Las dimensiones del cambio de AI (ndice: POL 50/010/2008)
Cambios en el activismo y la movilizacin
DOS
UNO Cambios en la vida de las personas TRES Cambios en las polticas CUATRO Cambios en la rendicin de cuentas
ANLISIS DE LA CADENA CAUSAL: PLASMAR EN UN DIAGRAMA EL CAMBIO QUE DEBE GENERAR LA PLANIFICACIN DE EDUCACIN EN DERECHOS HUMANOS Una forma sencilla de reflexionar sobre causa y efecto es elaborar un diagrama sobre la cadena causal. Hay muchas maneras de hacer un diagrama de este tipo, pero una manera fcil de comenzar es dibujar un crculo que represente al alumno/a o a la institucin sobre los que queremos influir con nuestro programa de educacin en derechos humanos.
15
DIAGRAMA 3 EJEMPLO DE CADENA CAUSAL PARA UN CLUB ESCOLAR APORTACIONES DESTINATARIOS PRIMARIOS DESTINATARIOS SECUNDARIOS DEL CAMBIO DEL CAMBIO RESULTADOS
Talleres de profesorado Amnista Internacional Visitas del personal Recursos de aprendizaje Red EDH Boletn EDH
Profesorado que dirige los clubes
Alumnado de los clubes Otro alumnado, profesorado, personal escolar
[Lista parcial] Fomento de las capacidades del profesorado que dirige los clubes Empoderamiento del alumnado Compromiso de la comunidad con los derechos humanos Movilizacin para las acciones de Amnista Internacional
Progenitores, membresa de la comunidad
A continuacin aadiremos componentes del programa de educacin en derechos humanos (actividades, materiales, otros elementos de apoyo o intervenciones) que se usarn para influir en el alumno/a o en otro destinatario del cambio. Aunque estas actividades y elementos de apoyo figuren como aportaciones en el diagrama, se considerarn productos en el proyecto. ste es un ejemplo tpico de cmo la jerga de la evaluacin puede resultar confusa, pero hay que tener en cuenta que ahora nos estamos centrando en la cadena de acontecimientos, no en el programa de evaluacin en s. Convendr usar flechas para representar estas aportaciones. Al otro lado del destinatario del cambio utilizamos flechas para mostrar los resultados previstos. Algunos de ellos pueden ser inmediatos; otros tal vez sean resultados de resultados. La cadena causal deber reflejar la reflexin ms concienzuda posible sobre la serie de actos, desde la intervencin inicial hasta la lista de resultados potenciales. El diagrama de la cadena causal puede acabar siendo bastante complejo. Por ejemplo, tal vez decidamos incorporar otras influencias del entorno que podran explicar algunos de los resultados que hemos previsto. En una evaluacin del impacto, desearemos considerar otras explicaciones posibles de los resultados. Quizs tambin tengamos que revisar y adaptar nuestra cadena causal para que refleje las numerosas intervenciones que se irn produciendo con el paso del tiempo, o resultados de ida y vuelta (por ejemplo, alumnado que influye en la reflexin del equipo de derechos humanos del Secretariado Internacional de Amnista Internacional). Este diagrama puede adaptarse a nuestras necesidades, pero deber reflejar nuestros conocimientos ms profundos sobre las relaciones entre actores, actividades, materiales y procesos. Un ltimo recordatorio: el diagrama de la cadena causal es una herramienta de reflexin y pretende ser prctica. Nunca ser completa al cien por cien, pero debe estar suficientemente pensada para que contribuya a crear un marco de entendimiento comn sobre cmo el programa de educacin en derechos humanos lograr los efectos para los que se ha creado. MARCOS LGICOS: MATRICES PARA ORGANIZAR NUESTROS PLANES DE MONITOREO Y EVALUACIN Los marcos lgicos son matrices que, por lo general, incluyen reas de investigacin, indicadores de productos y resultados, parmetros de referencia y fuentes de verificacin. Resultan muy tiles para preparar el plan de monitoreo y evaluacin y suelen usarse en la gestin basada en resultados. Algunas veces, los datos se incorporan al marco lgico, por lo que ste se convierte en una herramienta de anlisis. Hay diferentes tipos de marcos lgicos; el diagrama 4 ofrece un ejemplo. Los marcos lgicos se derivan de las cadenas causales y pueden ilustrar las relaciones referidas a la teora del cambio entre aportaciones y productos, as como entre productos y resultados inmediatos. Estos marcos tienen un punto dbil: en ellos no se pueden tener en cuenta los complejos factores que
16
influyen en los resultados y en el impacto si stos exceden los lmites del proyecto. Adems, el marco lgico en s mismo no es una herramienta analtica destinada a demostrar la causalidad. La presentacin de los datos en un formato de marco lgico puede sugerir causalidad, pero tendra que emplearse una metodologa mucho ms rigurosa para establecer esta relacin. Por eso, la funcin bsica de un marco lgico es la de servir de herramienta de reflexin y planificacin. DIAGRAMA 4 FRAGMENTOS DE UNA MUESTRA DE DOCUMENTO DE PLANIFICACIN SOBRE VIOLENCIA DOMSTICA EN FORMATO DE MARCO LGICO
Resumen narrativo
Indicadores
Fuentes de verificacin
Riesgos/hiptesis
Meta
Reducir la violencia domstica contra las mujeres en tres provincias rurales
Disminucin de mujeres heridas o muertas a manos de sus parejas
Revisin de estadsticas de mbito provincial Revisin de estadsticas de hospitales Revisin de documentos de organizaciones de la sociedad civil, registros de organismos de servicios sociales
Las estadsticas pblicas sobre las denuncias de incidentes de violencia domstica son completas. Las estadsticas pblicas reflejan las tendencias generales en los incidentes reales de violencia domstica.
Objetivos
Mediante la educacin en derechos humanos, empoderar a las mujeres para que hagan frente a la violencia domstica Mediante la educacin en derechos humanos y las labores de promocin, empoderar a las personas garantes de derechos para que ofrezcan servicios que respondan a las denuncias de violencia domstica
Creacin y funcionamiento de grupos de apoyo a las mujeres vctimas de violencia domstica Aplicacin de polticas que aclaran las consecuencias penales de la violencia contra las mujeres
Entrevistas con grupos locales de mujeres, organizaciones de la sociedad civil Entrevistas con garantes de derechos Revisin documental de polticas gubernamentales
Las mujeres se sienten suficientemente seguras desde el punto de vista psicolgico y fsico para oponer resistencia a una situacin de violencia domstica Las personas garantes de derechos estn motivadas para comprometerse con la reduccin de la violencia contra las mujeres
Resultados esperados
Las mujeres reconocen que la violencia domstica es una violacin de derechos humanos Aumentan las denuncias de violencia domstica presentadas por mujeres Aumenta la resolucin de casos de violencia domstica por parte de mediadores locales Nmero de denuncias registradas en grupos locales de mujeres, organizaciones de la sociedad civil, organismos de servicios sociales, polica Nivel de servicios prestados por grupos locales de mujeres, organizaciones de la sociedad civil, organismos de servicios sociales y la polica a las mujeres que denuncian violencia domstica, Revisin documental de los registros de organismos Entrevistas con personal de organismos pertinentes Encuestas distribuidas a mujeres antes y despus de las sesiones de formacin, incluidas las encuestas de monitoreo enviadas a los seis meses desde el final de la formacin Entrevista con una muestra de las mujeres que Las mujeres que reciben educacin en derechos humanos estn empoderadas para denunciar incidentes de violencia domstica Los organismos ponen a disposicin del pblico sus registros sobre denuncias de violencia domstica y sobre los servicios prestados Las estadsticas gubernamentales son fiables y completas
17
Aumenta el procesamiento de parejas violentas Aumentan los servicios a mujeres que necesitan refugio
segn se indica en el nmero de casos recibidos frente al nmero de casos resueltos Nmero de casos de violencia domstica tratados en el sistema judicial
asistieron a los cursos de formacin Revisin de actas judiciales
Actividades
Educacin en derechos humanos dirigida a mujeres que incluya elementos de la presentacin de denuncias, negociacin y labores de promocin Educacin en derechos humanos dirigida a grupos y garantes de derechos responsables de defender los derechos de las mujeres Campaa pblica que abogue por combatir la violencia contra las mujeres Nmero de cursos de formacin, participantes y horas presenciales Calidad de la formacin a la hora de hacer aportaciones a los objetivos de los proyectos Nmero de personas a las que se ha llegado mediante la campaa de sensibilizacin Registros de los programas de Amnista Internacional
Encuestas distribuidas a las personas participantes despus de las sesiones de formacin Nmero de asistentes a actos de sensibilizacin, nmero de firmas en campaas de peticin Apoyo de personajes pblicos muy conocidos
MODELO KIRKPATRICK DE LOS CUATRO NIVELES: CAMBIO MEDIANTE LA FORMACIN El modelo Kirkpatrick de cuatro niveles,7 que se suele usar en la evaluacin de cursos de formacin, identifica cuatro niveles de resultados: Reaccin del alumnado: qu pensaron y qu impresin les dio la formacin Aprendizaje: aumento de los conocimientos o de las capacidades como resultado de la formacin Conducta/transferencia: grado o alcance de la mejora en la conducta y en la capacidad de implementacin o aplicacin Resultados: efectos sobre el trabajo en el mbito ms amplio de la comunidad, derivados de las acciones del alumno/a.
El modelo Kirkpatrick propone una forma de aplicar la cadena causal al contexto especfico de un programa de formacin. En la seccin 3 de este manual se ofrecen ejemplos de cmo medir estos niveles de resultados. MAPEO DE ALCANCES: TRAYECTORIA DEL CAMBIO EN LA PLANIFICACIN DE EDUCACIN EN DERECHOS HUMANOS SOBRE EL FOMENTO DE LAS CAPACIDADES El mapeo de alcances tiene por objeto reconocer la complejidad de los procesos de cambio en relacin con metas a largo plazo, para lo cual presta especial atencin a la trayectoria del cambio, en vez de identificar indicadores de cambio al comienzo de la planificacin. Es un enfoque de evaluacin empleado con los socios en la planificacin del fomento de las capacidades. Los indicadores del trabajo de los socios se pueden crear a medida que se desarrolla el proyecto, y la labor de Amnista Internacional se percibir como una contribucin, ms que como la nica causa de los resultados observados. El mapeo de alcances puede incorporarse a los marcos lgicos de los proyectos de Amnista Internacional que traten sobre el fomento de la capacidad organizativa.
18
Cuanto mayor sea el compromiso adquirido en la planificacin de la educacin en derechos humanos, ms fcil ser reconocer los numerosos tipos de resultados positivos que pueden derivarse de tal planificacin. Si volvemos al diagrama de la cadena causal, tal vez ya nos hayamos dado cuenta de que no slo nuestra planificacin de educacin en derechos humanos influir potencialmente en el alumnado e instituciones de diversa ndole (como Amnista Internacional), sino que, con el tiempo, posiblemente se den varias dimensiones del cambio. Por ello, trabajamos en un entorno complejo con mltiples destinatarios del cambio, mltiples aportaciones y, transcurrido el tiempo, muchas posibilidades de causar impacto.
19
EVALUACIN DENTRO DEL MARCO DE PROYECTO
SECCIN 2 MONITOREO Y
20
INTRODUCCIN
En esta seccin presentamos un proceso paso a paso para integrar el monitoreo y la evaluacin en la planificacin de nuestro proyecto.
Pasos clave
Paso 1 Ponerse en marcha Paso 2 Incorporar el monitoreo y la evaluacin a nuestra propuesta de proyecto Paso 3 Recopilar datos de partida durante la fase de elaboracin del proyecto Paso 4 Establecer las metas y los objetivos del proyecto Paso 5 Determinar las actividades y los procesos del proyecto Paso 6 Concebir enfoques para la recopilacin inicial de datos Paso 7 Presupuestar el monitoreo, la evaluacin y la valoracin del impacto Paso 8 Organizar un proceso consultivo participativo Paso 9 Aclarar las premisas relativas a los procesos de cambio Paso 10 Identificar las actividades que se sometern a monitoreo y evaluacin Paso 11 Identificar los resultados que se sometern a evaluacin Paso 12 Crear los indicadores destinados a capturar los resultados Paso 13 Establecer los mtodos de recopilacin de datos Paso 14 Decidir quin llevar a cabo las actividades de monitoreo y evaluacin Paso 15 Determinar cules son las tareas tcnicas de monitoreo y evaluacin Paso 16 Elaborar un plan de trabajo para el monitoreo y la evaluacin Paso 17 Pensar detenidamente cmo informaremos del monitoreo y la evaluacin Paso 18 Anticipar la valoracin del impacto
Procesos clave
EL MONITOREO Y LA EVALUACIN COMO PARTE DE NUESTROS PROCESOS CRTICOS DE REFLEXIN El monitoreo y la evaluacin son parte integral de la planificacin y la implementacin de los proyectos. Las tareas de monitoreo y evaluacin surgirn en cuanto empecemos a conceptualizar el proyecto y nos acompaarn en todas las etapas del ciclo del proyecto, incluso en la valoracin del impacto que organicemos una vez terminadas las actividades. Podramos ver las tareas de monitoreo y evaluacin como el amigo crtico de nuestro trabajo. Los procesos de reflexin que requiere la evaluacin ayudarn a Amnista Internacional y a otras partes interesadas a entender si nuestras iniciativas de educacin en derechos humanos se estn llevando a cabo como se haban planificado y, en ese caso, de qu modo; a mejorar esas actividades durante su transcurso, y finalmente a hacer balance de en qu medida fuimos capaces de generar cambios en la vida de las personas, las polticas, el activismo y la rendicin de cuentas.
21
EL MONITOREO Y LA EVALUACIN COMO PARTE DE NUESTROS PROCESOS DE PLANIFICACIN En esta seccin abordamos el monitoreo y la evaluacin como componentes integrados del ciclo del proyecto. Se presentan las principales decisiones y actividades relativas al monitoreo y la evaluacin para las fases de diseo y planificacin, implementacin, comunicacin y mejora del proyecto. Sera importante familiarizarse de antemano con el ciclo del proyecto, ya que esta seccin no ofrece un panorama exhaustivo de todos los pasos que deben darse en la elaboracin e implementacin de proyectos. Amnista Internacional cuenta con un recurso de consulta muy til en este aspecto, que se titula Manual 8 de gestin de Friendly Project. EL MONITOREO Y LA EVALUACIN COMO PARTE DE NUESTROS PROCESOS PARTICIPATIVOS El enfoque basado en los derechos humanos requiere la participacin genuina de las partes interesadas en decisiones y actividades de todas las etapas de la planificacin. Por lo que respecta al componente de monitoreo y evaluacin en la planificacin al igual que ocurre con otros aspectos del proyecto, las partes interesadas deben tener la oportunidad de contribuir a la conceptualizacin del monitoreo y la evaluacin, a la recopilacin de datos, a la elaboracin de conclusiones y a la formulacin de recomendaciones que puedan mejorar los resultados para las partes interesadas primarias. Estos procesos contribuyen a garantizar una planificacin de calidad y un sentido de pertenencia compartido. Las propias partes interesadas que se involucran en las tareas de monitoreo y evaluacin aprendern y se beneficiarn de la experiencia de trabajo, experimentarn empoderamiento y vern fortalecidas sus capacidades individuales y colectivas. Tales procesos son valiosos, pero es preciso dedicarles tiempo y hay que incorporarlos a todas las fases del plan de monitoreo y evaluacin.
22
INCORPORAR EL MONITOREO Y LA EVALUACIN A LA FASE DE DISEO DEL PROYECTO

Paso 1: Ponerse en marcha
ECONTRAR LA IDEA PARA CREAR UN PROYECTO DE EDUCACIN EN DERECHOS HUMANOS Las Secciones y Estructuras de Amnista Internacional disponen de diferentes mtodos para empezar a elaborar un proyecto de educacin en derechos humanos. El Secretariado Internacional puede sugerir nuevos temas, por ejemplo a travs de campaas internacionales o proyectos internacionales de educacin en derechos humanos. Tambin pueden surgir ideas para proyectos de educacin en derechos humanos cuando se detectan necesidades y oportunidades en el entorno local mediante un anlisis formal de la situacin. En la mayora de los casos, la responsabilidad principal de las actividades de derechos humanos recaer sobre un miembro del personal, que adems deber supervisar el desarrollo de nuevos proyectos en ese mbito. En la etapa inicial de la elaboracin del proyecto, esta persona concebir muy probablemente la idea para un proyecto en consulta con terceros que tengan conocimientos en esta rea, por ejemplo, con otros miembros del personal o voluntariado de la organizacin, o con un nmero reducido de partes interesadas. CONTRASTAR LA IDEA CON OTRAS PERSONAS En la medida de lo posible, lo ideal es emprender un proceso de consulta ms riguroso antes de desarrollar una propuesta de proyecto. Para ello habra que mantener debates con participantes o partes interesadas primarias, as como con un grupo ms amplio de partes interesadas. Sin embargo, si esto no es factible al principio, por ejemplo porque el tiempo apremia, podr llevarse a cabo un proceso consultivo ms modesto con partes interesadas en la fase de elaboracin del proyecto y otro ms exhaustivo durante la fase de planificacin (una vez que se ha garantizado la financiacin). No obstante, los donantes prefieren propuestas de naturaleza ms consultiva. Por eso, lo mejor es organizar una consulta de esta ndole antes de presentar una propuesta, siempre que sea posible.
Paso 2: Incorporar el monitoreo y la evaluacin a nuestra propuesta de proyecto

Las propuestas de proyectos de educacin en derechos humanos deben incluir un componente de monitoreo y evaluacin, que ha de ser bastante elaborado cuando los proyectos son amplios, duran varios aos y estn dotados de abundantes recursos. En el caso de proyectos ms pequeos, puede ser suficiente hacer solamente una breve mencin al monitoreo y la evaluacin. A continuacin presentamos un ejemplo, extrado de una solicitud interna de una Seccin de Amnista Internacional: EJEMPLO DE CASO 2 MUESTRA DE REFERENCIA A LA VALORACIN EN UNA PROPUESTA DE PROYECTO DE EDUCACIN EN DERECHOS HUMANOS El mtodo de valoracin de la Seccin consistir en: el uso de un cuestionario pertinente para cada una de las sesiones de formacin; la valoracin inmediatamente despus de cada sesin o actividad; el uso de informes de valoracin sobre el tema del programa, las personas participantes, las presentaciones y el progreso de los talleres; la valoracin a medio plazo al cabo del primer ao y medio de implementacin del proyecto, de la que se ocuparn el coordinador del proyecto y la membresa de la Red de Educacin en Derechos Humanos que participa en la puesta en marcha del proyecto; la valoracin final de todas las actividades al cabo de los tres aos del proyecto, de la que se ocuparn el coordinador y los diversos participantes en la implementacin del proyecto.
Este pasaje trata mtodos y actividades cruciales de recopilacin de datos, pero en realidad no aborda la meta del proyecto o los objetivos asociados que debern evaluarse. Esto no es un caso aislado. Sin embargo, incluso en una perspectiva general tan breve de las actividades de monitoreo y evaluacin, es posible incorporar las ideas relativas a la meta y a los objetivos que se sometern a evaluacin.
23
Por tanto, el resumen que se expone supra podra reescribirse y completarse como se muestra a continuacin: EJEMPLO DE CASO 3 MUESTRA REVISADA DE REFERENCIA A LA VALORACIN EN UNA PROPUESTA DE PROYECTO DE EDUCACIN EN DERECHOS HUMANOS El mtodo de valoracin de la Seccin consistir en: el uso de un cuestionario pertinente para cada una de las sesiones de formacin; la valoracin inmediatamente despus de cada sesin o actividad; el uso de informes de valoracin sobre el tema del programa, las personas participantes, las presentaciones y el progreso de los talleres; la valoracin a medio plazo al cabo del primer ao y medio de implementacin del proyecto, de la que se ocuparn el coordinador del proyecto y la membresa de la Red de Educacin en Derechos Humanos que participan en la puesta en marcha del proyecto; la valoracin final de todas las actividades al cabo de los tres aos del proyecto, de la que se ocuparn el coordinador y los diversos participantes en la implementacin del proyecto. La Seccin realizar un monitoreo continuado de las sesiones de formacin, una valoracin formativa a la mitad del proyecto y una evaluacin sumativa una vez concluido. Las evaluaciones intermedia y final contarn con la participacin de las principales partes interesadas, incluidos los receptores del proyecto. En las actividades de monitoreo sobre la implementacin de la formacin habr una valoracin continua e informal durante los talleres para posibilitar las correcciones sobre la marcha. Al final de los talleres tambin se distribuirn cuestionarios, que documentarn la autoevaluacin del alumnado sobre su propio aprendizaje en los mbitos de [aqu se insertarn sus objetivos] y los planes de aplicacin de las personas asistentes a los talleres. Las evaluaciones formativa y sumativa del proyecto buscarn ms indicios del empoderamiento del alumnado mediante la adquisicin de conocimientos y habilidades, de la mejora del activismo (en Amnista Internacional y en socios no gubernamentales) y de la rendicin de cuentas (de los organismos gubernamentales) en el entorno nacional.
Este ltimo prrafo tiene en cuenta los niveles de cambio que, segn Amnista Internacional, deben darse en la planificacin de educacin en derechos humanos. No es necesario que detallemos la metodologa de las evaluaciones formativa y sumativa, pero hemos de incorporar al presupuesto los costes previstos, por lo que s convendr reflexionar sobre algunos detalles, incluso aunque no figuren expresamente en el documento de la propuesta.
Paso 3: Recopilar datos de partida durante la fase de elaboracin del proyecto

ANLISIS PEST Y FODA
Al igual que cualquier proyecto o programa, los proyectos de educacin en derechos humanos de Amnista Internacional incluyen una etapa analtica. La organizacin recomienda efectuar dos anlisis en las fases de elaboracin del proyecto: el anlisis PEST y el anlisis FODA. Para cada uno de estos ejercicios se recopilarn datos de partida, algunos de los cuales se podrn incluir en la evaluacin sumativa o en la valoracin del impacto. Tal vez estos datos estn disponibles en informes secundarios, como informes de pas de Amnista Internacional o estadsticas gubernamentales. En algunos casos, podremos recabar estos datos de primera mano mediante la consulta con partes interesadas. El anlisis PEST examina las tendencias polticas, econmicas, sociales y tecnolgicas ms significativas de nuestro entorno y debe estar relacionado con los objetivos del Plan Estratgico Integrado. Estas tendencias son las condiciones en las que trabajamos y no podemos controlarlas directamente. Por tanto, probablemente no usemos estos datos en nuestra evaluacin final, pues no prevemos que nuestra planificacin afecte directamente a estas macrocondiciones. El anlisis FODA detecta las debilidades y fortalezas de Amnista Internacional y de su proyecto de educacin en derechos humanos, as como las amenazas y las oportunidades asociadas. El anlisis FODA nos incita a responder a los desafos que plantea nuestro entorno operativo.9 Algunos de los datos
24
recopilados en este ejercicio podrn usarse posteriormente cuando llevemos a cabo la evaluacin sumativa y la valoracin del impacto. Los anlisis FODA pueden realizarse de manera bastante informal, basndose en la opinin informada del personal de Amnista Internacional y de las partes interesadas. Sin embargo, hemos de recabar cuidadosamente las estadsticas relacionadas con las debilidades y las oportunidades las reas en las que es probable que incida la planificacin de modo que podamos volver a ellas ms adelante.
ANLISIS BASADO EN LOS DERECHOS HUMANOS

El enfoque basado en los derechos humanos, que complementa los anlisis FODA y PEST, consiste en: Analizar las causas subyacentes de los problemas de derechos humanos en el pas o el entorno en el que trabajamos, con el fin de detectar las violaciones de derechos humanos as como las metas a largo plazo que debemos abordar. Identificar a las personas titulares de derechos y a las garantes de derechos pertinentes al asunto o proyecto de derechos humanos en cuestin, y analizar el dficit de capacidad en la reclamacin de derechos por parte de sus titulares y en el cumplimiento de las obligaciones por parte de las personas garantes de tales derechos.10
Amnista Internacional Am nes ty Inte rnat ion al
Anlisis del dficit de capacidad: El proyecto de educacin en derechos humanos que integre un enfoque basado en los derechos concebir la planificacin como un modo de llenar las lagunas en las capacidades de las personas titulares de derechos y las garantes de derechos. En algunos casos, este anlisis nos permitir reformular los aspectos ya identificados en el anlisis FODA y vincularlos a las dimensiones de cambio que Amnista Internacional haya definido para el conjunto de su trabajo. Volviendo al ejemplo anterior, el fomento de nuestra propia capacidad interna para emprender iniciativas de educacin en derechos humanos (as como la capacidad de educacin en derechos humanos de cualquier organizacin con la que decidamos trabajar) se asocia con: Cambios a nivel individual: cambios en la vida de las personas y fomento de las capacidades de las personas titulares de derechos Cambios a nivel institucional: cambios en el activismo y la movilizacin
Anlisis de las causas subyacentes: Si realizamos un anlisis de las causas subyacentes (tipo de mtodo de resolucin de problemas destinado a identificar el origen de los problemas o incidentes) durante la fase de elaboracin de la planificacin, recopilaremos datos relacionados con el disfrute o la violacin de los derechos humanos en nuestro entorno. Si esta informacin se prepara en el mbito nacional, y nuestra planificacin de educacin en derechos humanos es de envergadura ms modesta, tal vez no sea realista que veamos cambios en las estadsticas nacionales derivados de nuestro trabajo. Sin embargo, si el anlisis de las causas subyacentes se lleva a cabo localmente o sobre un sector concreto y dirigimos nuestra planificacin en esa direccin, quizs s podamos utilizar los datos recabados en este tipo de anlisis. stas son cuestiones sobre las que se debe reflexionar cuando se realizan este tipo de ejercicios analticos. Anlisis de las partes interesadas: El mapa tctico de las personas titulares de derechos y de las garantes de derechos ha de incluir un mapeo de las partes interesadas que incorpore un anlisis del 11 inters y la autoridad. El anlisis de las personas garantes de derechos/titulares de derechos/partes interesadas detecta y valora la importancia de personas, grupos o instituciones clave que pueden influir considerablemente o verse afectados por el xito del proyecto o programa en cuestin. Esas personas, grupos u organizaciones a los que decidimos dirigir nuestro proyecto de educacin en derechos humanos sern las partes interesadas primarias. Las personas garantes y titulares de derechos en los que nuestra labor de educacin en derechos humanos influye de forma ms indirecta o no influye en absoluto, pero
25
que profesan inters por los resultados de nuestro trabajo pueden denominarse partes interesadas secundarias. Debern participar en los procesos consultivos asociados al proyecto representantes de ambos grupos. Los anlisis del dficit de capacidad de las personas titulares de derechos y garantes de derechos llevarn con toda probabilidad a la elaboracin de proyectos de educacin en derechos humanos, por lo que la recopilacin de datos durante este ejercicio ser muy pertinente para la evaluacin sumativa y la valoracin del impacto. El principal mensaje es que debe aprovecharse la oportunidad del anlisis de situacin para recabar informacin que pueda emplearse como datos de partida en la evaluacin sumativa y la valoracin del impacto.
Paso 4: Establecer las metas y los objetivos del proyecto

Debemos determinar claramente las metas y los objetivos de nuestro proyecto de educacin en derechos humanos para poder elaborar un plan de monitoreo y evaluacin centrado en los resultados, y no en la recopilacin de datos. Si se reflexiona a fondo sobre las metas y los objetivos, ser ms fcil planificar la valoracin del impacto. META DEL PROYECTO La meta de la educacin en derechos humanos es el propsito general y a largo plazo del proyecto o programa, por ejemplo, la mejora en el disfrute de los derechos humanos por parte de las personas que viven en la pobreza extrema en nuestro pas. OBJETIVOS DEL PROYECTO Los objetivos de la educacin en derechos humanos son los resultados que nos gustara alcanzar en el plazo y el presupuesto fijados de nuestro proyecto, por ejemplo, el empoderamiento de x titulares de derechos mediante la adquisicin de nuevos conocimientos sobre el contenido de los derechos humanos, la relevancia del marco de los derechos humanos a la hora de analizar problemas locales, y los mecanismos destinados a reclamar que las personas garantes de derechos cumplan sus obligaciones. Tanto la meta como los objetivos de nuestra planificacin de educacin en derechos humanos deben abordarse en la evaluacin y la valoracin del impacto. Debemos hacer referencia a estos resultados cuando describamos el plan de monitoreo y evaluacin en la propuesta de proyecto o durante la fase de diseo del proyecto. Tal vez en esta etapa an no tengamos que elaborar los indicadores de este trabajo, pero s ser necesario hacerlo cuando elaboremos el plan de monitoreo y evaluacin. Por tanto, es importante empezar a pensar sobre la precisin de la redaccin cuando establezcamos los objetivos del proyecto. Al desarrollo de objetivos de calidad se han aplicado los criterios SMART (por sus siglas en ingls): los objetivos han de ser especficos (specific), medibles (measurable), alcanzables (achievable), pertinentes (relevant) y en un plazo de tiempo predeterminado 12 (time bound). Una vez que hayamos establecido nuestros objetivos SMART, ser ms fcil identificar los indicadores asociados.
26
Paso 5: Determinar las actividades y los procesos del proyecto

PRODUCTOS Y PROCESOS DE CAMBIO Cuando diseamos los proyectos, lgicamente empezamos a identificar las actividades concretas que debern llevarse a cabo. Tambin desearemos aclarar nuestras ideas sobre los procesos de cambio que pretendemos poner en marcha con nuestra planificacin de educacin en derechos humanos. Cada actividad llevar asociados ciertos productos, que habremos de incluir en el plan de monitoreo y evaluacin. Asimismo incluiremos en el plan una evaluacin de los procesos de cambio para poder entender mejor si nuestro trabajo de educacin en derechos humanos est teniendo los resultados previstos y, en ese caso, de qu modo. Estos elementos del plan de monitoreo y evaluacin se abordan ms adelante en esta seccin.
Paso 6: Concebir enfoques para la recopilacin inicial de datos

El plan de monitoreo y evaluacin nos exige examinar con cierto detalle los enfoques sobre la recopilacin de datos, pero podemos empezar a reflexionar sobre estos aspectos en la fase de concepcin del proyecto. INVESTIGACIN CUALITATIVA Todas las evaluaciones sobre educacin en derechos humanos incorporan alguna forma de investigacin cualitativa, que incluye entrevistas, tareas de observacin y encuestas con preguntas abiertas. Esto es as porque el proceso de aprendizaje es complejo y personal, y para comprender estos procesos tenemos que entender esas experiencias desde el punto de vista de la persona que recibe la formacin. INVESTIGACIN CUANTITATIVA Las evaluaciones sobre educacin en derechos humanos tambin pueden incorporar un anlisis cuantitativo relacionado con los productos del proyecto pero tambin con la presentacin de resultados de preguntas de encuestas que pueden ser cerradas. La evaluacin ideal sobre educacin en derechos humanos utilizar una combinacin de mtodos de recopilacin de datos cualitativos y cuantitativos, teniendo en cuenta los puntos fuertes de cada enfoque. Los mtodos de recopilacin de datos se exponen con ms detalle en el paso 13. MARCOS LGICOS Muchos donantes piden que las propuestas de proyecto para financiacin contengan marcos lgicos, pues son prueba de que el proyecto est bien concebido y orientado hacia el cambio. Hemos de incluir, pues, un marco lgico sobre cules son los objetivos del proyecto y cmo pretendemos alcanzarlos, si es que resulta posible. Una vez que se ha conseguido la financiacin, podemos elaborar un plan de monitoreo y evaluacin ms detallado. Vase a continuacin el ejemplo de un marco lgico bsico que podra incluirse en una propuesta, extrado del manual de Amnista Internacional titulado Cmo recaudar millones de entidades que ofrecen 13 financiacin: DIAGRAMA 5 EJEMPLO DE MARCO LGICO EXPLICACIN
META DEL PROYECTO El propsito general del proyecto OBJETIVOS DEL PROYECTO El cambio que tratan de conseguir mediante el proyecto. Los objetivos de un proyecto deben surgir directamente de las necesidades de las personas a las que servir, y ser tangibles y mensurables
EJEMPLO
Lograr mayor autonoma sexual para las mujeres y una reduccin de la violencia sexual Poner en tela de juicio las actitudes de la comunidad y la familia sobre la sexualidad de las mujeres y el control de la sexualidad de las mujeres Aumentar las respuestas de la polica ante la violencia sexual contra las mujeres, hacer que disminuya el nmero de incidentes de violencia sexual Ofrecer formacin y talleres a dirigentes de la comunidad Organizar un seminario para activistas juveniles sobre la violencia contra las
ACTIVIDADES DEL PROYECTO
Lo que harn para conseguir los objetivos del proyecto. Explicar la metodologa a los donantes es importante: las actividades propuestas, estn ya probadas o son nuevas? Si son nuevas, cmo saben que van a funcionar?
27
PRODUCTOS DEL PROYECTO RESULTADOS DEL PROYECTO
Los productos son los resultados cuantificables de las actividades Los resultados son los cambios reales que se lograrn como resultado de sus actividades de proyecto. Pueden resultar ms difciles de medir que los productos, pues suelen ser menos tangibles y deben ser explicados desde el punto de vista del beneficiario. Los resultados pueden definirse en trminos del cambio en relacin con: personas, familias, comunidades, organizaciones. Cuando piensen sobre los resultados que pretenden lograr, tengan en cuenta qu cambios necesitarn ver para poder llegar a la siguiente conclusin: Hemos tenido xito y hemos logrado un cambio El impacto puede definirse como el cambio a largo plazo. Mientras que un resultado es un cambio resultante de los productos del proyecto, el impacto hace referencia a un cambio ms amplio, a ms largo plazo y se relaciona con la meta global. Puede resultar difcil evaluar el cambio a largo plazo en la vida de un proyecto corto.
mujeres Publicacin de un informe de investigacin; celebracin de un taller; impresin y reparto de folletos
Adopcin y aplicacin de una poltica por parte del gobierno
IMPACTO DEL PROYECTO
Las mujeres sufren menos violencia sexual
INDICADORES DE XITO DEL PROYECTO
Aumentos (por ejemplo, del nmero de personas que acceden a asesoramiento y servicios) Los indicadores de xito son una forma de determinar si el proyecto ha logrado sus resultados y si se ha producido un cambio en la vida de las personas. Los indicadores de cambio pueden medirse en funcin de: Descensos (del nmero de personas objetivo de discriminacin o violencia) Cambios de poltica (las autoridades reconocen el deseo de cambio de la ciudadana y reformulan leyes y polticas) Cambio medioambiental (mejora de la calidad del agua)
Paso 7: Presupuestar el monitoreo, la evaluacin y la valoracin del impacto

ASIGNAR ENTRE EL 5 Y EL 10 POR CIENTO DEL PRESUPUESTO AL MONITOREO Y LA EVALUACIN Una ltima cuestin de la fase de elaboracin de la propuesta es cunto pensamos invertir en las tareas de monitoreo y evaluacin, pues ello afectar al presupuesto. Por regla general, el monitoreo y la evaluacin debern suponer entre el 5 y el 10 por ciento del presupuesto del proyecto, pero el importe depender de varios factores: qu amplitud tendr la evaluacin sumativa, si est previsto contratar a un especialista externo y si se llevar a cabo una valoracin del impacto. PARTIDAS PRESUPUESTARIAS Para llevar a cabo las tareas de monitoreo y evaluacin suelen ser necesarios los siguientes recursos:
28
TABLA 1 PARTIDAS PRESUPUESTARIAS HABITUALES DEL MONITOREO Y LA EVALUACIN mano de obra; porcentaje de los gastos operativos de Amnista Internacional, como telfono, fax y correo electrnico; gastos de viaje, como transporte, alojamiento y comida cuando la recopilacin de datos se lleva a cabo en lugares distintos de la oficina de Amnista Internacional; suministros, como papel para fotocopiar encuestas o grabadoras de audio; software, en el caso de que sea necesario comprar software especial para avanzar en el anlisis; diseo e impresin de informes.
Algunos de estos gastos se incluirn en los costes directos e indirectos de la oficina de Amnista Internacional, pero otros sern nuevos y diferentes de los que suele contraer la oficina (por ejemplo el software estadstico). Si se contrata personal externo, deber asignarse una parte del presupuesto del monitoreo y la evaluacin a este y otros gastos asociados. Hay diferentes tipos de mano de obra asociada a las tareas de monitoreo y evaluacin: Tiempo de dedicacin del personal que debe incluirse en el presupuesto, como el del coordinador o gestor de proyectos de educacin en derechos humanos. La Seccin o la Estructura tal vez tenga un evaluador interno que participe en el proyecto de educacin en derechos humanos, o quizs se contrate a una persona de este perfil a jornada completa o a tiempo parcial para este proyecto en cuestin. Ciertas tareas se pueden externalizar, como introducir y analizar datos de encuestas. En ocasiones, el alumnado competente de universidades locales es un recurso adecuados para este tipo de trabajo. En algunos casos puede ocurrir que se prolongue el contrato del evaluador externo para que preste asistencia en los aspectos tcnicos de la evaluacin del proyecto o ayude a recabar informacin nueva y especializada. Adems, algunos donantes exigen la participacin de un evaluador externo en la evaluacin sumativa para reducir el riesgo de parcialidad. Sin embargo, los evaluadores externos sabrn menos sobre los entresijos del proyecto de educacin en derechos humanos, por lo que debern trabajar en estrecha colaboracin con el gestor del proyecto y el evaluador interno (si lo hay). Si est previsto contratar a un evaluador externo, este coste deber incluirse en el presupuesto de la propuesta.
29
PREPARACIN DEL PLAN DE MONITOREO Y EVALUACIN

Los prximos pasos tienen que ver con la elaboracin de un plan conceptual de monitoreo y evaluacin que muestre las relaciones entre los objetivos, productos, resultados, indicadores y fuentes de verificacin del proyecto. El ejemplo de caso 4 es un extracto de un plan completo de monitoreo y evaluacin preparado en un formato de marco lgico. En el CD-ROM del manual se han incluido dos ejemplos ms detallados de marco lgico de monitoreo y evaluacin empleados en proyectos de educacin en derechos humanos de Amnista Internacional ( Marco lgico del Programa de Educacin y Accin en Derechos Humanos (REAP)/Rights Education Action Programme (REAP) log frame y Marco lgico de la educacin en derechos humanos en frica Occidental/West Africa human rights education log frame.) EJEMPLO DE CASO 4 MARCO LGICO DE EVALUACIN Y MONITOREO PARA ASISTENTES A UN CURSO DE FORMACIN DE TRES DAS Objetivo 3: Empoderamiento reflejado en las acciones de las personas titulares de derechos, emprendidas tanto individual como socialmente, para promover los derechos humanos en las esferas pblica y privada
Productos
Resultados Las personas participantes emprenden diversas acciones para promover los derechos humanos en la esfera pblica, como expresar opiniones y llevar a cabo actividades de sensibilizacin pblica, organizar o sumarse a campaas en favor de las personas privadas de libertades o derechos, o influir en las tendencias polticas dominantes
Indicadores
Fuentes de verificacin Cuestionario distribuido seis meses despus del final de la formacin Entrevista con un grupo de discusin
Participacin en un curso de formacin de tres das
Las personas participantes organizan talleres formales, sesiones de formacin o cursos sobre derechos humanos o educacin en derechos humanos para otras personas Participacin en acciones de Amnista Internacional (actividad nueva) Participacin en la toma de decisiones de la comunidad local (actividad nueva)
El contenido bsico de los marcos lgicos son los ingredientes que vemos aqu: productos, resultados, indicadores relacionados y fuentes de verificacin. Tngase en cuenta que el producto del proyecto (la formacin) tambin puede verse como una aportacin desde la perspectiva del participante. Los resultados se agruparn de forma que reflejen las categoras o actividades del proyecto, la cronologa de los actos planificados, o las dimensiones del cambio. En tanto que gestores del proyecto de educacin en derechos humanos, podemos decidir la disposicin que prefiramos, as como cualquier otra categora de datos que queramos incluir en el marco lgico (como las premisas) en funcin de quin sea nuestro pblico y qu resulte ms til.
30
Paso 8: Organizar un proceso consultivo participativo

DIFERENTES PARTES INTERESADAS La elaboracin de un plan de monitoreo y evaluacin debe ser un proceso participativo, en el que se involucren el gestor del proyecto de educacin en derechos humanos, otros miembros del personal que pertenezcan al equipo del proyecto, y las partes interesadas primarias y secundarias. Entre las diversas partes interesadas pueden estar particulares (futuros alumnos/as y formadores clave), otras ONG u organizaciones de la sociedad civil, instituciones educativas o el gobierno. El equipo del proyecto de educacin en derechos humanos ya habr trabajado en la propuesta, probablemente en consulta con un grupo reducido de partes interesadas clave. TALLER CONSULTIVO DE UN DA DE DURACIN Una manera de resolver detalles concretos y cuestiones logsticas del proyecto en relacin con el monitoreo y la evaluacin es celebrar un proceso consultivo ms amplio, que puede tener lugar en forma de taller de un da de duracin. Esta consulta tambin ayuda a crear una cultura y un proceso de reflexin crtica para el trabajo de proyecto. Todas las cuestiones incluidas en esta seccin pueden considerarse como pertenecientes a la consulta de las partes interesadas, aunque tal vez el equipo del proyecto deba abordar los detalles prcticos en una etapa posterior. FUNCIN DEL EVALUADOR Si la Seccin o Estructura de Amnista Internacional contrata a un evaluador interno o externo para el proyecto, ste deber incorporarse al proceso en esta fase para facilitar y contribuir a la elaboracin del plan de monitoreo y evaluacin. La persona responsable de la evaluacin deber entablar relacin y trabajar con las partes interesadas en todas las etapas del ciclo del proyecto con el fin de maximizar las contribuciones de dichas partes interesadas. As, el evaluador deber tener habilidades de facilitacin, desarrollo de equipos y negociacin, entre otras. FOMENTO DE LAS CAPACIDADES DE MONITOREO Y EVALUACIN Este taller de planificacin consultiva no slo ayudar a elaborar el plan de monitoreo y evaluacin, sino que fomentar el sentido de pertenencia y el compromiso con la realizacin del plan. Tambin hemos de tener en cuenta que no todas las partes interesadas tendrn conocimientos sobre monitoreo y evaluacin. Tal vez sea proveer las herramientas necesarias y dar apoyo continuo y formacin durante el proyecto. Es responsabilidad nuestra cultivar estas capacidades en las partes interesadas, de modo que su compromiso con la planificacin del monitoreo y la evaluacin y, posteriormente, con su implementacin sean significativas y productivas. GRUPO ASESOR De este grupo amplio de partes interesadas podemos seleccionar un subgrupo de personas con las que trabajar ms estrechamente y de forma continuada en la implementacin de nuestro plan. Podrn elaborarse mandatos que establezcan cules son sus funciones y delimiten su mbito de participacin. Las partes interesadas deben tener la oportunidad de ejercer un papel significativo y productivo. Al mismo tiempo, han de estar dispuestas a dedicar el tiempo y la energa necesarios para participar de lleno en la evaluacin. Las previsiones de gasto interno debern incluir una estimacin de los costes derivados de la participacin de las partes interesadas.14
Paso 9: Aclarar las premisas relativas a los procesos de cambio

NUESTROS PROCESOS DE CAMBIO Antes de entrar en cuestiones logsticas relativas a la recopilacin de datos, debemos retroceder y considerar nuestras premisas subyacentes acerca del modelo de cambio de nuestro proyecto de educacin en derechos humanos. Dados nuestros objetivos de proyecto, qu tipo de procesos de cambio queremos generar? Cmo creemos que los componentes especficos del proyecto de educacin en derechos humanos contribuirn a este cambio? Y de qu modo se reconocer el cambio? Podramos remitirnos a la lgica del cambio abordada en la seccin 1 de este manual. Es importante documentar nuestras reflexiones sobre estos elementos porque al final del proyecto evaluaremos las actividades realizadas no slo por sus resultados, sino tambin respecto a las premisas subyacentes al diseo del proyecto.
31
EJEMPLO DE CASO 5 PROCESOS DE CAMBIO EN RELACIN CON EL USO DE UNA NUEVA HERRAMIENTA DE APRENDIZAJE En el proyecto de educacin en derechos humanos tal vez sea necesario desarrollar una herramienta (o recurso) de aprendizaje. Las actividades del proyecto incluirn la elaboracin de esta herramienta (destinada a tener en cuenta las circunstancias y necesidades de derechos humanos de mbito local) y su distribucin en las sesiones de formacin. Nuestra intencin puede ser que las personas asistentes a los cursos de formacin utilicen las actividades propuestas en la herramienta a la hora de trabajar con jvenes en colegios y en entornos de enseanza informal. Esperamos que, gracias al uso de este recurso, se empodere de diversas maneras a los/las jvenes en la esfera de los derechos humanos. Este componente lleva aparejado un conjunto de premisas sobre las operaciones de los proyectos, as como sobre la dinmica del cambio. Con respecto a esta ltima, asumimos que el personal docente que asiste a nuestras sesiones de formacin y entra en contacto con el material educativo a) tendr motivacin para usarlo; b) tendr capacidad para usarlo y emprender las actividades propuestas en el recurso, y c) tendr la oportunidad de hacerlo. Tambin asumimos (o esperamos) que los/las jvenes que participan en las actividades organizadas por estos docentes recibirn empoderamiento en la esfera de los derechos humanos (habr diversas formas de buscar indicios de que as es). Hacer explcitas estas premisas nos ayudar a detectar los factores, tanto internos como externos al proyecto, que puedan influir en los resultados (por ejemplo, el bagaje del personal docente, las oportunidades de ensear derechos humanos en colegios o en entornos educativos informales, el contexto poltico del pas). Tal vez tambin volvamos a los anlisis PEST y FODA y al anlisis basado en los derechos humanos para identificar elementos contextuales adicionales susceptibles de propiciar o socavar los elementos de nuestro proyecto. Los factores que estn estrechamente ligados a nuestras premisas debern incorporarse al plan de monitoreo y evaluacin. Recurriendo al mismo ejemplo de antes, convendr comprobar cul es la motivacin del personal docente por ensear derechos humanos antes y despus de su participacin en nuestros cursos de formacin; buscar indicios de que pueden usar los mtodos participativos, y hacer un monitoreo para averiguar si han sido capaces de crear oportunidades para emprender actividades de educacin en derechos humanos con jvenes. Debemos comprobar nuestras premisas peridicamente. Este tipo de premisas contribuir al diseo del plan de monitoreo y evaluacin, por ejemplo, el contenido de las encuestas que distribuimos a las personas asistentes a nuestros cursos de formacin, o el monitoreo que hagamos de ellos. Debemos revisitar nuestras premisas a mediados del proyecto durante la evaluacin formativa. Si es necesario, tendremos que revisar estas premisas y toda estrategia asociada al proyecto.
Paso 10: Identificar las actividades que se sometern a monitoreo y evaluacin

Nuestra propuesta de proyecto y las cuestiones tratadas en los pasos 4 y 5 nos han proporcionado la meta general, los objetivos y las estrategias y actividades asociadas. Estos objetivos ya estn organizados de forma lgica y jerrquica. Hemos identificado a las personas beneficiarias primarias y a los socios principales cuyos procesos de cambio queremos documentar y entender. Hemos identificado a otras partes interesadas. Hemos aclarado nuestras premisas sobre los procesos de cambio. Todos estos elementos constituyen la esencia del monitoreo y la evaluacin.
32
PRODUCTOS Como primer paso en la elaboracin de un plan completo de monitoreo y evaluacin, podemos identificar los productos asociados a las actividades que tenemos pensado llevar a cabo. A continuacin presentamos algunos productos habituales de la planificacin de educacin en derechos humanos: Nmero de cursos o sesiones de formacin en derechos humanos; Nmero de participantes que terminan cursos o sesiones de formacin en derechos humanos; Nmero y calidad de publicaciones sobre educacin en derechos humanos; Nmero de miembros de la Red de Educacin en Derechos Humanos de Amnista Internacional; Nmero de miembros de la Red de Educacin en Derechos Humanos de Amnista Internacional que tambin son miembros de la organizacin; Nmero de organizaciones asociadas; Nmero y calidad de reuniones consultivas con partes interesadas; Actividades de cabildeo en Ministerios de Educacin; Recursos empleados para la planificacin de educacin en derechos humanos; Informes anuales elaborados.
Paso 11: Identificar los resultados que se sometern a evaluacin

DIMENSIONES DEL CAMBIO DE AMNISTA INTERNACIONAL Tal vez tengamos que reorganizar nuestros objetivos y actividades dentro del plan de monitoreo y evaluacin para que coincidan con el marco de las dimensiones del cambio de Amnista Internacional, en el caso de que las actividades no estn ya organizadas de ese modo. Las dimensiones del cambio se han expuesto en la seccin 1 y el marco se incluye en el CD-ROM de este manual. La lista que se presenta a continuacin es ilustrativa pero no exhaustiva. Habr que adaptar los siguientes elementos segn sea nuestro propio proyecto o programa de educacin en derechos humanos. Sin embargo, lo ideal es que est representado cada uno de los siguientes tres niveles (derivados de los cuatro niveles originales de las dimensiones del cambio).15 CAMBIOS EN LA VIDA DE LAS PERSONAS (la unidad de anlisis es la persona) Empoderamiento reflejado en los nuevos conocimientos de las personas titulares de derechos sobre el contenido de los derechos humanos; la relevancia del marco de derechos humanos para analizar los problemas locales, y los mecanismos para reclamar que las personas garantes de derechos cumplan su obligacin de hacerlos efectivos. Empoderamiento reflejado en los cambios de valores, actitudes y habilidades relativos al compromiso con los derechos humanos, y en la capacidad para promoverlos mediante acciones sociales e individuales. Empoderamiento reflejado en las acciones de las personas titulares de derechos, emprendidas tanto individual como socialmente, para promover los derechos humanos en las esferas pblica y privada. Mayor disfrute individual y colectivo de los derechos humanos. CAMBIOS EN EL ACTIVISMO Y LA MOVILIZACIN (la unidad de anlisis es la organizacin no gubernamental) Cambios en las habilidades o la capacidad de movilizacin y de activismo de grupos organizados que representan a las personas titulares de derechos (por ejemplo, ONG, organizaciones de la sociedad civil o movimientos sociales). Nmero de organizaciones que prestan apoyo a cuestiones de derechos humanos. Cambios en la colaboracin y en la sinergia estratgica entre esas organizaciones. Nivel de participacin de las organizaciones en procesos de toma de decisiones de las personas garantes de derechos. Nmero de personas comprometidas con la movilizacin, las campaas y la labor de promocin que lleva a cabo Amnista Internacional. Nmero de personas que son miembros de Amnista Internacional, forman parte de sus redes, o ambas cosas. CAMBIOS EN LAS POLTICAS Y EN LA RENDICIN DE CUENTAS (la unidad de anlisis son los rganos gubernamentales, las organizaciones intergubernamentales y otros actores no estatales) Mayor rendicin de cuentas gracias a que las personas garantes de derechos conocen mejor los derechos humanos y su obligacin de defenderlos.
33
Se elaboran polticas, leyes y programas nuevos de derechos humanos o de educacin en este mbito. Se aplican polticas, leyes y programas nuevos de derechos humanos o de educacin en este mbito. Grado de compromiso institucional con la aplicacin de polticas o programas de educacin en derechos humanos (debates, respuestas, presupuestos). Nivel de aceptacin de grupos de la sociedad civil en relacin con los derechos humanos o la educacin en este mbito. Nivel de transparencia de los procesos institucionales. Amplitud de las plataformas para la participacin de las organizaciones de la sociedad civil en los procesos de toma de decisiones. Cambio en el discurso y la opinin pblicos. UNIDADES DE ANLISIS Ntese que, en cada una de las dimensiones del cambio, la unidad de anlisis es diferente. Cuando recopilamos datos para la primera dimensin del cambio cambios en la vida de las personas, buscamos resultados que conciernen a las personas participantes individuales a las que hemos llegado mediante nuestra planificacin de educacin en derechos humanos. Estos resultados pueden manifestarse mediante cambios, por ejemplo, ms conocimientos sobre derechos humanos, aumento del activismo o un mayor disfrute de los derechos humanos. Para la Amnesty International segunda dimensin cambios en el activismo y Amnista Internacional la movilizacin , investigamos los cambios que se producen en las capacidades de las ONG, como Amnista Internacional, mientras que en el ltimo grupo de dimensiones del cambio, averiguaremos si ha habido cambios en las polticas y la rendicin de cuentas en el seno diversas instituciones, pero principalmente de las personas garantes de derechos. Si agrupamos los resultados conforme a estos tres tipos de cambios y de unidades de anlisis, posiblemente encontraremos algunos solapamientos temticos. Por ejemplo, la motivacin y conducta de las personas a las que nos dirigimos para que se comprometan con el activismo se capturar en el primer nivel, cambio en la vida de las personas, ya que estaremos buscando resultados en el mbito individual. Sin embargo, puede que tambin busquemos cambios en la capacidad de Amnista Internacional de movilizar a las redes de educacin en derechos humanos. Tales resultados se capturarn en la esfera de los cambios en el activismo y la movilizacin. Quizs necesitemos dedicar tiempo a familiarizarnos con estos niveles de cambio y a prever cmo encajarn en ellos los resultados de la planificacin de educacin en derechos humanos. FOMENTO DE LAS CAPACIDADES DE LOS SOCIOS En algunos proyectos de educacin en derechos humanos, puede ocurrir que Amnista Internacional se comprometa a fomentar las capacidades de ONG asociadas. Si podemos anticipar los resultados de nuestros socios en el marco del proyecto, podremos elaborar un plan de monitoreo y evaluacin que incorpore estos resultados a la categora cambios en el activismo y la movilizacin, referida al sector de la sociedad civil. Cuando no nos es posible anticipar los resultados del fomento de las capacidades de nuestros socios pero nos gustara entender estos procesos de cambio, podemos crear un subapartado separado dentro de nuestro plan de monitoreo y evaluacin. En este subapartado se incluiran las estrategias de apoyo a nuestros socios y, a medida que evolucionan sus capacidades, se incluiran tambin los productos y resultados especficos de su trabajo. Esta parte de nuestro plan de monitoreo y evaluacin se elaborara en colaboracin con nuestro socio, del mismo modo que el plan general de monitoreo y evaluacin se prepara consultando a un amplio grupo de partes interesadas.
Am
34
EJEMPLO DE CASO 6 FOMENTO DE LAS CAPACIDADES DE PROFESORADO Y MINISTERIO ASOCIADO Por ejemplo, un proyecto de educacin en derechos humanos de Amnista Internacional puesto en marcha en centros de enseanza secundaria puede tener por meta que el alumnado comprenda mejor y se comprometa ms con la promocin de la cultura de los derechos humanos, por ejemplo, participando en campaas y acciones de Amnista Internacional. ste sera el resultado general o la meta de impacto del proyecto. Como parte de este proyecto, Amnista Internacional trabajar con el Ministerio de Educacin para que el personal docente pueda usar con ms facilidad en el aula los materiales educativos de la organizacin. Por tanto, habr dos grupos de actores cuyas actividades afectarn a los resultados del proyecto: el personal del Ministerio de Educacin y el profesorado que recibe los materiales educativos y cierta formacin de Amnista Internacional. Para cada una de estas categoras de actores, podramos crear un subapartado dentro del plan de monitoreo y evaluacin. Amnista Internacional documentar estrategias internas dirigidas al fomento de las capacidades de cada uno de estos socios. El apartado de monitoreo y evaluacin del trabajo con el Ministerio incluir actividades emprendidas por Amnista Internacional (productos) tales como reuniones y talleres con los funcionarios ministeriales as como los resultados del Ministerio, por ejemplo, un memorando que autorice el uso de los materiales de Amnista Internacional en los colegios.
35
DIAGRAMA 6 EJEMPLO DE MAPEO DE ALCANCES

(Fuente: D. Roduner, W. Schlppi y W. Egli, Logical Framework Approach and Outcome Mapping. A Constructive Attempt at Synthesis, Zrich: AGRIDEA y NADEL, 2008, p. 18)
Modelo lgico de mapeo de alcances
Las prcticas modificadas de los socios limtrofes contribuyen a lograr la visin
Modelo de anlisis de marco lgico (LFA)

Visin de los socios limtrofes
Misin del agente de cambio
Meta Socio limtrofe A

Marcadores de progreso
Indicadores (y fuentes) de las metas
Socio limtrofe B
Socio limtrofe C
Brecha de atribucin Resultado

Indicadores de resultados
Resultados* Prcticas modificadas de los socios limtrofes como resultado de los servicios del agente de cambio
Premisas en el mbito de los resultados
Alcances deseados
Alcances deseados
encantara ver gustara ver pera ver
encantara ver gustara ver pera ver
Alcances deseados
encantara ver gustara ver pera ver Producto 1 Indicadores del producto 1
Servicios prestados por el agente de cambio para generar resultados
Producto 2 Mapa estratgico para el socio limtrofe A Mapa estratgico para el socio limtrofe B Mapa estratgico para el socio limtrofe C
Indicadores del producto 2
Premisas en el mbito de los productos
Producto 3
Indicadores del producto 3
Prcticas organizativas del agente de cambio
Actividades
Actividades
Actividades
Premisas en el mbito de las actividades
Formulacin de la situacin deseada y de las prcticas y la conducta de los socios del proyecto
Meta/visin general (beneficiarios)
Indicadores de metas
Premisas en el mbito de los resultados
Descripcin de los cambios concretos que debe alcanzar el proyecto
Resultado del proyecto
Indicadores de resultados
Descripcin de las tareas y actividades de los socios limtrofes (su responsabilidad)
Socio de proyecto A Resultado deseado
Socio de proyecto B Resultado deseado
Definicin de las tareas y funciones del equipo de proyecto y productos proporcionados a los socios
Aportacin
Aportacin
Indicadores de productos
ctividad del proyecto
Actividad del proyecto
Misin: definir el apoyo general previsto del agente externo de cambio
Misin del agente de cambio y gestin del proyecto (presupuesto, recursos humanos, prcticas organizativas)
36
El diagrama 6 presenta un sistema de monitoreo y evaluacin en evolucin, una forma de mapeo de alcances expuesta en la seccin 1 y que tiene las siguientes ventajas: Se centra en resultados medibles mediante una formulacin clara de las responsabilidades, las funciones y los hitos mensurables. Se centra en el aprendizaje y la participacin mediante un proceso iterativo de planificacin participativa, gestin del proceso basada en el aprendizaje y gestin de la informacin que involucra a todas las partes interesadas. Cuenta con los atributos de transparencia, sentido de pertenencia y rendicin de cuentas, en relacin con el fomento de las capacidades de los socios: se fomentan el sentimiento compartido de ser partcipes del monitoreo y la evaluacin, la asignacin clara de responsabilidades, la 16 transparencia y la rendicin de cuentas. Una vez que las actividades del proyecto estn distribuidas en las categoras de las dimensiones del cambio, podemos identificar resultados y medidas especficos. CMO SE REFLEJAN LOS RESULTADOS DE LAS PERSONAS TITULARES DE DERECHOS EN LOS PROYECTOS DE EDUCACIN EN DERECHOS HUMANOS La siguiente ejemplificacin podra usarse como ejercicio de fomento de las capacidades en un taller de planificacin consultiva con partes interesadas. En los proyectos de educacin en derechos humanos hay tres objetivos relacionados con las personas titulares de derechos: Empoderamiento reflejado en los nuevos conocimientos de las personas titulares de derechos sobre el contenido de los derechos humanos; la relevancia del marco de derechos humanos para analizar los problemas locales, y los mecanismos para reclamar que las personas garantes de derechos cumplan su obligacin de hacerlos efectivos. Empoderamiento reflejado en los cambios de valores, actitudes y habilidades relativos al compromiso con los derechos humanos, y en la capacidad para promoverlos mediante acciones sociales e individuales. Empoderamiento reflejado en las acciones de las personas titulares de derechos, emprendidas tanto individual como socialmente, para promover los derechos humanos en las esferas pblica y privada. Mayor disfrute individual y colectivo de los derechos humanos. Estos objetivos ya apuntan de forma bastante directa a resultados especficos que tal vez queramos investigar. Por ello, nuestra prxima tarea ser desglosar estos objetivos amplios en resultados ms limitados e identificar las medidas asociadas a cada uno de ellos. Objetivo 1: Empoderamiento reflejado en los nuevos conocimientos de las personas titulares de derechos sobre el contenido de los derechos humanos; la relevancia del marco de derechos humanos para analizar los problemas locales, y los mecanismos para reclamar que las personas garantes de derechos cumplan su obligacin de hacerlos efectivos. Resultados (lista no exhaustiva): conocimientos sobre la Declaracin Universal de Derechos Humanos y el marco internacional de derechos humanos; conocimientos sobre los tratados internacionales ratificados por el pas; conocimientos sobre los mecanismos de vigilancia de los tratados y la rendicin de cuentas de los Estados; conocimientos sobre la situacin de los derechos humanos en el pas; conocimientos sobre las razones de que se violen los derechos humanos; reconocimiento de que las personas garantes de derechos tienen la obligacin de respetar, proteger y hacer realidad los derechos humanos; conocimientos sobre cmo exigir la realizacin de los propios derechos cuando las personas garantes de derechos no cumplen su deber. Objetivo 2: Empoderamiento reflejado en los cambios de valores, actitudes y habilidades relativos al compromiso con los derechos humanos, y en la capacidad para promoverlos mediante acciones sociales e individuales. Resultados (lista no exhaustiva):
17
37
conviccin de que los principios de derechos humanos son pertinentes para la vida diaria; deseo de aprender ms sobre los derechos humanos; inters por contribuir a la promocin de los derechos humanos; inters por cambiar conductas contrarias a los derechos humanos (por ejemplo, el acoso escolar); sentimiento de que una persona puede cambiar las cosas; preocupacin o empata hacia las personas que sufren violaciones de derechos humanos (sobre todo los grupos ms vulnerables); inters por colaborar con otras personas para promover los derechos humanos. Objetivo 3: Empoderamiento reflejado en las acciones de las personas titulares de derechos, emprendidas tanto individual como socialmente, para promover los derechos humanos en las esferas pblica y privada. Mayor disfrute individual y colectivo de los derechos humanos. Resultados (lista no exhaustiva): localizar datos y fuentes de informacin sobre los derechos humanos que estn relacionados con las necesidades y los intereses personales y profesionales propios; participar activamente en debates y controversias relacionadas con los derechos humanos; utilizar el marco de los derechos humanos para resolver conflictos interpersonales; aplicar los conocimientos sobre los derechos propios para afrontar con actitud asertiva las situaciones en las que otras personas niegan esos derechos; demostrar confianza, motivacin y habilidades de liderazgo, as como habilidades para generar y mantener esfuerzos de colaboracin; emprender diversas acciones para promover los derechos humanos en la esfera pblica, como expresar opiniones y llevar acabo actividades de sensibilizacin pblica, organizar o sumarse a campaas en favor de las personas privadas de libertad o derechos, o influir en las tendencias polticas dominantes.
Paso 12: Crear los indicadores destinados a capturar los resultados

Debemos analizar de qu formas se pueden medir los resultados. Los indicadores a menudo se usan con este fin, pero no son la nica herramienta de medicin de resultados. INDICADORES Un indicador es una descripcin de qu se puede medir para determinar hasta qu punto se han alcanzado objetivos y resultados. Un indicador no puede reflejar un panorama completo del cambio, pero s puede ayudar a documentar que ha ocurrido algo. Cuando se usa en el marco de un plan de monitoreo y evaluacin, un indicador proporciona la base para valorar el progreso, el cambio o el desempeo. 18 En la fase de planificacin, se deben establecer mltiples indicadores para cada uno de los resultados. DATOS CUALITATIVOS Y CUANTITATIVOS La informacin de los indicadores deber presentarse numricamente, pero los datos originales pueden ser de naturaleza cualitativa. Por ejemplo, uno de los resultados que habamos identificado era: Emprender diversas acciones para promover los derechos humanos en la esfera pblica, como expresar opiniones y llevar a cabo actividades de sensibilizacin pblica, organizar o sumarse a campaas en favor de las personas privadas de libertades o derechos, o influir en las tendencias polticas dominantes.
Un indicador asociado, bastante probable en la planificacin de educacin en derechos humanos, es: Realizar talleres, cursos de formacin o sesiones de aprendizaje formales sobre derechos humanos o educacin en derechos humanos para otras personas. PRECISIN Y FIABILIDAD DE LAS FUENTES DE INFORMACIN Nuestra medida concreta para el indicador que se expone supra podra ser un simple s o no. Por qu no cuantificar de forma ms especfica? Es posible que las personas participantes en nuestro proyecto no
38
recuerden de forma fidedigna el nmero exacto de talleres, cursos de formacin o conversaciones que han mantenido con otras personas. Recordarn si han participado en actividades de educacin en derechos humanos dirigidas a otras personas. Por tanto, en nuestro indicador podramos reflejar el porcentaje de participantes que han afirmado haber llevado a cabo talleres, cursos de formacin o sesiones de aprendizaje dirigidos a terceros. Si de verdad deseamos obtener informacin ms precisa, podramos preguntar a las personas participantes que han respondido s a esta pregunta cuntas sesiones de aprendizaje han ayudado a impartir en los ltimos seis meses (posiblemente recuerden los ltimos seis meses con ms fiabilidad que los ltimos dos aos). Tambin podramos dar varias opciones con rangos de cifras, por ejemplo, una o dos sesiones de aprendizaje, de tres a cinco, etc., con el fin de obtener una idea ms exacta de su grado de implicacin en iniciativas de educacin en derechos humanos dirigidas a terceros. COMPLETAR DATOS DE INDICADORES CON EXPLICACIONES Posiblemente decidamos que queremos entender el proceso de cambio que lleva a un participante en nuestro proyecto de formacin a convertirse en multiplicador de formacin en su propio entorno. En ese caso, tal vez queramos completar la informacin de los indicadores con citas de las personas participantes sobre sus experiencias o con explicaciones detalladas sobre cmo estos cambios de conducta estn relacionados con el proyecto de educacin en derechos humanos. MARCADORES DE PROGRESO/PARMETROS DE REFERENCIA Despus de haber hecho este ejercicio, suponiendo que hayamos establecido indicadores para cada uno de los resultados, hemos de decidir sobre los marcadores de progreso de nuestro proyecto, tambin denominados hitos o parmetros de referencia, que nos pueden ayudar a observar si se estn dando cambios que generen los resultados y el impacto previstos.
Paso 13: Establecer los mtodos de recopilacin de datos

FUENTES DE VERIFICACIN Las fuentes de verificacin, que deben establecerse en la fase de planificacin junto con los indicadores, son los mtodos empleados y las fuentes disponibles para comprobar si se han producido los cambios potenciales definidos como indicadores y constituyen la fuente principal de la que se extraen los datos. TRIANGULACIN La triangulacin es una tcnica de recopilacin de datos que busca la verificacin cruzada de los resultados mediante el uso de diferentes fuentes de datos y distintas metodologas de investigacin para la misma rea de estudio. Por ejemplo, si prevemos que nuestra planificacin de educacin en derechos humanos ocasionar un cambio de conducta entre las personas participantes, les pediremos que informen sobre cambios en las actividades, pero tambin querremos consultar otras fuentes para confirmar las nuevas conductas.
Desearemos triangular los datos cuando podamos anticipar que una determinada fuente de informacin no proporcionar resultados suficientes o fiables. Por ejemplo, si queremos documentar si se ha reducido el acoso escolar en los colegios, podremos examinar los registros escolares de tales incidentes (enfoque cuantitativo). Sin embargo, para entender los procesos de cambio que puedan haber generado esa reduccin (por ejemplo, la participacin estudiantil en proyectos de educacin en derechos humanos), tambin convendr entrevistar al alumnado y al profesorado (enfoque cualitativo). Triangularemos las fuentes de datos o las metodologas respecto de las metas, los resultados y los objetivos que sean especialmente importantes para nuestro proyecto. De este modo podremos confiar en los datos obtenidos.
39
CONSIDERACIONES EN LA SELECCIN DE MTODOS DE RECOPILACIN DE DATOS Debemos seleccionar los mtodos de recopilacin de datos ms adecuados para capturar los resultados de nuestra planificacin de educacin en derechos humanos, teniendo en cuenta el tiempo disponible, los Am nist recursos econmicos y las capacidades tcnicas. Tras la elaboracin de nuestro plan de monitoreo y a evaluacin, tendremos que contrastar los recursos necesarios con el presupuesto de monitoreo y Inte evaluacin que establecimos en la etapa de diseo del proyecto. Si el presupuesto que calculamos en un rna principio ya no es viable, tendremos que revisar el presupuesto o el plan de monitoreo y evaluacin. cio
nal
La presentacin que se ofrece a continuacin de los mtodos cuantitativos y cualitativos est extrada principalmente del Manual de gestin de Friendly Project, de Amnista Internacional. MTODOS CUANTITATIVOS Los mtodos cuantitativos se usan para recopilar informacin que puede analizarse de forma numrica, es decir, nos indica cuntos o qu cantidad: Cuntas personas asistieron al taller? Cuntos informes se enviaron? Cuntas visitas recibimos en el sitio web? Cuntos miembros ms tiene Amnista Internacional? La informacin cuantitativa puede expresarse de distintas maneras: nmeros absolutos, porcentajes o ratios (por ejemplo, uno de cada tres miembros del personal del Secretariado Internacional ha recibido formacin sobre el Friendly Project). La informacin cuantitativa se obtiene mediante el recuento y la medicin. Los mtodos cuantitativos son tiles cuando: tenemos que proporcionar datos exactos y precisos; tenemos una visin amplia de toda la poblacin; detectamos las principales diferencias en las caractersticas de una poblacin y averiguamos qu sectores de la poblacin se han visto ms afectados; comprobamos si hay una relacin estadstica entre un problema y una causa aparente; encontramos indicios que demuestran la existencia o inexistencia de ciertos problemas y justificamos estrategias concretas para partes interesadas clave, por ejemplo, donantes, gobiernos y empresas; establecemos informacin inicial que luego podr usarse para valorar el impacto. MTODOS CUALITATIVOS Los mtodos cualitativos se usan para recopilar informacin que puede analizarse de forma no numrica, es decir, nos ayuda a entender cmo y por qu. Revelan cmo entienden las personas su propia situacin al manifestar su punto de vista y sus prioridades. Los mtodos cualitativos arrojan informacin sobre las percepciones de las personas. Por qu decidieron las personas asistir al taller? Cul eran sus expectativas de la formacin? Cmo perciben que cambi su conducta a resultas de su participacin en nuestro proyecto? Los mtodos cualitativos se basan principalmente en la palabra hablada o en tareas de observacin. En ocasiones, estas narraciones pueden presentarse en forma numrica. La informacin cualitativa se obtiene preguntando, observando e interpretando. Los mtodos cualitativos pueden ser tiles cuando: definimos y planificamos un proyecto y entendemos las consecuencias del cambio social, por ejemplo, como la base del modelo de cambio; es necesario comprender en profundidad un contexto concreto; tenemos que saber lo que piensa la gente sobre una situacin concreta y cules son sus prioridades; seleccionamos los indicadores adecuados para el cambio cualitativo; escasean el tiempo y el dinero.
40
COMBINACIN DE LOS MTODOS CUALITATIVOS Y CUANTITATIVOS Los mtodos cualitativos y cualitativos no son mutuamente excluyentes y a menudo se utilizan juntos. Convendr incluir mtodos cualitativos en la evaluacin de nuestra planificacin de educacin en derechos humanos, pues dichos mtodos nos ayudarn a entender los procesos de cambio y las perspectivas de las personas participantes y de las partes interesadas secundarias con las que entablamos relaciones. Entre los mtodos de recopilacin de datos cualitativos empleados habitualmente figuran las encuestas (incluidas las preguntas abiertas), los grupos de discusin, las entrevistas (individuales) con informadores clave, las tareas de observacin (incluidas las grabaciones en vdeo) y las revisiones de documentos. En el mbito de la planificacin educativa, las revisiones de documentos pueden consistir en anlisis de materiales educativos, exmenes de rendimiento o indicadores escolares (asistencia, incidentes de violencia o comportamientos problemticos). Existen numerosos recursos que definen e ilustran cmo emprender estos mtodos de recopilacin de datos. En este manual ofrecemos a continuacin algunos aspectos generales sobre diversos mtodos en el contexto de nuestra planificacin de educacin en derechos humanos. ENCUESTAS (CUESTIONARIOS) Las encuestas (cuestionarios) son formas de recabar informacin de un gran nmero de personas. En el contexto de la planificacin de educacin en derechos humanos, se pueden distribuir encuestas a todas las personas participantes en las sesiones de formacin, lo cual contribuye a garantizar que todas las personas asistentes aportan sus impresiones y comentarios. Si no es factible distribuir encuestas a todos los participantes vinculados a nuestra planificacin, tendremos que elaborar un criterio claro y sistemtico para elegir a las personas o a los grupos a los que decidimos entregar la encuesta. Es importante que incluyamos preguntas significativas que nos permitan entender los procesos de cambio y los resultados. Las preguntas abiertas son las ms adecuadas para lograr este propsito. Sin embargo, las preguntas cerradas que se pueden tabular fcilmente tambin proporcionan observaciones tiles y nos permiten comparar los resultados entre los encuestados. Por este motivo, tal vez queramos incluir una combinacin de preguntas abiertas y cerradas, teniendo en cuenta el tiempo y la atencin que se requerir para leerlas y quizs analizar las respuestas a las preguntas abiertas. En concreto, nos espera la ardua tarea de asegurarnos de que las preguntas estn claramente formuladas y se explican por s mismas. La redaccin debe ser sencilla y han de evitarse los sesgos ocultos. La encuesta debe ponerse a prueba con una muestra de encuestados antes de distribuirla a gran escala, de modo que puedan detectarse y corregirse las preguntas ambiguas o confusas. ENTREVISTAS Las entrevistas son idneas para obtener informacin en profundidad sobre las opiniones, los valores y la conducta de un grupo reducido de personas. En el mbito de nuestra planificacin de educacin en derechos humanos, podemos organizar grupos de discusin con participantes o entrevistas (individuales) a informadores clave entre las principales partes interesadas. El enfoque ms eficaz para llevar a cabo las entrevistas es el semiestructurado: tenemos una lista previa de preguntas pero podemos adaptarlas espontneamente dentro del contexto de la entrevista. Las preguntas de entrevistas estructuradas (o protocolos), que no permiten las desviaciones, se utilizan a veces cuando hay varios entrevistados, con el fin de poder estandarizar ms fcilmente las respuestas. GRUPOS DE DISCUSIN Los grupos de discusin permiten a las personas participantes interaccionar y confrontar diferentes puntos de vista, si los hay. Requieren la funcin de un moderador que logre que se escuchen todas las voces, no slo la ms potente. Al realizar entrevistas en grupos, podemos ver dnde hay acuerdo y dnde hay discrepancias. Los grupos de discusin tambin pueden plantear nuevas reas que explorar. Al igual que ocurre con las encuestas, las preguntas que se utilizan en esta modalidad deben haberse comprobado o puesto a prueba cuidadosamente antes de plantearlas a gran escala. TAREAS DE OBSERVACIN Las tareas de observacin nos permiten ser testigos de actividades de proyecto, como sesiones de formacin, y entender mejor los procesos de cambio importantes para la educacin en derechos humanos. Los gestores de proyectos de educacin en derechos humanos de Amnista Internacional observarn las actividades informalmente como parte del proceso continuo de monitoreo. Las tareas de observacin tambin se pueden estructurar a efectos de la evaluacin, lo que nos permite hacer comprobaciones cruzadas o triangulaciones de la informacin que recabamos a travs de otros mtodos. Por ejemplo, nuestros principales formadores pueden decirnos en entrevistas que las personas asistentes a los cursos de formacin participan activamente; observar parte de una sesin de formacin ayudar a confirmar el
41
grado y la calidad de esa participacin. Las tareas de observacin son una tcnica insustituible para entender con qu grado de xito es capaz el alumnado de aplicar el contenido y las metodologas de la educacin en derechos humanos a sus propias actividades de enseanza. La grabacin en vdeo es una de las tcnicas que se pueden emplear en las iniciativas de observacin. ESTUDIOS DE CASO En ocasiones se combinan diversos mtodos de recopilacin de datos para crear estudios de caso, que integran mltiples fuentes de datos a fin de representar un contexto rico y de varias capas para la intervencin, los procesos de cambio y los resultados. Los estudios de caso pueden ayudarnos a entender el porqu de nuestra planificacin. La unidad de anlisis del estudio de caso ya sea una persona, una institucin o un pas debe mantener la coherencia con el contexto del proyecto de educacin en derechos humanos. Es decir, el estudio (o estudios) de caso no debe ser ni tan reducido (ni detallado) que no podamos extraer enseanzas generales, ni tan amplio (y superficial) que no podamos detectar la influencia de nuestra intervencin. En el CD-ROM se incluyen los estudios de caso realizados por Amnista Internacional en Brasil y Albania, as como en el marco del Programa de Educacin y Accin en Derechos Humanos. EVALUACIONES PARTICIPATIVAS En las evaluaciones participativas se anima a las personas en cuestin a intervenir activamente en el proceso de recopilacin de datos. Por ello, en funcin del proyecto de educacin en derechos humanos de que se trate, podemos pedir a las personas participantes que escriban peridicamente en un diario sus experiencias en el proyecto y aporten sus reflexiones. O tambin se pueden entrevistar unos a otros. El grado de participacin de estas personas en este tipo de tareas puede acordarse durante la fase de planificacin del monitoreo y la evaluacin, pero la iniciativa deber incorporar tambin toda preparacin necesaria sobre tcnicas de entrevistas. METODOLOGA DE MUESTREO Para consultar una presentacin ms exhaustiva de los mtodos de recopilacin de datos, incluida la metodologa de muestreo, vase el apartado sobre recopilacin y anlisis de datos del Manual de gestin de Friendly Project, de 2006.
Paso 14: Decidir quin llevar a cabo las actividades de monitoreo y evaluacin
ACTORES EN EL MONITOREO Y LA EVALUACIN En esta fase del proceso de planificacin ya sabemos quines son el gestor del proyecto de educacin en derechos humanos de Amnista Internacional, el resto del personal de la organizacin que participar en el proceso, as como las partes interesadas primarias y secundarias. Ms concretamente, al final de la reunin consultiva hemos de saber aproximadamente a qu partes interesadas involucraremos en el monitoreo y la evaluacin, y cmo lo haremos. Por ejemplo, ciertas partes interesadas contribuirn como proveedoras de informacin (participantes en las sesiones de formacin) y como fuentes de anlisis y reflexin sobre los datos obtenidos. A otras partes interesadas slo las consultaremos ocasionalmente (por ejemplo, altos cargos del Ministerio de Educacin). FUNCIONES DE LOS ACTORES Tenemos que fijar expectativas claras y compartidas sobre quin participar en nuestro proceso de monitoreo y evaluacin y de qu modo lo har. Estas funciones deben figurar por escrito y revisarse cuando sea necesario en el transcurso del proyecto. FOMENTO DE LAS CAPACIDADES DE LOS ACTORES Hemos de pensar tambin en el fomento de las capacidades. Si involucramos a las partes interesadas para que recaben datos, tendremos que formarlos para que desempeen el trabajo y asignarles tareas que puedan realizar con xito. Cuanto ms complejas sean las metodologas empleadas, ms difcil ser hacer participar a personas no especializadas en los procesos de evaluacin. Sin embargo, las partes interesadas pueden llevar a cabo ciertas recopilaciones de datos como entrevistas entre iguales y es posible incluso que den lugar a datos ms relevantes y de mayor calidad. PLAN DE TRABAJO PARA EL MONITOREO Y LA EVALUACIN Una vez que se hayan asignado las tareas y las funciones del monitoreo y la evaluacin, tendremos que fijar un plan de trabajo, lo que nos lleva al prximo apartado.
42
LLEVAR A CABO LAS TAREAS DE MONITOREO Y EVALUACIN

Nuestro proyecto de educacin en derechos humanos est empezando a ponerse en marcha, por lo que debemos pasar pronto a la etapa de implementacin. ste es el trabajo que tanto hemos esperado llevar a cabo.
Paso 15: Determinar cules son las tareas tcnicas de monitoreo y evaluacin
TAREAS Nuestro plan conceptual de monitoreo y evaluacin incluye un apartado sobre fuentes de verificacin en el que se ven los mtodos de recopilacin de datos previstos en el monitoreo y la evaluacin. El plan de trabajo contendr ms detalles sobre las tareas asociadas a cada mtodo y el calendario correspondiente. Cuando empecemos realmente a poner en marcha las actividades de monitoreo y evaluacin, habr muchas tareas distintas que tendremos que desempear:
TABLA 2 TAREAS PROPIAS DE UN PLAN DE MONITOREO Y EVALUACIN preparacin, puesta a prueba y finalizacin de los instrumentos y las herramientas de recopilacin de datos; seleccin de las personas participantes y socios que sern fuentes de informacin; recopilacin inicial de datos, con reflexiones sobre esos procesos y revisiones, segn sea necesario; organizacin continua de actividades de monitoreo y evaluacin; almacenamiento de datos; anlisis de datos; elaboracin de informes en fases clave (por ejemplo, informe anual, evaluacin formativa a medio plazo, evaluacin sumativa y valoracin del impacto).
En este manual no se encontrarn respuestas directas sobre cmo abordar cada una de las cuestiones operativas, pero s seremos conscientes de que deben tratarse y localizaremos otros recursos que nos ayudarn a tomar decisiones sobre tareas ms tcnicas, como la preparacin de encuestas o el muestreo. REVISIN DE DOCUMENTOS Antes de distribuir las encuestas o hacer las entrevistas, hemos de elaborar las preguntas que vamos a formular. Un primer paso en la preparacin de nuestros instrumentos es revisar los documentos pertinentes e identificar otras herramientas que se hayan utilizado previamente y que podamos adaptar a nuestra propia planificacin de derechos humanos. El apartado anterior expona algunas de las caractersticas principales de los mtodos de recopilacin de datos y remita a otros recursos de evaluacin que podemos consultar como orientacin adicional. Muchos de esos recursos estn incluidos en el CD-ROM de este manual. Adems, la seccin 3 del manual presenta una serie de modelos y ejemplos para su consulta. REDACCIN Y REVISIN DE ENCUESTAS Y PROTOCOLOS Las preguntas deben redactarse con esmero y sensibilidad hacia el entorno y el contexto cultural. Una vez elaborado el primer borrador de la encuesta, entrevista o protocolo de observacin, ste ser revisado por otros miembros del equipo de proyecto y por las partes interesadas que colaboran estrechamente en las actividades de monitoreo y evaluacin. Lo ideal es que pongamos a prueba las preguntas de la encuesta o la entrevista con participantes reales y que hagamos los ajustes necesarios antes de darle un uso ms amplio. Los tipos de problemas que surgen en la fase de prueba tal vez tengan que ver con que las preguntas sean ambiguas, tendenciosas o complejas. Por otra parte, posiblemente descubramos que, pese a nuestros ms denodados esfuerzos, la administracin de las herramientas lleva mucho ms tiempo del previsto. Es mejor que detectemos estos problemas en las etapas iniciales de la recopilacin de datos.
43
MUESTREO Las encuestas sobre las sesiones de formacin en derechos humanos se distribuyen al menos una vez a todas las personas participantes. Sin embargo, otros mtodos de recopilacin de datos, como las entrevistas, quizs no nos permitan involucrar a todas las personas participantes y socios. Por tanto, tendremos que decidir si seleccionaremos a quienes vayan a participar aleatoriamente o con un criterio determinado. Si nos decantamos por la segunda opcin, debemos tener en cuenta las caractersticas que sean significativas para nuestro estudio. Es decir, buscaremos una representacin conforme a las caractersticas que, en nuestra opinin, podran generar diferencias, como las horas de participacin en el proyecto, la formacin especfica, la ubicacin geogrfica, el gnero, la edad y la trayectoria profesional. El tipo de caractersticas que ser importante tener en cuenta depender de las metas y de la organizacin del proyecto de educacin en derechos humanos. Los mtodos de recopilacin de datos, incluida la metodologa de muestreo, se exponen con bastante detalle en el apartado sobre recopilacin y anlisis de datos del Manual de gestin de Friendly Project, de Amnista Internacional. CONSENTIMIENTO Y CONFIDENCIALIDAD DE LAS FUENTES DE INFORMACIN En todo mtodo de recopilacin de informacin habr que obtener permiso para grabar y usar los datos. Antes de hacer entrevistas, debemos obtener el consentimiento para usar la informacin y acordar con la persona interesada el grado de confidencialidad que se aplicar a la entrevista. Por ejemplo, debe haber acuerdo sobre si se puede usar el nombre del entrevistado y reproducir sus citas textuales, y si para esto ltimo ser necesaria la autorizacin previa. Por supuesto, las encuestas pueden distribuirse sin preguntar el nombre de las personas participantes. Sin embargo, stas debern saber cmo van a usarse los datos, incluso aunque no se les asocie su nombre directamente. Si no les preguntamos los nombres en la encuesta, tendremos que encontrar un modo de controlar quin la ha rellenado. Esto tiene una importancia especial si realizamos encuestas de monitoreo y queremos asociarlas a las respuestas previas de las personas participantes. GESTIN DATOS Una vez recabada la informacin, hemos de decidir cmo gestionarla, por ejemplo manualmente o mediante un sistema informtico. Los sistemas manuales necesitan ms espacio de almacenamiento; adems, comparar y analizar los datos a mano llevar ms tiempo. Los sistemas de monitoreo informticos requieren software y capacidad humana, pero son la forma ideal de controlar los proyectos y absolutamente necesarios para gestionar los datos recopilados mediante encuestas. Hay diversos tipos de software que ya estn disponibles en muchos ordenadores y que nos pueden ayudar a emprender las tareas de monitoreo y evaluacin (bases de datos, hojas de clculo, procesadores de texto y gestores de proyectos). Cuando ya hemos recopilado y organizado los datos, pasamos a la tarea del anlisis. El modo de analizar los datos depender en cierta medida del tipo de informacin que hayamos recabado. ANLISIS CUALITATIVO El anlisis cualitativo se aplica a informacin abierta obtenida a partir de entrevistas, grupos de discusin y tareas de observacin. En algunos estudios, los datos de las entrevistas se graban, transcriben y posteriormente se codifican, es decir, se identifican temas y patrones dentro del texto. Puede que decidamos cuantificar o agrupar los datos o buscar patrones. Este tipo de anlisis suele ser necesario en la planificacin de educacin en derechos humanos, pues slo la informacin cualitativa recabada de las personas participantes y de las partes interesadas secundarias nos permitir entender el proceso de cambio y sus resultados. El CD-ROM del manual contiene un extracto del Manual de gestin de Friendly Project, que presenta paso a paso el proceso de agrupacin y categorizacin de la informacin cualitativa. Lo que es absolutamente crucial es que concentremos la atencin en las preguntas clave a las que queremos dar respuesta, ya que quizs encontremos muchos temas interesantes e inesperados en los datos. Por eso es importante haber elaborado previamente un plan de monitoreo y evaluacin, pues nos ayudar a mantener el punto de mira en las principales preguntas de la evaluacin. ANLISIS CUANTITATIVO (ESTADSTICO) El anlisis cuantitativo (estadstico) se puede realizar con la ayuda de software informtico. Se pueden obtener estadsticas descriptivas, que presentan totales, medias y porcentajes, mediante una simple hoja de clculo de Excel. Puesto que en la mayora de los proyectos de educacin en derechos humanos se distribuyen encuestas, en casi todas habr una presentacin de datos estadsticos. Para elaborar una estadstica descriptiva no hay que ser especialista en la materia. Sin embargo, s tendremos que asegurarnos de que los datos se introducen cuidadosamente y se analizan con precisin.
44
INTERPRETACIN DE LOS RESULTADOS Una vez analizados los datos, habr que interpretarlos para extraer el significado. Cules son las principales enseanzas? Qu aspectos nuevos aprendemos? A continuacin extraeremos las enseanzas generales y determinaremos cules podran ser las consecuencias de estos resultados para Amnista Internacional y para futuras actividades de educacin en derechos humanos.19 sta es la fase en la que convendr de nuevo consultar al equipo del proyecto de educacin en derechos humanos y a las partes interesadas, y que nos llevar directamente a la redaccin del informe. PRESENTACIN DE INFORMES Podrn elaborarse diversos tipos de informes de monitoreo y evaluacin sobre la planificacin de educacin en derechos humanos, entre ellos, los que siguen el ciclo natural del proyecto, como los informes internos de actualizacin, los informes de mediados de ao y los informes anuales, o los que siguen el ciclo de evaluacin, como los informes de evaluacin formativa (al principio o a mediados del proyecto), de evaluacin sumativa (al final del proyecto) y de valoracin del impacto (despus del proyecto). FORMAS ALTERNATIVAS DE DOCUMENTACIN La planificacin de educacin en derechos humanos puede documentarse y ponerse en comn no slo mediante informes escritos, sino tambin a travs de estudios de casos, fotografas, grabaciones de vdeo (tal vez combinadas con entrevistas a partes interesadas) y objetos como materiales educativos, carteles, calendarios de los proyectos de formacin o folletos. El Programa de Educacin y Accin en Derechos Humanos (REAP) cont con numerosos resultados de evaluacin y documentacin al final de sus 10 aos de trayectoria, por ejemplo una evaluacin del impacto, estudios de caso y un vdeo. Deben tenerse en cuenta estos otros medios de documentacin y comunicacin, pues son un complemento a la redaccin de informes. Los informes internos de progreso sobre las actividades de monitoreo y evaluacin pueden incluir la siguiente informacin: Aspectos destacados del desempeo: se resumen los aspectos destacados. Datos detallados del desempeo: se detallan los resultados obtenidos, las actividades emprendidas, los hitos alcanzados, las horas trabajadas y los fondos invertidos. Problemas y dificultades: se destacan problemas o dificultades especiales encontrados en el periodo en cuestin y se proponen las acciones correctivas necesarias. Modificaciones aprobadas del plan: se informa sobre todos los cambios aprobados que se han hecho al plan de proyecto existente. Plan para el prximo periodo: se resumen las principales tareas y resultados planificados para el prximo periodo de desempeo.
Posiblemente tambin tengamos que preparar informes de evaluacin destinados a los donantes, las partes interesadas y otro pblico externo. Al decidir qu forma adoptar la presentacin de informes y la documentacin, hemos de pensar en las necesidades de los distintos pblicos. En trminos generales, cuanto ms largo y tcnico sea un informe, menos probabilidades habr de que otras personas lo lean. Sin embargo, un informe ms extenso puede servir de referencia o fuente para un proyecto, y se har mencin a l en obras posteriores de otras personas. Por tanto, los informes largos no siempre deben evitarse. Los informes que tienen ms difusin no suelen sobrepasar las 30 35 pginas, sin incluir los anexos. Si los informes son ms largos, puede resultar til difundir ms ampliamente el resumen ejecutivo del informe. Con independencia del tamao del informe completo, debemos incluir los siguientes componentes en los informes de evaluacin: resumen ejecutivo; contexto del estudio; objetivos principales del estudio; metodologa y mtodos de recopilacin de datos; conclusiones; debate de las conclusiones/lecciones aprendidas; recomendaciones. RECOMENDACIONES Las recomendaciones debern basarse directamente en las conclusiones obtenidas. Por ejemplo, podemos recomendar modificaciones de componentes del proyecto, metodologas, participantes y otras actividades. El informe final debe incluir un plan de accin basado en las conclusiones y recomendaciones.
45
INTERVENCIN DE LAS PARTES INTERESADAS Las partes interesadas deben intervenir en esta etapa final del monitoreo y la evaluacin aportando ideas sobre posibles productos de evaluacin y revisando el borrador inicial del informe. Tambin pueden ayudar a difundir los resultados de la evaluacin y a poner en marcha las actividades de monitoreo, como emplear el informe de evaluacin para defender una mayor cooperacin con los organismos gubernamentales.
Paso 16: Elaborar un plan de trabajo para el monitoreo y la evaluacin

FUNCIONES Y CALENDARIO DE EVENTOS Un plan de trabajo es una previsin detallada que establece las tareas del proyecto y se puede usar para observar los progresos. Nuestro plan de trabajo para el monitoreo y la evaluacin detallar las funciones que hay que desempear y el calendario de las principales actividades. Este plan ser similar en formato al plan de trabajo del proyecto, del que, de hecho, se podrn incorporar partes. El formato elegido para el proyecto general de educacin en derechos humanos podr ser tambin el formato del plan de trabajo para el monitoreo y la evaluacin. El diagrama 7 es un ejemplo de un extracto de plan de trabajo para el monitoreo y la evaluacin que slo incorpora las principales tareas de monitoreo y evaluacin y el marco temporal. El diagrama de Gantt es una tabla horizontal que expone grficamente las relaciones temporales entre las diferentes actividades del proyecto. DIAGRAMA 7 EJEMPLO DE PLAN DE TRABAJO PARA LA DISTRIBUCIN DE ENCUESTAS (DIAGRAMA DE GANTT) Actividad/evento Borrador de encuesta e instrucciones Puesta a prueba y revisin de la encuesta Recopilacin de direcciones de correoe del alumnado Distribucin de la encuesta por correo-e Envo de recordatorios por telfono y correo-e Recepcin de las encuestas Tiempo (en semanas) 0 1 2 3 4 5 6 7 8
Ser necesario definir claramente las actividades y los eventos principales que han de incluirse en el plan de trabajo. Si incluimos demasiados detalles, el plan de trabajo ser inmanejable. Si omitimos demasiados detalles, el documento no nos ayudar mucho a entender qu lugar ocupan las actividades de monitoreo y evaluacin, cundo se alcanza o se incumple un hito y cundo se emprende o no una actividad. Dicho de otro modo, el documento ideal de planificacin nos ayudar a controlar nuestros esfuerzos. PERSONAS-HORA Para proyectos de educacin en derechos humanos de ms envergadura en los que participa una plantilla ms numerosa, tal vez queramos usar matrices para planificar y monitorear las principales tareas respecto a las personas-hora.
46
DIAGRAMA 8 EJEMPLO DE MATRIZ DE RECURSOS HUMANOS
Actividad
Desglose de trabajo por cdigo de estructura 2.1.1 2.1.2 2.2.1 Descripcin
Personal (personas-hora)
D. Boaz F. Jones Analista
Diseo de cuestionario Pruebas de cuestionario Preparacin de instrucciones
32 0 40
0 40 24
24 60 10
Debemos elaborar documentos de plan de trabajo que nos sean de mxima utilidad. Como mnimo, convendr que hagamos un plan de trabajo de las principales actividades de monitoreo y evaluacin y del calendario correspondiente.
Paso 17: Pensar detenidamente cmo informaremos del monitoreo y la evaluacin

COMUNICACIN DE LAS EXPECTATIVAS DEL MONITOREO Y LA EVALUACIN Mantener comunicaciones y relaciones de trabajo claras con todas las personas que participan en las actividades de monitoreo y evaluacin contribuir a garantizar que las tareas se llevan a cabo sin complicaciones. Asimismo, el gestor del proyecto de educacin en derechos humanos tendr que asegurar que todas las personas que intervienen en el monitoreo y la evaluacin conocen los cometidos y el calendario de su propio trabajo. Por eso, una de nuestras primeras tareas ser reconfirmar con las personas participantes las funciones que se espera que desempeen, el esfuerzo de trabajo que debern asumir y las fechas previstas para el cumplimiento de dichas tareas. Si surgen discrepancias, habr que hacer ajustes. El gestor del proyecto vigilar con qu grado de adecuacin se estn realizando las tareas. ESTRATEGIAS DE COMUNICACIN CONTINUA Debemos disear una estrategia por la que se rija la comunicacin con los grupos de inters, prestando especial atencin al protocolo que habr de seguirse. En funcin de los grupos de inters, podremos ser ms o menos formales. Tendremos que concebir mensajes apropiados, mtodos de contacto y procedimientos claros. Tenemos que asegurarnos de abordar el propsito, la confidencialidad y el uso futuro de la informacin que recabamos.20 TIPOS DE COMUNICACIN Entre las tcnicas de comunicacin de que disponemos estn el correo electrnico, las sesiones informativas, las consultas y los informes de progreso. Conviene mantener los procesos participativos en momentos clave (tanto internos como externos), incorporar circuitos de retroalimentacin informal y pensar cmo podemos gestionar los problemas que surjan. HITOS DE COMUNICACIN EN EL CICLO DEL PROYECTO Durante todo el proceso de monitoreo y evaluacin, las partes interesadas nos pueden ayudar a reflexionar sobre el progreso y a proponer soluciones o directrices para responder a problemas o desafos. En los hitos formativo y sumativo del proyecto, las partes interesadas nos pueden ayudar a reflexionar sobre los logros, los problemas, las acciones correctivas que pueden adoptarse y, al final del proyecto, los resultados de dichas acciones.
47
VALORACIN DEL IMPACTO

Paso 18: Anticipar la valoracin del impacto
PROPSITO DE LA VALORACIN DEL IMPACTO La valoracin del impacto, que va ms all de los productos inmediatos previstos o incluso de los resultados de nuestras actividades de educacin en derechos humanos, trata de detectar: cambios duraderos y significativos conforme a las dimensiones del cambio; otros cambios: positivos, negativos, deseados o no; factores y actores que han contribuido a estos procesos de cambio. VNCULOS CON EL MONITOREO Y LA EVALUACIN Toda valoracin del impacto que organicemos para nuestra planificacin de educacin en derechos humanos se basar en el trabajo de monitoreo y evaluacin que hayamos realizado previamente. Las reas de impacto sern las mismas que las identificadas como resultados en nuestro plan original de monitoreo y evaluacin. Usaremos los datos de partida recabados durante las fases iniciales del proyecto. Nos basaremos en los datos de las evaluaciones formativa y sumativa que hayamos recopilado durante el ciclo de vida del proyecto. RECOPILACIN ADICIONAL DE DATOS Es muy probable que en la valoracin del impacto se recaben datos adicionales para averiguar si nuestra planificacin de educacin en derechos humanos ha generado un impacto duradero y a largo plazo; prestaremos especial atencin a los procesos de cambio que hayan ocasionado ese impacto. Esta labor de reflexin ser especialmente til a la hora de planificar futuros proyectos. Si en las evaluaciones sumativas se han detectado ciertos resultados de la planificacin de educacin en derechos humanos, tal vez queramos recabar ms datos para averiguar si esos resultados siguen siendo vlidos para las personas participantes una vez concluido el proyecto. Podremos recopilar datos de otras fuentes, como grupos de comparacin, para hacer una comprobacin ms profunda. Tambin podremos entrevistar a partes interesadas y actores clave del proyecto para documentar sus percepciones sobre los procesos de cambio. EVALUADOR EXTERNO El personal de Amnista Internacional y un evaluador interno pueden desempear gran parte de este trabajo. En algunos casos puede contratarse a un evaluador externo. El evaluador externo puede proporcionar capacidad tcnica no existente en el equipo interno de monitoreo y evaluacin. El evaluador externo est ms alejado del proyecto, por lo que puede aportar una perspectiva fresca al trabajo de educacin en derechos humanos. En ocasiones, los donantes exigen que se contrate a un evaluador externo para que lleve a cabo la valoracin del impacto, e incluso a veces una evaluacin sumativa, con el fin de reducir el riesgo de parcialidad al revisar los resultados del proyecto.
48
EJEMPLO DE CASO 7 VALORACIN DEL IMPACTO DEL PROGRAMA DE EDUCACIN Y ACCIN EN DERECHOS HUMANOS DE AMNISTA INTERNACIONAL Se realiz una valoracin del impacto del Programa de Educacin y Accin en Derechos Humanos (REAP) para las 10 Secciones participantes. La metodologa de esta iniciativa incluy: la distribucin de encuestas a los coordinadores/as de educacin en derechos humanos y principales formadores y a una muestra de multiplicadores y personas beneficiarias; preparacin de estudios de caso para cuatro Secciones participantes, que incorporaban: revisin documental de informes de monitoreo y otros documentos clave del proyecto; revisin de los materiales educativos elaborados; anlisis de los datos de Amnista Internacional sobre redes y membresa relacionadas con la educacin en derechos humanos; entrevistas con el coordinador de la educacin en derechos humanos y otros miembros del personal; con socios del proyecto, y con una muestra de multiplicadores y personas beneficiarias; tareas de observacin; distribucin de encuestas a grupos de comparacin acerca de los multiplicadores. En la valoracin del impacto se analiz si se haban producido cambios duraderos conforme a las dimensiones del cambio de Amnista Internacional, como cambios en la vida de las personas beneficiarias primarias (multiplicadores y personas formadas por ellos), cambios en el activismo y la movilizacin de Amnista Internacional y sus ONG asociadas (por ejemplo, desarrollo de redes dinmicas de educacin en derechos humanos) y cambios en las polticas y la rendicin de cuentas en otras instituciones (por ejemplo, polticas del Ministerio de Educacin relativas a la educacin en derechos humanos). El CD-ROM del manual contiene un marco lgico sobre la valoracin del impacto del REAP en el que se exponen los resultados previstos, las reas de investigacin y las fuentes de datos. ( Marco lgico del REAP/REAP Log frame)
RECURSOS ADICIONALES El apartado Referencias bibliogrficas contiene recursos de Internet que pueden proporcionar orientacin adicional para valorar el impacto de las actividades de educacin en derechos humanos.
49
Seccin 3 MONITOREO Y EVALUACIN DE LA PLANIFICACIN DE EDUCACIN EN DERECHOS HUMANOS: EJEMPLOS PRCTICOS
50
INTRODUCCIN
Esta seccin presenta enfoques y herramientas de evaluacin aplicables a la diversidad de programas especficos de educacin en derechos humanos que existen dentro de Amnista Internacional. Cuando los proyectos y programas sean de ms envergadura, podremos utilizar varias de estas herramientas. Ninguna de ellas pretende ser definitiva. Seleccionaremos y adaptaremos los enfoques e instrumentos en funcin de: las caractersticas especficas de nuestra planificacin de educacin en derechos humanos; nuestras prioridades de investigacin; y nuestra capacidad de aplicar metodologas concretas. Esta seccin, junto con los ejemplos incluidos en el CD-ROM, servir de referencia cuando se elabore el ncleo duro del plan de monitoreo y evaluacin, as como la valoracin del impacto. FIABILIDAD Y VALIDEZ La investigacin y la evaluacin son tareas arduas en las que hay que elegir cuidadosamente los instrumentos y las metodologas de recopilacin de datos para poder confiar en la informacin que recabamos. Queremos que los datos sean fiables, de tal forma que, si se ocupasen del mismo estudio otros evaluadores, los resultados obtenidos fuesen los mismos. Tambin nos gustara que los datos fueran vlidos, es decir, que reflejasen la situacin real que estamos intentando entender. TRIANGULACIN Existen varias maneras de organizar nuestra recopilacin de datos para aumentar la probabilidad de que sean vlidos y fiables. Una de ellas es recabar informacin de las fuentes ms susceptibles de conocer la situacin real (por ejemplo, preguntar directamente al alumnado sobre los resultados de los cursos a los que han asistido y qu efecto han surtido en ellos). Otra consiste en usar diferentes fuentes y enfoques para la misma pregunta de estudio de modo que se puedan comparar los resultados. Esta ltima tcnica se denomina triangulacin y ya se ha mencionado supra en la seccin 2 de este manual. En esta seccin se presentan algunos ejemplos de triangulacin incluidos en diseos de evaluacin. La triangulacin no slo nos permite tener ms confianza en los resultados (suponiendo que las diferentes fuentes arrojen resultados similares), sino que tambin nos ayuda a salvar el riesgo de que los resultados sean sesgados debido a la falta de imparcialidad en las respuestas. La falta de imparcialidad en las respuestas (por ejemplo, el deseo de complacer al investigador) es un fenmeno habitual que debe abordarse metodolgicamente en toda evaluacin que se emprenda. HONRADEZ METODOLGICA Todo informe de evaluacin debe ocuparse de la fiabilidad y la validez de la informacin recabada. Debemos reconocer con honradez las limitaciones de nuestras evaluaciones, por ejemplo, debido a la baja participacin en el estudio, al envo de cuestionarios tan slo despus de la sesin de formacin, e incluso nuestras propias limitaciones como evaluadores (por ejemplo, falta de conocimiento del contexto nacional). Esta transparencia ayudar a los lectores a valorar por s mismos el peso que se le puede dar a cada evaluacin.
51
SESIN INICIAL DE FORMACIN O TALLER DE SENSIBILIZACIN (POR EJEMPLO, PARA

PROFESORADO, ALUMNADO DE CENTROS DE ENSEANZA SECUNDARIA, ONG Y GRUPOS PROFESIONALES)
RESULTADOS DE TALLERES DE FORMACIN DE SESIN INICIAL Los talleres de formacin de una nica sesin son quizs la actividad ms habitual dentro de los programas de educacin en derechos humanos. Aunque los cursos de formacin de larga duracin son importantes para desarrollar las capacidades, los talleres breves (de un da o menos) se han asociado a la sensibilizacin, al aprendizaje de contenidos y a la motivacin de participar en actividades de derechos humanos. Cuando realizamos talleres breves, tenemos que situarlos en el marco ms amplio de las metas y los objetivos de educacin en derechos humanos de Amnista Internacional. Volviendo a los objetivos de las dimensiones del cambio fijados por Amnista Internacional, podemos ver que los resultados de los talleres de sesin inicial pueden vincularse a la categora de cambios en la vida de las personas (la unidad de anlisis es la persona): Empoderamiento reflejado en los nuevos conocimientos de las personas titulares de derechos sobre el contenido de los derechos humanos; la relevancia del marco de derechos humanos para analizar los problemas locales, y los mecanismos para reclamar que las personas garantes de derechos cumplan su obligacin de hacerlos efectivos. Empoderamiento reflejado en los cambios de valores, actitudes y habilidades relativos al compromiso con los derechos humanos, y en la capacidad para promoverlos mediante acciones sociales e individuales. Empoderamiento reflejado en las acciones de las personas titulares de derechos, emprendidas tanto individual como socialmente, para promover los derechos humanos en las esferas pblica y privada. Mayor disfrute individual y colectivo de los derechos humanos. EJEMPLO DE MONITOREO Y EVALUACIN DE AMNISTA INTERNACIONAL El Proyecto de Educacin en Derechos Humanos de frica Occidental ilustra cmo modelar un plan de monitoreo y evaluacin en relacin con el empoderamiento de las personas beneficiarias. Este ejemplo puede consultarse en el CD-ROM del manual. ( Empoderamiento de las personas beneficiarias gracias a la educacin en derechos humanos en frica Occidental/West Africa HRE Empowerment of Beneficiaries) MODELO DE CAMBIO: LOS CUATRO NIVELES DEL MODELO KIRKPATRICK Al reflexionar sobre los tipos de resultados que afectan al alumnado, podemos basarnos en el modelo Kirkpatrick de cuatro niveles21 relativo a la organizacin de la investigacin, que se aborda en la seccin 1 de este manual: Reaccin del alumnado: qu pensaron y qu impresin les dio la formacin; Aprendizaje: aumento de los conocimientos o de las capacidades como resultado de la formacin; Conducta/transferencia: grado o alcance de la mejora en la conducta y en la capacidad de implementacin o aplicacin; Resultados: efectos sobre el trabajo en el mbito ms amplio de la comunidad, derivados de las acciones del alumno/a. METODOLOGA DE RECOPILACIN DE DATOS La metodologa de recopilacin de informacin sobre estos resultados de empoderamiento inmediatos y a ms largo plazo en las personas participantes debe incluir como mnimo la distribucin de encuestas, tanto antes como despus de la formacin, por medios electrnicos o en persona. Tambin sera ideal distribuir una encuesta de monitoreo a las personas participantes al menos pasados seis meses desde el final del curso de formacin, con el fin de medir los cambios en los diversos resultados. Los datos de las encuestas pueden completarse con entrevistas a las personas participantes y a otras personas susceptibles de formular observaciones sobre cambios de conducta del alumnado. Si las personas participantes prepararon algn tipo de plan de accin durante la formacin, tambin podr revisarse este plan como parte de la evaluacin sumativa y la valoracin del impacto. Estas metodologas de recopilacin de datos son pertinentes tanto en los talleres breves como en los cursos de formacin o en las series de talleres mltiples a ms largo plazo, que se abordan en el prximo apartado.
52
DIMENSIONES DEL CAMBIO Los resultados relativos a las dimensiones del cambio aluden a los posibles efectos en los conocimientos, las actitudes, los valores, las habilidades sociales (por ejemplo, la empata, la escucha activa, la cooperacin y la participacin) y las aptitudes de pensamiento crtico del alumnado. Especialistas en derechos humanos22 han elaborado una lista de competencias bsicas para la educacin en derechos humanos, que puede ser una referencia til a la hora de detectar un amplio abanico de resultados. Nuestros cursos de formacin se adaptarn al alumnado, y tambin hay que responder por estos resultados. En concreto, los cursos de formacin diseados para grupos profesionales, como profesorado, observadores de derechos humanos o la polica, incorporarn un fomento de las habilidades especfico para su trabajo (como habilidades de facilitacin o de labores de promocin). Las evaluaciones deben tratar de capturar los resultados en esas reas especficas. Cuanto aspiramos a transferir habilidades al alumnado, solemos organizar sesiones de formacin ms largas o una serie de talleres, y no un taller de slo un da de duracin. Al disear cuestionarios que midan los resultados potenciales de los talleres, tendremos que ser realistas sobre qu influencias es probable que se ejerzan en las personas asistentes con una intervencin tan breve. En el mbito de la evaluacin educativa, la medicin de los cambios en las conductas y los valores siempre ha planteado bastantes desafos. La educacin en derechos humanos no es ninguna excepcin. Lo que suelen hacer los evaluadores es pedir al alumnado que informe sobre sus propias actitudes y valores. Esta tcnica funciona mejor cuando la informacin se proporciona antes y despus de un curso de formacin de larga duracin (no slo despus de la formacin). HERRAMIENTAS DE AMNISTA INTERNACIONAL El CD-ROM contiene tres ejemplos de instrumentos que se han utilizado para estudiar los resultados de la formacin en las personas asistentes a los cursos: La encuesta a las personas beneficiarias del Programa de Educacin y Accin en Derechos Humanos (REAP), que investiga los resultados en los conocimientos, la comprensin, los valores, las actitudes, las habilidades y la conducta. Esta encuesta, que se distribuy una vez acabado el proyecto, formaba parte de la valoracin del impacto del REAP, y los datos de la encuesta se complementaron con grupos de discusin en cuatro pases (representados en los estudios de caso), as como con informes de los coordinadores/as de la educacin en derechos humanos sobre el impacto que perciban que haban tenido en las personas beneficiarias las actividades del REAP dirigidas a multiplicadores de educacin en derechos humanos. ( Encuesta a las personas beneficiarias del REAP/REAP Beneficiary Survey.) El cuestionario distribuido por Amnista Internacional Reino Unido sobre sus cursos de formacin dirigidos a profesorado, que contiene preguntas previas y posteriores a los cursos sobre el conocimiento, la comprensin y las habilidades en el mbito de los derechos humanos. ( Evaluacin de la formacin a profesorado impartida por Amnista Internacional Reino Unido y el Instituto Britnico de Derechos Humanos (BIHR)/Amnesty International UK BIHR Teacher Training Evaluation) Sugerencias de uso de los ejemplos hipotticos para medir cambios en opiniones y valores relativos a temas de derechos humanos como la tortura o los derechos laborales. ( Medicin de actitudes a travs de casos hipotticos/Measuring Attitudes through Hypotheticals) Estos elementos orientados a los resultados suelen estar incorporados a un cuestionario ms amplio que preguntar por las expectativas del alumno/a sobre el taller antes de la formacin y por otra informacin contextual que ayude a los organizadores a planificar el programa de educacin en derechos humanos. El cuestionario posterior al curso de formacin pedir impresiones y comentarios sobre el propio taller, incluidas las expectativas, qu sesiones fueron ms beneficiosas, cules se podran mejorar, cuestiones especficas sobre el contenido, la metodologa, los materiales entregados, la calidad de los facilitadores/as, o qu aspectos se pueden aplicar en el futuro (en general). El cuestionario de Amnista Internacional Reino Unido mencionado supra tambin contiene preguntas destinadas a obtener las opiniones de las personas asistentes sobre los talleres o las sesiones de formacin.
53
MLTIPLES SESIONES DE FORMACIN O TALLERES DE FOMENTO DE LAS CAPACIDADES (POR EJEMPLO, PARA PERSONAL
ENCARGADO DE LA FORMACIN O MULTIPLICADORES)
Los cursos de formacin de ms larga duracin (por ejemplo, talleres de tres a cinco das) y la formacin secuencial (serie de sesiones celebradas durante un determinado periodo con los mismos participantes) se han asociado al tipo de resultados sobre contenido y valores mencionados con respecto a los talleres breves, pero a menudo se distinguen por tener adems un componente de desarrollo de habilidades. En esta categora de planificacin de educacin en derechos humanos, encontramos los programas de formacin de formadores y las sesiones de formacin para grupos profesionales. La orientacin ofrecida en el apartado anterior sobre la medicin de los resultados concernientes al alumnado y sobre los instrumentos de muestra es aplicable tambin a esta categora de participantes. Si pretendemos fomentar capacidades en ciertas reas concretas como la formacin o el monitoreo, convendr que nos aseguremos de que toda evaluacin sumativa o valoracin del impacto rene la informacin sobre el desarrollo de estas habilidades y su aplicacin. EJEMPLOS Y HERRAMIENTAS DE AMNISTA INTERNACIONAL Y DE OTRAS ENTIDADES El Proyecto de Educacin en Derechos Humanos de Amnista Internacional en frica Occidental explica cmo modelar un plan de monitoreo y evaluacin en relacin con el fomento de las capacidades del personal encargado de la formacin. Este ejemplo puede consultarse en el CD-ROM. ( Fomento de la capacidad de EDH de formadores en frica Occidental/West Africa HRE capacity development of trainers.) Como el fomento de las capacidades del personal encargado de la formacin o multiplicadores era tan importante para el xito del Programa de Educacin y Accin en Derechos Humanos (REAP), este resultado se investig de diferentes formas (se triangul). Los multiplicadores rellenaron una encuesta que analizaba los resultados en los mbitos del conocimiento, la comprensin, los valores, las actitudes, las habilidades de facilitacin y la conducta. Esta encuesta se distribuy nicamente al acabar el proyecto, en el marco de la valoracin del impacto del REAP. Los datos de la encuesta se completaron con grupos de discusin en los cuatro pases seleccionados como estudios de caso, y con informes de formadores clave y del coordinador de educacin en derechos humanos sobre el impacto percibido de las actividades del REAP en los multiplicadores. Adems, se recabaron datos de grupos de comparacin en los cuatro casos en los que se distribuy encuestas a personas con el mismo perfil que los multiplicadores. ( Encuesta del REAP a multiplicadores, encuesta a grupos de comparacin e instrucciones/REAP Multiplier Survey, Comparison Group Survey and Instructions y Encuesta del REAP a formadores clave e instrucciones/REAP Key Trainer Survey and Instructions) La Organizacin de las Naciones Unidas para la Educacin, la Ciencia y la Cultura (UNESCO) elabor una herramienta de monitoreo y evaluacin relacionada con su programa Aprender a Convivir (Learning to Live Together) que incluye educacin en derechos humanos y contiene un minucioso protocolo de entrevista que puede usarse con profesorado participante en programas de formacin, antes del comienzo de sta o en su transcurso. Las preguntas de la entrevista abordan los siguientes temas: nuevos conocimientos y habilidades, cambio de opiniones y actitudes, nuevas conductas, preparacin para impartir el curso, y cmo prevn que afectar el curso al alumnado (aplicar la teora del cambio del 23 propio alumno/a). Equitas, organizacin de derechos humanos con sede en Canad, tiene una detallada metodologa para valorar los resultados de su programa intensivo de formacin en derechos humanos, que dura tres semanas. La informacin se recaba mediante: cuestionarios rellenados por las personas participantes tras cada bloque del programa; cuestionarios rellenados por las personas participantes al principio de la formacin sobre el propio proceso de evaluacin, seguidos de un debate dinamizado por el facilitador; cuestionario de evaluacin final rellenado al terminar la formacin; sesiones diarias en las que el personal encargado de la formacin presenta su informe; reflexiones por escrito del personal encargado de la formacin sobre el aprendizaje de las personas asistentes;
54
impresiones informales recabadas mediante debates continuos con participantes y personas que aportan recursos. ( Metodologa de evaluacin de la formacin de Equitas/Equitas Training Evaluation Methodology en el CD-ROM.) METODOLOGA DE RECOPILACIN DE DATOS Lo ideal es enviar a las personas participantes una encuesta de monitoreo al cabo de seis meses o incluso ms del final de la formacin. Como se indic en el apartado anterior, estas encuestas pueden completarse con entrevistas (semiestructuradas) a una muestra de participantes y representantes del lugar de trabajo o de cualquier otro entorno donde podamos esperar que el alumnado manifieste o demuestre los resultados de su participacin en nuestro programa de educacin en derechos humanos. En la evaluacin tambin podr haber tareas de observacin, as como una revisin de los documentos elaborados por las personas participantes (por ejemplo, planes de accin o nuevas lecciones aprendidas) que puedan servir de pruebas del impacto. El diagrama que se presenta infra se ha extrado de una evaluacin llevada a cabo por la Oficina Regional para Oriente Medio y el Norte de frica de Amnista Internacional sobre su programa de fomento de las capacidades de educacin en derechos humanos.24 Podemos ver el abanico de fuentes de informacin y mtodos de recopilacin de datos que se utilizaron. DIAGRAMA 9 EJEMPLO DE PLAN DE MONITOREO Y EVALUACIN: FUENTES DE INFORMACIN, REAS DE INVESTIGACIN Y MTODOS DE RECOPILACIN DE DATOS
DE
SOBRE
MEDIANTE
a) Participantes (ONG y defensores de derechos humanos) b) membresa de Amnista Internacional c) Organizaciones d) Facilitadores/as e) Oficina de Beirut
a) Planificacin e implementacin b) Efectividad de la formacin (conocimientos/ actitudes/prctica) c) Efecto en la sensibilizacin y en el establecimiento de un sistema de valores sobre los derechos humanos
a) Cuestionarios semiestructurados b) Entrevistas personales c) Documentos
El CD-ROM incluye el cuestionario de monitoreo sobre el fomento de las capacidades que se distribuy entre los defensores de derechos humanos y los representantes de ONG que asistieron a las sesiones de formacin en derechos humanos de este proyecto, as como el cuestionario enviado a los representantes de las organizaciones de participantes. ( Cuestionario de monitoreo de Beirut sobre el fomento de las capacidades/Beirut Follow-Up Capacity building Questionnaire.) La organizacin de talleres de fomento de las capacidades es en s misma una capacidad que han tenido que desarrollar las propias Secciones y Estructuras de Amnista Internacional. Por ello, tal vez llevemos a cabo evaluaciones formativas en las que se solicite la aportacin formal de nuestro personal encargado de la formacin, no slo del alumnado. Escuela Instrumento de Paz (EIP)-Eslovenia ha elaborado un modelo para que el personal encargado de la formacin pueda evaluar de igual a igual y autoevaluarse; el modelo est incluido en el CD-ROM de este manual. ( Mtodo de EIP de autoevaluacin y evaluacin de igual a igual de personal encargado de la formacin de profesorado/EIP Peer and Self Evaluation of Teacher Trainers.) MODELO DE CAMBIO Como ya se apunt en apartados previos de este manual, al investigar los resultados de los programas de educacin en derechos humanos tendremos que explicitar nuestros modelos de cambio.
55
Cuando evaluemos el empoderamiento del alumnado, hemos de documentar minuciosamente: toda caracterstica contextual relevante (por ejemplo, pertenencia a un grupo vulnerable); caractersticas del programa (por ejemplo, temas de derechos humanos destacados en la formacin, apoyo de monitoreo prestado); el grado de intervencin (por ejemplo, horas presenciales en los cursos de formacin).
Esto nos ayudar a entender los rasgos del programa y del alumnado que puedan contribuir a explicar los procesos de cambio y los resultados correspondientes que percibamos. Por ello, en la evaluacin del impacto del Programa de Educacin y Accin en Derechos Humanos (REAP) tambin se recabaron datos sobre el nmero de horas presenciales destinadas a los multiplicadores para averiguar si haba alguna relacin entre los resultados individuales y la cantidad de tiempo invertido en formacin. Si somos capaces de documentar en detalle estas caractersticas de nuestro programa de educacin en derechos humanos y de asociar los resultados de empoderamiento del alumnado, podremos defender la afirmacin de que la educacin en derechos humanos ha contribuido a generar esos resultados. No tenemos que demostrar que las iniciativas de educacin en derechos humanos son la nica causa de los resultados que detectamos.
56
REDES DE EDUCACIN EN DERECHOS HUMANOS

COMUNIDADES DE PRCTICA Las redes de educacin en derechos humanos pueden percibirse como grupos interconectados con un inters comn compartido y el objetivo de promover la educacin en este mbito. En el aprendizaje de adultos, tales redes se denominan a veces comunidades de prctica. En el seno de esas comunidades, la membresa comparte la informacin y los puntos de vista con el fin de facilitar su propio aprendizaje y superacin personal. Las redes estn destinadas a fomentar las capacidades de quienes participan en ellas. REDES DE AMNISTA INTERNACIONAL En Amnista Internacional existe la Red Internacional de Educacin en Derechos Humanos, de mbito mundial en la que participan coordinadores/as de educacin en derechos humanos y centros de enlace de casi todas las Secciones y Estructuras y tambin hay redes de educacin en derechos humanos en la esfera nacional en las que participan membresa de la organizacin, multiplicadores y afiliados que estn asociados a nuestros programas de educacin en derechos humanos. Estas redes se pueden mantener mediante diversos tipos de apoyo, como mensajes de correo electrnico, boletines electrnicos peridicos, sitios web ricos en recursos, wikis, reuniones y talleres presenciales o llamadas cordiales del coordinador de educacin en derechos humanos de Amnista Internacional. RESULTADOS DE LAS REDES DE EDUCACIN EN DERECHOS HUMANOS DE AMNISTA INTERNACIONAL Las redes de educacin en derechos humanos pueden considerarse como una intervencin de apoyo al empoderamiento de las personas, que es uno de los muchos aspectos que los programas en este mbito tienen por objeto. Por tanto, podemos incluir la evaluacin de las iniciativas de la Red de Educacin en Derechos Humanos en la dimensin del cambio relativa al empoderamiento de personas. Sin embargo, en la medida en que la membresa de nuestras redes es representante de las instituciones a las que pertenece, puede considerarse que estas redes apoyan la segunda dimensin del cambio, relativa al empoderamiento de las ONG. Indicamos una vez ms los resultados relacionados con la segunda dimensin del cambio: Cambios en el activismo y la movilizacin (la unidad de anlisis es la organizacin no gubernamental) Cambios en las habilidades o la capacidad de movilizacin y de activismo de grupos organizados que representan a las personas titulares de derechos (por ejemplo, ONG, organizaciones de la sociedad civil o movimientos sociales); Nmero de organizaciones que prestan apoyo a cuestiones de derechos humanos; Cambios en la colaboracin y en la sinergia estratgica entre esas organizaciones; Nivel de participacin de las organizaciones en procesos de toma de decisiones de las personas garantes de derechos; Nmero de personas comprometidas con la movilizacin que lleva a cabo Amnista Internacional; Nmero de personas que son miembros de Amnista Internacional, forman parte de sus redes, o ambas cosas. METODOLOGA DE RECOPILACIN DE DATOS Lo ms probable es que la evaluacin de una red de educacin en derechos humanos tenga lugar en el contexto de un programa de educacin en derechos humanos de varios componentes. Separar los resultados obtenidos por la red de otros elementos resultantes del programa de educacin en derechos humanos es una tarea difcil, pero sigue siendo posible evaluar los rasgos de la red en cuestin. Las principales caractersticas sern: a) qu actividad tiene la red, y b) cunto la usan y la valora su propia membresa. Los elementos de una red pueden examinarse mediante una revisin documental o cualquier otra documentacin disponible sobre las actividades de la red (por ejemplo, actualizaciones mensuales en el sitio web o contribuciones de la membresa de la red a debates moderados por correo electrnico). En el mbito de las redes de Amnista Internacional, convendr determinar el esfuerzo que estn haciendo los coordinadores/as de educacin en derechos humanos y los centros de enlace de la organizacin para respaldar a sus redes nacionales. Por ejemplo, la encuesta del Programa de Educacin y Accin en Derechos Humanos (REAP) distribuida entre los coordinadores/as de educacin en derechos humanos inclua una lista de medidas de apoyo a las redes y peda a los coordinadores/as que indicasen cules de estos servicios prestaban al personal docente en derechos humanos de su pas. ( Encuesta del REAP a los coordinadores/as de educacin en derechos humanos/REAP HRE Co-ordinator Survey)
57
Asimismo habr que documentar el uso de estos apoyos y el valor que le dan los usuarios/as. Esta informacin puede obtenerse mediante revisiones documentales, as como a travs de encuestas o entrevistas al coordinador de educacin en derechos humanos y a la membresa de la Red de Educacin en Derechos Humanos. La literatura especializada en educacin destaca que las caractersticas singulares de las redes son su flexibilidad, la receptividad, el nfasis en la colaboracin y la puesta en comn de la informacin y los 25 recursos. Las evaluaciones de nuestras redes de educacin en derechos humanos debern incorporar estas caractersticas cualitativas de las redes, adems de todo resultado relativo a su membresa del que se tenga noticia.
58
MATERIALES ESCRITOS, RECURSOS Y OTROS PRODUCTOS DE LA EDUCACIN EN DERECHOS HUMANOS

En el marco de los programas de educacin en derechos humanos se elaborarn muchas clases de productos relacionados, que pueden ser evaluados por la calidad de su contenido y por su uso. Entre los tipos de materiales que se pueden preparar, cabe mencionar los siguientes ejemplos: conjunto de materiales de formacin (que se usar en el fomento de las capacidades del personal encargado de la formacin; podra ser en formato multimedia) plan de estudios (lecciones o actividades que se impartirn al alumnado en entornos formales o no formales) materiales de campaa o de sensibilizacin (como carteles o camisetas) productos relacionados con la educacin en derechos humanos, como revistas, boletines o sitios web Al igual que ocurre con las redes y las sesiones de formacin, la evaluacin de los materiales escritos, los recursos y otros productos de educacin en derechos humanos formar parte de una evaluacin ms compleja de nuestra planificacin de educacin de derechos humanos. EVALUACIN FORMATIVA DE MATERIALES EDUCATIVOS Puesto que la elaboracin de materiales educativos consume mucho tiempo y recursos, debemos trabajar en estrecha colaboracin con las personas participantes a fin de determinar qu recursos sern necesarios para alcanzar los resultados y las metas de nuestro programa de educacin en derechos humanos. Una vez que est en marcha la elaboracin del producto, es muy habitual que otras personas revisen los borradores de los materiales educativos antes de que se ultimen y empiecen a aplicarse. Esta revisin puede formar parte del proceso de evaluacin formativa que tiene lugar antes de que pongamos a prueba los materiales. Cuando especialistas y partes interesadas emprendan una revisin formativa, basada en los textos, de nuestros materiales, convendr aplicar un conjunto de criterios estandarizado, que pueda elaborarse en colaboracin con terceros. Los criterios que se presentan a continuacin se han utilizado para valorar la calidad de libros de texto, pero pueden adaptarse y ampliarse a los materiales educativos sobre derechos humanos, as como a materiales distintos de los libros de texto, como por ejemplo los vdeos: Contenido: es el contenido exacto y vlido? Nivel de lenguaje: es el lenguaje empleado accesible al alumnado? Mtodo pedaggico: es la metodologa adecuada para la edad y el nivel del alumno/a, y son tiles los ejercicios y los materiales de evaluacin? Presentacin y diseo: es adecuada la calidad de la maquetacin, el tamao y el estilo de fuente empleados, la legibilidad general, el espaciado, los mrgenes y la nitidez de la impresin? Ilustraciones: son las ilustraciones pertinentes y apropiadas por lo que se refiere a la calidad de ejecucin, el estilo, la relacin con el texto, la precisin y el uso de los colores? Originalidad: qu elementos originales o de enfoque creativo hay? Hay alguna caracterstica especial o algn incentivo concreto para el alumno/a? Calidad de los materiales: excede el recurso los requisitos mnimos de papel de impresin, materiales y encuadernado y, en ese caso, en qu medida? Apoyo al personal docente: qu ayuda se presta en forma de orientacin al personal docente o material adicional en: la informacin complementaria, la metodologa de la secuencia educativa, el material de evaluacin o ejercicios extra? 26
Estas caractersticas genricas de la evaluacin y la revisin de un producto pueden reforzarse con principios y temas especficos de derechos humanos. Por ejemplo, tal vez queramos aadir los siguientes dos criterios a la lista expuesta supra: Motivacin: tiene el material educativo posibilidades de involucrar al alumnado y personal docente en cuestiones de derechos humanos y de motivarlos para que aprendan ms y participen en acciones? xito: es probable que al usar este material educativo el alumnado obtenga los resultados previstos en relacin con el conocimiento, la comprensin, las actitudes, los valores, las habilidades y las conductas en el mbito de los derechos humanos?
59
REVISIONES DE LIBROS DE TEXTO ELABORADOS POR TERCEROS Podemos encontrar otros ejemplos de criterios de revisin procedentes de proyectos de investigacin sobre libros de texto que no se han emprendido en el contexto de una evaluacin formativa, sino con el fin de revisar materiales educativos existentes para detectar contenidos o enfoques incongruentes con los derechos humanos. La Fundacin de Historia de Turqua analiz en profundidad 190 libros de texto de enseanza primaria y secundaria con el objeto de detectar violaciones implcitas y explcitas de normas y principios de derechos humanos. Para cumplir los criterios del anlisis cualitativo se revisaron la forma, el contenido y las tcnicas pedaggicas de los materiales docentes. El anlisis pretenda detectar contenido y perspectivas contrarios a los valores de derechos humanos. Entre las reas temticas investigadas figuran las siguientes: violacin directa de los derechos humanos: tergiversacin, distorsin deliberada o ignorancia de conceptos fundamentales de derechos humanos; militarizacin del espacio cvico; promocin del nacionalismo y de la identidad nacional de forma xenfoba; exposicin de principios antidemocrticos o antiseculares; inclusin de elementos de la cultura patriarcal o prejuicios de gnero; reticencia a fomentar el pensamiento crtico, o uso de la educacin como herramienta para adoctrinar. Se pueden consultar ms detalles de este proyecto de revisin de libros de texto en el CD-ROM de este manual. ( Anlisis de libros de texto a cargo de la Fundacin de Historia de Turqua/Turkey History Foundation Textbook Analysis.) PONER A PRUEBA LOS RECURSOS Podemos dedicar una etapa entera de nuestro programa de educacin en derechos humanos a poner a prueba los materiales, lo cual recibe el nombre de ensayos de campo. En un ensayo de campo no slo habr una revisin del contenido del texto por parte de los usuarios/as (como el personal docente y el alumnado), sino que tambin se proporcionarn comentarios e impresiones a los elaboradores sobre cmo han funcionado realmente los materiales y las actividades en la prctica. Este tipo de evaluacin formativa puede ser muy til para entender qu actividades funcionan bien y por qu, y es una inversin importante que debe hacerse cuando se prev publicar y difundir a gran escala los materiales educativos. De hecho, en los casos en los que Amnista Internacional ha colaborado con Ministerios de Educacin en la produccin de un libro de texto sobre derechos humanos, los ensayos de campo han sido un requisito del propio gobierno. HERRAMIENTAS DE AMNISTA INTERNACIONAL Hay abundante literatura que ofrece un panorama general sobre los ensayos de campo, incluso los especficos de la planificacin de educacin en derechos humanos.27 El CD-ROM de este manual incluye los formularios de retroalimentacin, breves y fciles de rellenar, que utiliz Amnista Internacional Reino Unido cuando puso a prueba los materiales de su proyecto Lift Off (Despega) con maestros de enseanza primaria en la Repblica de Irlanda e Irlanda del Norte. ( Formularios de retroalimentacin sobre el ensayo de campo en Irlanda e Irlanda del Norte/Ireland-Northern Ireland Field Testing Feedback Forms.) METODOLOGA DE RECOPILACIN DE DATOS Entre los mtodos de recopilacin de informacin ms habituales se encuentran los siguientes: el personal docente (y, en ocasiones, tambin el alumnado) rellena formularios de retroalimentacin tras cada actividad o sesin de aprendizaje; el creador del material observa los recursos en accin; se entrevista al personal docente y al alumnado, y se revisa todo elemento relacionado con el ensayo de campo (como el trabajo del alumnado). stas son algunas preguntas genricas que pueden formularse a personal docente que estn poniendo a prueba los materiales, en las que se solicitan comentarios e impresiones sobre los procesos asociados a la puesta en prctica de la sesin de formacin: Se us la actividad tal como figuraba en el texto? Se modific de algn modo? En ese caso, cmo y por qu? Se complet la sesin de formacin? Fue satisfactoria la sesin de formacin? Justifique su respuesta. Sugerencias de cambios. La organizacin de grupos de discusin con el alumnado proporcionar informacin valiosa sobre sus puntos de vista y experiencias con la sesin de formacin. Los evaluadores pueden pedirles que comenten algn aspecto de la sesin que les resultase nuevo; si sta les hizo pensar de diferente manera
60
sobre algn asunto; si la disfrutaron, y cmo la valoran en comparacin con otras que hayan recibido sobre otros temas. EVALUACIN SUMATIVA Y VALORACIN DEL IMPACTO Tal vez queramos incorporar un anlisis de la calidad y el uso de nuestros materiales educativos sobre derechos humanos a toda evaluacin sumativa o valoracin del impacto que emprendamos. En el anlisis de la calidad de los materiales se podrn emplear los mismos criterios que en una evaluacin formativa, pero, en esta fase de la planificacin, esperamos haber acertado en el contenido de los materiales. Por tanto, en esta etapa desearemos averiguar con qu grado de satisfaccin se estn utilizando estos materiales de apoyo al aprendizaje y cmo contribuyen al empoderamiento de las personas, tanto del personal docente como del alumnado. Podemos pensar en investigar la implementacin de diversas formas, por ejemplo fijndonos en los productos, como el nmero de DVD elaborados y distribuidos, o el nmero de visitas a las secciones de nuestro sitio web dedicadas a la educacin en derechos humanos. Sin embargo, tambin hemos de consultar directamente a las personas participantes sobre cmo emplean realmente los materiales y cules perciben que son sus resultados. La Oficina Regional para Oriente Medio y el Norte de frica organiz una evaluacin sumativa de su revista bitrimestral de educacin en derechos humanos Mawared, cuyo informe final puede consultarse en el CD-ROM ( Evaluacin de la revista Mawared de Amnista Internacional/AI Mawared Evaluation.) La metodologa de evaluacin empleada refleja las sugerencias que se ofrecan supra: a) b) Lectura atenta de los 10 nmeros de Mawared, teniendo en cuenta la relacin entre el contenido de la revista y la estrategia de Amnista Internacional. El proceso de lectura inclua la revisin de los temas tratados ms significativos y la coherencia de la presentacin. Recopilacin de opiniones y recomendaciones de partes interesadas relevantes a travs de una serie de entrevistas semiestructuradas a activistas de derechos humanos y membresa de Amnista Internacional en los pases de Oriente Medio y el Norte de frica.
61
PROGRAMAS DE EDUCACIN EN DERECHOS HUMANOS BASADOS EN UN PLAN DE ESTUDIOS (POR EJEMPLO, EN ESCUELAS
U OTROS ENTORNOS DE APRENDIZAJE, INCLUIDA LA EDUCACIN A DISTANCIA UTILIZANDO INTERNET)
Un programa de educacin en derechos humanos basado en un plan de estudios es un curso de formacin o una secuencia planificada de actos de aprendizaje. Esta configuracin del aprendizaje se inspirar en los componentes y en las metodologas de evaluacin asociadas que ya se han mencionado, a saber, talleres, sesiones de formacin, productos de educacin en derechos humanos y posiblemente incluso redes de educacin en derechos humanos. Los programas basados en planes de estudios suelen darse en entornos de enseanza institucionalizados, como escuelas, facultades de formacin de profesorado, academias de polica, ONG o incluso espacios de educacin a distancia utilizando Internet. REAS DE INVESTIGACIN Las evaluaciones de programas basados en planes de estudios podrn investigar las siguientes cuatro reas: el entorno de enseanza en que se introduce el programa de educacin en derechos humanos; el alcance y la calidad de la implementacin del programa curricular de educacin en derechos humanos; los procesos de cambio (aprendizaje) que han tenido lugar; los resultados para el alumnado. METODOLOGA DE RECOPILACIN DE DATOS Debido a la naturaleza compleja de la planificacin curricular y de su evaluacin, ser necesario adoptar un enfoque cualitativo, que incluya entrevistas y grupos de discusin con alumnado y partes interesadas, observacin de los procesos de aprendizaje y del entorno de enseanza, encuestas de conocimientos y opinin, y revisin de documentos. Sin embargo, tambin se podrn recabar datos cuantitativos, como la asistencia, las puntuaciones de rendimiento y otros datos numricos que quizs ya se hayan recopilado en el entorno de enseanza. Si quisiramos documentar los resultados generales de nuestro programa curricular de educacin en derechos humanos en un grupo de alumnos/as y compararlos con otros que no participan en el programa, podramos incluir grupos de comparacin o de control en nuestra evaluacin. Lo ms probable es que este tipo de evaluacin se organice en el marco de una valoracin del impacto y contenga un anlisis estadstico. La metodologa de la evaluacin sumativa del proyecto Lift Off: Cross-Border Human Rights Education Initiative (Despega: iniciativa transfronteriza de educacin en derechos humanos), emprendido por Amnista Internacional Irlanda y Amnista Internacional Irlanda del Norte en escuelas de enseanza primaria, aun los enfoques cualitativo y cuantitativo. Los datos cualitativos se recopilaron mediante: grupos de discusin (profesorado, progenitores y nios y nias) y entrevistas individuales a las principales partes interesadas: membresa de la junta escolar, personal del proyecto y directores de las escuelas; estudios de caso de cuatro escuelas, dos en la Repblica de Irlanda y dos en Irlanda del Norte. En estos cuatro estudios de caso, los evaluadores visitaron las escuelas, hablaron con el alumnado y el profesorado, con los directores y con varios progenitores. Los datos cuantitativos fueron recopilados por el coordinador y los gestores del proyecto.28
62
EN EL PUNTO DE MIRA: ENFOQUE DEL ESTUDIO DE CASO El enfoque del estudio de caso se emplea a menudo para investigar cambios en el mbito del aula, el programa o la escuela. Los estudios de caso nos permiten integrar las mltiples fuentes de informacin con el fin de representar un contexto rico y matizado en el cual enmarcar la intervencin, los procesos de cambio y los resultados. Los estudios de caso pueden ayudarnos a entender el porqu de nuestra planificacin. Por lo que se refiere a la evaluacin del proyecto Lift Off de 2002, los estudios de caso reflejaron los siguientes temas:29 contexto general: tipo de escuela, tamao, zona de captacin, participacin en la elaboracin del plan de estudios, dotacin de personal; circunstancias de participacin en el proyecto: razones para involucrarse, reaccin del profesorado, participacin de la junta escolar, consentimiento parental; valores, espritu y disciplina de la escuela; cuestiones pedaggicas; percepcin del propsito del proyecto: deben las escuelas participar en este tipo de iniciativas? dificultades y problemas relativos al compromiso con cuestiones de derechos humanos; resultados para estudiantes, profesorado y la escuela en su conjunto; revisin de los principales elementos del proyecto; futuro del proyecto. Los estudios de caso se basan en gran medida en las entrevistas. Los protocolos de entrevistas semiestructuradas -llamadas conversaciones dirigidas- que se utilizaron en la evaluacin del proyecto Lift Off de 2002 con profesorado, alumnado, directores, progenitores, personal de Amnista Internacional y gestores de educacin se pueden consultar en el CD-ROM de este manual ( Protocolo de entrevistas en Irlanda e Irlanda del Norte/Ireland-Northern Ireland Interviewee Protocol). Tras haber abordado en cierta medida el catlogo de metodologas que se pueden emplear al evaluar un programa curricular de educacin en derechos humanos, regresamos a las cuatro reas de investigacin de la planificacin curricular: el entorno de enseanza en que se introduce el programa de educacin en derechos humanos; el alcance y la calidad de la implementacin del programa curricular de educacin en derechos humanos; los procesos de cambio (aprendizaje) que han tenido lugar; los resultados para el alumnado. Entre los aspectos del contexto de aprendizaje que se podrn documentar figuran los siguientes: contenido obligatorio del plan de estudios; maneras implcitas y explcitas de ensear y aprender (tradicin y cultura educativas); contenido y formas de valoracin (en especial, valoracin de importantes intereses en juego); abanico de cualidades que se pretende cultivar en el alumnado (por ejemplo, buena ciudadana); condiciones fsicas del aprendizaje (por ejemplo, acceso a los recursos o tamao de las aulas). Estas caractersticas del entorno de enseanza sern las lentes a travs de las cuales el personal docente participante decidir qu elementos de nuestro programa curricular se imparten, cmo se imparten y con qu fines. Cuando nuestra planificacin de educacin en derechos humanos sea el nico plan de estudios por ejemplo, en iniciativas de colaboracin con ONG asociadas o en cursos en lnea organizados directamente por Amnista Internacional, la evaluacin no tendr que ocuparse en la misma medida de muchos de estos elementos. EVALUACIN DEL PLAN DE ESTUDIOS SOBRE DERECHOS HUMANOS EN LAS ESCUELAS En el mbito escolar, la evaluacin del componente del plan de estudios puede incluir un cotejo entre el plan de estudios sobre derechos humanos y el plan de estudios obligatorio y especfico de la materia. Este ejercicio de cotejo puede emprenderse en un principio mediante una revisin documental, comparando el contenido y los resultados del alumnado de nuestro plan de estudios sobre derechos humanos con los del sistema educativo. Sin embargo, para entender de verdad este cotejo, tenemos que evaluar el uso real de nuestro plan de estudios sobre derechos humanos frente al plan educativo obligatorio. Nuestras evaluaciones curriculares nos deberan ayudar a entender cmo encaja el programa de educacin en derechos humanos en las normas educativas existentes, as como otras oportunidades y barreras dentro de la escuela que afectarn
63
a las capacidades del personal docente de emplear nuestro programa. Esto nos lleva a evaluar el grado y la calidad de la implementacin de nuestro programa de educacin en derechos humanos. Aunque tal vez tratemos nuestro programa curricular de educacin en derechos humanos como una intervencin nica, en realidad se trata de una serie de intervenciones diferenciadas e intencionadas (y a veces no intencionadas). Entre estas intervenciones figuran: los materiales educativos; el apoyo continuo que prestamos al personal docente para que use estos materiales educativos; las sesiones de formacin individuales que se imparten; y la calidad de estas sesiones de formacin. El apartado sobre ensayos de campo contiene sugerencias sobre cmo documentar la puesta en prctica de sesiones de formacin mediante encuestas, entrevistas y tareas de observacin. Cuando evaluamos el grado y la calidad de la implementacin, hemos de entender qu ha influido en las decisiones que el personal docente ha tomado sobre el uso del plan de estudios. EVALUACIN SUMATIVA Y VALORACIN DEL IMPACTO DE LOS PROCESOS DEL PROGRAMA Desearemos evaluar nuestros propios resultados: pusimos en marcha el programa curricular tal como pretendamos? Volviendo al ejemplo del proyecto Lift Off de 2002, en la evaluacin sumativa de esta iniciativa se analizaron diversas estrategias de apoyo ofrecidas a las escuelas, el profesorado y el alumnado, entre ellas: creacin de un grupo de trabajo compuesto por profesorado en activo de Irlanda del Norte y la Repblica de Irlanda para adaptar materiales existentes o elaborar materiales nuevos; propiciar el establecimiento de vnculos transfronterizos significativos entre escuelas, basado en la idea de que est aceptado que los lazos transfronterizos e intercomunitarios pueden ayudar a generar conocimiento y respeto mutuos; promocin del uso de tecnologa de comunicacin interactiva como medio de tender puentes 30 entre las dos jurisdicciones. En la evaluacin sumativa tambin se investigaron procesos de planificacin, de los que podemos pensar que reflejan parcialmente el enfoque basado en los derechos humanos: un anlisis de situacin respecto a las necesidades y oportunidades de un enfoque transfronterizo de educacin en derechos humanos en la Repblica de Irlanda e Irlanda del Norte, y el proceso consultivo empleado en el diseo y la implementacin del programa piloto. PROCESOS DE CAMBIO CURRICULAR En el proceso de determinar cmo se ha implementado nuestro programa curricular de derechos humanos, podemos investigar los procesos de cambio que han tenido lugar. En nuestro plan conceptual de monitoreo y evaluacin, habremos identificado los vnculos entre nuestras actividades de programa y los resultados esperados. Durante la evaluacin de la puesta en marcha del programa pueden buscarse pruebas de estos procesos de cambio, que nos ayudarn a interpretar todo indicio que recopilemos en relacin con los resultados. La evaluacin realizada del programa curricular del proyecto Lift Off se bas expresamente en la obra de Fullan y Stiegelbaur sobre el cambio curricular. A continuacin se presenta un extracto del informe de evaluacin del proyecto Lift Off de 2003: Bsicamente hay dos tipos de cambio, a los que Fullan y Stiegelbaur (1992) primer nivel y cambio de segundo nivel.
31
llaman cambio de
Los cambios de primer nivel son cambios con los que se pretende mejorar la eficiencia y efectividad de las actividades que ya estn en curso sin perturbar la forma en que se ensea al alumnado ni las estructuras en las que se les imparte la formacin. Los cambios de segundo nivel tienen un mayor alcance, pues afectan a la cultura y la estructura de las escuelas. Estos ltimos son ms fundamentales y efectivos. Los cambios curriculares que llevan aparejados parmetros de segundo nivel implican: el uso de materiales nuevos o revisados; el uso de nuevos enfoques de enseanza; la modificacin de convicciones (la percepcin que tienen las personas sobre sus funciones); el desarrollo de nuevas estructuras.32
64
En esta evaluacin, los investigadores procedieron posteriormente a hacer pesquisas sobre los siguientes asuntos en las escuelas del proyecto Lift Off: formacin interna, facilitadores/as externos e innovadores. La serie de informes de evaluacin preparados para el proyecto Lift Off: Cross-Border Human Rights Education Initiative ilustra en detalle las metodologas empleadas para estudiar procesos de cambio curricular en las escuelas. DIMENSIONES DEL CAMBIO En las evaluaciones de los programas curriculares de educacin en derechos humanos al igual que ocurre con todo nuestro trabajo en este mbito tambin se analizarn los resultados relativos a las personas participantes. En la terminologa de las dimensiones del cambio, esto se puede presentar tambin como cambios en la vida de las personas mediante el empoderamiento de alumnado y personal docente. Estos resultados deben haberse identificado claramente en nuestros planes de trabajo y reflejado en nuestro plan de monitoreo y evaluacin. Por ejemplo, a continuacin se exponen dos objetivos identificados para el empoderamiento de personas en el proyecto Lift Off: Cross-Border Human Rights Education Initiative: fomentar que el alumnado de la enseanza primaria de la Repblica de Irlanda e Irlanda del Norte comprendan cules son sus derechos y responsabilidades tal como se articulan en la Declaracin Universal de Derechos Humanos y en la Convencin sobre los Derechos del Nio, y qu repercusin pueden tener en sus vidas; promover entre el profesorado la comprensin de los derechos humanos y de las responsabilidades, y desarrollar una educacin en derechos humanos como parte integral del trabajo del personal docente de enseanza primaria, especialmente mediante los sindicatos de educacin primaria de Irlanda del Norte y la Repblica de Irlanda.33
Cambios en la vida de las partes interesadas primarias: Al recabar pruebas de los resultados en cada alumno/a, hemos de tener en cuenta las otras dimensiones del plan de estudios a las que ya nos hemos referido y que probablemente contribuyan a los resultados, a saber: el entorno de aprendizaje, el grado y la calidad de la implementacin, y los procesos de cambio generados por nuestra planificacin. En los apartados anteriores se exponan enfoques sobre la documentacin de resultados en los mbitos del conocimiento, la comprensin, los valores, las actitudes, las habilidades y la conducta. La literatura sobre educacin nos ofrece orientacin adicional sobre cmo podramos medir el cambio y el desarrollo en el alumnado tras su participacin en un programa curricular. Entre las tcnicas de recopilacin de datos figuran las siguientes: entrevistas, cuestionados o pruebas anteriores y posteriores a la formacin; preguntas directas sobre el impacto del curso; observacin de la participacin del alumnado en las sesiones de formacin; observacin de la participacin del alumnado en las actividades generales del colegio y en el ambiente escolar; medicin de los cambios de conducta asociados al entorno escolar; medicin de los cambios de conducta en la sociedad.34 Los mtodos de investigacin abiertos pueden ser preguntas (por ejemplo, qu son los derechos humanos?), pero tambin otras manifestaciones (como las basadas en el arte, la escritura o el teatro).35 Estos mtodos nos ayudarn a entender los asuntos desde el punto de vista de las personas participantes, aunque son ms difciles de analizar y comparar. Cambios en el activismo y la movilizacin: Hasta ahora nos hemos centrado en los resultados relativos a las personas participantes. Sin embargo, dado que los programas curriculares suelen desarrollarse en un entorno organizativo, tambin podemos esperar cambios institucionales. Esta perspectiva nos permite reunir todas las dimensiones del cambio de Amnista Internacional potencialmente relacionadas con nuestra planificacin de educacin de derechos humanos basada en planes de estudio. Poner en marcha un programa curricular a travs de Amnista Internacional o de una ONG asociada puede generar cambios en el activismo y la movilizacin (segunda dimensin del cambio). Si nuestro programa curricular se lleva a cabo en colaboracin con una institucin gubernamental, podremos ver indicios de cambios en las polticas y la rendicin de cuentas (tercera y cuarta dimensiones del cambio). Las dimensiones del cambio se abordarn posteriormente en esta seccin. INSTITUCIONES DE FORMACIN Y ENTORNOS DE EDUCACIN A DISTANCIA UTILIZANDO INTERNET Los ejemplos de programas curriculares que se ofrecen supra estn orientados a la planificacin escolar. No obstante, esta orientacin se puede adaptar a la labor curricular de instituciones de formacin y de
65
entornos de educacin a distancia utilizando Internet. Aunque todava no existen estudios disponibles pblicamente que investiguen la educacin en derechos humanos en estos contextos de aprendizaje, podemos recurrir a estudios que se han realizado sobre temas relacionados. En el CD-ROM de este manual se han incluido algunos estudios representativos sobre la evaluacin de la planificacin y la educacin a distancia utilizando Internet acerca del desarrollo profesional. Asimismo, podemos hacer nuestras propias bsquedas en lnea en el Centro de Informacin sobre Recursos de Educacin (Education Resources Information Center, ERIC: www.eric.ed.gov), en programas de bases de datos sobre educacin o en cualquier otro motor de bsqueda con el fin de encontrar estudios de cuyas metodologas nos podamos beneficiar.
66
PROYECTOS EXPERIMENTALES (POR

EJEMPLO, CLUBES ESCOLARES, CAMPAMENTOS DE VERANO O VISITAS DE ESTUDIO DE AMNISTA INTERNACIONAL)
METODOLOGA DE RECOPILACIN DE DATOS En la evaluacin de proyectos de educacin en derechos humanos breves y basados en la experiencia se recurrir a muchos de los procesos y metodologas que se han expuesto supra. Nuestros conceptos de monitoreo y evaluacin y nuestros planes de recopilacin de datos documentarn los resultados previstos respecto al empoderamiento de personas. Los resultados esperados de nuestra intervencin debern ser realistas. Convendr que recabemos algunos de los mismos datos antes y despus de las sesiones de formacin, con el fin de averiguar si han cambiado el conocimiento, la comprensin, los valores, las actitudes, las habilidades o la conducta de las personas participantes. Este tipo de informacin suele recopilarse mediante encuestas, que complementaremos con entrevistas al trmino del proyecto en cuestin. Dado que muchos de estos proyectos tienen un componente de reflexin, podremos pedir a las personas participantes que escriban un diario mientras participan en el proyecto. Al igual que ocurre con la planificacin curricular, podemos usar mtodos de investigacin abiertos una vez concluido el proyecto, por ejemplo, mtodos basados en preguntas, arte, escritura y teatro. Estos proyectos experimentales aspiran a surtir efectos duraderos en el alumnado. A ser posible, hemos de hacer un monitoreo del alumnado algn tiempo despus de que haya acabado el proyecto para determinar si se han mantenido los cambios sobre la propia imagen, la imagen de otras personas, la visin del mundo, las preocupaciones o la conducta. Aquello que el alumnado recuerde y valore nos resultar muy instructivo a la hora de disear una planificacin futura de esta ndole. Por ejemplo, durante la evaluacin del impacto de la participacin estudiantil en clubes de derechos humanos de Polonia en el marco del Programa de Educacin y Accin en Derechos Humanos (REAP), muchos profesores/as afirmaron que numerosos estudiantes del primer ciclo de enseanza secundaria que haban pertenecido a clubes de derechos humanos crearon otros clubes durante el segundo ciclo de enseanza secundaria. Estos proyectos basados en la experiencia pretenden ser un parntesis frente a la enseanza formal y exponer a las personas participantes a experiencias nuevas y alternativas. Las cualidades de estas experiencias y los procesos de cambio que aspiran a catalizar deben explorarse plenamente en la evaluacin. Por ejemplo: Los clubes escolares ofrecen un foro al alumnado para que emprenda y lleve a cabo por primera vez actividades o acciones de sensibilizacin sobre derechos humanos. En los campamentos de verano es posible reunir a jvenes de grupos que pueden desconocer la realidad del otro, o incluso estar en conflicto. Las visitas de estudio nos permiten ver los de educacin en derechos humanos que se estn realizando en un contexto muy diferente al nuestro. Nuestra evaluacin debe documentar cmo se diferencian realmente estas experiencias de otras que el alumnado ya ha probado y qu significado tiene este descubrimiento para ellos. En el caso de los programas de radio comunitarios, las actividades de teatro u otros eventos de sensibilizacin, las evaluaciones pueden consistir en encuestas y entrevistas con miembros del pblico, as como en tareas de observacin etnogrfica. En tales investigaciones normalmente se aborda lo siguiente: caractersticas contextuales del pblico (estamos llegando a las personas a las que queremos llegar?); contacto con el programa (cunto escucharon, leyeron u observaron las personas participantes?); reacciones al programa (les gust?); impacto del programa (cambios en los conocimientos, las actitudes o la conducta?). El apartado titulado Referencias bibliogrficas al final de este manual incluye una referencia a la evaluacin de un programa de radio comunitario en Sudfrica. Las evaluaciones formativas realizadas cuando el proyecto basado en la experiencia est elaborndose o empezando a ponerse en marcha permitirn modificarlo en medio del proceso, lo que nos ayudar a lograr los resultados que nos hemos fijado.
67
ORGANIZACIONES O INSTITUCIONES ASOCIADAS QUE INCORPORAN LA EDUCACIN EN DERECHOS HUMANOS (POR

EJEMPLO, COLEGIOS AMIGOS DE LOS DERECHOS HUMANOS, ORGANIZACIONES COMUNITARIAS U ORGANISMOS GUBERNAMENTALES)
Muchos de nuestros programas de educacin en derechos humanos tratarn de fomentar o reforzar las capacidades de organizaciones a fin de que emprendan actividades en este mbito. Para ello, es necesario reforzar nuestras propias capacidades de educacin en derechos humanos. En este apartado examinamos formas de evaluar los resultados relativos al fomento de la capacidad institucional, as como los entornos potenciadores para la educacin en derechos humanos en general, mediante polticas y acciones relacionadas con la educacin en derechos humanos emprendidas por otras instituciones.
Fomento de las capacidades de Amnista Internacional para impartir educacin en derechos humanos
Poner en marcha la planificacin de educacin en derechos humanos nos ayudar siempre a aprender y a reforzar nuestra capacidad de impartir educacin en este mbito. Para estos procesos de aprendizaje nos ser til desde el punto de vista formal participar en un proceso de monitoreo y evaluacin continuo y reflexivo. METODOLOGA DE RECOPILACIN DE DATOS Los componentes de nuestro programa de educacin en derechos humanos pueden evaluarse, por una parte, cuantitativamente. Tendremos que documentar los resultados y el impacto en nuestra organizacin mediante indicadores como: nmero de formadores clave a nuestra disposicin; materiales educativos que hemos adaptado o elaborado; pertenencia a nuestras redes de educacin en derechos humanos; tipos de apoyo continuo que prestamos al personal docente de derechos humanos; desarrollo continuo de la planificacin de educacin en derechos humanos dentro de Amnista Internacional; grado de compromiso institucional con la poltica de educacin en derechos humanos y la implementacin de los programas (debates, respuestas, presupuestos). Por otra parte, estos componentes del programa de educacin en derechos humanos tambin se pueden evaluar cualitativamente. Querremos entender qu capacidad y efectividad tienen nuestros principales formadores, cmo trabajan los multiplicadores y si se estn usando nuestros materiales educativos. Lo mejor es recabar la informacin en la fase de evaluacin formativa para poder hacer los ajustes necesarios en la planificacin. Nuestras capacidades internas de educacin en derechos humanos se demostrarn de forma cuantitativa directamente mediante los productos del programa como el nmero de sesiones de formacin organizadas o el nmero de participantes, que son datos que se pueden reflejar en las evaluaciones. EJEMPLO DE AMNISTA INTERNACIONAL La Oficina Regional para Oriente Medio y el Norte de frica llev a cabo la evaluacin de un programa de educacin en derechos humanos en la que examinaba la capacidad de implementacin de Amnista Internacional. Mediante entrevistas y revisiones documentales, los evaluadores externos pudieron formular observaciones y recomendaciones para mejorar los procesos de planificacin, implementacin, evaluacin y monitoreo de la organizacin. Esta evaluacin se puede consultar en el CD-ROM del manual. ( Informe final de la Oficina de Amnista Internacional en Beirut/Beirut Amnesty report-final)
68
DIMENSIONES DEL CAMBIO Tal como se indicaba, en el Plan Estratgico Integrado (PEI) 2010-2016 la educacin en derechos humanos es un pilar fundamental de varias metas, entre ellas, hacer crecer y desarrollar el movimiento global de derechos humanos, promover la participacin activa de membresa y simpatizantes de Amnista Internacional, e invertir en voluntariado, personal, lderes y sistemas. Estos resultados estn incorporados a la categora de las dimensiones del cambio relativa al activismo y la movilizacin, en la cual la unidad de anlisis es la organizacin no gubernamental: Cambios en el activismo y la movilizacin (la unidad de anlisis es la organizacin no gubernamental) Cambios en las habilidades o la capacidad de movilizacin y de activismo de grupos organizados que representan a las personas titulares de derechos (por ejemplo, ONG, organizaciones de la sociedad civil o movimientos sociales); Nmero de organizaciones que prestan apoyo a cuestiones de derechos humanos; Cambios en la colaboracin y en la sinergia estratgica entre esas organizaciones; Nivel de participacin de las organizaciones en procesos de toma de decisiones de las personas garantes de derechos; Nmero de personas comprometidas con la movilizacin de Amnista Internacional; Nmero de personas que son miembros de Amnista Internacional, forman parte de sus redes, o ambas cosas. Por tanto, la evaluacin interna sobre el fomento de las capacidades de la planificacin de educacin en derechos humanos podra incorporar estos otros resultados de nuestra organizacin. La valoracin del impacto realizada sobre la actividad del Programa de Educacin y Accin en Derechos Humanos (REAP) inclua un cuestionario para coordinadores/as de educacin en derechos humanos que exploraba estas reas de impacto, as como la creacin de asociaciones sobre educacin en derechos humanos. El cuestionario se puede consultar en el CD-ROM del manual. ( Encuesta a coordinadores/as de actividades de educacin en derechos humanos del REAP/REAP HRE Co-ordinator Survey)
Fomento de las capacidades de socios institucionales

Nuestra planificacin de educacin en derechos humanos puede incorporar expresamente a los resultados el fomento de las capacidades de nuestros socios. El fomento de las capacidades de los socios es coherente con la campaa Exige Dignidad de Amnista Internacional, que promueve la asociacin y el fomento de las capacidades con ONG y con organizaciones de la sociedad civil en torno a la meta de erradicar la pobreza. La educacin en derechos humanos es un componente de este enfoque de la planificacin basado en los derechos humanos. Entre nuestros socios puede haber no slo ONG y organizaciones de la sociedad civil, sino tambin organismos gubernamentales, por ejemplo, ministerios nacionales, oficinas administrativas provinciales o de distrito, academias de formacin o escuelas. En nuestro programa y en los planes de monitoreo y evaluacin deben establecerse claramente objetivos relativos al fomento de las capacidades de los socios. Hemos de tener estrategias claras de fomento de la capacidad institucional que vayan ms all de la formacin de funcionarios individuales. Respecto a otros resultados que queramos medir, debemos asegurarnos lo mximo posible desde el comienzo de que las estrategias son adecuadas para los objetivos que hemos fijado. RESULTADOS PARA LOS SOCIOS Las capacidades de los socios para emprender actividades de educacin en derechos humanos pueden mejorarse de varias maneras con nuestra planificacin. Algunas de las estrategias son las siguientes: incorporacin de personal o formadores de los socios a los programas de formacin de Amnista Internacional; captacin de apoyos en la organizacin para incorporar la educacin en derechos humanos a su planificacin provisin de recursos y materiales educativos de apoyo asesoramiento y apoyo continuados a las actividades de educacin en derechos humanos emprendidas por los socios Capacidad para emprender actividades de educacin en derechos humanos: Podramos buscar distintos tipos de indicios sobre la capacidad de nuestros socios de emprender iniciativas de educacin en derechos humanos, que reflejaran en gran medida los enumerados supra para la propia Amnista Internacional: nmero de formadores clave; materiales educativos que hemos adaptado o elaborado;
69
tipos de recursos y apoyo continuos que prestamos a la membresa de las redes; elaboracin de polticas, leyes o programas de derechos humanos o de educacin en este mbito; aplicacin de polticas, leyes y programas nuevos de derechos humanos o de educacin en este mbito; grado de compromiso institucional con las polticas de educacin en derechos humanos y la aplicacin de los programas (debates, respuestas, presupuestos). Estructuras de gestin de proyectos: Podramos evaluar la capacidad general de nuestros socios para planificar, coordinar e impartir educacin relevante en derechos humanos, por ejemplo, la creacin de estructuras de gestin de proyectos. El Proyecto de Educacin en Derechos Humanos de frica Occidental foment en los socios estas capacidades; en el CD-ROM de este manual se puede consultar el correspondiente marco lgico de monitoreo y evaluacin del proyecto. ( Fomento de la capacidad de los socios en el Proyecto de EDH de frica Occidental/West Africa HRE Capacity Development of Partners.) Colaboracin reforzada: En las valoraciones del impacto asociadas a las dimensiones del cambio tambin se podr examinar la mejora de la colaboracin entre Amnista Internacional y organizaciones asociadas a la hora de apoyar la educacin en derechos humanos y otras cuestiones de este mbito. DIMENSIONES DEL CAMBIO Podramos igualmente investigar las siguientes reas, relativas a la dimensin del cambio de polticas y rendicin de cuentas: Cambios en las polticas y en la rendicin de cuentas (la unidad de anlisis son los rganos gubernamentales, las organizaciones intergubernamentales y otros actores no estatales) Mayor rendicin de cuentas gracias a que las personas garantes de derechos conocen mejor los derechos humanos y su obligacin de defenderlos. Se elaboran polticas, leyes y programas nuevos de derechos humanos o de educacin en este mbito. Se aplican polticas, leyes y programas nuevos de derechos humanos o de educacin en este mbito. Grado de compromiso institucional con la aplicacin de polticas o programas de educacin en derechos humanos (debates, respuestas, presupuestos). Nivel de aceptacin de grupos de la sociedad civil en relacin con los derechos humanos o la educacin en este mbito. Nivel de transparencia de los procesos institucionales. Amplitud de las plataformas para la participacin de las organizaciones de la sociedad civil en los procesos de toma de decisiones. Cambio en el discurso y la opinin pblicos. Debemos tener en cuenta que los cambios en las polticas curriculares, las leyes y los programas y materiales de formacin autorizados de Amnista Internacional pueden afectar tambin al trabajo de terceros en este mbito, lo cual genera un entorno potenciador para la educacin en derechos humanos. Sin embargo, los entornos potenciadores pueden fomentarse mediante el trabajo de numerosos actores de la educacin en derechos humanos. EJEMPLO DE AMNISTA INTERNACIONAL En el Proyecto de Educacin en Derechos Humanos de frica Occidental, los resultados acumulativos de las iniciativas de Amnista Internacional en el mbito nacional se percibieron como entornos potenciadores para la prctica de la educacin en derechos humanos. Los objetivos investigados fueron los siguientes: acceso a formacin pertinente y materiales y herramientas de sensibilizacin, y cooperacin y eficacia mejoradas de la educacin en derechos humanos en los diversos actores. ( Entornos potenciadores para la EDH de frica Occidental/West Africa HRE Enabling Environments for HRE.) MODELO DE CAMBIO: MAPEO DE ALCANCES En la primera seccin de este manual se introduca el concepto de mapeo de alcances, que presta especial atencin a la trayectoria del cambio, en vez de identificar indicadores de cambio al comienzo de la planificacin. Es un enfoque de evaluacin empleado con los socios en la planificacin del fomento de las capacidades. Los indicadores del trabajo de los socios se pueden crear a medida que se desarrolla el proyecto, y la labor de Amnista Internacional se percibir como una contribucin, ms que como la nica causa de los resultados observados. El mapeo de alcances puede incorporarse a los marcos lgicos de los proyectos de Amnista Internacional que traten sobre el fomento de la capacidad organizativa. INICIATIVAS DE CAMBIO BASADAS EN LAS ESCUELAS Este enfoque puede ser especialmente pertinente en iniciativas de cambio basadas en las escuelas, como las que promueve el Proyecto Colegios Amigos de los Derechos Humanos. Esta iniciativa de fomento de
70
las capacidades presupone que las escuelas elaborarn sus propios planes de accin e indicadores asociados de productos y resultados, y refleja el enfoque del mapeo de alcances, que permite que ciertos resultados surjan de forma natural en el contexto de los proyectos de fomento de las capacidades. El Proyecto Colegios Amigos de los Derechos Humanos ha identificado cuatro dimensiones diferentes de integracin de los principios y las prcticas de derechos humanos en la vida de las escuelas: plan de estudios, mbito ajeno al plan de estudios, gobernanza escolar y relaciones de la comunidad escolar.36 El proyecto ha integrado el monitoreo y la evaluacin en todas las fases del programa y ha proporcionado herramientas para ayudar a las partes interesadas a desempear estas funciones. Entre las herramientas creadas figuran las siguientes: Herramientas de anlisis inicial que pueden emplearse como datos de partida, como la distribucin de Tomar la temperatura de derechos humanos de tu escuela o el anlisis FODA. ( Anlisis iniciales en los colegios amigos de los derechos humanos/Human Rights Friendly Schools Initial Analyses.) Plantilla para las actividades de monitoreo y evaluacin, que incorpora datos de partida, productos y resultados asociados al plan de accin, y el uso de grupos de discusin y encuestas en todo el mbito de la escuela para fomentar el dilogo y la retroalimentacin del proyecto. ( Herramientas de monitoreo y autoevaluacin para los colegios amigos de los derechos humanos/Self-Evaluation and Monitoring Tools for Human Rights Friendly Schools.) Estas iniciativas se complementan con el marco terico proporcionado por Amnista Internacional, que incluye los principios globales del cambio escolar (basados en un marco de derechos humanos) que podrn observarse al elaborar planes de accin basados en las escuelas y al implementar el Proyecto Colegios Amigos de los Derechos Humanos. Cada uno de los diez Principios Globales tiene cuatro pasos de desarrollo, que las escuelas pueden usar como parmetros de evaluacin de su propio progreso en relacin con estos principios. Por ejemplo, el Principio Global 4 establece que: Un colegio amigo de los derechos humanos adopta la inclusin en todos los aspectos de la vida escolar. A continuacin se presentan los cuatro pasos de desarrollo destinados a lograr la plena inclusividad en las escuelas.
DIAGRAMA 10 REALIZACIN PROGRESIVA DEL PRINCIPIO GLOBAL 4: CMO PUEDEN LOS COLEGIOS ADOPTAR PLENAMENTE LA INCLUSIVIDAD? 37 Caractersticas Paso 1 El colegio no es una comunidad plenamente Los colegios identifican de forma colectiva (ya sea en inclusiva; membresa de la comunidad reuniones del gobierno municipal o del consejo escolar perteneciente a minoras y a sectores o en talleres de aula en los que participen todas las marginados se sienten excluidos. partes interesadas) las barreras que impiden que los colegios sean lugares ms inclusivos, y se proponen ideas para convertirlos en centros de enseanza ms integradores. Caractersticas Paso 2 La membresa de la comunidad escolar se La direccin de los colegios formula recomendaciones sensibiliza y se familiariza con las generales basadas en las aportaciones de ideas y cuestiones relacionadas con la inclusin, a dirigidas a destacar las acciones que se pueden travs de iniciativas infrecuentes y no emprender para crear un colegio ms inclusivo, y sistemticas. adopta iniciativas para fomentar la inclusin. Caractersticas Paso 3 Toda la membresa de la comunidad escolar La direccin de los colegios consulta a diferentes colabora para promover la inclusin basada miembros de la comunidad escolar y crea iniciativas en los principios de derechos humanos. sistmicas cuyo objetivo es empoderar a todo el alumnado del colegio, haciendo hincapi en garantizar la inclusin de estudiantes pertenecientes a minoras y a sectores marginados. Como parte del proceso, se fomenta la participacin. Caractersticas Paso 4 El colegio encarna a una comunidad Los colegios valoran el progreso estableciendo inclusiva, donde las personas indicadores, realizando encuestas de valoracin o pertenecientes a minoras y sectores entrevistas de grupo, e incorporando despus la marginados disfrutan de igualdad de informacin obtenida al nuevo plan estratgico. oportunidades para participar en la vida escolar.
METODOLOGA DE RECOPILACIN DE DATOS

71
La evaluacin de las actividades de fomento de las capacidades es adecuada para el enfoque de estudios de caso, en los que se recopilan datos tanto cuantitativos como cualitativos. Uno de los estudios de caso incluidos en la valoracin del impacto del Programa de Educacin y Accin en Derechos Humanos (REAP) evala cmo Amnista Internacional Sudfrica fomenta las capacidades de educacin en derechos humanos de otras ONG. Este estudio de caso, que se puede consultar en el informe ntegro de evaluacin del REAP, se elabor a base de entrevistas, revisiones documentales (calendarios de formacin) y datos procedentes de encuestas (distribuidas al coordinador de educacin en derechos humanos, a formadores clave y a trabajadores de la ONG que recibieron formacin para actuar como multiplicadores).
72
CONTENIDO DEL CD-ROM

El CD-ROM que acompaa a este manual contiene varias herramientas y recursos prcticos de monitoreo y evaluacin que pueden adaptarse fcilmente a sus programas de educacin en derechos humanos. El contenido del CD-ROM es el siguiente: 1. 2. 3. Marco lgico de la educacin en derechos humanos en frica Occidental Evaluacin de la revista Mawared de Amnista Internacional Evaluacin de la formacin a profesorado impartida por Amnista Internacional Reino Unido y el Instituto Britnico de Derechos Humanos (BIHR) 4. 5. 6. Anlisis de datos del Manual de gestin de Friendly Project Cuestionario de monitoreo de Beirut sobre el fomento de las capacidades Mtodo de EIP de autoevaluacin y evaluacin de igual a igual de formadores de profesorado 7. 8. 9. Metodologa de evaluacin de la formacin de Equitas Anlisis iniciales en los colegios amigos de los derechos humanos Formularios de retroalimentacin sobre el ensayo de campo en Irlanda e Irlanda del Norte
10. Protocolo de entrevistas en Irlanda e Irlanda del Norte 11. Medicin de actitudes a travs de casos hipotticos 12. Encuesta a las personas beneficiarias del REAP 13. Encuesta a coordinadores/as de actividades de educacin en derechos humanos del REAP 14. Encuesta del REAP a formadores clave e instrucciones 15. Marco lgico del Programa de Educacin y Accin en Derechos Humanos (REAP) 16. Encuesta del REAP a multiplicadores, encuesta a grupos de comparacin e instrucciones 17. Herramientas de monitoreo y autoevaluacin para los colegios amigos de los derechos humanos 18. Anlisis de libros de texto a cargo de la Fundacin de Historia de Turqua 19. Fomento de la capacidad de los socios en el proyecto de EDH de frica Occidental 20. Fomento de la capacidad de EDH de formadores en frica Occidental 21. Empoderamiento de los beneficiaros gracias a la educacin en derechos humanos en frica Occidental 22. Entornos potenciadores para la EDH de frica Occidental
73
NOTAS FINALES
1. 2. 3. 4. 5. 6. 7. Amnista Internacional, Educacin en Derechos Humanos: Construir una cultura global de derechos humanos (ndice: POL 32/006/2005) Amnista Internacional, Declaracin de Prioridades Globales para 2010 y 2011: Transicin al nuevo PEI, 2009 (ndice: POL 50/012/2009). Amnista Internacional, 29 Reunin del Consejo Internacional. Circular 45. Plan Estratgico Integrado 2010-2016 acordado en la RCI de 2009 (ndice: ORG 52/004/2009). Brian Kern, International Projects: Human Rights Education Evaluation and Impact Assessment Project, presentado en el Foro Internacional de Educacin en Derechos Humanos, 23 de febrero de 2008. Asociacin Americana de Evaluacin, Guiding Principles for Evaluators. Fairhaven, Massachusetts: Asociacin Americana de Evaluacin, 2004. Amnista Internacional, Las dimensiones del cambio de AI, 2008 (ndice: POL 50/010/2008). D.L. Kirkpatrick et al., Evaluating Training Programs: The Four Levels, 3 edicin, San Francisco: Berrett-Koehler Publishers, tal como se cita en Equitas y Oficina del Alto Comisionado de la ONU para los Derechos Humanos (prxima publicacin), Evaluating Human Rights Education Activities: A Handbook for Human Rights Educators, Ginebra: Oficina del Alto Comisionado de la ONU para los Derechos Humanos, borrador de junio de 2009, p. 34. Amnista Internacional, Manual de gestin de Friendly Project, 2006. Para obtener informacin ms detallada sobre cmo realizar un anlisis FODA o PEST, vase Amnista Internacional, Manual de gestin de Friendly Project, 2006. Para obtener informacin sobre cmo emprender un anlisis de situacin basado en los derechos humanos, vase http://www.ohchr.org/Documents/Publications/FAQsp.pdf y, en el caso especfico de la planificacin sobre los derechos de la infancia: www.crin.org/docs/Child_Rights_Situation_Analysis_Final%5B1%5D.pdf. Para obtener directrices sobre cmo llevar a cabo un anlisis de las partes interesadas, vase Amnista Internacional, Anlisis de la parte interesada, Manual de gestin de Friendly Project, 2006. Amnista Internacional, Planificacin y gestin de proyectos: Definicin de trminos, Manual de gestin de Friendly Project, 2006. Amnista Internacional, Cmo recaudar millones de entidades que ofrecen financiacin, 2008 (ndice: FIN 21/002/2008). Agencia Canadiense de Desarrollo Internacional (CIDA), How to Perform Evaluations Participatory Evaluations. Quebec: CIDA, 2001, pp. 3-4. Para simplificar, se han combinado los niveles 3 y 4 de las dimensiones del cambio de Amnista Internacional rendicin de cuentas y polticas, que en ambos casos ataen a las personas garantes de derechos. D. Roduner, W. Schlppi y W. Egli, Logical Framework Approach and Outcome Mapping. A Constructive Attempt at Synthesis, Zrich: AGRIDEA y NADEL, 2008, p. 16. Para consultar una lista de posibles competencias del profesorado sobre educacin en derechos humanos, vase L. Davies et al., Human Rights Education Core Competencies, 2010, en el sitio web de Human Rights Education Associates (HREA):
8. 9. 10.
11. 12. 13. 14. 15. 16. 17.
www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=5452&category_id =2&category_type=3&group.
18. Para ms informacin sobre cmo elaborar indicadores, vase Amnista Internacional, Guidance on Developing Your National Amnesty International Human Rights Education Monitoring and Evaluation Plan; la seccin 3 de esta gua incluye ejemplos de indicadores para programas de educacin en derechos humanos. 19. Amnista Internacional, Impact Assessment Methodology step by step, 2009. 20. Amnista Internacional, Impact Assessment Methodology step by step, 2009. 21. D.L. Kirkpatrick et al., Evaluating Training Programs: The Four Levels, 3 edicin, San Francisco: Berrett-Koehler Publishers, tal como se cita en Equitas y Oficina del Alto Comisionado de la ONU para los Derechos Humanos (prxima publicacin), Evaluating Human Rights Education Activities: A Handbook for Human Rights Educators, Ginebra: Oficina del Alto Comisionado de la ONU para los Derechos Humanos, borrador de junio de 2009, p. 34. 22. Vase L. Davies et al., Human Rights Education Competencies, borrador, enero de 2010,
www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=5452&category_id =2&category_type=3&group. 23. Vase M. Sinclair et al., Learning to Live Together: Design, Monitoring and Evaluation of Education for Life Skills, Citizenship, Peace and Human Rights, Eschborn y Pars: GTZ y
UNESCO, 2008, pp. 113-115.
74
24. M.S. Khalil, Evaluation Report of the Capacity Building Work of Amnesty International Middle East and North Africa Regional Office Beirut (IS Beirut) for the Period April 2004 March 2008, 2009, p. 8. 25. Comisin Educativa de los Estados, A Policymakers Guide to Education Reform Networks. Denver, Colorado: Comisin Educativa de los Estados, 1997. 26. T. Hunt, Effective interpretation of curriculum into print materials, Education for an Open Society Conference, septiembre de 1995, tal como se cita en Evaluation in the Human Rights Education Field: Getting Started, Felisa Tibbitts, HREA/Comit Helsinki de Pases Bajos, 1997, pp. 15-16. 27. Vase F. Tibbitts, Field testing of materials en Evaluation in the Human Rights Education Field, Getting Started, HREA/Comit Helsinki de Pases Bajos, 1997. 28. P. King y R. Austin, Cross-Border Primary School Human Rights Education Initiative 2000-2003: An Evaluation, 2002, evaluacin llevada a cabo para Amnista Internacional Irlanda, p. 24. 29. Gleeson et al., 1999, pp. 72-73, tal como se ha recogido y citado en P. King y R. Austin, CrossBorder Primary School Human Rights Education Initiative 2000-2003: An Evaluation, 2002, evaluacin llevada a cabo para Amnista Internacional Irlanda, p. 25. 30. P. King y R. Austin, Cross-Border Primary School Human Rights Education Initiative 2000-2003: An Evaluation, 2002, evaluacin llevada a cabo para Amnista Internacional Irlanda, p. 6. 31. M.G. Fullan y S. Stiegelbaur, The New Meaning of Educational Change, Cassel, Londres, 1992. 32. M.G. Fullan y S. Stiegelbaur, The New Meaning of Educational Change, Cassel, Londres, 1992, p. 29. 33. M.G. Fullan y S. Stiegelbaur, The New Meaning of Educational Change, Cassel, Londres, 1992, p. 9. 34. M. Sinclair et al., Learning to Live Together: Design, Monitoring and Evaluation of Education for Life Skills, Citizenship, Peace and Human Rights, Eschborn y Pars: GTZ y UNESCO, 2008, p. 100. 35. Vase M. Sinclair et al., Learning to Live Together: Design, Monitoring and Evaluation of Education for Life Skills, Citizenship, Peace and Human Rights, Eschborn y Paris: GTZ y UNESCO, 2008, pp. 96-134. 36. Amnista Internacional, Guidelines for Human Rights Friendly Schools, (ndice: POL 32/002/2009), p. 17. 37. Amnista Internacional, Guidelines for Human Rights Friendly Schools, (ndice: POL 32/002/2009), p. 46.
75
REFERENCIAS BIBLIOGRFICAS
Aspectos tericos: modelos y enfoques de evaluacin
The Logic Model Workbook disponible en: Innovation Network (Transforming Evaluation for Social Change), www.innonet.org The Evaluation Handbook disponible en lnea a travs de la Fundacin W.K. Kellogg en: www.wkkf.org/knowledge-center/resources/2010/W-K-Kellogg-Foundation-Evaluation-Handbook.aspx Measuring Program Outcomes: A Practical Approach disponible en lnea a travs de United Way of America en: http://www.unitedwaystore.com/product/measuring_program_outcomes_a_practical_approach/progra m_film Agencia Canadiense de Desarrollo Internacional (CIDA), How to Perform Evaluations Participatory Evaluations, Quebec: CIDA, 2001, disponible en: www.oecd.org/dataoecd/8/3/35135226.pdf S. Ulrich y F. M. Wenzel (sin fecha), Participatory Evaluation A Perspective for Human Rights Education, Agencia Federal para la Educacin Cvica, disponible en: www.hrea.net/index.php?base_id=104&language_id=1&erc_doc_id=4238&category_id=4&category_t ype=3&group M.G. Fullan y S. Stiegelbaur, The New Meaning of Educational Change, Cassel, Londres, 1992
Aspectos prcticos: recursos generales sobre evaluacin educativa y evaluacin especfica de educacin en derechos humanos
F. Tibbitts, Evaluation in the Human Rights Education Field, Getting Started, HREA/Comit Helsinki de Pases Bajos, 1997, disponible en: www.hrea.org/pubs/EvaluationGuide/index.html Contiene unas orientaciones excelentes sobre modelos de evaluacin de programas, metodologas de recopilacin de datos y herramientas prcticas de valoracin. A. Mihr, Human Rights Education Methods, Institutions, Culture, and Evaluation, Instituto de Ciencias Polticas, Universidad de Magdeburg, 2004, disponible en: http://www.anjamihr.com/resources/HRE-Discussion-Paper-MIHR-PDF.pdf K. Hirseland y M. Cecchini, Evaluation in the Field of Education for Democracy, Human Rights, and Tolerance A Guide for Practitioners, Fundacin Bertelsmann, 2004, disponible en: www.bertelsmann-stiftung.org/cps/rde/xchg/SID-0A000F0ABA90B1E1/bst_en/hs.sl/publikationen_2799.htm P. Martin, Self Help Human Rights Education Handbook, Centro para el Estudio de los Derechos Humanos, Universidad de Columbia, 1996, disponible en: www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=213&category_id=4&category_ty pe=3&group Amnista Internacional, Evaluacin: Gua para principiantes, 1999, disponible en: http://www.amnesty.org/en/library/info/POL32/003/1999 El propsito de este documento, elaborado por el Secretariado Internacional, es ofrecer una aproximacin sencilla al proceso de evaluacin [y] est especialmente dirigido a quienes de uno u otro modo trabajan en programas orientados a la introduccin de conceptos de derechos humanos y de valores que llevan aparejados en planes de estudio y prcticas de enseanza. Aunque necesita una actualizacin, este documento tambin contiene propuestas y herramientas muy prcticas. M. Sinclair et al., Learning to Live Together: Design, Monitoring and Evaluation of Education for Life Skills, Citizenship, Peace and Human Rights, Eschborn y Pars, GTZ y UNESCO, 2008.
76
Tool for Quality Assurance of Education for Democratic Citizenship in Schools, UNESCO, Consejo de Europa, 2005, disponible en: www.coe.int/t/dg4/education/edc/Source/Pdf/Documents/2006_4_Tool4QA_EDC.pdf Sitio web de la Asociacin Internacional para la Valoracin del Impacto: www.iaia.org Sitio web de la Iniciativa Internacional de Evaluacin del Impacto: www.3ieimpact.org
Ejemplos: herramientas e informes de Amnista Internacional

Marco lgico del Programa de Educacin y Accin en Derechos Humanos (REAP) Marco lgico de mbito nacional: Proyecto de Educacin en Derechos Humanos en frica Amnista Internacional, Engaging, Listening, Hearing, Changing. Exploring Assessment of our Human Rights work: Case Studies in Brazil and Albania, 2009. M.S. Khalil, Evaluation Report of the Capacity Building Work of Amnesty International Middle East and North Africa Regional Office Beirut (IS Beirut) for the Period April 2004March 2008, 2009. Amnista Internacional, Guidance on Developing your National Amnesty International Human Rights Education Monitoring and Evaluation Plan, Proyecto de Educacin en Derechos Humanos en frica Occidental. P. King y R. Austin, Cross-Border Primary School Human Rights Education Initiative 2000-2003, An Evaluation, diciembre de 2002, evaluacin llevada a cabo para Amnista Internacional Irlanda. M. Morgan y K. Kitching, An Evaluation of Lift Off, The Cross-Border Primary Human Rights Education Initiative, 2006. Amnista Internacional, Guidelines for Human Rights Friendly Schools, 2009 (ndice: POL 32/002/2009). Amnista Internacional, Human Rights Friendly Schools Workbook, 2009, (ndice: POL 32/003/2009). Y. Moustafa, Evaluation of Mawared Magazine. Final Report, realizada para Amnista Internacional, Oficina Regional para Oriente Medio y el Norte de frica, 2008.
Ejemplos: herramientas e informes ajenos a Amnista Internacional

H.Starkey y K.Vincent, An Evaluation of UNESCO Publications on Human Rights Education. Report to UNESCO Section of Education for Universal Values, Audrey Osler, Centro de Estudios sobre Ciudadana, Universidad de Leicester, 2002, disponible en: www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=3532&category_id=4&category_t ype=3&group P. Ilkkaracan y L. Ercevik Amado, Human Rights Education as a Tool of Grassroots Organizing and Social Transformation, Intercultural Education, mayo de 2005. Este documento describe un programa de educacin en derechos humanos para mujeres en Turqua y presta especial atencin a su impacto en las mujeres y a los factores metodolgicos que contribuyeron a que fuera un xito. Review of Human Rights Education and Training, informe presentado por J. Reilly y U. Niens, Centro UNESCO, Facultad de Educacin, Universidad del Ulster, marzo de 2005. www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=4744&category_id=4&category_t ype=3&group K. Covell y R.B. Howe, Rights, Respect and Responsibility. Report on the Hampshire County Initiative, Centro de Derechos de la Infancia, Universidad de Cape Breton, 2007, disponible en: www.hrea.org/index.php?base_id=104&language_id=1&erc_doc_id=4715&category_id=4&category_t ype=3&group
77
Partners in Human Rights Education Evaluation Program: evaluacin del impacto del plan de estudios de derechos humanos elaborado conjuntamente por el Centro de Derechos Humanos de la Universidad de Minnesota y Advocates for Human Rights para alumnado de enseanza primaria y secundaria de Minnesota, Estados Unidos. ste es un ejemplo de anlisis cuantitativo: www.umn.edu/humanrts/edumat/HREEval.shtm Section 5. Evaluation and Assessment Approaches, Human Rights Education in the School Systems of Europe, Central Asia and North America: A Compendium of Good Practice, Varsovia, Organizacin para la Seguridad y la Cooperacin en Europa, pp. 223-237, disponible en: www.hrea.org/compendium Y. Ramkissoon y M. Nethavhakone, Labor Community Radio Project: An Audience Research Evaluation of Local Community Radio Stations and the Weekly Labor Show, disponible en: www.comminit.com/en/node/280482/376
78
79
APRENDER DE LA EXPERIENCIA
MANUAL DE MONITOREO Y EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS

El monitoreo y la evaluacin son dos elementos indispensables en toda actividad de educacin en derechos humanos, pues nos ayudan a entender nuestra labor de educacin en este mbito, el impacto que sta genera y cmo contribuye a la creacin de una cultura de derechos humanos. El monitoreo y la evaluacin ayudan a mejorar nuestras actividades de educacin en derechos humanos, ya que garantizan que respondemos a las necesidades y expectativas de las personas participantes y que somos sensibles a los desafos de derechos humanos a los que se enfrentan. Este manual tiene por objeto reforzar la capacidad de Amnista Internacional para incorporar el monitoreo y la evaluacin a nuestras actividades de educacin en derechos humanos con el n de mejorar su efectividad e impacto. Es un recurso prctico y de aplicacin directa que nos ayudar a conceptualizar nuestra planicacin de educacin en derechos humanos y a disear planes de monitoreo y evaluacin de los resultados. El manual contiene: una introduccin al monitoreo y la evaluacin del trabajo de educacin en derechos humanos; pasos necesarios para incorporar el monitoreo y la evaluacin a los planes de proyecto en este mbito, y propuestas sobre los enfoques y mtodos de evaluacin ms adecuados para actividades concretas de educacin en derechos humanos. El CD-ROM que acompaa a este manual incluye herramientas prcticas de monitoreo y evaluacin que se pueden usar en la planicacin de actividades de educacin en derechos humanos. El manual combina recursos de monitoreo y evaluacin empleados por Amnista Internacional y otras organizaciones, que se inspiran en las buenas prcticas ms pertinentes para nuestra labor.
ndice: POL 32/009/2010 Noviembre de 2010

Manual Evaluacion EDH

Caricato da

Informazioni sul documento

Copyright

Formati disponibili

Condividi questo documento

Condividi o incorpora il documento

Opzioni di condivisione

Hai trovato utile questo documento?

Questo contenuto è inappropriato?

Copyright:

Formati disponibili

Manual Evaluacion EDH

Caricato da

Copyright:

Formati disponibili

APRENDER DE LA EXPERIENCIA MANUAL DE MONITOREO

Y EVALUACIN DEL TRABAJO

REALIZADO EN EDUCACIN EN DERECHOS HUMANOS

Propsito de este manual

Quines deben usar este manual?

Sntesis del contenido de este manual

Lista de siglas y abreviaturas utilizadas en el manual

EVALUACIN DEL TRABAJO REALIZADO EN EDUCACIN EN DERECHOS HUMANOS: ASPECTOS BSICOS

EDUCACIN EN DERECHOS HUMANOS DENTRO DE AMNISTA INTERNACIONAL

Importancia de la educacin en derechos humanos para Amnista Internacional

Prctica de la educacin en derechos humanos dentro de Amnista Internacional

Importancia de evaluar la educacin en derechos humanos para Amnista Internacional

PRINCIPIOS Y TRMINOS CLAVE

DIAGRAMA 1 PROCESOS PARTICIPATIVOS DENTRO DEL CICLO DE PLANIFICACIN DEL PROYECTO

Conceptos y terminologa referidos a la evaluacin

QU ACTIVIDADES PODEMOS EMPRENDER PARA VALORAR NUESTRO PROGRESO?

QU PODEMOS USAR PARA MEDIR?

EJEMPLO DE CASO 1 INCORPORACIN DEL MONITOREO Y LA EVALUACIN A UN PROGRAMA DE FORMACIN DE FORMADORES

LA LGICA DEL CAMBIO

Qu cadena de acontecimientos producir los resultados que deseamos?

Cambios en el activismo y la movilizacin

Profesorado que dirige los clubes

Alumnado de los clubes Otro alumnado, profesorado, personal escolar

Progenitores, membresa de la comunidad

Disminucin de mujeres heridas o muertas a manos de sus parejas

asistieron a los cursos de formacin Revisin de actas judiciales

EVALUACIN DENTRO DEL MARCO DE PROYECTO

INCORPORAR EL MONITOREO Y LA EVALUACIN A LA FASE DE DISEO DEL PROYECTO

Paso 2: Incorporar el monitoreo y la evaluacin a nuestra propuesta de proyecto

Paso 3: Recopilar datos de partida durante la fase de elaboracin del proyecto

ANLISIS BASADO EN LOS DERECHOS HUMANOS

Paso 4: Establecer las metas y los objetivos del proyecto

Paso 5: Determinar las actividades y los procesos del proyecto

Paso 6: Concebir enfoques para la recopilacin inicial de datos

ACTIVIDADES DEL PROYECTO

PRODUCTOS DEL PROYECTO RESULTADOS DEL PROYECTO

mujeres Publicacin de un informe de investigacin; celebracin de un taller; impresin y reparto de folletos

Adopcin y aplicacin de una poltica por parte del gobierno

IMPACTO DEL PROYECTO

Las mujeres sufren menos violencia sexual

INDICADORES DE XITO DEL PROYECTO

Paso 7: Presupuestar el monitoreo, la evaluacin y la valoracin del impacto

PREPARACIN DEL PLAN DE MONITOREO Y EVALUACIN

Participacin en un curso de formacin de tres das

Paso 8: Organizar un proceso consultivo participativo

Paso 9: Aclarar las premisas relativas a los procesos de cambio

Paso 10: Identificar las actividades que se sometern a monitoreo y evaluacin

Paso 11: Identificar los resultados que se sometern a evaluacin

DIAGRAMA 6 EJEMPLO DE MAPEO DE ALCANCES

Modelo de anlisis de marco lgico (LFA)

Meta Socio limtrofe A

Indicadores (y fuentes) de las metas

Brecha de atribucin Resultado

Premisas en el mbito de los resultados

encantara ver gustara ver pera ver

encantara ver gustara ver pera ver

Servicios prestados por el agente de cambio para generar resultados

Indicadores del producto 2

Premisas en el mbito de los productos

Indicadores del producto 3

Prcticas organizativas del agente de cambio

Premisas en el mbito de las actividades

Meta/visin general (beneficiarios)

Descripcin de los cambios concretos que debe alcanzar el proyecto