Sei sulla pagina 1di 26

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Jaime Ricardo Valenzuela Gonzlez Mara Soledad Ramrez Montoya Tecnolgico de Monterrey Jorge Antonio Alfaro Rivera Escuela Normal Superior Oficial de Guanajuato

Resumen
En forma anloga a como un piloto de aviones emplea diversos instrumentos para controlar su nave, la gestin de instituciones educativas exige el empleo de ciertos indicadores que le permitan a los cuadros directivos lograr las metas de las instituciones que dirigen. Este artculo presenta los resultados de un proyecto de investigacin orientado a generar un modelo de evaluacin de instituciones educativas. El modelo propone un total de 54 indicadores agrupados en 10 categoras: (1) formacin integral y calidad, (2) capital humano, (3) capital social, (4) investigacin, (5) consultora, (6) servicio social, (7) promocin cultural, (8) patrimonio fsico, (9) prestigio social y (10) sustentabilidad econmica. El modelo muestra adems la forma en que, para cada una de estas categoras, existen estrategias de gestin orientadas a una mejora de la calidad educativa. El estudio reporta adems evidencia colectada en forma emprica para validar el modelo en el contexto particular de instituciones de educacin media-superior y superior.

Reconocimiento: El artculo que aqu se presenta fue parte de un proyecto titulado: Modelo sistmico de evaluacin institucional para el mejoramiento de la calidad educativa, el cual fue financiado por el Fondo Mixto de Fomento a la Investigacin Cientfica y Tecnolgica del CONACYT y del Gobierno del Estado de Guanajuato. Los investigadores agradecemos el apoyo que se nos ha brindado para el desarrollo de esta investigacin.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Introduccin
Da a da, miles de vuelos estn siendo operados en todo el mundo de una forma que no para de sorprendernos, por lo que implica el sustentar en el aire a un vehculo de varias toneladas de peso y poderlo operar a lo largo del da (y de la noche) bajo distintas condiciones atmosfricas. Buena parte de que los viajes por avin tengan un alto ndice de seguridad se debe al uso de instrumentos de control, que proporcionan al piloto un conjunto de indicadores de muy distinta especie: un indicador de rumbo o giroscopio direccional para indicar la direccin que lleva el avin, un indicador de velocidad aerodinmica o anemmetro para medir la velocidad del avin con respecto al aire que se mueve alrededor, un altmetro para conocer la altitud a la cul est volando el avin, un indicador de actitud u horizonte artificial para saber si el eje longitudinal del avin est nivelado, un indicador de las reservas de combustible con que cuenta la aeronave y muchos ms que sera largo citar. Cada indicador lleva consigo un propsito y le proporciona al piloto informacin valiosa que le permite conducir la aeronave en forma segura su aeronave y llegar a su destino siguiendo una ruta ptima. La descripcin anterior sirve para proponer una analoga con el trabajo que el director (o los cuadros directivos) de una institucin educativa realizan. As como un piloto de aviones cuenta con un conjunto de instrumentos para poder operar su nave, los directivos de una institucin educativa deben contar tambin con instrumentos que le permitan tomar decisiones para mejorar la gestin de la institucin y cumplir con metas que sean congruentes con la misin y visin institucional. La responsabilidad que el director tiene para conducir su escuela y universidad es similar a la de un piloto de avin: mientras que el segundo lleva consigo la responsabilidad de realizar un viaje sin que ocurran accidentes que le cuesten la vida a cientos de pasajeros, el primero tiene tambin una responsabilidad enorme en la que se pone en juego no la vida, pero s la calidad de vida de los estudiantes en trminos de la educacin que estn recibiendo. En ambos casos, la responsabilidad no es exclusiva de los "capitanes": as como el piloto depende de todo un equipo de tierra y aire para que el avin opere sin falla alguna, el director de una institucin educativa cuenta con un equipo de profesores y personal acadmico y administrativo para brindar a los alumnos una educacin que aspira a ser de calidad. Aunque el trmino de calidad educativa elude una definicin precisa, parece existir cierto consenso sobre la naturaleza multifactorial de este constructo; esto es, la educacin de calidad depende de mltiples variables como podran ser el correcto diseo de planes y programas de estudio, la exigencia en los procesos de enseanza, el empleo de buenos recursos didcticos, un medio ambiente que sea autntico promotor del aprendizaje, la atinada gestin de la institucin educativa, etc. De entre todas estas variables, este artculo pone especial atencin al tema de la gestin escolar, entendida sta en trminos del trabajo que los diversos cuadros directivos (coordinadores de rea, jefes de departamento, directores de escuelas o divisiones, vicerrectores y rectores) realizan para apoyar el trabajo de alumnos, profesores y otros muchos actores del proceso educativo. Desde la implementacin de un programa innovador, hasta la operacin diaria de la institucin, cada decisin que los directores de sta llegan a tomar tiene un impacto en esa calidad. Y cada decisin que es preciso tomar debe, por principio de cuentas, tratar de ser una decisin informada; esto es, una decisin que est basada en principios tericos y evidencia emprica que apunte a aquellas lneas de accin que aseguren, hasta donde es posible, una mayor efectividad en el logro de las metas institucionales y una mayor eficiencia en el aprovechamiento de los recursos con los que se cuenta. En ese sentido, la evaluacin de instituciones educativas juega un papel fundamental para proveer de informacin completa, fidedigna y oportuna a quienes toman decisiones y estn a cargo de la gestin en la institucin. Si bien estas ideas se escuchan razonables en lo general, la realidad de muchas instituciones educativas es distinta. Sus "pilotos" tienen que volar, en muchas ocasiones, "a la ciega", ya que no cuenta con instrumentos apropiados que les den informacin para la toma de decisiones. Ciertamente hay ejemplos en los que la institucin educativa sistemticamente recopila datos para ciertos registros Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

estadsticos, de control escolar y de naturaleza contable como parte de obligaciones irrenunciables. Pero tambin hay muchos otros ejemplos en donde la institucin carece de un sistema o modelo de evaluacin institucional en el que claramente defina el tipo de indicadores que el director requiere, y la forma en que dichos indicadores le permiten tomar decisiones e implementar estrategias para lograr las metas propuestas. El proyecto de investigacin, cuyos resultados aqu se reportan, surgi precisamente como una forma de satisfacer esa necesidad: la de contar con un conjunto de indicadores institucionales que estuvieran claramente vinculados con las acciones de gestin. Fue as como se plante, como objetivo general de la investigacin, el generar un modelo de evaluacin de instituciones educativas orientado a la mejora de la gestin escolar y, por ende, a la mejora de la calidad educativa. El modelo, as pensado, no debe ser visto como una forma de recopilar informacin muy puntual, en ciertos perodos especficos de tiempo, como ocurre en procesos de acreditacin de instituciones educativas. En su lugar, la idea de los autores era generar un modelo que estuviera integrado a los procesos de gestin; no algo "extra" que los cuadros directivos de la institucin tuvieran que hacer en forma adicional a sus otras responsabilidades, sino como una tarea que debiera ser parte sustancial de esas responsabilidades. Con esta idea en mente, se plante a inicios del ao 2006 la propuesta de un proyecto titulado Modelo sistmico de evaluacin institucional para el mejoramiento de la calidad educativa, en el marco de una convocatoria lanzada por el Fondo Mixto de Fomento a la Investigacin Cientfica y Tecnolgica del Consejo Nacional de Ciencia y Tecnologa (CONACYT) y del Gobierno del Estado de Guanajuato, en Mxico. Dicha convocatoria planteaba la necesidad del Estado de Guanajuato de contar con mecanismos de evaluacin de instituciones de educacin media-superior y superior que estuvieran orientados a la mejora de los servicios educativos que las instituciones pblicas del Estado ofrecen. A mediados de 2006, la propuesta fue aprobada y fondos financieros fueron otorgados para realizar el proyecto. Si bien el modelo de evaluacin parti de un marco contextual dado por las condiciones de dicha convocatoria, los autores procuraron mantener miras amplias y no restringirse slo a instituciones pblicas de esos niveles educativos, sino tener aplicacin o utilidad en otro tipo de instituciones educativas; y no slo para el contexto de Guanajuato o Mxico, sino inclusive de otros pases de Iberoamrica. En este artculo, los autores inician con un Marco terico que sirve de base para el modelo de evaluacin propuesto. A continuacin, presentan el Mtodo con una descripcin de las distintas etapas que se siguieron para el desarrollo del modelo. Bajo el apartado de Resultados, se presenta una descripcin del modelo propuesto, as como el trabajo de validacin que fue realizado al poner a prueba el modelo en diversas instituciones educativas. En las Conclusiones se plasman las lecciones aprendidas en este proyecto y se reflexiona sobre la trascendencia del modelo propuesto en el contexto de las instituciones que lo lleguen a emplear.

Marco terico
La calidad educativa elude una definicin precisa. Aunque profesores y directivos hablan con frecuencia de ella, y no en pocas ocasiones se toma como "bandera" de las acciones de gobiernos para promover reformas educativas, no siempre hay un consenso acerca de lo que entendemos por este trmino. Si bien el trmino se percibe como una aspiracin de cualquier sistema educativo, tambin es cierto que hay personas a las que puede molestar su uso en el mbito escolar, por pensar que es un trmino "importado" del campo empresarial. Quienes as piensan tal vez pueden preferir el trmino de excelencia acadmica, con el fin de no equiparar al proceso educativo con un proceso de produccin de bienes o para la prestacin de servicios. Para otros, la educacin puede ser vista precisamente como la prestacin de un servicio social, y el uso del trmino calidad no ofrecer mayor problema. Cualquiera que sea el caso, calidad es un trmino polismico en el que, segn quien lo Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

defina, se puede poner ms nfasis en atributos de los productos o en los procesos para generarlos; en los comportamientos de los trabajadores ("hay que hacer las cosas bien y a la primera") o en sus actitudes ("las cosas de calidad las hacen personas de calidad"). Por su parte, a la evaluacin educativa se le reconoce un doble papel: si bien se le aprecia simplemente como una forma de medir eso que se llama calidad educativa (como quiera que sta se defina), tambin se le reconoce que la evaluacin puede ser un medio para promover esa calidad. Tal como Valenzuela (2004, p. 5) comenta: La evaluacin es una parte esencial de cualquier proceso administrativo. Presente desde el momento mismo de la planeacin, nos permite diagnosticar el estado en que se encuentra una institucin. Al emplearse durante las etapas de ejecucin, nos permite regular nuestras acciones para corregir el rumbo en caso de estarnos apartando de los objetivos perseguidos. Aplicada al trmino del proceso, nos ofrece una mirada retrospectiva de lo que hemos hecho, de los aciertos que hemos tenido, de los errores que hemos cometido y del grado en el que hemos alcanzado los objetivos que nos propusimos lograr. Con todo y su evidente importancia, tambin hay que reconocer que la evaluacin es un proceso complejo y difcil, que en muchas ocasiones trae consigo descontento y malestar. A algunas personas no les gusta ser evaluadas, y siempre aparecen muestras de inconformidad por ms cuidado que pongamos en nuestro trabajo de evaluacin. Cuando hablamos de evaluacin educativa, sta se entiende, por lo general, como el grado en el que un proceso educativo favorece el logro de las metas para las que fue creado. Desde luego, hay muchos tipos de evaluacin educativa y se usa este trmino como el gran "paraguas" que cubre o incluye la evaluacin del aprendizaje, la evaluacin del proceso de enseanza-aprendizaje, la evaluacin curricular y la evaluacin de las institucin educativas, entre otras. Sobre evaluacin educativa se ha escrito mucho, mas no as sobre la evaluacin institucional en particular. Ciertamente, hay un buen nmero de libros que se orientan a estudiar diversas componentes de las instituciones educativas, como pueden ser la evaluacin del aprendizaje (e.g., Kubiszyn y Borich, 2003; y Carey, 2001), los programas educativos (e.g., Fitzpatrick, Sanders y Worthen, 2004) o, incluso, los espacios arquitectnicos (e.g., Salmern, 1992). Hay otro buen nmero de libros orientados a evaluacin organizacional, pero con un enfoque empresarial que pone nfasis en temas de diagnstico (e.g., Rodrguez, 1999), en temas de gestin (e.g., Kaplan y Norton, 1997) o en temas de evaluacin del personal (e.g., Edwards y Ewen, 1996). Por otra parte, tambin existen algunos libros que hablan de la evaluacin educativa en general y que dedican slo un captulo a la evaluacin institucional (e.g., Domnguez, 2000; y Mayor, 1998). Hay tambin libros orientados a la evaluacin en general (e.g., Isaac y Michael, 1995; Rossi, Lipsey y Freeman, 2004; y Weiss, 1997), pero sin un enfoque especfico a la educacin y mucho menos a las instituciones educativas. Y, eventualmente, s se llegan a encontrar libros que abordan slo el tema de la evaluacin institucional, pero que lo hacen de manera muy focalizada (e.g., Ruiz, 1998, aborda la evaluacin de un conjunto particular de centros educativos espaoles; y, Lora, 2002, propone un modelo de evaluacin basado en ndices que permiten generar rankings entre universidades pblicas mexicanas). Un ejemplo de un libro con una orientacin especfica al tema de evaluacin de instituciones educativas es el que propone Valenzuela (2004). Estas referencias sirven de antecedentes tericos para la elaboracin del modelo de evaluacin que aqu se propone. Adelantndonos un poco a la descripcin del mtodo, conviene aclarar en este punto que el trabajo de investigacin que aqu se reporta no tiene la estructura tradicional de un estudio con hiptesis formales y que aporte evidencia emprica para su prueba y para el eventual sustento de teoras. Dentro del marco de una investigacin aplicada, este trabajo va orientado a la generacin de un modelo de evaluacin institucional y a su validacin a travs del uso de diversos indicadores institucionales por diversos usuarios. En ese sentido, el desarrollo del modelo propuesto parte de ciertas premisas tericas (de las que se hablar en esta misma seccin en breve), as como de informacin emprica colectada en una primera etapa del proyecto (de la que se hablar cuando entremos al apartado de Mtodo). Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Cules son las premisas tericas que se consideraron para la generacin del modelo? Al revisar literatura para el proyecto, uno de los primeros aspectos que tuvieron que ser definidos fue la naturaleza de la evaluacin que se estara realizando a travs del modelo. Segn Valenzuela (2004), existen cuatro dimensiones de la evaluacin: evaluacin basada en teora vs. evaluacin empirista; evaluacin holstica vs. evaluacin atomista; evaluacin objetivista vs. evaluacin subjetivista; y, evaluacin cuantitativa vs. evaluacin cualitativa. El modelo aqu propuesto deba ubicarse en distintas posiciones de estas dimensiones, dependiendo de aquello que se deseaba medir. Sin que el modelo asuma posiciones inamovibles, se parti de la premisa que deba equilibrar una evaluacin basada en teora con evidencia emprica del contexto del cual se parta (esto es, instituciones pblicas de nivel medio-superior y superior del Estado de Guanajuato, en Mxico). Por otra parte, se decidi que el modelo partira, en un principio, de una postura atomista, ya que la meta era definir un conjunto de indicadores institucionales, pero con el eventual acercamiento a una visin holstica de toda la institucin, al tratar de vincular cada indicador particular, con una misin y una visin institucional. Adicionalmente, se estableci que el modelo deba privilegiar un enfoque objetivista sobre uno subjetivista, no porque ste ltimo se considere poco importante, sino por la forma en que se pensaba colectar y procesar informacin de manera relativamente simple y, de ser posible, un tanto automatizada. Finalmente, se decidi que el modelo de evaluacin tendra un enfoque predominantemente cuantitativo; aunque el modelo deba poner especial nfasis en la importancia de saber interpretar la cualidad que hay detrs de cada cantidad. Otra forma que se consider para clasificar los tipos de evaluacin fue en trminos de los agentes que la llevan a cabo. En ese sentido, una evaluacin puede llevarse a cabo por medio de agentes internos o externos. A diferencia de procesos de acreditacin que se llevan a cabo por agentes externos, el modelo que aqu se propone implica una evaluacin por medio de agentes internos. Se asume que la evaluacin se realiza como parte de las funciones propias de la institucin educativa y que los resultados de la evaluacin tienen como finalidad el mejorar la gestin de la institucin y promover la calidad del servicio que ofrece. Finalmente, una tercera forma de clasificar los tipos de evaluacin fue por su grado de formalidad dentro de la institucin: implcita, espontnea o institucional (Barbier, 1993). En ese sentido, se propone un modelo de evaluacin de naturaleza institucional, ya que se concibe como un acto deliberado y socialmente organizado, dirigido a generar juicios de valor para orientar la gestin institucional.

Mtodo
Como ya se coment, la investigacin realizada no iba orientada a un planteamiento formal de hiptesis que pudieran ser comprobadas a partir de evidencia emprica y eventualmente interpretadas dentro de marcos tericos preestablecidos. En su lugar, la investigacin sigui ms bien un proceso de diseo de un modelo de evaluacin institucional compuesto por diversos indicadores, y la prueba de dicho modelo por parte de diversos usuarios (personas e instituciones educativas). En ese sentido, el problema por atender pudiera plantearse en trminos de identificar cules son las caractersticas que debe tener un modelo de evaluacin que proporcione informacin a los cuadros directivos de una institucin educativa para mejorar los procesos de toma de decisiones, la gestin de la institucin y, eventualmente, la calidad del servicio educativo que ofrece. El problema as planteado llev a los investigadores a proponer un proyecto consistente en tres etapas: (1) un diagnstico de necesidades de evaluacin institucional; (2) la propuesta y validacin del modelo de evaluacin institucional; y (3) la transferencia del modelo a travs de procesos de formacin de evaluadores, as como la difusin de los resultados. Estas tres etapas se describen en los siguientes apartados. Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Etapa 1: Diagnstico de necesidades de evaluacin institucional


El propsito de la primera etapa del proyecto de investigacin fue el de realizar un diagnstico de necesidades de evaluacin institucional en el contexto del Estado de Guanajuato. Buscando saber que "tierra pisaban", los investigadores se dieron a la tarea de identificar: (1) las prcticas de evaluacin institucional que se estn llevando a cabo en las instituciones pblicas de educacin media-superior y superior del Estado de Guanajuato; (2) aquellos aspectos que no se estn evaluando o que podran evaluarse mejor; (3) el vnculo que puede tenerse entre la informacin resultante de un trabajo de evaluacin, el proceso de toma de decisiones, la mejora en la gestin de la institucin y la eventual mejora de su calidad educativa; y (4) aquellos factores que afectan la posibilidad de realizar una evaluacin institucional vinculada a la gestin. Esta etapa se llev a cabo entre el 15 de agosto de 2006 y el 15 de marzo de 2007. Para lograr sus objetivos, cuatro fueron las tareas que se realizaron en esta primera etapa: Desarrollo de un marco contextual. Aunque el modelo de evaluacin institucional tiene un rango de aplicacin muy amplio, era preciso (para fines de cumplir con las condiciones de la convocatoria) circunscribirlo al contexto de las instituciones pblicas de educacin media-superior y superior del Estado de Guanajuato. Para ello, una primera tarea fue construir un marco contextual que proporcionara informacin general del Estado de Guanajuato, informacin particular sobre su sistema educativo e informacin especfica sobre los niveles de educacin media-superior y superior. Aunque por restricciones propias de la publicacin de este artculo no es posible abundar mucho sobre este punto, s hay algunos datos que conviene proporcionar para que el lector pueda situarse en el contexto del estudio. El Estado de Guanajuato debe su nombre al vocablo tarasco quanashuato compuesto de las palabras quanas que significa ranas y huuato, algo montuoso. Por lo tanto quanashuato expresa un lugar montuoso donde abundan las ranas (Gobierno del Estado de Guanajuato, 2008a). El Estado de Guanajuato cuenta con una superficie de 30,460 kilmetros cuadrados, que representan 1.54% del territorio de Mxico; y se encuentra ubicado en el centro del pas colindando con los estados de San Luis Potos al norte, Quertaro al este, Michoacn al sur y Jalisco al oeste (Gobierno del Estado de Guanajuato, 2008b). Segn datos del II Conteo de Poblacin y Vivienda 2005, el Estado de Guanajuato tena 4,893,812 habitantes, que viene siendo el 4.7% de la poblacin total de Mxico (Instituto Nacional de Estadstica, Geografa e Informtica, 2005). En cuanto al sistema educativo, el Instituto Nacional de Estadstica, Geografa e Informtica (2005) reporta que en el 2005, el 93.1% de la poblacin de 6 a 14 aos asista a la escuela (la media del pas es 94.2%), mientras que tan solo el 41.1% de la poblacin entre 15 y 19 aos haca lo mismo (la media del pas es 52.9%); el promedio de escolaridad de la poblacin de 15 aos y ms era de 7.2 aos (la media del pas es 8.1); y la tasa de analfabetismo de la poblacin de 15 aos y ms en Guanajuato era de 10.4% (la media del pas es de 8.4%). Por otra parte, la Secretara de Educacin Pblica (2008) marca que, para el Estado de Guanajuato, la matrcula en en el nivel de Bachillerato para el ao escolar 2005-2006 era de 124,484 estudiantes, los cuales eran atendidos por 9.229 profesores en 605 centros escolares; y, en el nivel licenciatura, la matrcula era de 66,106 estudiantes, los cuales eran atendidos por 7,123 profesores en 153 centros escolares. Estos datos excluyen los niveles de profesional tcnico, normal y posgrado que, si fueran de inters del lector, se podran consultar en la misma pgina Web de la SEP. Con esta muy breve descripcin del Estado de Guanajuato, se presenta parte del contexto en donde se llev a cabo la investigacin. Entrevistas con informantes clave. La segunda tarea que se realiz en esta primera etapa fue la de concertar entrevistas con 16 informantes clave en cuatro ciudades (Guanajuato, Len, Irapuato y Silao) del Estado de Guanajuato. Entre las personas entrevistadas se tuvieron al director del Consejo de Ciencia y Tecnologa del Estado de Guanajuato (CONCYTEG) como representante de una de las entidades apoyando la realizacin de este proyecto. Tambin se entrevistaron personas de organismos gubernamentales (estatales y federales) vinculados con la educacin media-superior y Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

superior, como fue el caso de la Direccin de Formacin de Profesionales de la Educacin de Guanajuato, la Direccin General de Educacin Tecnolgica Industrial (DGETI) y el Subsistema de Videobachillerato (VIBA). Desde luego, al tener como objetivo el diagnosticar las necesidades de evaluacin institucional, otras personas entrevistadas fueron los directores de las instituciones educativas. As, se entrevistaron a cuatro directores de instituciones de educacin media-superior y a cuatro directores de instituciones de educacin superior, incluyendo una escuela normal. Finalmente, se realizaron tambin entrevistas a directivos de la Confederacin Patronal de la Repblica Mexicana (COPARMEX) y de la Cmara Nacional de la Industria de Transformacin (CANACINTRA), por la representatividad que tienen de empresas que reciben a los egresados de las instituciones educativas. Para la realizacin de las entrevistas, se dise un cuestionario de preguntas abiertas que sirviera de gua para una entrevista semiestructurada. Las preguntas estaban directamente asociadas con los objetivos de este diagnstico (ya mencionados al inicio del apartado de Etapa 1), y slo se hacan adecuaciones en la forma de plantearlas dependiendo de la persona entrevistada. Al inicio de cada entrevista, se le plante al informante el propsito de la misma y se le solicit autorizacin para poder grabar las respuestas. En todos los casos hubo anuencia por parte de los informantes. Las grabaciones fueron posteriormente transcritas para su anlisis Encuestas a participantes en un Seminario internacional de evaluacin de instituciones educativas. El 19 de enero de 2007, los investigadores organizaron un Seminario internacional de evaluacin de instituciones educativas en las instalaciones del Tecnolgico de Monterrey, Campus Len. En el Seminario se cont con la participacin de siete conferencistas y 120 participantes de diversas instituciones del Estado de Guanajuato. El objetivo del Seminario era doble: por una parte, contribuir en la formacin de recursos humanos en el tema de inters de este proyecto; y, al mismo tiempo, aprovechar la congregacin que se estaba realizando en el Seminario para recopilar informacin de las instituciones de Guanajuato de una manera ms eficiente. En este evento se aplicaron tres instrumentos para conocer las experiencias de evaluacin en las instituciones educativas, as como el inters de las instituciones por participar en etapas subsiguientes del proyecto. De los 120 participantes que asistieron al Seminario, al provenir varios de ellos de una misma institucin educativa, se pudieron colectar datos de 31 instituciones educativas y organismos gubernamentales, los cuales constituyeron una valiosa fuente de informacin. Para la coleccin de datos, se disearon tres instrumentos que se aplicaron al trmino de cada uno de los tres paneles que se tuvieron en el Seminario. Los temas sobre los que versaron los paneles fueron: la evaluacin en la gestin educativa, indicadores de evaluacin institucional y evaluacin para mejorar la calidad educativa. Cada tema fue abordado por un grupo de dos o tres panelistas (para ver informacin sobre el desarrollo y las ponencias del Seminario, consultar el sitio Web http://www.ruv.itesm.mx/convenio/modelo/desarrollo/homedoc.htm). Los instrumentos fueron encuestas estructuradas de preguntas abiertas y cerradas, que cada participante deba responder en no ms de 30 minutos por instrumento. Las respuestas proporcionadas fueron posteriormente transcritas en una tabla que concentrara toda la informacin. Sesin de grupo focal. Aprovechando la invitacin que se hizo a siete expertos sobre el tema a participar como conferencistas en el Seminario internacional de evaluacin de instituciones educativas, se organiz con ellos, el 20 de enero de 2007, una sesin de grupo focal. Los expertos provenan tres de Espaa, uno de Portugal, uno de Argentina y dos de Mxico. Para la coleccin de datos del grupo focal, no se dise un instrumento en particular. Se les plantearon a los expertos los objetivos y el contexto del proyecto de investigacin para que, de manera libre, se llevara a cabo la discusin. El grupo focal se llev a cabo en una sesin de tres horas, en la que los expertos invitados dieron sus opiniones y recomendaciones sobre el proyecto de investigacin. Preguntas de clarificacin eran eventualmente solicitadas por los investigadores, quienes actuaron como moderadores. Las opiniones fueron registradas de manera escrita conforme el trabajo del grupo focal se llev a cabo.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Las cuatro tareas realizadas en esta Etapa 1 fueron fundamentales para sustentar el trabajo de la Etapa 2. En la seccin de resultados de este artculo no se habla mucho sobre los hallazgos de esta primera etapa, ya que se considera que sta es "instrumental" para el desarrollo del modelo de evaluacin institucional. Sin embargo, informacin especfica sobre los hallazgos de esta etapa pueden ser encontrados en Valenzuela (2007) y Valenzuela y Ramrez (2008). Algo que conviene sealar respecto al trabajo de esta primera etapa es que otra actividad que fue desarrollndose en paralelo, extendindose tambin a las Etapas 2 y 3, fue la construccin de una pgina Web para documentar el trabajo realizado. El URL de la pgina del proyecto es: http://www.ruv.itesm.mx/convenio/modelo/homedoc.htm

Etapa 2: Propuesta y validacin de un modelo de evaluacin institucional


El propsito de la segunda etapa del proyecto de investigacin fue el de generar propiamente el modelo de evaluacin institucional y el de ponerlo a prueba con instituciones educativas interesadas en participar en el proyecto. Esta etapa se llev a cabo entre el 16 de a marzo de 2007 y el 15 de noviembre de 2007. Para lograr sus objetivos, dos fueron las tareas que se realizaron en esta segunda etapa: Diseo de un modelo de evaluacin institucional. A partir de los datos recopilados en la Etapa 1, as como de la revisin de literatura relevante para este proyecto, los investigadores procedieron al diseo de un modelo de evaluacin institucional especificando cuestiones sobre la naturaleza del objeto por evaluar, el propsito que tendra el modelo de evaluacin, el tipo de evaluacin que se estara realizando, los alcances y limitaciones del modelo propuesto, las premisas de las que se debe partir para su empelo, las componentes propiamente dichas del modelo (se propusieron 10), sus definiciones, los indicadores vinculados a cada componente (en total 54 indicadores) y la forma de emplear dichos indicadores para lograr ciertas metas institucionales. Validacin del modelo de evaluacin institucional. Un mero ejercicio de escritorio para generar el modelo no tendra sentido si ste no se pone a prueba. La idea de validar el modelo propuesto implicaba ver qu tanto el modelo estaba sirviendo para las funciones para las que fue diseado. Para ello, fue necesario acudir con los representantes de aquellas instituciones educativas que hubieran manifestado inters (desde la celebracin del Seminario internacional de evaluacin de instituciones educativas) en participar en este proyecto. Para validar el modelo, se desarrollo un cuestionario que servira para recopilar informacin sobre la institucin educativa y sobre cada uno de los indicadores que se deban calcular. As, para cada indicador, las preguntas planteadas a los informantes fueron: (1) cul es el valor del indicador en su institucin educativa y cmo lo est calculando?; (2) de qu otra forma se puede calcular este indicador o, dicho de otra manera, que otra definicin de ese indicador tendra mejor sentido para la situacin particular de esta institucin educativa que se est evaluando?; (3) podra describir paso a paso el mecanismo (proceso) que seguira usted en esta institucin para generar el indicador solicitado?; (4) qu dificultades (o posibilidades) vera usted para calcular este indicador de manera peridica? (pensando en el tiempo de obtencin de datos, el costo de obtenerlos o la falta de personal que haga el trabajo, como posibles dificultades); (5) qu tanto este indicador ha sido tomado en cuenta anteriormente en esta institucin educativa y qu han hecho con l?; (6) con qu frecuencia se debera calcular este indicador o, dicho de otra manera, cul frecuencia sera la ptima?; (7) qu personas o instancias (departamentos, reas), dentro de la institucin seran las indicadas para pasarle al director el valor de este indicador y qu tanto dichas personas o instancias ven actualmente esta tarea como parte de sus obligaciones?; (8) teniendo usted este indicador, qu cosas cree que podra hacer para mejorar la institucin a su cargo?; (9) qu tanto considera que este indicador es importante y til para el trabajo que desempea como director?; y (10) hay alguna observacin adicional acerca de este indicador?

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

Esta tarea de validacin inici seleccionando a seis instituciones educativas dispuestas a participar en el estudio. Las instituciones educativas estaban localizadas en cuatro ciudades del Estado: Silao, Len, Guanajuato y San Luis de la Paz. Despus de concertar citas con los directores de dichas instituciones, se tuvo una reunin con cada uno de ellos para explicar cmo se llevara a cabo el proceso de validacin. Puesto que la participacin de las instituciones era voluntaria, ya se prevea difcil el lograr que una sola institucin pudiera poner a prueba todos los 54 indicadores definidos en el modelo. De hecho, al final de la Etapa 2, se contaba apenas con 37 indicadores de las seis instituciones participantes. Si bien la informacin aportada por estas instituciones fue muy valiosa, la meta de poner a prueba el modelo estaba lejos de cumplirse. Esto llev a los investigadores a aplicar un plan alternativo (el "Plan B"), que hasta cierto punto estaba previsto sabiendo de antemano la complejidad que esta tarea representaba para las instituciones participantes, as como por la relativa renuencia que algunas de ellas llegaron a manifestar para compartir informacin (por ejemplo, de orden financiero) que era un tanto confidencial. El Plan B tena el mismo objetivo de validar el modelo, pero tuvo que empalmarse en el tiempo con las actividades originalmente previstas para la Etapa 3. Esencialmente, lo que se hizo fue ampliar la muestra de instituciones educativas, aun cuando stas no se ubicaran en el Estado de Guanajuato. Esto se hizo a travs de tres cursos que dos de los investigadores deban impartir en esos das sobre temas relacionados con el proyecto. A manera de un ejercicio de transferencia, se pidi a los participantes de esos tres cursos que aplicaran el modelo de evaluacin desarrollado en este proyecto y que respondieran el cuestionario que se haba diseado para validar el modelo. Puesto que los participantes de estos tres cursos estaban dispersos geogrficamente, la informacin era registrada por los participantes a travs de una pgina Web (http://www.ruv.itesm.mx/convenio/modelo/desarrollo/homedoc.htm) dentro del portal del proyecto. Uno de los cursos en donde esto ocurri fue un curso presencial de un programa doctoral, impartido por la Dra. Ramrez, con profesores y directivos del Estado de Sonora. El curso se titul Liderazgo educativo, cont con 20 participantes y permiti recabar informacin de 119 indicadores. Otro de los cursos fue uno de Competencias bsicas para el evaluador institucional (el cual se describir ms adelante, al hablar de la Etapa 3). Este curso fue impartido por el Dr. Valenzuela, en l participaron 30 personas de cinco instituciones del Estado de Guanajuato y se recolect informacin relativa a 67 indicadores. Por ltimo, este mismo proceso se repiti en la asignatura de Evaluacin institucional (Ed-4017), curso de posgrado de la Maestra en Administracin de Instituciones Educativas (del Tecnolgico de Monterrey), impartido por el Dr. Valenzuela. La asignatura tuvo un total de 90 alumnos, de toda la Repblica Mexicana e incluso de algunos pases de Latinoamrica. A travs de este curso, se colect informacin de 1,610 indicadores. En total, el proceso de coleccin de datos se ampli de 37 indicadores iniciales (proporcionados por las seis instituciones que representaban la muestra inicial del proyecto) a 1,833 indicadores (gracias a la aplicacin del modelo en los tres cursos de formacin). Si el modelo cuenta con 54 indicadores, esto significa que por cada uno de ellos se cuenta con un promedio de 33.94 aplicaciones y validaciones de igual nmero de instituciones educativas. Toda esta informacin sirvi de base para afinar el modelo. Dentro de los programas de formacin, otro aspecto que fue promovido como parte del proceso de validacin, fue el de ejercicios de reflexin que hicieron los estudiantes sobre lo que les implicaba la aplicacin del modelo sistmico de evaluacin institucional en sus instituciones. Para ello, se dispusieron de diversos foros (algunos de ellos virtuales) en donde los participantes manifestaban sus puntos de vista y experiencias al aplicar el modelo.

Etapa 3: Transferencia del modelo a travs de procesos de formacin de evaluadores, as como la difusin de los resultados
El propsito de la tercera etapa del proyecto de investigacin fue el de promover la transferencia del modelo de evaluacin institucional por medio de procesos de formacin de evaluadores y, al mismo tiempo, difundir los resultados de la evaluacin en congresos y revistas

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

arbitradas (como la presente). Esta etapa se llev a cabo entre el 16 de noviembre de 2007 y el 15 de abril de 2008. Para lograr sus objetivos, dos fueron las tareas que se realizaron en esta tercera etapa: Imparticin de un curso de formacin de evaluadores. De los tres cursos que se mencionaron al hablar de la Etapa 2, uno de ellos estuvo directamente vinculado con instituciones educativas del Estado de Guanajuato: el de Competencias bsicas para el evaluador institucional. Este curso se imparti en la modalidad de e-learning, y en l participaron 30 personas de cinco instituciones educativas. Este curso implic a los participantes una dedicacin total de 40 horas. El ofrecimiento de este curso fue una forma de dar un valor agregando al proyecto, respondiendo a una necesidad manifestada por muchas instituciones: la de formar evaluadores institucionales en lo que implica la correcta aplicacin del modelo propuesto. Como parte del diseo de este curso, se incorporaron algunos foros de discusin asincrnica que permitieran a los participantes compartir sus experiencias y reflexionar sobre tres grandes temas: 1. Comprensin de los indicadores: su propsito era discutir sobre las dificultades que los evaluadores encontraron en las instituciones educativas respecto a la forma en que los directivos encuestados comprendan los indicadores. Capacitacin y competencias: su propsito era hacer una autoevaluacin sobre el tipo de competencias que esta tarea requiere y sobre el grado en que los evaluadores (los alumnos participantes en el curso) posean esas competencias. Cultura de evaluacin: muchas veces se observa en las instituciones educativas que la evaluacin es, para algunos, algo "secundario", al mismo tiempo que otras personas son recelosas sobre el uso que se le pueda dar a los resultados de la evaluacin; por ello, el propsito de este foro era hacer una reflexin sobre la existencia (o inexistencia) de una cultura de la evaluacin en las instituciones que los alumnos estaban evaluando.

2.

3.

Difusin de los resultados. Como cierre de esta Etapa 3 y de todo el proyecto completo, se establecieron las bases para difundir los resultados en congresos y revistas cientficas especializadas.

Resultados
La descripcin metodolgica que antecede a esta seccin nos da una idea de la magnitud del proyecto realizado. Tal como ya antes se coment, sera complejo presentar en un solo artculo los hallazgos de las distintas etapas. Tan solo la etapa del diagnstico de necesidades de evaluacin institucional o la documentacin de la experiencia de formacin de evaluadores proporcionan material suficiente para la elaboracin de dos tesis de estudiantes de maestra que estuvieron apoyando en este proyecto (ver Lafn, 2008; y Meymar, 2008). Para los propsitos de este artculo, los resultados que los autores quieren compartir van en dos lneas: (1) por una parte, el mayor aporte de este proyecto es el modelo de evaluacin mismo; y, (2) por otra parte, se presentan los hallazgos en el proceso de validacin del modelo. Estos dos puntos se presentan a continuacin.

Descripcin del modelo


El objetivo fundamental del proyecto era el de identificar cules son las caractersticas que debe tener un modelo de evaluacin que proporcione informacin a los cuadros directivos de una institucin educativa para mejorar los procesos de toma de decisiones, la gestin de la institucin y, eventualmente, la calidad del servicio educativo que ofrece. En los siguientes puntos se describen las caractersticas del modelo propuesto: Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

10

Objeto por evaluar. El modelo tiene como objeto por evaluar a las instituciones educativas, concretamente, instituciones de educacin media superior y superior. El modelo, con las adecuaciones pertinentes, puede ser aplicado a cualquier institucin educativa, en sus diferentes niveles. La evaluacin de la institucin educativa implica un "ir y venir" entre una perspectiva atomista (evaluando las componentes de la institucin) y una perspectiva holista (evaluando a la institucin en conjunto, o de manera integral). La primera perspectiva asume que una institucin educativa es demasiado compleja y requiere, para su comprensin, ser estudiada por partes; mientras que la segunda perspectiva parte del principio Gestalt de que "el todo es ms que la suma de las partes". El modelo propuesto considera que un buen sistema de evaluacin implica que el evaluador se mueva a lo largo de esta dimensin que va de lo atomista a lo holista y viceversa. Propsito del modelo. El propsito de este modelo es poder generar informacin acerca de distintas componentes de una institucin educativa, que permita tomar decisiones para mejorar la gestin educativa y, por consecuencia, la calidad del servicio que la institucin presta. La informacin que se genere provendr precisamente del modelo de evaluacin que aqu se propone. El modelo de evaluacin debe verse no como un fin ltimo, sino como un medio para llegar a un fin. El fin es mejorar la calidad del servicio que ofrece la institucin educativa. El modelo de evaluacin es muy importante pero tampoco es el nico medio con el que cuenta el director. A travs de la evaluacin, el director puede tomar decisiones ms fundamentadas, pero es importante dejar claro que el proceso de gestin de la calidad es mucho ms complejo; dicho proceso de gestin implica una visin a corto, mediano y largo plazo, una planeacin de la tarea educativa; una propuesta de estrategias innovadoras; una alineacin de la tarea educativa con las necesidades de la sociedad; entre otras. Del modelo propuesto, las instituciones educativas pueden cumplir con otros propsitos; por ejemplo: contar con un sistema que permita el registro de informacin relevante de la institucin educativa; establecer registros que permitan la comparacin de resultados a lo largo del tiempo; establecer comparaciones entre los logros de distintas instituciones educativas; etc. La Figura 1 ilustra los elementos fundamentales del modelo propuesto.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

11

Componentes e indicadores

Sistema de informacin

Gestin Misin y visin de la institucin

Figura 1. Representacin grfica del modelo de evaluacin institucional.

Alcances y limitaciones. El modelo aqu propuesto va orientado a valorar informacin relevante de las instituciones de educacin media-superior y superior. El modelo reconoce que dentro de estos niveles educativos hay una gran heterogeneidad de instituciones. Desde luego, un bachillerato es muy distinto a una universidad; una institucin privada tiene diferencias importantes respecto a una institucin pblica; un bachillerato tecnolgico es muy distinto a uno propedutico que prepare a sus estudiantes para una institucin de educacin superior; y una universidad orientada a la docencia es muy distinta a otra orientada a la investigacin. Cada institucin educativa podra tener un modelo propio. Sin embargo, para los propsitos de este proyecto, la idea de los autores fue generar un modelo relativamente general que pudiera aplicarse a instituciones educativas de distinta naturaleza y en distintos contextos, de una manera tal que cada institucin pueda tomar del modelo aquello que sea ms significativo para su realidad concreta. No se propone un modelo encaminado a generar rankings, aunque puede ser usado para tal fin. Tampoco se propone un modelo orientado a asegurar acreditaciones o certificaciones de instituciones educativas, aunque puede servir para tal fin. Como ya se ha indicado en el propsito, la idea de este modelo es apoyar la toma de decisiones del trabajo de gestin, a travs de proveer informacin valiosa acerca de la institucin educativa. Finalmente, cabe sealar que el modelo propuesto no se concibi como un modelo rgido, sino como uno que pueda actualizarse de acuerdo a las necesidades de cada institucin. Tal y como aqu se Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

12

propone, el modelo incluye varios indicadores, pero es mucho ms que una mera coleccin de stos. Los indicadores que hoy pueden ser importantes, maana podrn ser sustituidos por otros. Premisas. El modelo de evaluacin propuesto parte de las siguientes premisas: 1. Orientacin a la calidad. El modelo propuesto pretende alinear la informacin que resulte de la evaluacin con el proceso de gestin y con la calidad del servicio educativo prestado. En ese sentido, el modelo es instrumental y no pierde de vista que debe servir para el logro de la misin y la visin institucional. Se parte del principio de crear una cultura de calidad dentro de las instituciones para que los miembros de la comunidad educativa contribuyan, entre todos, a la mejora de la calidad. En la medida en que el modelo promueva el mejoramiento de las instituciones, estar cumpliendo con ciertos estndares de utilidad que todo modelo de evaluacin debe tener (Joint Committee on Standars for Educational Evaluations, 1988 y 2004). Simplicidad. El modelo propuesto pretende que el trabajo de evaluacin se realice de manera eficaz. No se trata de un modelo complejo que requiera que las instituciones educativas inviertan una gran cantidad de tiempo y recursos en generar sistemas de informacin complejos. Al proponerlo, se parte de la premisa de que la evaluacin debe ser parte de las funciones propias de cada entidad de la institucin educativa. Al buscar simplicidad, no se pretende caer en reduccionismos, sino en tratar de identificar aquellos indicadores que sean ms trascendentes para la tarea de gestin. En la medida en que el modelo pueda ser fcilmente implementado en la institucin educativa, estar cumpliendo con ciertos estndares de factibilidad que todo modelo de evaluacin debe tener (Joint Committee on Standars for Educational Evaluations, 1988 y 2004). Enfoque sistmico. El modelo propuesto puede ser visto como un subsistema dentro de otro gran sistema que es la institucin educativa. Al asumir la idea de un enfoque sistmico, la evaluacin es concebida como un conjunto de procesos que tienen insumos y salidas. Cada proceso puede ser visto como un subsistema dentro de otro. Por ello, tal y como ya se coment, el proceso de evaluacin asume que el evaluador se mueve a lo largo de una dimensin que va desde una perspectiva atomista (evaluando las componentes de la institucin) a una perspectiva holista (evaluando a la institucin en conjunto, o de manera integral) y viceversa (Valenzuela, 2004). Adaptabilidad. El modelo de evaluacin debe poderse adaptar a las peculiaridades de cada institucin educativa y de los entornos en donde se ubica. No se pretende que el modelo sea rgido, sino que ste debe concebirse como un modelo flexible que pueda ir evolucionando a lo largo del tiempo. Precisin de la informacin. La calidad de un modelo de evaluacin depende, en buena medida, de la calidad de la informacin que se genere. Dicha calidad es lo que, en trminos psicomtricos se conoce como confiabilidad y validez de los datos generados. En ese sentido, el modelo debe asegurar que la informacin que de l se desprenda mida aquello que se pretende medir (validez) y lo haga procurando minimizar los errores de medicin (confiabilidad). En la medida en que el modelo logre lo anterior, estar cumpliendo con ciertos estndares de precisin que todo modelo de evaluacin debe tener (Joint Committee on Standars for Educational Evaluations, 1988 y 2004). tica. El cumplimiento con ciertos estndares de tica es fundamental cuando se establece un modelo de evaluacin institucional (Joint Committee on Standars for Educational Evaluations, 1988 y 2004). Es por ello que el modelo aqu propuesto debe asegurar un respeto absoluto hacia la persona, lo cual implica mantenerla informada de qu es lo que se va a evaluar y para qu se va a evaluar; quin va a conocer los resultados, entre otros.

2.

3.

4.

5.

6.

Componentes del modelo. Para definir las componentes del modelo, se comenz por definir un conjunto de metas vinculadas a las instituciones educativas. Esas metas fueron denominadas Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

13

como "axiomticas", por ser un tanto obvia (sin mayor necesidad de demostracin o justificacin) su importancia para la institucin. Desde luego, las metas tienen distinta importancia relativa en cada institucin educativa. Una institucin de educacin media-superior puede no ver la meta de la investigacin como una de sus prioridades, pero esto no la exime de que sus profesores puedan llevar a cabo esta actividad. As, de entrada, se propusieron 10 metas axiomticas que sirvieran como brjula para dar direccin a las acciones de la institucin y al modelo de evaluacin mismo. A partir de estas metas, se definieron 10 componentes para configurar el modelo educativo: (1) formacin integral y calidad, (2) capital humano, (3) capital social, (4) investigacin, (5) consultora, (6) servicio social, (7) promocin cultural, (8) patrimonio fsico, (9) prestigio social y (10) sustentabilidad econmica. Vinculados a estas 10 componentes, se propuso un total de 54 indicadores, en trminos de su relevancia para proveer de informacin a los cuerpos directivos y alinear sus acciones al logro de las metas axiomticas. El modelo propuesto pretende vincular claramente a cada componente con los distintos procesos de gestin de la institucin. Aunque no se trata de un modelo de gestin de calidad (en un sentido ortodoxo del trmino), s se tuvo en mente que el modelo permitiera a los directivos implementar estrategias orientadas al mejoramiento de la calidad del servicio educativo y al logro de las metas axiomticas antes establecidas. El detalle de las componentes, sus definiciones, los indicadores, las estrategias de gestin y las metas axiomticas se muestra en la Tabla 1.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

14

Tabla 1 Componentes del modelo de evaluacin institucional

Definiciones 1. Formacin integral y calidad Es el proceso educativo que permite el desarrollo de los estudiantes en todas sus dimensiones (fsica, psicolgica, sociocultural, ecolgica, trascendente y profesional), con miras de asegurar que los egresados de un programa educativo cumplen con estndares definidos por los curricula de la institucin educativa. 1.1. 1.2. 1.3.

Indicadores

Ejemplos de estrategias

Metas (axiomticas)

1.4.

1.5. 1.6. 1.7. 1.8. 1.9. 1.10. 1.11. 1.12. 1.13.

Frecuencia de actualizacin de planes y programas de estudio. Proporciones relativas de materias destinadas a las distintas dimensiones de formacin del estudiante. Grado de cumplimiento de lo establecido en los curricula, en trminos del nmero de temas que se abordaron y que se debieron haber abordado. Grado de cumplimiento de lo establecido en los curricula, en trminos del nmero de clases que se impartieron y que se debieron haber impartido. Resultados del sistema de evaluacin de profesores. Resultados de la evaluacin de los programas. Resultados de exmenes departamentales. ndice de desercin de los alumnos. Nmero promedio de alumnos en cada grupo escolar. Estadsticas de calificaciones de los alumnos. Proporcin de alumnos egresados que se encuentran trabajando en su rea profesional. Ingresos anuales promedio de los alumnos que egresaron hace cinco y diez aos. Resultados de sistemas de evaluacin de los egresados aplicados a empleadores.

Elegir programas educativos que tomen en consideracin los intereses de los estudiantes de nuevo ingreso, de los empleadores y de la sociedad. Disear los curricula con base en una concepcin integral del ser humano, considerando sus distintas dimensiones: fsica, psicolgica, sociocultural, ecolgica, trascendente y profesional. Utilizar procesos formativos acordes con las competencias y actitudes que se busca desarrollar en los estudiantes. Involucrar al sector productivo en algunas etapas de los procesos de desarrollo curricular. Dar seguimiento a los egresados para conocer el estatus de su ocupacin y detectar fortalezas y debilidades respecto a su formacin.

La institucin debe formar integralmente a sus estudiantes para asegurar a la sociedad que sus egresados podrn responder con un trabajo de calidad a sus necesidades.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

15

Definiciones 2. Capital humano Es el potencial del personal que tiene una institucin educativa, dado por el nivel de competencias y experiencia que poseen los trabajadores y que se pude traducir en valor para la institucin. 2.1.

Indicadores

Ejemplos de estrategias

Metas (axiomticas)

Nmero de horas de capacitacin ofrecidas a los profesores anualmente. 2.2. Nmero de horas de capacitacin per cpita tomadas por los profesores anualmente. 2.3. Proporcin relativa de cada rea de capacitacin ofrecida por la institucin anualmente. 2.4. Proporcin relativa de cada rea de capacitacin tomada por los profesores anualmente. 2.5. Nmero de profesores perteneciente a los distintos escalafones o sistemas de clasificacin. 2.6. Nmero de profesores de planta versus de ctedra. 2.7. Nmero de profesores pertenecientes al SNI. 2.8. ndice de mejora del nivel de calidad de vida de los trabajadores en funcin de su retribucin econmica. 2.9. Resultados de la evaluacin del clima laboral. 2.10. ndice de rotacin interna. 2.11. ndice de rotacin externa.

Establecer programas de capacitacin continua para los profesores, en distintas reas: pedaggicas, tecnolgicas, propias de la disciplina que ensea y de investigacin. Establecer planes de vida y carrera para los trabajadores de la institucin.

La institucin debe promover el desarrollo del personal con el que cuenta, para lograr un doble propsito: asegurar el bienestar de los trabajadores y mejorar la productividad de stos a partir del uso de sus competencias.

3. Capital social Es el potencial que tienen las redes internas y externas de los trabajadores y que se traducen en valor para la institucin. 3.1. 3.2. 3.3. 3.4. 3.5. Nmero de redes internas bien identificadas en las que participa el personal de la institucin. Nmero de redes externas bien identificadas en las que participa el personal de la institucin. Nmero de personas involucradas en redes internas. Nmero de personas involucradas en redes externas. Resultados de la evaluacin del trabajo en redes. Involucrar al personal en proyectos internos (institucionales) y externos (redes profesionales) en donde se promueva trabajo colaborativo e interdisciplinario. Promover el concepto de academia o claustro donde se trabaje en proyectos colectivos que tengan un impacto tangible. La institucin debe promover el desarrollo de redes internas y externas que, a travs del trabajo colaborativo, generen sinergias y aumenten la productividad.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

16

Definiciones 4. Investigacin Es el proceso por medio del cual se contribuye a la generacin de conocimiento cientfico para beneficio de la sociedad. 4.1. 4.2. 4.3. 4.4.

Indicadores

Ejemplos de estrategias

Metas (axiomticas)

4.5.

Nmero de proyectos de investigacin de distintas reas en los que participan los profesores. Montos de los proyectos de investigacin que entran al presupuesto de la institucin. Proporcin de proyectos que estn vinculados a las lneas de investigacin definidas por la institucin. Nmero de artculos publicados por los profesores en revistas especializadas, arbitradas y no arbitradas. Nmero de participaciones en congresos nacionales e internacionales, por parte de los profesores.

Definir lneas de investigacin acordes con las fortalezas propias de la institucin. Participar en convocatorias nacionales e internacionales para trabajos de investigacin. Promover la publicacin de trabajos de investigacin en congresos y revistas especializadas.

La institucin debe contribuir a la generacin de nuevo conocimiento a travs de la investigacin.

5. Consultora Es el proceso por medio del cual personal experto de la institucin educativa contribuye a dar soluciones al sector productivo que las solicita. 5.1. 5.2. 5.3. Nmero de proyectos de consultora de distintas reas en los que participan los profesores. Montos de los proyectos de consultora que entran al presupuesto de la institucin. Proporcin de proyectos que estn vinculados a las lneas de consultora definidas por la institucin. Definir lneas de consultora acordes con las fortalezas propias de la institucin. Participar en convocatorias nacionales e internacionales para trabajos de consultora. La institucin debe contribuir a la satisfaccin de necesidades de la sociedad y, en particular, del sector productivo, a travs de servicios de consultora.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

17

Definiciones 6. Servicio social Es la contribucin que la institucin educativa ofrece a su entorno social a travs del trabajo de sus estudiantes. 6.1. 6.2. 6.3. 6.4.

Indicadores

Ejemplos de estrategias

Metas (axiomticas)

Nmero de programas de servicios social. Nmero de personas involucradas en los programas de servicio social. Resultados del sistema de evaluacin del servicio social. Porcentaje de alumnos con beca.

Establecer programas de apoyo a la comunidad en que se encuentre inserta la institucin educativa. Establecer programas de coleccin de fondos que permitan financiar los estudios de los alumnos a travs de becas.

La institucin debe contribuir, en la medida de lo posible, al desarrollo de la comunidad en la que se encuentra inserta, mediante el servicio social que presten los estudiantes.

7. Promocin cultural Es la preservacin, difusin, creacin y recreacin de los valores culturales y de las distintas manifestaciones artsticas propias de un entorno social y de la humanidad en general. 8. Patrimonio fsico Es el conjunto de recursos materiales que permiten a la institucin educativa cumplir sus funciones para la presente y futuras generaciones. 8.1. 8.2. Proporcin del presupuesto destinado a mantenimiento preventivo y correctivo. Inventario de recursos materiales de la institucin educativa. Definir planes de mantenimiento preventivo y correctivo para los inmuebles y muebles de la institucin. Incrementar el acervo en bibliotecas, museos, galeras, etc. a travs de campaas de donacin y adquisiciones priorizadas. La institucin debe preservar y acrecentar su patrimonio fsico para la sociedad y las futuras generaciones. 7.1. 7.2. Nmero de eventos de difusin cultural organizados por la institucin. Proporcin relativa del nmero de eventos de difusin cultural realizados en las distintas reas de manifestacin artstica. Promover la realizacin peridica de distintos eventos culturales. La institucin deber preservar, difundir, crear y recrear, hacia el interior de la misma y en su entorno social, los valores culturales.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

18

Definiciones 9. Prestigio social Es el reconocimiento que la sociedad otorga a la institucin educativa por el servicio que presta en la formacin de los estudiantes, as como por su impacto social. 9.1. 9.2. 9.3.

Indicadores

Ejemplos de estrategias

Metas (axiomticas)

Resultados de los alumnos en exmenes nacionales estandarizados. Nmero de programas acreditados. Posicin de la institucin educativa en rankings.

Buscar acreditaciones de organismos nacionales e internacionales reconocidos. Participar en estudios que permitan establecer comparaciones entre distintas instituciones.

La institucin debe ser reconocida por la sociedad como una institucin de excelencia acadmica.

10. Sustentabilidad econmica Es aquello que asegura que una institucin educativa pueda operar manteniendo un equilibrio entre sus ingresos y sus egresos. 10.1. Registro de ingresos en funcin del tiempo. 10.2. Registro de egresos en funcin del tiempo. 10.3. Discrepancias entre el presupuesto programado y el presupuesto ejercido. 10.4. Estados contables de flujo de efectivo. 10.5. Proporciones relativas de ingresos recibidos segn presupuesto gubernamental e ingresos conseguidos por la misma institucin. 10.6. Proporciones relativas de los gastos de operacin y de inversin. Conseguir ingresos adicionales a aquellos recibidos segn presupuesto gubernamental (dar servicios de consultora, concursar por fondos de investigacin, realizar sorteos, etc.). Promover una cultura de ahorro que permita reducir gastos y optimizar los recursos financieros con los que se cuenta, mediante una jerarquizacin de prioridades. Definir claramente las proporciones idneas de lo que se requiere para gastos de operacin (directa e indirecta) y de inversin. La institucin debe procurar mantener una operacin econmicamente equilibrada, procurando optimizar los recursos con los que cuenta.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

19

Validacin del modelo


La validacin de un modelo como el aqu propuesto implica el poner a prueba el modelo y estimar el grado en el que ste cumple las funciones para las que ha sido creado. En este sentido, la informacin recabada para la validacin del modelo fue muy rica y se resume en los siguientes puntos: 1. Un primer aspecto por destacar es que ms que hablar de un modelo de evaluacin, deberamos estar hablando de un metamodelo; esto es, un modelo de modelos. Con esto se quiere decir que el modelo planteado, con sus 10 componentes y sus 54 indicadores, ciertamente no es aplicable, en forma completa, para toda institucin educativa. Nunca fue esa la intencin. Ms bien, la intencin era abrir las posibilidades de las instituciones educativas para que cada una de ellas definiera, segn su contexto, su estructura y su misin y visin institucionales, cules de todas las componentes e indicadores podran ser aplicables para ellas. Esto se hizo explcito desde el momento mismo de la definicin del modelo, cuando se seal que una de las premisas de las que se parta era la de adaptabilidad. Si bien la Tabla 1 muestra en forma estructurada a las distintas componentes e indicadores del modelo de evaluacin institucional, es claro que al entrar al detalle de la determinacin de los indicadores, surge inevitables confusiones o discrepancias sobre sus definiciones. sta fue una de las partes ms interesantes que se analizaron al contrastar las definiciones que diversos informantes daban sobre un mismo indicador. Pngase por ejemplo uno de ellos, el ndice de desercin de los alumnos, el cual muchas instituciones llegan a determinar, pero que no necesariamente lo hacen de igual manera. Esto llev a los investigadores a desarrollar un manual detallado del modelo, el cual se espera publicar prximamente. El Anexo 1 muestra el ejemplo de un indicador de la Componente 5: Consultora que se incluye en el manual. El ejemplo que se presenta es el del Indicador 5.1.: Nmero de proyectos de consultora de distintas reas en los que participan los profesores. Las discrepancias de las que se habla en el punto anterior nos hablan de la dificultad conceptual para entender lo que un indicador es. En trminos generales, la claridad conceptual sobre cada tipo de indicador depende, en buena medida, de qu tanto los directores (o las personas a cargo de generar esos indicadores) han tenido que calcularlos en el pasado (bien sea como parte de procesos de acreditacin o como prctica comn de los procesos de gestin), o de qu tanto cuentan con una capacitacin previa sobre cuestiones de evaluacin institucional. En entrevistas con algunos informantes, los investigadores llegaron a apreciar que ni siquiera el concepto de indicador es suficientemente claro para algunos. En contraste, otros informantes rpidamente reconocieron el tipo de informacin que se les solicitaba, y podan generar ms de una estimacin de cada tipo de indicador. Lo importante de este anlisis no era el generar distintas definiciones para cada indicador. Lo importante radicaba en buscar aquella definicin que cumpliera con las cuatro caractersticas que se supone debe tener cada indicador (Joint Committee on Standars for Educational Evaluations, 1988 y 1994): precisin, utilidad, factibilidad (para su determinacin) y propiedad (aplicacin de principios ticos para generarlo). El mero clculo de un indicador no debe verse como un hecho aislado, sino como un proceso que est inmerso en un ambiente en donde entran en juego dos elementos: las competencias que tengan las personas a cargo de definir y generar un cierto indicador, y la existencia (o inexistencia) de una cultura de evaluacin dentro de la institucin. Por comentarios con los informantes, se lleg a subrayar la importancia de que un modelo de esta naturaleza fuera implementado junto con una adecuada capacitacin del personal de la institucin. Esa capacitacin deba incluir no slo cuestiones tcnicas sobre el clculo de cada indicador, sino tambin el desarrollo de cierto tipo de competencias interpersonales para facilitar la consecucin de informacin, competencias de comunicacin oral y escrita para comunicar adecuadamente los resultados y competencias de orden tico para asegurar un proceso de evaluacin con respeto absoluto a la persona humana. Por otra parte, se destac tambin la importancia de que un modelo de esta naturaleza estuviera vinculado con una cultura de evaluacin al interior de la institucin. Este vnculo debe ser bidireccional: un modelo como el aqu propuesto debe fomentar el desarrollo de una cultura de evaluacin pero, al mismo 20

2.

3.

4.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

tiempo, el xito al implementar el modelo depende en buena medida de que exista previamente una cultura de aceptacin de procesos de evaluacin. 5. Las aportaciones analizadas coinciden en manifestar que es muy importante dejar de considerar a los procesos de evaluacin como un fin y no como un medio para alcanzar las metas que la institucin determine para s misma. Precisamente uno de los aspectos que ms se valoraron en el modelo propuesto fue la claridad conceptual de vincular a cada indicador con posibles estrategias de gestin y stas a su vez encaminadas a lograr ciertas metas institucionales.

Conclusiones
El proyecto de investigacin aqu descrito permiti muchos aprendizajes sobre la forma de concebir la evaluacin institucional y los procesos de gestin de instituciones educativas. Uno de los aspectos que aflor desde la primera etapa del proyecto fue la enorme heterogeneidad estructural en las instituciones de educacin media-superior y superior del Estado de Guanajuato. Los contrastes se hacen palpables tanto por el nmero de alumnos, como por los recursos con los que cuentan, las orientaciones curriculares para la formacin, entre otros muchos factores. Esta misma heterogeneidad que se observa en el tamao e infraestructura de las instituciones, se manifiesta tambin en las prcticas de evaluacin y en los sistemas con los que cuentan para tal fin. Desde luego, tambin se observan coincidencias entre las instituciones cuando, al hablar de evaluacin, se mencionan la que se hace del aprendizaje (internamente o mediante tests estandarizados a nivel nacional) o de los profesores (a travs de encuestas aplicadas a los alumnos). Asimismo, hay muchas coincidencias en cuanto a las evaluaciones no realizadas, como podra ser la que implica un seguimiento a egresados (son contadas las instituciones que manifestaron estudios en esta lnea). Fuera de estas coincidencias, la diversidad de formas de evaluar es palpable. Desde esta perspectiva, era preciso proponer un modelo de evaluacin que retomara las prcticas recurrentes de evaluacin, pero que tambin viera la forma de integrar al modelo las "ausencias" detectadas. Un patrn recurrente de las instituciones educativas fue que no existen prcticas que sistemticamente vinculen a la evaluacin con los procesos de gestin. Esto no implica que se carezca de evaluaciones. Por el contrario, existen muchos esfuerzos para realizarlas. A veces se llevan a cabo simplemente para cumplir con registros estadsticos que se le solicitan a la institucin; y a veces por un deseo de contar con una acreditacin como institucin o en alguno de sus programas. Sin embargo, estas evaluaciones son "puntuales" y no se llevan a cabo de una manera continua en que se aprecie un vnculo claro con los procesos de toma de decisiones y de gestin. En ese sentido, el modelo propuesto pretendi establecer precisamente ese vnculo entre la informacin que se genere de los procesos de evaluacin y los procesos de gestin asociados con la calidad educativa. Ya para concluir, conviene sealar que el modelo de evaluacin aqu propuesto implica mucho trabajo adicional al que se ha reportado hasta el momento en este artculo. As, por ejemplo: 1. Es preciso definir para la operacin del modelo quin conduce la evaluacin, quines son los informantes y quines son los destinatarios (usuarios) de la informacin que resulte de la evaluacin, de tal forma que se entienda que la evaluacin tiene tambin componentes democrticas que deben involucrar la participacin de los distintos miembros de las comunidades educativas. En el plano operativo, un modelo de evaluacin debe precisar tambin cuestiones concretas tales como fechas de coleccin de datos, responsables de la coleccin de datos, responsables del procesamiento de los datos, flujos de informacin y recursos que se requieren para operarlo. Es preciso discutir sobre las ventajas de un proceso de evaluacin centralizado versus uno distribuido. Es tambin preciso discutir sobre aspectos ticos en el manejo de la informacin y en el involucramiento de los agentes. 21

2.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

3.

Un modelo debe precisar las componentes tecnolgicas que idealmente pueden apoyar la operacin del mismo. Es conveniente explorar la posibilidad de desarrollar una plataforma tecnolgica que permita colectar la informacin y consultarla de manera expedita. Un modelo (ya se dijo varias veces) debe incluir procesos de capacitacin para que los evaluadores desarrollen las competencias necesarias para el correcto uso del modelo. Un modelo debe definir la forma de difundir los resultados. Hay que discutir qu informacin va a qu personas (destinatarios); qu informacin debe considerarse confidencial; qu informacin se genera como parte de la operacin diaria de la institucin y que, como consecuencia, ciertos trabajadores asumen que se procesen datos sobre su persona como parte de su contrato; y qu informacin se genera a partir de solicitar cartas de consentimiento voluntaria. El modelo propuesto debe permitir una vinculacin clara con otros procesos de gestin, tales como la capacitacin de los trabajadores, los sistemas de promocin, los sistemas de compensacin, etc. No es algo que opere en el vaco. Su xito depende de la manera en que el modelo interacte con otros procesos de gestin institucional. Finalmente, un modelo de evaluacin debe poder evaluarse (metaevaluacin) a la luz de los cuatro criterios varias veces mencionados: precisin, utilidad, factibilidad y tica.

4.

5.

6.

7.

Referencias
Barbier, J. M. (1993). La evaluacin en los procesos de formacin. Barcelona, Espaa: Paids. Carey, L. M. (2001). Measuring and evaluating school learning (3a. ed.). Boston, MA, EE.UU.: Allyn and Bacon. Domnguez, G. (2000). Evaluacin y educacin: Modelos y propuestas. Buenos Aires, Argentina: Fundec. Edwards, M. R. y Ewen, A. J. (1996). 360 feedback: The powerful new model for employee assessment & performance improvement. New York, EE.UU.: American Management Association. Fitzpatrick, J. L., Sanders, J. R. y Worthen, B. R. (2004). Program evaluation: Alternative approaches and practical guidelines (3a. ed.). Boston, MA, EE.UU.: Pearson. Gobierno del Estado de Guanajuato. (2008a). Orgenes de Guanajuato. Consulta realizada el 14 de mayo de 2008, en http://www.guanajuato.gob.mx/index.php?option=com_content&task=view&id=59&Itemid=11 6 Gobierno del Estado de Guanajuato. (2008b). Mapa de ubicacin. Consulta realizada el 14 de mayo de 2008, en http://www.guanajuato-travel.com/como_llegar.html Instituto Nacional de Estadstica, Geografa e Informtica. (2005). II Conteo de Poblacin y Vivienda 2005. Consulta realizada el 14 de mayo de 2008, en http://www.inegi.gob.mx/est/contenidos/espanol/proyectos/conteos/conteo2005/sintesis.pps Isaac, S. y Michael, W. B. (1995). Handbook in research and evaluation: A collection of principles, methods, and strategies useful in the planning, design, and evaluation of studies in education and the behavioral sciences (3a. ed.). San Diego, CA, EE.UU.: EdITS.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

22

Joint Committee on Standars for Educational Evaluations, The. (1988). The personnel evaluation standards: How to assess systems for evaluating educators. Newbury, Park, CA, EE.UU.: Corwin Press. Joint Committee on Standars for Educational Evaluations, The. (1994). The program evaluation standards: How to assess evaluations of educational programs (2a. ed.). Thousand Oaks, CA, EE.UU.: Sage. Kaplan, R. S. y Norton, D. P. (1997). El cuadro de mando integral: The balanced scorecard. Barcelona, Espaa: Gestin 2000. Kubiszyn, T. y Borich, G. (2003). Educational testing and measurement: Classroom application and practice (7a. ed.). Hoboken, NJ, EE.UU.: Wiley. Lafn, M. R. (2008). Deteccin de necesidades de evaluacin institucional en educacin mediasuperior y superior. Tesis de maestra indita, Tecnolgico de Monterrey, Ciudad Jurez, Chihuahua, Mxico. Lora, E. (2002). La competitividad de las universidades pblicas mexicanas: Una propuesta de evaluacin. Distrito Federal, Mxico: Universidad Autnoma del Estado de Mxico y Plaza y Valds. Mayor, C. (1998). La evaluacin como estrategia de mejora: Evaluacin de programas, centros y profesores. Sevilla, Espaa: Kronos. Meymar, O. A. (2008). Formacin de evaluadores para la evaluacin institucional a travs de una modalidad de elearning. Tesis de maestra indita, Tecnolgico de Monterrey, Len, Guanajuato, Mxico. Rodrguez, D. (1999). Diagnstico organizacional (3a. ed.). Distrito Federal, Mxico: Alfaomega. Rossi, P. H., Lipsey, M. W. y Freeman, H. E. (2004). Evaluation: A systematic approach (7a. ed.). Thousand Oaks, CA, EE.UU.: Sage. Ruiz, J. M. (1998). Cmo hacer una evaluacin de centros educativos (2a. ed.). Madrid, Espaa: Narcea. Salmern, H. (1992). Evaluacin de los espacios arquitectnicos escolares. Granada, Espaa: Universidad de Granada. Secretara de Educacin Pblica. (2008). Estadstica histrica por estados del Sistema Educativo Nacional. Consulta realizada el 14 de mayo de 2008, en http://www.sep.gob.mx/work/appsite/xestados/index.htm Valenzuela, J. R. (2004). Evaluacin de instituciones educativas. Distrito Federal, Mxico: Trillas. Valenzuela, J. R. (2007, mayo). Evaluacin institucional para la mejora de la calidad educativa. Ponencia presentada en el I Congreso Nacional de Investigacin y Gestin Educativas, Monterrey, Nuevo Len, Mxico. Valenzuela, J. R. y Ramrez, M. S. (2008, abril). Needs assessment of evaluation of educational institutions: First phase in the development of an evaluation model of educational institutions for the improvement education quality. Poster presentado en la IV Conferencia Internacional de Barcelona sobre Educacin Superior, Barcelona, Espaa. Weiss, C. H. (1997). Evaluation (2a. ed.). Upper Saddle River, NJ, EE.UU.: Prentice Hall.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

23

Anexo 1: Ejemplo del anlisis de un indicador


Componente 5. Consultora Indicador 5.1. Nmero de proyectos de consultora de distintas reas en los que participan los profesores Definicin del indicador Este indicador puede medirse directamente mencionando cuntos proyectos de consultora por rea son atendidos por los profesores de una universidad. As, pues, una institucin puede simplemente indicar que, a lo largo del ao escolar 2005-2006, sus profesores participaron en 48 proyectos de consultora; mientras que en el ao escolar 2006-2007, sus profesores participaron en un total de 64 proyectos, un 33.33% ms que en el ao anterior. Formas alternativas de calcular el indicador El solo nmero de proyectos, si bien importante, nos proporciona poca informacin que pueda ser de utilidad para fines de una evaluacin institucional. Cuando las instituciones educativas evalen este rubro, pueden buscar otras formas alternativas de medirlo con mayor precisin. As, por ejemplo, algunas variantes pueden ser las siguientes: 1. En funcin del tiempo, el indicador se puede dar en forma anual, semestral o mensual, si hubiera un nmero significativos de proyectos en los que se estuviera trabajando. En cualquiera de los casos, es preciso que las instituciones definan con claridad las fechas de inicio y de trmino de cada perodo, con el fin de poder hacer comparaciones sistemticas de un perodo a otro. As, si el nmero se proporciona para perodos anuales, es necesario establecer si esto se refiere a un perodo que va a lo largo de un ao calendario (por ejemplo, del 1 de enero al 31 de diciembre de 2007 se particip en 64 proyectos de consultora) o lo que se conoce en algunos pases como "ao escolar" (por ejemplo, del 1 de agosto de 2006 al 31 de julio de 2007 se particip en 64 proyectos de consultora). 2. En funcin del rea, el indicador puede abarcar a toda la institucin educativa o a divisiones, departamentos o escuelas en lo particular. Esto va a depender del nmero de proyectos que los profesores-consultores estn atendiendo, as como de la importancia relativa que la institucin educativa ponga a cada una de sus instancias acadmicas a participar en este tipo de proyectos. As, por ejemplo, el indicador puede precisarse para indicar que de un total de 64 proyectos de consultora en el ao escolar 2006-2007, 27 de ellos fueron atendidos por la Escuela de Ingeniera, 32 de ellos por la Escuela de Administracin, 4 de ellos por la Escuela de Derecho y slo uno de ellos por la Escuela de Humanidades. 3. En funcin de la fuente de los recursos, el indicador puede establecerse sealando la cantidad de proyectos en funcin del tipo de instancia que solicita el servicio de consultora. As, pues, algunos proyectos pueden ser solicitados internamente, por la misma institucin educativa; mientras que otros pueden ser requeridos por organismos externos que acuden a la universidad para proyectos especficos; y, dentro de los organismos externos, stos a su vez pueden clasificarse por ser organismos nacionales o internacionales, de gobierno o del sector privado, etc. Este desglose ms fino sirve para medir, hasta cierto punto, la interrelacin que la institucin educativa est teniendo con la sociedad en que est inserta. Posibles mecanismos para generar el indicador Al hablar de este tipo de indicadores, se parte de la premisa de que la institucin educativa cuenta, previamente, con polticas claras sobre cmo manejar este tipo de proyectos, por lo que implica la asignacin de tiempo del personal al frente del proyecto, la forma de gestionar los recursos del proyecto y la posibilidad de asignar bonos a aquellos profesores que hayan conseguido el proyecto para la institucin educativa. No en pocas ocasiones, las instituciones se enfrentan a situaciones en que los profesores manejan "por fuera" los proyectos de consultora que atienden, con el fin de asegurar las ganancias del proyecto para ellos mismos. Cuando esto ocurre, puede suceder que el trabajo de consultora se lleve a cabo en horarios que el profesor deba destinar a sus funciones dentro de la institucin educativa y que, hasta cierto punto, el nombre y prestigio de la institucin sean usados indebidamente para que el profesor-consultor gane el proyecto. Este Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa 24

tipo de prcticas llegan a presentarse por mero inters econmico de los profesores, pero tambin por la ausencia de polticas institucionales que regulen la participacin de los profesores en proyectos que lleven el respaldo institucional. En general, son aquellos proyectos que llevan un respaldo institucional los que deben registrarse para fines de establecer indicadores de desempeo. Cada institucin educativa, dentro de sus reas de extensin (bien sea que estn centralizadas o descentralizadas en cada divisin, departamento o escuela), debe llevar un registro de aquellos proyectos de consultora que sus profesores estn atendiendo. Ms all del mero registro de proyectos, el control de los mismos sirve para fines de gestin de los recursos humanos y materiales de la institucin. Posibilidades y dificultades en el clculo del indicador Como con cualquier tipo de indicador, una definicin precisa es lo que evita variedad en las formas de clculo y diversidad en sus interpretaciones. As como ya antes se dijo que era importante definir con precisin las fechas de inicio y de trmino que sirvan de referencia para contabilizar el nmero de proyectos, otro aspecto por precisar es la forma de contabilizar proyectos que se extiendan por ms de un ao o que, aunque duren menos de un ao, abarquen dos perodos de referencia. Qu hacer en estos caso? Entran dentro del conteo mientras se est ejecutando? Slo se contabilizan una vez, bien sea al inicio o al cierre del proyecto? Estas cuestiones deben quedar bien establecidas al momento de definir un indicador, no slo para calcularlo con precisin, sino tambin para saber cmo interpretarlo.

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

25

Currcula vitae de los autores


Jaime Ricardo Valenzuela Gonzlez es profesor-investigador de la Escuela de Graduados en Educacin del Tecnolgico de Monterrey (Mxico). Realiz estudios de Doctorado en Psicologa Educativa en la Universidad de Texas en Austin (EE.UU.). Adems de sus actividades docentes, ha incursionado en el rea de administracin educativa, llegando a ocupar cargos como el de Vicerrector Acadmico de la Universidad La Salle Morelia y el de Director del Programa de Doctorado en Innovacin y Tecnologa Educativas de la Universidad Virtual del Tecnolgico de Monterrey. Sus actividades actuales incluyen tambin las de investigacin. Es miembro del Sistema Nacional de Investigadores (Mxico), teniendo como lneas principales de trabajo las de educacin a distancia y evaluacin educativa. Es autor del libro Evaluacin de instituciones educativas (Ed. Trillas, 2004), as como de diversos artculos en revistas cientficas y captulos en libros editados. Mara Soledad Ramrez Montoya es profesora-investigadora de la Escuela de Graduados en Educacin del Tecnolgico de Monterrey (Mxico). Realiz estudios de doctorado en Filosofa y Ciencias de la Educacin en la Universidad de Salamanca (Espaa). Se ha desempeado como docente en todos los niveles del sistema educativo mexicano y desempe actividades en la direccin de diversos departamentos en la Escuela de Graduados en Educacin del Tecnolgico de Monterrey. Sus lneas de investigacin son la prctica docente, estrategias de enseanza y los procesos y recursos para la educacin a distancia. Tiene libros publicados sobre las temticas de calidad en instituciones educativas, objetos de aprendizaje y educacin e investigacin: retos y oportunidades (con editorial Trillas). Es investigadora asociada al Centro de Investigacin en Educacin, de la Universidad Virtual del Sistema Tecnolgico de Monterrey y es miembro del Sistema Nacional de Investigadores. Jorge Antonio Alfaro Rivera es profesor investigador de la Escuela Normal Superior Oficial de Guanajuato. Realiz estudios de Maestra en Pedagoga de esta misma institucin. Tiene de 23 aos de experiencia docente, en escuelas de educacin bsica incluyendo educacin especial y educacin superior. A la fecha, el Mtro. Alfaro es profesor en la Escuela Normal Superior Oficial de Guanajuato. Ah imparte cursos para los programas de licenciatura sobre las lneas del desarrollo de los adolescentes, gestin escolar y de acercamiento a la prctica escolar, es miembro del rea de las NTICs y de investigacin en las lneas de evaluacin y procesos educativos, as como responsable del programa de Vinculacin interinstitucional. Ha sido asesor de materias de Metodologa de la Investigacin en el ENSOG, IIEDUG y en el CAM.

Remitir correspondencia a: Jaime Ricardo Valenzuela Gonzlez (jrvg@itesm.mx)

Construccin de indicadores institucionales para la mejora de la gestin y la calidad educativa

26

Potrebbero piacerti anche