Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
toma de decisiones para la participacin real en los diferentes roles y funciones de las
instituciones cientficas.
Finalmente, varias fueron las voces que remarcaron que tanto las polticas cientficas en
general como los sistemas de evaluacin en particular responden a una imagen de
sociedad deseada y a las caractersticas vertebrales de una ciencia y de un perfil de
investigador cientfico consideradas tiles para dicha sociedad.
Con el fin de dar continuidad a este proceso colectivo de reflexin y debate la
CIECEHCS procede a dar difusin a esta nueva versin del Documento original, y a
proseguir con el objetivo de continuar construyendo una comunidad acadmica
rigurosa, plural y democrtica, productora de una ciencia creativa y crtica de nuestras
realidades.
INTRODUCCIN
En base a lo producido y compartido en las sucesivas reuniones de la CIECEHCS se
pueden enunciar los siguientes acuerdos, que abarcan:
1. los criterios de evaluacin cientfica (1.);
2. las especificidades de las Humanidades y Ciencias Sociales - en adelante H y CS (2.), y
3. la forma en que las mismas determinan sus criterios propios de evaluacin,
considerando distintas dimensiones a las que alcanza esa evaluacin, tales como:
formacin acadmica (3.1); produccin cientfico-tecnolgica (3.2); plan, lugar de
trabajo y director (3.3); formacin de investigadores (3.4); participacin en reuniones
cientficas (3.5); docencia (3.6); transferencia (3.7); gestin (3.8); evaluacin (3.9.),
entre otras1.
FUNDAMENTACIN GENERAL
1. SOBRE LA TRANSPARENCIA E INSTITUCIONALIZACIN
DE LOS CRITERIOS DE EVALUACIN
Los criterios de ponderacin de las citadas dimensiones sern elaborados en la siguiente etapa de trabajo
de la CIECEHCS.
2
El Reglamento de Evaluacin del CONICET (Res. N 033/08, modificada por Res. N 03/12,
modificada por Res. N 087, del 28/01/13) sancionado con posterioridadad a la redaccin del presente
Documento, y en concordancia con este, establece es su artculo 1 que entre los objetivos del
procedimiento de evaluacin se hallan el de Asegurar que todos los procedimientos cumplan con reglas
previamente establecidas, sean pblicos y se ajusten a normas ticas universalmente aceptadas, a fin de
evitar conflictos de intereses, y el de Dar a publicidad los nombres de los integrantes de las comisiones
acadmicas intervinientes, los criterios utilizados, y los resultados que surjan del proceso de evaluacin
La evaluacin del desempeo de los investigadores por la cantidad de publicaciones puede determinar
que la habilidad de dividir el material en todos los artculos posibles pueda ser ms deseable que tener
algo que decir (Cheek, 2005:389). La penetrante influencia de la racionalidad del neoliberalismo se hace
presente en la Universidad y en la investigacin con la medicin de la productividad, los indicadores
de rendimiento, y la eficiencia (Cheek 2005 The practice and politics of funded qualitative
research. En N. K. Denzin & Y. S. Lincoln (eds.), Handbook of qualitative research. London: Sage:
387-409).
Criterios que valoren las actividades de transferencia como parte y/o resultado
del proceso de investigacin, as como los distintos tipos de
participacin/colaboracin en actividades organizadas por los sujetos de
estudio (programas de formacin/ capacitacin, radios, etc.).
El citado Reglamento de Evaluacin del CONICET establece, tambin en su artculo1, que entre los
objetivos del procedimiento de evaluacin se halla el siguiente: Que las evaluaciones respeten el
pluralismo de corrientes de pensamiento, teoras, lneas de investigacin y las particularidades de las
disciplinas y reas de conocimiento. Este mismo criterio se reitera en los artculos 25, 31, 66.
En este sentido es importante resaltar las afirmaciones de Garfield (1996), inventor del Science Citation
Index, acerca del riesgo del uso indiscriminado de esos datos y de un instrumento creado para evaluar a
Los libros en general, y en especial cuando su material bsico es el resultado de investigaciones, suponen tanto una labor de sntesis como un aporte a una lnea de investigacin que
insume varios aos, y cuyo proceso y conclusiones pueden ser recogidos slo en parte por
las publicaciones peridicas. El libro es uno de los medios reconocidos como ms
idneos para transmitir y difundir los pormenores del proceso de investigacin y los
distintos pasos seguidos en la obtencin de los resultados. La aludida prolongacin del
trabajo de campo (Conf.2.g.) determina que, habitualmente, no pueda incluirse este
las publicaciones y no a la calidad de la produccin cientfica incluida en ellas. Por un lado, la evaluacin
de esa calidad no puede ser sustituida y, por el otro, el impacto simplemente refleja la capacidad de
revistas y editores para atraer los mejores trabajos disponibles. Garfield E. (1996) How can impact
factors be improved? BMJ 313(7054): 411413). En concordancia con esta perspectiva Seglen (1997)
sostiene que el factor de impacto de una revista no puede considerarse representativo de la calidad de un
artculo. El contenido no puede confundirse con el envoltorio. Los ndices de citacin de un artculo
determinan el factor de impacto de la revista, no viceversa ( Seglen P.O (1997) Why the impact factor of
journals should not be for evaluating research, BMJ 314:497-502).
6
Respecto del conjunto de las publicaciones se recomienda valorizar sus diferentes formatos como, por
ejemplo, los audiovisuales, que amplan las posibilidades de difundir la produccin cientfica.
proceso, en especial la inclusin del corpus y el anlisis de los datos, en el cada vez ms
limitado espacio que ofrecen las publicaciones peridicas.
La edicin de un libro debera, en un plazo que evitara exclusiones, contar con un
sistema de evaluadores externos similar al de dichas publicaciones pero especfico
respecto de las cualidades propias de los libros en relacin con la materia de la que
tratan. As, deben tomarse en cuenta criterios tales como el carcter de la autora, la
calidad y trayectoria de la editorial, la diferencia entre un ensayo y una investigacin,
los aportes tericos y/o metodolgicos, el conocimiento en general del rea de estudio al
que la obra pertenezca, o el impacto social.
Existen condiciones que permiten considerar al libro como un formato privilegiado para
la produccin y conocimiento en las H y CS, pues se apoyan en investigaciones de largo
alcance, desarrolladas en instituciones cientficas y acadmicas, que aplican criterios de
evaluacin apoyados en la calidad y excelencia.
A diferencia del artculo, la mayor extensin del libro hace posible el desarrollo
minucioso de un argumento as como la exposicin y fundamentacin de la evidencia
emprica cualitativa. En el caso de los artculos basados en investigaciones cualitativas,
las limitaciones de espacio slo permiten profundizar un nico aspecto de la
investigacin, o bien resumir esquemticamente su argumento principal, asumiendo el
riesgo de que la justificacin de la evidencia se reduzca a un relato casi anecdtico.
Por consiguiente, el tiempo de produccin de un libro no es homologable con el de un
artculo; generalmente los libros corresponden a la objetivacin de varios aos de
formacin e investigacin. Por ejemplo, el producto de una investigacin basada en un
programa de grado o posgrado incluye entre dos y cinco aos de cursado, mnimamente
un ao de trabajo de campo para el caso de las metodologas cualitativas y un ao al
menos de redaccin y edicin. Un libro implica, as, un esfuerzo de entre 5 y 10 aos
de trabajo, lo cual debe ser considerado en su valor cualitativo y no como una
publicacin de gnero menor con respecto al artculo9.
En suma, otorgar al libro el valor de una produccin cientfica de calidad implica
reconocer la existencia de una comunidad acadmica consolidada en las H y CS.
3.2.1.1. Libros con referato
En cuanto a los criterios de validacin de los libros, encontramos diferentes casos: los
libros con referato incluyen las colecciones o series que cuentan con un director o
coordinador acadmico, lo cual supone una evaluacin de los textos por parte de los
directores de coleccin, independientemente, por ejemplo, de su aprobacin por el
comit de tesis respectivo, cuando se trate de esta condicin.
Consideramos que deben propiciarse los referatos institucionales cuando se trate de
editoriales comerciales, para contar con un refuerzo a la evaluacin de los comits
editoriales, as como incluir, en las grillas de evaluacin, un espacio en el cual consignar
el carcter del referato al que fue sometido el libro.
Cabe consignar que los sistemas de evaluacin para la promocin acadmico-universitaria en Europa
occidental, los EE.UU. y Canad en H y CS, requieren prioritariamente la publicacin de un libro de sola
autora como instancia demostrativa del nivel de progresiva maduracin intelectual del candidato.
3.2.1.2. Compilaciones
Son aplicables similares criterios a los sealados anteriormente para los libros (3.2.1.)
3.2.2. Publicaciones peridicas
10
Conf. http://www.redalyc.org/media/principal/proyecto/metvalref.html
En todos los casos ha de ponerse especial atencin en el carcter, en gran parte textual, conversacional,
coloquial de los datos en las H y CS y en la dificultad y la falta de pertinencia de la traduccin de la
produccin cientfica a otros idiomas sea por el carcter de los receptores que comparten nuestra lengua y
cultura, sea por la imperiosa necesidad de incorporar al espaol al debate cientfico internacional (Conf.
j.). No obstante, siempre que sea posible, no se descarta la importancia de la publicacin en otras lenguas
de las producciones acadmicas de las citadas disciplinas, sin olvidar que el proceso de publicacin en
estos casos puede tardar uno, dos o tres aos, dadas las dos instancias de evaluacin: por los pares y por
los editores en la lengua de la que se trate.
10
12
Desde las H y CS existe un movimiento de revalorizacin del espaol como lengua cientfica. Se trata
de una lengua hablada por ms de 400 millones de personas que, por su consolidacin cultural y su
dispersin geogrfica, est en perfectas condiciones para ser considerada como un instrumento de
intercambio cientfico. Razones provenientes de la historia poltica y econmica asignaron hasta este
momento dicho puesto al ingls. Desde Amrica Latina y desde las H y CS estamos dispuestos a defender
la idoneidad de nuestra lengua para expresar teoras, y para describir opciones metodolgicas y
procedimientos analticos, su paridad de condiciones para el debate cientfico internacional y su
especificidad para interactuar en determinados contextos. En este sentido, consideramos que el idioma
espaol debe ser ponderado en trminos de igualdad con el ingls o cualquier otro idioma, siempre y
cuando las publicaciones respeten los criterios de referato acadmico y calidad nacional o internacional.
11
Entre estas publicaciones se cuentan los libros, los documentos de trabajo, los boletines,
etc. En cuanto a la calidad de los libros los criterios ya fueron sealados para los libros
en general (3.2.1). En cuanto a los documentos de trabajo, la calidad depender de sus
caractersticas y objetivos, y si cuentan con evaluacin de pares, entre otros. Respecto
de los boletines, su calidad depender de que la impronta est puesta en la difusin de
investigaciones y/o novedades institucionales, y del carcter del artculo publicado.
3.3. Plan de trabajo, lugar de trabajo, director
La exigencia en cuanto a la calidad, solvencia y originalidad del proyecto de investigacin
debe ser mayor a medida que se ascienda en la CICYT.
La evaluacin del proyecto asumir caractersticas diferenciales segn se trate de una
investigacin emprica o terica, y segn se opte por el estilo cuantitativo, cualitativo y/u
otro de investigacin (Conf. 2.a.-d.). Los planes de investigacin se evaluarn, pues, en
consonancia con los criterios de validez de la tradicin cientfica en la que se inscriban13.
Las especificidades de las H y CS, entonces, tambin se expresan en las particularidades
de los planes de trabajo, cuya adecuacin entre objetivos o preguntas de investigacin y
metodologa resulta de importancia crucial.
Los criterios de evaluacin de los planes de trabajo deben coincidir con los aplicables al
financiamiento de proyectos de investigacin y ser compartidos entre las distintas
instituciones acadmicas de evaluacin. Aqu se exige nuevamente la transparencia y
13
We want to comment on the usefulness of bibliometrics. There were a number of weaknesses using
bibliometrics and statistics in this evaluation: If the University of Helsinki wants to achieve a serious
evaluation of the quality and visibility of research, it should pay attention to different scientific traditions
and how different types of statistics cover these areas and what they pick up (Conf. Seppo Saari & Antti
Moilanen, eds. International evaluation of research and doctoral training at the university of Helsinki
20052010, University of Helsinki Administrative Publications 81, Evaluations). Queremos comentar
acerca de la utilidad de la bibliometra. Hay una serie de debilidades en el uso de la bibliometra y la
estadstica en esta evaluacin: si la Universidad de Helsinki desea lograr una evaluacin seria de la
calidad y la visibilidad de la investigacin, debe prestar atencin a las diferentes tradiciones cientficas y a
cmo los distintos tipos de estadstica cubren estas reas y qu datos toman (traduccin de los autores de
este documento) (Conf. Seppo Saari & Antti Moilanen, eds. International evaluation of research and
doctoral training at the university of Helsinki 20052010, University of Helsinki Administrative
Publications 81, Evaluations).
12
13
14
Queremos resaltar la necesidad de precisar ciertos trminos que denotan en la actualidad estas
actividades. El trmino transferencia es polismico porque abarca distintas perspectivas enfatizando
diversos aspectos involucrados en la articulacin del investigador con otros actores sociales. Entre otros
se distinguen: la transferencia - nocin que empleamos en este documento -, los servicios tecnolgicos de
alto nivel, asesoras tcnicas, vinculacin tecnolgica y social, tecnologa social, extensin. Asimismo en
las universidades tambin coexisten las nociones de vinculacin, transferencia y extensin universitaria.
Esta ltima denominacin reconoce una larga tradicin asociada al compromiso social de la universidad
con los sectores subalternizados. Resulta relevante destacar la vasta experiencia acumulada por diversos
grupos de investigacin que han desarrollado modelos epistemolgicos y metodolgicos basados en la
investigacin-accin-participativa, en la construccin cooperativa del conocimiento, enmarcadas ambas
en concepciones de co-produccin del conocimiento. Ms all del reconocimiento de distintas
aproximaciones en la concepcin de estas actividades, destacamos la necesidad de impulsar una labor
multidireccional (entre los diferentes actores involucrados), en el marco de una perspectiva democrtica y
de valorizacin de los saberes que aportan los actores involucrados en estas acciones.
15
15
Las actividades de transferencia se articulan de esta forma con acciones de divulgacin que suponen un
complejo proceso de mediacin, an no ponderado especficamente en las evaluaciones.
16
primer lugar la presencia de ese vnculo con sus lneas de estudio. Slo en el caso de ser
la respuesta positiva se continuar con las siguientes dimensiones e indicadores de este
mdulo de evaluacin.
3.7.2. Relevancia acadmica
Esta dimensin deber identificar los efectos especficos generados por las actividades
de transferencia, relacionados con la implementacin y adopcin de los resultados
logrados a partir de las mismas17.
Dada la variedad de acciones y las caractersticas de los destinatarios que pueden ser
objeto de las actividades de transferencia en las H y CS, se hace necesario considerar un
repertorio amplio de efectos a evaluar, capaz de dar cuenta de su cobertura y alcance,
entre los que cabe sealar:
a. el tipo de resultado alcanzado;
b. los aspectos (de acuerdo con su nivel de capacidad crtica, por ejemplo en cuanto
a coyuntura, problemtica o lugar) a los que se dirigen;
17
En la evaluacin global de las actividades de transferencia se deben ponderar las publicaciones y/o
materiales textuales y audiovisuales, entre otros, producidos en el marco de esas actividades.
17
18
Evaluacin de instituciones
19