Sei sulla pagina 1di 5

Mlanges de la Casa de

Velzquez
44-2 (2014)
Pour faire une histoire des listes l'poque moderne
................................................................................................................................................................................................................................................................................................

MIsabel delValValdivieso

La evaluacin de las publicaciones


cientficas en Espaa: las revistas de
Historia
................................................................................................................................................................................................................................................................................................

Avertissement
Le contenu de ce site relve de la lgislation franaise sur la proprit intellectuelle et est la proprit exclusive de
l'diteur.
Les uvres figurant sur ce site peuvent tre consultes et reproduites sur un support papier ou numrique sous
rserve qu'elles soient strictement rserves un usage soit personnel, soit scientifique ou pdagogique excluant
toute exploitation commerciale. La reproduction devra obligatoirement mentionner l'diteur, le nom de la revue,
l'auteur et la rfrence du document.
Toute autre reproduction est interdite sauf accord pralable de l'diteur, en dehors des cas prvus par la lgislation
en vigueur en France.

Revues.org est un portail de revues en sciences humaines et sociales dvelopp par le Clo, Centre pour l'dition
lectronique ouverte (CNRS, EHESS, UP, UAPV).
................................................................................................................................................................................................................................................................................................

Rfrence lectronique
MIsabel delValValdivieso, La evaluacin de las publicaciones cientficas en Espaa: las revistas de Historia,
Mlanges de la Casa de Velzquez [En ligne], 44-2|2014, mis en ligne le 15 novembre 2014, consult le 12
dcembre 2014. URL: http://mcv.revues.org/5862
diteur : Casa de Velzquez
http://mcv.revues.org
http://www.revues.org
Document accessible en ligne sur : http://mcv.revues.org/5862
Document gnr automatiquement le 12 dcembre 2014.
Cet article a t tlcharg sur le portail Cairn (http://www.cairn.info).

Distribution lectronique Cairn pour Casa de Velzquez et pour Revues.org (Centre pour l'dition lectronique ouverte)
Casa de Velzquez

La evaluacin de las publicaciones cientficas en Espaa: las revistas de Historia

MIsabel delValValdivieso

La evaluacin de las publicaciones


cientficas en Espaa: las revistas de
Historia
Pagination de ldition papier : p. 307-311
1

Como en el resto de los pases de nuestro entorno, desde hace varios aos la cultura de la
calidad se ha impuesto en el mundo acadmico espaol1. Con ello se han generalizado y
normalizado los procesos de evaluacin de las actividades acadmicas y cientficas de los
profesores e investigadores y de los soportes a travs de los cuales se hacen pblicos los
resultados alcanzados.
En este segundo aspecto, la poltica editorial de libros y revistas ha ido incorporando
mecanismos de evaluacin de la calidad de los trabajos publicados. De esta forma, las
editoriales universitarias y buena parte de las comerciales se han dotado de comits cientficos
y de evaluacin que valoran la calidad de la obra propuesta para su publicacin, aceptndola o
no en funcin del resultado de ese filtro previo. Cuando lo consideran oportuno, tales comits
solicitan informes a especialistas que valoran los originales sin conocer su autora, es decir
mediante el sistema de pares ciegos.
En el caso de las revistas, el sistema es similar. Por regla general, el comit editorial se ocupa
de recabar los informes de pares ciegos. En este caso, lo habitual es que, una vez recibido el
artculo, ste pase por un primer anlisis realizado por miembros de ese comit que constatan
si la propuesta se ajusta a las condiciones y caractersticas propias de la revista. Superado este
filtro, cada artculo es sometido a la valoracin de dos especialistas ajenos a la revista y a
la institucin a la que est vinculada. Tales informes son fundamentales ya que permiten al
comit editorial decidir si el trabajo propuesto ser publicado o no. En caso de aceptacin, se
comunican al autor las correcciones que debe realizar por sugerencia de los informantes. Si
no es aceptado, se traslada esta decisin al autor con una breve explicacin del porqu de la
misma. Las revistas cuentan con sus propios evaluadores, cuyos nombres suelen publicarse
cada varios nmeros con el fin de favorecer el anonimato del responsable de cada evaluacin
concreta.
Pero no se trata slo de velar por la calidad del contenido de cada publicacin. Se busca tambin
la calidad de la propia revista, circunstancia que adquiere gran relevancia dado que, en esta
poca de apariencias en la que nos encontramos, ser la calificacin de la revista, no la del
artculo en s, lo que otorgar mayor o menor calidad a ste, y por tanto lo que dar ms o
menos posibilidades de xito a su autor cuando someta a evaluacin su investigacin2.
Cada dos aos, la Fundacin Espaola para la Ciencia y la Tecnologa (FECyT) realiza
una convocatoria para evaluar la calidad editorial y cientfica de las revistas espaolas (la
ltima el28 dediciembre de2013). Se trata de un organismo dependiente del Ministerio de
Economa y Competitividad (MINECO) [<http://www.fecyt.es>], que agrupa las revistas en
cuatro grandes reas de conocimiento, incluyendo las de Historia en la de Humanidades. El
proceso, del que se ocupa el proyecto ARCE (<http://evaluacionarce.fecyt.es/>), tiene dos
fases, una primera de autoevaluacin en la que cada responsable de revista debe responder a
un cuestionario, siendo necesario que todas las respuestas sean positivas para poder pasar a
la evaluacin propiamente dicha. Una vez admitida, la revista es sometida a examen en dos
campos. Por un lado, editorial y cientfico, siendo necesario que cumpla los doce requisitos
exigidos que van desde la identificacin de los miembros de los consejos de la publicacin
(primer tem) hasta su repercusin o impacto (tem duodcimo) medido por las citas recibidas;
se tienen en cuenta tambin las bases de datos en las que est referenciada, la internacionalidad
de los autores, la endogamia/exogamia, etc. Por otro, esta segunda fase de la evaluacin se
centra en dos cuestiones tal y como se especifica en la actual convocatoria3: Orientacin

Mlanges de la Casa de Velzquez, 44-2 | 2014

La evaluacin de las publicaciones cientficas en Espaa: las revistas de Historia

10

de la revista: en la que se valorar que la revista pueda considerarse cientfica, profesional


o de divulgacin y Estructura de la revista y sus artculos: en la que se valorar que la
revista disponga de un contenido cientfico mayoritario y si la estructura de los artculos de
investigacin favorece la comunicacin cientfica.
Lo que se pretende con esta evaluacin es destacar a las mejores revistas con un sello de calidad
que reconoce su excelencia editorial y cientfica. Esta mencin, adems del valor que otorga a
la revista y a los trabajos en ella publicados, da acceso a una herramienta de gestin electrnica
alojada en el Repositorio Espaol de Ciencia y Tecnologa, RECyT (<http://recyt.fecyt.es>),
que ofrece importantes servicios de gestin y publicacin electrnica.
Todo este proceso evaluador corre a cargo de una Comisin mixta formada por tres miembros
de la FECyT (la directora del Departamento de Gestin de la Calidad Cientfica, GIC, y dos
tcnicos de ese departamento) y tres especialistas en evaluacin de ciencia y bibliometra.
Nombradas por la Direccin General del organismo, actan tambin cuatro subcomisiones,
una por cada una de las reas (Ciencias Puras y Aplicadas, Ciencias de la Vida, Ciencias
Sociales, Humanidades) en las que participan expertos en la materia. Cada una de estas
subcomisiones tiene un coordinador y varios vocales, uno por cada una de las materias que
integran las cuatro reas (trece en total), de los cuales al menos un 20% son extranjeros. En
caso necesario se recaba la opinin de revisores externos. Los nombres de estos evaluadores
se hacen pblicos una vez finalizado el proceso.
Realizada la evaluacin, es la Direccin General de la FECyT, visto el informe final de la
Comisin, la que emite la resolucin definitiva, que se hace pblica en el Boletn Oficial del
Estado y en la web. El sello de calidad recibido por las revistas que han superado el proceso
tiene una duracin de tres aos, al cabo de los cuales han de volver a someterse a una nueva
evaluacin diseada al efecto, esta vez centrada nicamente en el proceso editorial. En ambos
casos, primera concesin y renovacin, la actuacin se rige, lgicamente, por los principios
de objetividad, confidencialidad y transparencia, buscando en todo momento garantizar la
igualdad de tratamiento y la imparcialidad.
En este contexto, hay dos aspectos que destacar, debido a su estrecha relacin con el contenido
cientfico de las revistas, y tambin porque afectan directamente a la evaluacin de la
actividad de sus autores. Me refiero al impacto y a la indexacin en bases de datos. Para
valorar la primera cuestin, el ndice de impacto, se recurre a las citas. Debido a la gran
diferencia que se observa entre unos campos y otros, se ponderan las fuentes consultadas en
funcin del rea de conocimiento de que se trate. Esas fuentes son el JCR (Journal Citation
Report), WoS (Web of Science), SJR, Scielo, IN-RECJ, IN-RECS, Scopus, Google Scholar
Metrics, Microsoft Academic Search, y tambin otras ms directamente vinculadas a las
Humanidades y por tanto a la Historia, concretamente el IN-RECH (<http://ec3.ugr.es/inrech/>) y el ERIH (<http://www.esf.org/research-areas/humanities/erih-european-referenceindex-for-the-humanities.html>).
La clasificacin de las revistas realizada por diversos organismos constituye otro dato
relevante, que tambin es considerado en el proceso general de evaluacin, y que, lo mismo
que el ndice de impacto, cobra alta relevancia en la valoracin de la produccin cientfica
de cada autor cuando tiene que enfrentarse a la evaluacin de su actividad investigadora.
En el listado ofrecido por la FECyT para la convocatoria en curso (2013) figuran aquellas
que este organismo considera de mayor valor. Entre ellas aparecen algunas que tienen
especial relevancia para el rea de Historia. Encontramos as Humanities Abstracts e Historical
Abstracts (HA); esta ltima recoge bibliografa sobre la historia mundial (no hay referencias de
EE UU ni de Canad) procedentes de revistas, libros y tesis doctorales, en un arco temporal que
va de mediados del sigloXV hasta la actualidad, en los campos de Historia, Ciencias Sociales
yHumanidades. Junto a estas encontramos otras como SSCI (Social Sciences Citation Index.
Web of Science), Regesta Imperii o la prestigiosa y tradicional IMB (International Medieval
Bibliography), elaborada por el Instituto de Estudios Medievales de la Facultad de Artes de
la Universidad de Leeds, siendo su editor en la actualidad Alan V. Murray; se trata de una
obra iniciada en1967, que cuenta con numerosos colaboradores en Europa, EE UU, Australia,
Brasil, Japn y Sudfrica. Todas estas bases de datos suelen requerir, entre otros indicadores

Mlanges de la Casa de Velzquez, 44-2 | 2014

La evaluacin de las publicaciones cientficas en Espaa: las revistas de Historia

11

12

13

propios de las normas acadmicas de calidad, periodicidad regular, resmenes en ingls y


revisin por pares de los artculos presentados para su publicacin.
A grandes trazos ese es el sistema de evaluacin de las revistas cientficas en Espaa realizado
por una Fundacin vinculada al MINECO, del que depende en la actualidad la investigacin.
Pero hay que indicar que existen otras clasificaciones elaboradas por diferentes organismos.
Un convenio suscrito entre el Consejo superior de investigaciones cientficas (CSIC) y la
Agencia Nacional de Evaluacin de la Calidad y Acreditacin (ANECA) hizo posible que el
Grupo de investigacin EPUC (Evaluacin de Publicaciones Cientficas en Ciencias Sociales
y Humanas) del Instituto de Estudios Documentales sobre Ciencia y Tecnologa (IEDCYT) del
Centro de Ciencias Humanas y Sociales (CCHS) del CSIC desarrollara hasta el ao2013, fecha
en la que fue anulado, el proyecto DICE (Difusin y Calidad Editorial de las revistas cientficas
espaolas de Humanidades y Ciencias Sociales y Jurdicas). La base de datos resultante ha
sido una muy til herramienta para conocer el ndice de difusin de las revistas y su valoracin
en diferentes bases de datos. En ella se indica la calificacin que reciben las revistas en ANEP
(Agencia Nacional de Evaluacin y Prospectiva de la Direccin General de Investigacin
Cientfica yTcnica del MINECO), ERIH (European Reference Index for the Humanities)
yCARHUS plus, ndice elaborado por AGAUR (Agncia de Gesti dAjuts Universitaris i
de Recerca, de la Direcci General de la Recerca de la Generalitat de Catalua). Adems, ese
ndice (<http://dice.cindoc.csic.es>) informa sobre si la revista cuenta o no con evaluadores
externos, valora su grado de apertura al exterior y de internacionalizacin en funcin del
porcentaje de autores ajenos a la institucin y extranjeros, e indica su difusin o impacto apartir
de las bases de datos en las que la revista est incluida.
En relacin con este ltimo aspecto, a las bases de datos ya citadas es preciso aadir una
ms, que es tomada en consideracin en todos los casos yque cuenta con un amplio respaldo
en el mundo iberoamericano, Latindex (<http://www.latindex.unam.mx/>), proyecto relativo
a revistas cientficas de Amrica Latina, el Caribe, Espaa y Portugal que arranc en1995
en la UNAM (Universidad Nacional Autnoma de Mxico). Cada pas participante cuenta
con un organismo responsable, encargndose de la coordinacin general el Departamento de
Bibliografa Latinoamericana de la Subdireccin de Servicios de Informacin Especializada
de la Direccin General de Bibliotecas de la UNAM. La referencia latindex son 33criterios
que una revista debe reunir, repartidos en cuatro aparatados: caractersticas bsicas, de
presentacin, de gestin y poltica editorial, y de contenido; el grado de calidad de una revista
ser mayor cuanto mayor sea el nmero de criterios cumpla; la enumeracin de estos tem
puede encontrarse en <http://www.latindex.unam.mx/documentos/docu.html>.
Sin duda todo este sistema, que en ocasiones resulta altamente complicado para quienes
gestionan las revistas cientficas y para los investigadores cuando tienen que someter a
evaluacin su investigacin, ha favorecido que los trabajos publicados gocen en general de
mejor calidad. El sistema de pares ciegos, que garantiza que dos especialistas (o ms en caso
de conflicto) informen los artculos antes de su publicacin y propongan mejoras a los mismos,
si lo consideran oportuno, es un mecanismo que incentiva la mejora de la calidad del producto
final. Y la evaluacin y clasificacin de las revistas anima a stas a mejorar en todos los
sentidos. No obstante, para alcanzar los ms altos niveles, el esfuerzo que sus responsables
deben realizar es muy grande, yno son escasas las ocasiones en que no cuentan con el apoyo
suficiente para cumplir con todos los requisitos formales exigidos, a pesar que de que cumplan
con los referentes de la calidad cientfica de los artculos publicados. Por otro lado, el legtimo
deseo de todo investigador de conseguir una buena valoracin cuando somete aevaluacin su
trabajo lleva a que las revistas mejor valoradas tengan una sobredemanda, lo que se traduce
en ms trabajo para sus responsables y mayor nivel de rechazo de originales, mientras que
aquellas que no cuentan con tan alta valoracin se encuentren en la situacin inversa. Estos
yotros aspectos deberan ser puntos de reflexin a tener en cuenta para mejorar el sistema
de valoracin de las revistas yde los resultados de investigacin de los historiadores, en este
ltimo caso poniendo el acento no solo en el medio en que est publicado, sino tambin en
la calidad del trabajo a valorar.

Mlanges de la Casa de Velzquez, 44-2 | 2014

La evaluacin de las publicaciones cientficas en Espaa: las revistas de Historia

Notes
1 M I. del Val Valdivieso es catedrtica en la Universidad de Valladolid y presidenta de la Sociedad
Espaola de Estudios Medievales.
2 Aunque tiene ya unos aos, puede consultarse para ms informacin sobre sistemas ycriterios de
evaluacin, Emilio DELGADO LPEZ-CORTZAR, Rafael RUIZ-PREZ, Evaristo JIMNEZ-CONTRERAS, La
edicin de revistas cientficas. Directrices, criterios y modelos de evaluacin, Universidad de Granada,
2006 (se puede descargar en: <http://www.fecyt.es/fecyt/docs/tmp/550433876.pdf>).
3 Este trabajo se ha redactado en enero de 2014.

Pour citer cet article


Rfrence lectronique
MIsabel delValValdivieso, La evaluacin de las publicaciones cientficas en Espaa: las revistas
de Historia, Mlanges de la Casa de Velzquez [En ligne], 44-2|2014, mis en ligne le 15 novembre
2014, consult le 12 dcembre 2014. URL: http://mcv.revues.org/5862

Rfrence papier
MIsabel delValValdivieso, La evaluacin de las publicaciones cientficas en Espaa: las
revistas de Historia, Mlanges de la Casa de Velzquez, 44-2|2014, 307-311.

propos de lauteur
MIsabel delValValdivieso
Universidad de Valladolid

Droits dauteur
Casa de Velzquez

Mlanges de la Casa de Velzquez, 44-2 | 2014

Potrebbero piacerti anche