El impacto de las revistas españolas de Ciencias Sociales

Un ansiado y turbio objeto del deseo

Jornada sobre Calidad de Revistas de Ciencias Sociales

(CRECS 2011)

Grupo ThinkEpi

Barcelona, 3 de mayo de 2011

Emilio Delgado López-CózarProfesor de Metodología de la InvestigaciónFacultad de Comunicación y Documentación

Universidad de GranadaUniversidad de Granada

Prestigio

Reputación

Science Citation Index

Arts & HumanitiesCitation Index

Social Sciences Citation Index

ISI Web of Knowledge

SciSearch

Essential Science

Indicators PC-based

Indicators

PC-based citation sets

Custom citation projects and national indicators - mainframe

1960 1965 1970 1975 1980 1985 1990 1995 2000 2005 2007 2008 2009

InCites

Evidence

Web of Science

La historia de los índices de citas y el factor de impacto

94%Revistas españolas

6%Revistas TR

Producción española en Ciencias Sociales y Humanidades

ISOC versus Thomson Reuters

1980-2004

560.596

38.164

ÍNDICES DE IMPACTOREVISTAS ESPAÑOLAS DE CIENCIAS SOCIALES Y JUÍRIDICASREVISTAS ESPAÑOLAS DE CIENCIAS SOCIALES Y JUÍRIDICAS

ÍNDICES DE IMPACTOREVISTAS ESPAÑOLAS DE CIENCIAS HUMANASREVISTAS ESPAÑOLAS DE CIENCIAS HUMANAS

Las cifras de IN-RECS/IN-RECJ/IN-RECH

Total IN-RECS IN-RECJ IN-RECH

Periodo cubierto 1996- 2001- 2004-2008

Revistas fuente 417 159 64 184

Revistas con impacto

calculado2.072 788 341 943

Artículos citables 320.922 200.891 67.741 52.290

Citas 117.645 83.263 21.784 12.501

Revistas españolasCCSS y

Humanidades± 2.000

Scopus

99

WOS

94IN-RECS IN-RECJ IN-RECH

417

¿Qué son?

Procedencia de las citas

HelioCarpintero

VicentePelechano

EnriqueEcheburúa

GualbertoBuela Casal

Pío Tudela AntonioGuillamón

España 60,7 84,3 50,6 39,2 23,1 15,9Europa 16,8 5,7 12,2 24,8 34,9 33,2Norteamérica 15,4 2,2 27,8 21,6 35 38,2Latinoamerica 7,2 6,7 1,8 7,2 2,6 5,7Asia 0 1,1 7,3 7,2 4,4 7,5Africa 0 0 0 0 0

Publica fuera para ser citado dentro

Helio Carpintero Vicente Pelechano Enrique EcheburúaINSTITUCIONES CITADORAS

Univ Valencia Univ Politecn Valencia Univ GranadaUniv Complutense Madrid Univ Granada Univ Pais VascoUniv Murcia Univ La Laguna Univ MurciaFree Univ Berlin Univ Murcia Univ OviedoLehigh Univ Univ Oviedo Univ ValenciaUniv Granada Univ Autonoma Madrid Univ Complutense MadridUniv Autonoma Madrid Univ Salamanca Univ Santiago de CompostelaCSIC Univ Complutense Madrid Univ Publ NavarraHumboldt Univ Univ Alicante Univ Autonoma MadridUNED Univ Barcelona Dalhousie Univ

REVISTAS CITADORASPSICOTHEMA PSICOTHEMA PSICOTHEMAREVISTA LATINOAMERICANA DE PSICOLOGIA REVISTA LATINOAMERICANA DE PSICOLOGIA PSICOLOGIA CONDUCTUAL

APPLIED PSYCHOLOGY-AN INTERNATIONALREVIEW-PSYCHOLOGIE APPLIQUEE-REVUEINTERNATIONALE

PSICOLOGIA CONDUCTUAL CLINICAL PSYCHOLOGY REVIEW

Matilde Mas Ivars

Raymond Bara

Gabriel Tortella

Juan Jose Dolado

Jordi Gali

España 75,0 56,0 47,0 11,7 4,9 Europa 30,0 35,0 21,0 45,0 47,0 Norteamérica 8,0 11,0 28,0 33,0 51,4 Latinoamerica 6,0 6,0

Publica fuera para ser citado dentro

Matilde Mas Raymond Bara Gabriel Tortella INSTITUCIONES CITADORAS Univ Valencia Univ Alcala de Henares CSIC Univ Barcelona Univ Valencia Univ Complutense Inst Valen ciano Univ Autonoma Univ Manchester University Sheffield Univ Barcelona Univ Harvard Univ Extremadura University Sheffield Univ Alcala Univ Alcala Henares Univ Barcelona Univ Carlos III

¿Qué son?

Convenciones internacionales: fórmula ISI (Thomson Reuters) con ligeros retoques en la ventana de citación y en el empleo de indicadores

bibliométricos adicionales

200620052004

2006 Impact Factor

2003 2007

Tiempo

2006200520042003 2007

2006 Índice de impacto

JCR

¿Qué son?

Índices de impacto

Índices de citas

Calendario de implantación

¿Cuánto ha costado?

¿Quién lo ha financiado hasta ahora?

250.000 euros

35.000 euros/año

Servidor EC3 Linux Suse 9.2, base datos postgres,

apache, php, ...

Tablas BD

Selección de revistas fuente por especialidades

Introducción de los artículos citables

Título, Autor….Cindoc, Dialnet, Compludoc

Psicodoc, revista...

Carga en BD

Introducción de la producción de la revista por añosCindoc, Dialnet, revista electrónica o en papel

Carga en BD

Obtención e introducción de las citas WOS de las revistas

Carga de citas

Introducción de las citas nacionales de las revistas

Una vez al año

Una vez al año

Una vez al año

SistemáticoCarga de citas

Cálculo de impactos e indicadoresResultados en web

http://ec3.ugr.es/in-recs/http://ec3.ugr.es/in-recj/

Sistemático

Funcionamiento general del sistema

Los usos

Conocer el índice de impacto de las revistas

• Anual (desde 1996 )• Acumulativo: 5, 10 años e histórico

Los usos

Los usos

Evolución de la revista

Curva de envejecimiento

Tasa de autoreferenciación Tasa de autocitación

Los usos

Revistas citadas

Artículos citados

Conocer qué cita la revista

Los usosConocer los artículos más citados de la revista

Los usos

Revistas citantes

Artículos citantes

Autores citantes

Conocer quién cita a la revista

Instituciones citantes

Disciplinas citantes

Los usosConocer otros indicadores bibliométricos

Citas nacionales e ISI, citas por artículo, artículos muy citados, % artículos citados, índice de coautoría

Perfil bibliométrico: comparación revista / especialidad

Los usosConocer

Artículos, autores e instituciones más citados de la disciplina

Los abusos

Los abusos

Editores en su afán de incrementar el impacto de su revista se aprestan a manipular las políticas

editoriales

Los abusos

Fomentan la autoreferenciación: recomiendan directamente a los autores que citen de manera

indiscriminada artículos publicados en la propia revista

Los abusos

La citación (en muchos casos autocitación) se concentra exclusivamente en los años en que computa el índice de impacto

(2-3 últimos años)

Los abusos

Editores que cambian la política editorial en función exclusivamente de las citas que puedan recibir los trabajos

Favorecen la publicación de trabajos que no computan en el denominador pero sí en el numerador de la fórmula que calcula el factor de impacto

Los abusos

citas 1 autor otras citas

15

5

citas 1 autor otras citas

Un artículo cita 74 veces a una revista

Solo en 5 artículos se cita 356 veces a una revista

Un solo autor o un conjunto de ellos, normalmente formando parte del equipo

editorial de la revista, determina el impacto de una revista, bien sea la propia o ajena

Ojo

Todo esto se ve

• El factor de impacto es un promedio• OJO: La distribución asimétrica de las citas de una revista hace que dicho promedio no sea representativo• El impacto de un artículo nunca equivale al impacto de la revista

0

5

10

15

20

25

30

35

0 1 2 3 4 5 6 7 8 9 10 11 13 14 33 46

citas

tra

ba

jos

Citas trabajos publicados en 2007 International Journal of Nursing Studies

8 (5%) trabajos concentran el 74% de las citas150 (95%) trabajos concentran el 26% de las citas

Advertencias

Sesgos en la fórmula de cálculo:

• Numerador: citas a todos los items publicados en la revista(artículos, revisiones, casos clínicos, editoriales, cartas…)

• Denominador: solo contabiliza los trabajos citables (artículos originales y de revisión)

M. Amin & M. Mabe. (2000). Impact factors: Use and abuse. Perspectives in publishing

Advertencias

Advertencias

El factor de impacto depende de múltiples factores:

• Naturaleza y tipo de la disciplina científica: básica/aplicada• Hábitos de publicación y prácticas de citación de las comunidades científicas• Tamaño de las disciplinas y comunidades científicas

Advertencias

El factor de impacto es sensible a múltiples factores:

• Tamaño de las revistas

Advertencias

El factor de impacto es sensible a múltiples factores:

• Tipo de revista: general o especializada• Rapidez en la publicación (ventana de citación)• Tipo de trabajos publicados: revisiones, artículos metodológicos, cartas…• Publicación en open access

• Miden la utilidad y la influencia intelectual, no la calidad

Cuando un científico cita un trabajo anterior lo que formalmente hace es reconocer la utilidad que ha tenido dicho trabajo en la confección del suyo propio y, por ende, es un indicador de influencia. Si se acepta esta premisa los trabajos más citados tienen una influencia mayor en las actividades investigadoras que los que tienen menos citas

• Son un magnífico indicador de competitividad •Úsese el impacto observado (citas reales) y no el esperado (factor de impacto)

• Los datos de citación deben ser cuidadosamente usados e interpretados y no deben reemplazar el juicio humano (expertos).

• Deben ayudar en la toma de decisiones y no ser aplicados mecánicamente

Recomendaciones

Muchas gracias por su atención

Emilio Delgado López-Cózar edelgado@ugr.es / http://ec3.ugr.es/emilio

www.ec3.ugr.es

Procedencia de las citas