Criterios de Evaluación de Revistas en Bases de Datos:

SciELO, LILACS, BVS

Lilian Calò

BIREME/OPS/OMS

lilian.calo@bireme.org

La Biblioteca Virtual en Salud es basada en el trabajo en red, con productos, servicios, eventos y tecnologías siendo tratados como un bien publico regional y global.

Biblioteca, red de bibliotecas

Centro de información e indexación

• ••1967 1982 1987 1998

•sistemas nacionales de información

biblioteca virtual en salud

VI Reunión del Sistema Latino-Americano y del Caribe de Información en Ciencia, en Costa Rica,

en marzo 1998, la red se compromete a construir de forma cooperativa la Biblioteca Virtual en Salud

Red de contenidosRed

socialRed AAI – Ambientes

Aprendices e Informados

Red BVS

Acceso a la información científica y técnica indexada en AL&C

• AL&C es probablemente la región en desarrollo con mayor capacidad y mejor infraestructura de acceso a la información científica y técnica en salud. Esta evaluación considera tanto el acceso a las referencias bibliográficas como a los textos completos de los documentos.

• La contribución e impacto de LILACS y la BVS es significativo en la promoción de la información científica y técnica calificada, organizada, accedida y evaluada.

Evaluación de la Producción Científica

• Es importante evaluar la producción científica para traducir la investigación en programas y políticas públicas y saber lo que es relevante;

• Indicadores de impacto científico: Factor de Impacto, Scimago Journal Rank, Eigenfactor, Indice h, medidas de uso y download, nuevas métricas;

• Indexación en Bases de Datos regionales e internacionales: Scopus, LILACS, Colciencias, Latindex, SciELO, MEDLINE, Web of Science, JCR.

Ley de Bradford

• En economía es conocido como Ley de Pareto o Ley 80-20

• Un número relativamente pequeño de revistas de cada especialidad publica la mayor parte de los resultados científicos significativos;

• 2000 revistas corresponden a 85% de los artículos publicados y 95% de los artículos citados

• Esta porción de revistas no es fija, una constante reevaluación e indexación de nuevas revistas es necesaria.

Bases de Datos • Permiten organizar y catalogar las revistas;

• Realizar búsquedas por asunto, autor, periódico, palabras-clave;

• Su función primordial es separar los periódicos basado en la calidad en los artículos publicado;

• Criterios varían poco entre las varias bases regionales e internacionales;

• Para que sean más representativas, las bases no necesitan indexar la totalidad de los periódicos, y sí los más representativos;

Contribución de Ibero America a la producción científica mundial

BRAZIL 124 1,101 24606 1,950CHILE 44 0,391 3839 0,304MEXICO 43 0,382 9682 0,767ARGENTINA 21 0,186 5919 0,469COLOMBIA 20 0,178 1759 0,139VENEZUELA 13 0,115 1029 0,082COSTA RICA 1 0,009 333 0,026CUBA 1 0,009 662 0,058ECUADOR 1 0,009 290 0,023JAMAICA 1 0,009 292 0,023PERU 1 0,009 524 0,042TRINID & TOBAGO 1 0,009 18 0,001URUGUAY 1 0,009 61 0,005AL&C 272 2,415 49014 3,89

SPAIN 163 1,447 39606 3,139PORTUGAL 8 0,071 7793 0,618IberoAmérica 443 3,934 96413 7,64

USA 4079 36,222 341.055 27,035Canadá 172 1,527 51.274 4,064América do Norte 4251 37,750 392.329 31,10

WoS / World 11.261 100 1.261.551 100

% WorldCountry Titles % WorldArticles in

WoS

Indexación de revistas de AL&C en bases de datos

LILACS SciELO WoS JCR MEDLINE SCOPUSArgentina 126 68 21 12 8 58Bolivia 9 8 0 0 0 0Brasil 330 221 133 72 43 310Chile 59 91 47 22 3 81Colombia 99 106 23 9 3 37Costa Rica 12 10 1 1 1 3Cuba 30 34 1 1 1 27Ecuador 15 0 1 1 0 4Estados Unidos 3 1 1 1 1 1Guatemala 4 0 0 0 0 0Honduras 1 0 0 0 0 0Jamaica 2 1 1 1 1 3México 37 55 43 33 13 104Panamá 2 0 0 0 1 1Paraguay 7 3 0 0 0 0Peru 18 13 1 0 2 7Puerto Rico 2 0 0 0 2 6Uruguay 12 6 1 1 0 5Trinidad & Tobago 0 0 1 0 0 0Venzuela 51 49 14 9 3 44Total 819 666 289 163 82 691

CountryBase de Dados

LILACS

LILACS

El Modelo SciELO(Scientific Electronic Library Online) de

publicación• Contribuir con el desarrollo de la investigación científica nacional a través de

la expansión del la difusión, publicación y evaluación del los resultados di investigación;

• Aumentar la visibilidad, acceso, credibilidad, uso e impacto de las revistas de buena calidad en todo el mundo;

• Consolidar un modelo de publicación basado en las denominadas "vías doradas" de acceso abierto, con publicación en línea de colecciones de revistas consideradas como bienes públicos;

• Promover la integración entre las fuentes de información nacionales y internacionales;

• Fornecer indicadores infométricos y cienciométricos en el proceso de la comunicación científica en Ibero-America e más recientemente también en Sudáfrica.

Desarrollo Histórico de SciELO• Inspirado en el articulo Lost science in the third world di W. Gibbs

(Scientific American,273 (2), 92–99, 1995);

• Criado en el año 1997 a través de un programa de colaboración entre BIREME/OPS/OMS y la Fundación de Amparo a la Investigación del Estado de Sao Paulo (FAPESP);

• Empezó con 10 revistas entre las mejores y de mayor impacto

publicadas en Brasil;

• En 1998, se junta a SciELO el Consejo Nacional de Investigación de Chile, lo que estimula la participación de los otros países del America Latina;

• Adhesión de una nueva colección/país por año;

• Hoy, la red SciELO es formada por 15 colecciones nacionales y dos colecciones temáticas que son publicadas en la Web, en un conjunto formado por más de 750 títulos, 270 mil documentos y 5 millones de citaciones.

La red SciELO

(*) La colección Salud Pública superó las fronteras de America Latina, incluyendo revistas europeas. En los próximos años se espera que se desarrolle como una colección internacional.

Colección Inicio Revista % ArtículosArgentina 2004 63 3%Brasil 1997 214 58%Chile 1998 87 10%Colombia 2004 95 4%Cuba 2001 34 5%Portugal 2004 28 2%España 2001 44 6%Venezuela 2000 49 4%Salud Pública 2000 12 7%Ciencias Sociales 2006 32 0%

Totales 658 100%

Colección Certificada

La red SciELO

Collection Inicio Revista % ÁrticulosBolivia 2009 8 9%Costa Rica 2000 10 11%Mexico 2003 55 54%Paraguay 2007 3 4%Perú 2004 13 14%Sudáfrica 2009 10 8%Uruguay 2005 6 8%West Indies 2006 1 1%

Totales 106 100%

Colección en Desarrollo

La colección SciELO Perú debe ser certificada en principio de 2011, aún que para eso hay que retirar algunas revistas que no cumplen los criterios

Criterios de Selección SciELO

• El desarrollo de cada colección SciELO es asistido por un Comité Consultivo científico independiente, que hace cumplir los criterios ordinarios para la selección y permanencia de las revistas de la colección;

• El Comité Consultivo es constituido por los expertos de diversas áreas científicas, y representantes de las agencias de fomento analizan el cumplimento de los criterios basándose en recomendaciones ad hoc y consideraciones bibliométricas.

• El Comité Consultivo tiene una función fundamental: ayudar el alcance y mantenimiento de su certificación y seguir la vigilancia en los años posteriores;

• Las colecciones bien conducidas pueden alcanzar la certificación en un año; otras colecciones pueden quedar en el período de prueba durante muchos años si las correctas condiciones políticas, de gestión y científicas no fueran logradas.

El Comité Consultivo

El Comité es constituido por los representantes de la comunidad nacional de Comunicación

Científica

Criterios de SciELO BrasilPara crear una colección SciELO nacional, la evaluación de las revistas es obligatoriaCriterios de Pre-selección: •Acceso abierto, endogenia, puntualidad

Criterios analizados:•Contenido científico•Proceso de Peer-review•Periodicidad y puntualidad•Títulos de los artículos, resumen y palabras-claves en ingles•Afiliaciones de los autores•Citas recibidas•Política de derechos del autor (Creative Commons)•Registro de ensayos clínicos•Formulario de Conflito de Interés de ICMJE

Funciones del Comité Consultivo SciELO

• Inclusión de nuevas revistas científicas en la colección;

• Exclusión de títulos de revistas científicas de la colección;

• Modificaciones en los criterios di evaluación para la inclusión y permanencia de revistas científicas en la colección;

• Seguimiento de los indicadores di desempeño que son publicados regularmente por las revistas de la colección;

• Definición y mejora de las operaciones del Comité, lo que permite el cumplimiento eficiente de los objetivos mencionados

Visitas al sitio SciELO Brasil

Observaciones sobre SciELO

• SciELO es uno de los modelos de publicación en Open Access más bien sucedidos en los países en desarrollo;

• Para muchas revistas, el mayor desafío actual es ampliar el Comité Editorial como una condición necesaria para ocupar un eventual lugar entre las revistas más importantes (core journals) del mundo en su área;

• Para lograr este objetivo, será decisivo recibir apoyo político de las agencias nacionales de fomento, como una evaluación de referencia de la producción científica en cada país.

Fuente:A.L.Packer, The SciELO Open Access: A Gold Way from the South

Canadian Journal of Higher Education Volume 39, No. 3, 2009, pages 111-126

Bases de Datos de Revistas Científicas Criterios

Scopus LILACS SciELO NLM Web of

Science/ JCR

Número de títulos en la base 18.000/16.500 peer reviewed

801 640 5455 (MEDLINE) 11.261 / 6.620

Títulos aceptados 40% 25-27% 18% 20-25% 10-12%/ 5-6%

Periodicidad y Regularidad Importancia

relativa Si Si Si Si

Recomendaciones ICMJE* No Si o otro standard

Si o otro standard

Si Si

Peer Review No

necesariamente Si Si Si Si

Analice de citaciones (Factor de Impacto)

Importancia relativa

No importante Importante Importancia

relativa Importante

DiverSidad Internacional de autores

Importancia relativa

No importante Importante Importancia

relativa Importante

Cuerpo Editorial Diversificado Importancia

relativa Importante Importante

Importancia relativa

Importancia relativa

Mérito y carácter científico –contribuciones originales

No importante Importante Importante Importante Importante

Título, resumen y palabras clave en inglés

No necesariamente

Si, resumes en ingles

Si Si Si

Referencias en alfabeto romanas

No No No Si Si

Publicaciones en el área médica y biomédica

No Si No Si No

Comparación entre criterios de Bases de Datos

(*) International Committee of Medical Journal Editors – Uniform Requirements for Manuscripts Submitted to Biomedical Journals (http://www.icmje.org/)

"Estos resultados deben hacernos repensar FI y SJR como el “golden standard” de las medidas de impacto científico. Los resultados aquí presentados indican que las métricas basadas en medidas de uso y no de citación - como ha sido más común - pueden representar una mejor medida de consenso".

Conclusiones• La indexación de una revista en una base de datos regional o

internacional no obedece solamente a criterios formales;• La situación de las revistas concurrentes en la selección presente

o precedente en la misma área de conocimiento es un factor determinante;

• Muchas veces criterios comerciales, geográficos o de fomento de una área especifica influencian la selección de revistas por una base de datos;

• En el año 2008 Thomson Reuters seleccionó 700 nuevas revistas en el mundo de carácter regional para apoyar la diseminación del conocimiento regional. El proceso de selección duró cerca de 2 años;

• De estas, 80 son de AL&C en varias áreas del conocimiento, incluso ciencias de la salud. Los criterios son los mismos que para la admisión en la WoS, pero sin dar tanta importancia a las citas.

• La indexación en base de datos es una indicación de cualidad de una revista pero no es el único criterio para aferir esta cualidad.