Post on 09-Feb-2017
La evaluación y visibilidad de la ciencia en la actualidad: Una mirada (reflexiva) desde la
bibliometría
Orlando Gregorio-Chaviano
Universidad Santo Tomás, Jueves 27 de Octubre de 2016.
Reflexiones oReflexión sobre la bibliometría (y los indicadores).oUso en función de los modelos, misiones y contextos institucionales. oLa visibilidad de la ciencia desde la escritura de artículos de impacto.oLas revistas nacionales (y las Ciencias Sociales) en el contexto de la ciencia actual.
o Herramienta de evaluación y disciplina instrumental
o Importancia a partir de los indicadores que aporta y que posibilitan el análisis cuantitativo y cualitativo para conocer regularidades.
Bibliometría
Cuantitativoso Bibliometríao Indicadores de I+DCualitativoso Peer Review Mixtoso Combinación de los anteriores
La evaluación de la calidad
o El “prestigio” de un investigador se mide por sus publicaciones científicas.
o La publicación científica como principal insumo en la evaluación.
o La cita es reflejo de la visibilidad y la influencia científica.
Principios básicos
La visibilidad de la ciencia desde la publicación en revistas de impacto y la posición en cuartiles.
Las citas y el índice h como medida de influencia y rendimiento científico.
Estrategias de visibilidad, impacto y gestión de la investigación y de las revistas.
INDICIOS DE CALIDAD – MEDIDAS DE EVALUACIÓN DE LA INVESTIGACIÓN
Cambio de enfoquesoAdaptarse a tendencias internacionales.
Mejora de la estrategiaoMenos publicaciones pero mejores.
Cambio de las temáticasoBuscar problemas relevantes del área de conocimiento.
Estrategia de cambios
Estrategias en diferentes escenarios…Torres, Salinas. Cómo publicar en revistas de impacto. EC3. Presentación.
Métodos de investigación
o Estar siempre alerta de nuevas ideas científicas.
o Lectura de literatura científica actualizada. o Seguimiento de nuevos métodos de
investigación. o Trabajo y discusión de ideas y cuestiones
científicas.
Tener en cuenta
o Hábitos de citación o Envejecimiento de las disciplinas o Formas de comunicación de la ciencia o Indicadores basados en las citas o Ventanas de citación o Fuentes de datos
Manifiesto de Leiden (2015)
o La evaluación cuantitativa tiene que apoyar la valoración cualitativa por expertos.
o El desempeño debe ser medido de acuerdo con las misiones de investigación de la institución, grupo o investigador.
o La excelencia en investigación de relevancia local, debe ser protegida.
o Las diferencias en las prácticas de publicación y citación entre campos científicos deben tenerse en cuenta.
o La evaluación individual de investigadores, debe basarse en la valoración cualitativa de su portafolio de investigación.
Revistas científicas de impacto
8.600 Revistas
22.000 Revistas
La mirada de las revistas
o Novedad científica y aportes.o Ajuste el alcance de la revista.o Claridad (calidad y no cantidad de
información). o Estructura y coherencia.o Bibliografía (actualidad y honestidad en las
citas).
¿Por qué publicar en ellas?
o Avances de la carrera investigativa (y docente).o La evaluación en diferentes niveles se centra en
torno a revistas de corriente principal (JCR y SJR).o Mayor visibilidad y atracción de recursos
económicos.o Ganar centralidad (no solo individual sino de grupos
de investigación y universidades).
Pasos a seguir
o Gestión del tiempo y planeación de la investigación. o Seguimiento de las tendencias y enfocarse en los aspectos
innovadores.
o Buscar dónde publicar (revisar la revista).o Tener clara la estructura (formas).o Hacer el documento legible e interesante.o Integridad científica (buscar más la calidad de los resultados
que la cantidad).o Revisión bibliográfica.o Aprender de los “rechazos”.
Optimización de los procesos de publicación científica
o Identificación de las revistas. o Dinámicas de funcionamiento de las revistas científicas.o Preparación de manuscrito.o Superación del proceso de revisión por pares.
Proceso de planeación de la investigación
Aumento de la visibilidad y el impacto
Indicadores
o Los que miden la cantidad de publicaciones científicas (indicadores de publicación).
o Los que miden la calidad y el impacto desde las relaciones entre las publicaciones científicas (indicadores de citación).
PRODUCCIÓN IMPACTO
COLABORACIÓN ALTMÉTRICOS
Indicadores
Limitaciones:Indicadores de producción
o Miran o evalúan solo la cantidad obviando la calidad
o Potencian el síndrome Publicar o Perecer (PoP) al dividir investigaciones en varias publicaciones.
o No siempre la productividad es sinónimo de relevancia
Limitaciones:Indicadores de citación
o Los científicos y las revistas científicas (editores) pueden hacer “ingeniería de impacto”
o La cita no debe verse 100% como reflejo de la calidad de la investigación, pues viene unida a diversos factores
Limitaciones:Indicadores de colaboración
o Tendencias desmesuradas en la colaboración.
o La colaboración genera citas, pero depende no de la colaboración en cuanto a números sino en cuanto a con quién se colabora.
Factor de impacto
Scimago Journal Rank - Scopus
Indicadores
o Mide el prestigio científico de fuentes de
investigación: Valor de citas ponderadas por documento. Una publicación transmite su propio “prestigio” o estatus a otra por el hecho de citarla.
o En la práctica, esto significa que una cita de una fuente con un SJR relativamente alto tiene un mayor valor que una cita de una fuente con un SJR más bajo. Se calcula con una ventana de tiempo de 3 años.
Scimago Journal Rank (Scopus)
Factor de impacto (WoS)
o Mide el promedio de citas que reciben los artículos de una revista en una ventana de tiempo de dos (2) años.
o Desde el punto de vista matemático es más fácil de comprender que el SJR.
o Sesgo hacia las Ciencias Sociales, ya que no se conoce la influencia de artículos individuales en las revistas.
o No hay FI en humanidades.
o Se toman cada uno de los trabajos de un autor en un período de tiempo y se listan en forma descendente en función del número de citas recibidas. Se construyen dos (2) listas; una ascendente (ranking) y una descendente (citas).
Mayor número de orden donde la cantidad de citas sea mayor o igual (no menor) al número de orden. Un autor o revista
tendrá un índice h si h trabajos han recibido h citas.
Posibilita conocer cuáles son aquellos artículos que aportan la mayor cantidad de citas en un agregado.
Índice h
Listado de revistas ordenadas de mayor a menor factor de impacto (o SJR), se divide en cuatro partes iguales, cada una de las partes sería un cuartil. Las revistas con el IMPACTO más alto están en el primer cuartil.
Distribución por cuartiles
Cuartiles
Selección de revistas para publicar
Cuartiles
Selección de revistas para publicar
Cuartiles
Revistas más citadas Q1
Q2
Q3
Revistas menos citadas Q4
+ Grado de dificultad
- Grado de dificultad
Conclusiones
o El artículo científico y los indicadores que se derivan de él, como principal indicio de calidad de la investigación
o La publicación en revistas de impacto como máximo criterio de calidad
o Metodologías de investigación y planeación de la investigación para la visibilidad
o Conocimiento de fuentes, indicadores y metodologías
¡Gracias!ogregorio@javeriana.edu.co