Un programa nacional de información y los indicadores de producción e impacto-Prat
description
Transcript of Un programa nacional de información y los indicadores de producción e impacto-Prat
Un programa nacional de
Información y los indicadores de producción e
impacto
Anna María PratCONICYT-Chile
Informar resultadosSometer ideas y resultados al juicio de paresAsegurar la prioridad del descubrimientoAcumular conocimiento para usos futuros
La Comunicación Científica
La culminación de un proceso De investigación, De discusión, De financiamiento, De evaluación por pares
El inicio de un proceso De premios y sanciones, De búsqueda de visibilidad, De permanencia
Producto de las actividades de investigación
El objetivo básico de la actividad de investigación es la creación de nuevo conocimiento o de nuevos productos y servicios. El "producto" (output) de la actividad, adquiere diferentes formas y varía según cada disciplina: Artículos en revistas científicas, libros,
presentaciones a congresos, y todo tipo de publicaciones en general.
Patentes y otros productos relacionados con la posibilidad de aplicación y transferencia del conocimiento
Según la disciplina, diseños, desarrollo de software, material multimedia, y otros.
El producto de la actividad es, generalmente, cuantificable.
Resultados de las actividades de investigación
Además de los productos cuantificables, existen lo que se denomina "resultados" o "efectos" (outcomes) de la investigación: Producción de graduados de alta calidad Innovaciones tecnológicas Ampliación de la capacidad de servicios de
consultoría, servicios de investigación a contrata Relaciones internacionales con potencialidad de
intercambio, acceso a resultados, participación en redes, etc.
Es difícilmente cuantificable, requiere definir criterios de medición y evaluación
¿Qué se mide al evaluar resultados de I+D?
Producción. Número de publicaciones individuales o de un grupo de investigaciónProductividad. Número de publicaciones según la capacidad de investigación del grupo (generalmente relación con el número de JCE dedicadas a investigación, o cantidad de recursos invertidos)Impacto. Número de veces que un trabajo es citado en las revistas incluidas en el WoS del ISI. Impacto NO es equivalente a calidad.
Consideraciones para la selección de bases y criterios
Tipos de literatura y otros productos a considerar, según cada disciplinaEvaluación de la base de información sobre la cual trabajar. WoS, Bases nacionales reconocidas, ¿otras según área disciplinaria?Complementación de los indicadores bibliométricos con otros indicadores de I+D nacionales e internacionalesLa perspectiva, nacional, disciplinaria e institucional
La corriente principal
Hoy se publican, en todo el mundo, más de 200.000 revistas de carácter científico.Aplicando la Ley de Bradford: 150 revistas dan cuenta de la mitad de lo que se cita y un cuarto de lo que se publicaUn núcleo de aproximadamente 2000 revistas cubren el 85% de los artículos publicados y un 95% de los artículos citadosHoy se considera “corriente principal” las revistas incluidas en bases de datos de ISI
Contenido de ISI
Número aproximado, por año, de títulos en las bases de datos de ISI: Science Citation Index Expanded: 5.600 Social Science Citation Index: 1.800 Arts & Humanities Citation Index: 1.200
Número aproximado de la llamada "corriente principal" en todas las áreas: 8.700Anualmente se revisan más de 2000 títulos para ser incorporados y se revisan los existentes para ser borrados
Elementos para evaluación
Cumplimiento de la periodicidadCumplimiento de normas editoriales internacionales que aseguren su recuperación: Título informativo de la revista Títulos, resúmenes y palabras clave de los
artículos en inglés además de su idioma original
Referencias completas Identificación de los autores y su filiación Procesos de revisión por pares
Elementos para la evaluación
Alcance del tema y cobertura geográfica de la revistaEvaluación de las citas recibidas por la revista, sus autores y los miembros del comité editorial: Número de artículos, impacto e inmediatezRelación de autocitasDisponibilidadLas revistas a ser incluidas son “observadas” por períodos de 2 a 3 años
Revistas Latinoamericanas en ISI
4Venezuela
1Uruguay
47Mexico
1Ecuador
1Cuba
1Costa Rica
1Colombia
317Chile
218Brasil
15Argentina
A&HCISSCISCIPaís
¿Para qué entrar al ISI?
Prestigio. Entrar al club exclusivo de la "corriente principal"Calidad reconocida internacionalmente (aunque se sabe que no todas las publicaciones de calidad están incorporadas)Medida de calidad usada en sistemas de evaluación a nivel nacional e internacional
¿Cómo se comunica en Chile?
En las ciencias exactas casi exclusivamente en revistas de corriente principalEn las ciencias naturales a través de revistas de corriente principal y revistas nacionalesEn las ciencias aplicadas, mayoritariamente a través de revistas nacionalesEn las ciencias sociales y humanas, casi exclusivamente en revistas nacionales
El porqué de una Revista en Chile
Dar a conocer resultados de investigación en un área o disciplina determinadaApoyar la docencia y la difusión de conoci-miento en áreas determinadasDifundir el quehacer de una unidad académicaPublicar trabajos no aceptados en otras revistas de mayor calidadServir de moneda de canje para obtener otras publicaciones similares
Algunos problemas para publicar en el país
Editores de buena voluntadNúmero de autores para lograr una periodicidad mínima permanentePocos controles de calidad estrictos (comités editoriales que funcionen, sistemas de evaluación por pares)Financiamiento estableTirajeDistribución y sus costosAlmacenamiento
La realidad de las revistas científicas nacionales
En el país se publican aproximadamente 500 revistas "académicas", de las cuales un buen numero pueden ser consideradas buenasAlgunas, en la actualidad 11, están incorporadas en la "corriente principal"Otras, a pesar de su calidad, nunca serán incorporadas debido a diferentes circunstanciasMuchas luchan por sobrevivirAlgunas deberían desaparecer
Algunas consideraciones
En muchos casos solo se consideran las publicaciones en revistas de corriente principal para la evaluaciónEn muchas áreas del conocimiento necesitamos buenas revistas nacionalesNecesitamos sistemas rigurosos para medir la calidad de éstas publicacionesEs necesario fomentar políticas de edición en las universidades, sociedades científicas y otras instituciones de investigaciónDeberíamos tener menos revistas, pero de calidad, y éstas necesitan apoyo
Objetivos de la política nacional de edición científica
Mantener publicaciones nacionales en áreas específicasMantener un alto nivel de calidad en las publicaciones nacionalesPromover su visibilidad en la comunidad científica internacionalGenerar indicadores de producción complementarios a ISI. Una "corriente principal nacional"Apoyar el libre acceso a la información producida a nivel nacional. "Open Access"
Programas para el fomento de la edición científica
Fondo Nacional de Edición CientíficaTalleres para editores científicosRed Internacional del ISSN y Base de Datos nacional de publicaciones seriadasParticipación en Latindex. Indice y Catálogo Participación en SciELO. Red Regional de Revistas Científicas ElectrónicasPautas nacionales para la evaluación de publicaciones. Normas nacionales para publicaciones en serie y difusión de las internacionales
Programa de edición electrónica
Iniciado en 1998. Incluyó dos líneas: Programa piloto para edición electrónica de
una revista científica de alta calidad sólo en formato electrónico: Electronic Journal of Biotechnology. P. Universidad Católica de Valparaíso. El 2001 fue incorporada a ISI.
Creación de una biblioteca científica electrónica traspasando a formato electrónico revistas de alta calidad existentes en papel. Se adopta metodología SciELO
Programa de edición electrónica
SciELO-Chile se inicia en 1999 con la plataforma y metodología de BIREME-FAPESPPrincipales objetivos: Facilitar la visibilidad y accesibilidad de las
revistas chilenas Definir normas y criterios de evaluación para
posicionar SciELO como medida de calidad Ayudar a definir políticas editoriales en
universidades, instituciones de investigación y sociedades científicas
Comprometerse con la iniciativa "Open Access"
SciELO-Chile
En la actualidad: 45 revistas texto completo (muchas a partir de
1997) Más de 7.600 artículos y 500 números 600.000 visitas mensuales 4 nuevas revistas chilenas incorporadas a ISI
Aceptado como herramienta de medicion para el Aporte Fiscal a las universidadesSe inició la transferencia de la plataforma a las universidades para la edición de sus propias publicaciones
¿Qué sucede hoy en el mundo?
Monopolio y alto costo de las publicaciones científicasNuevas tecnologías disponiblesNuevas formas de comunicación Iniciativa de “acceso abierto” , Open Acces:
Archivos de pre impresos Revistas de acceso gratuito, bancos de publicaciones, etc.
Nuevas formas de evaluación y definición de "revista científica" Royal Society ICSU, AAAS, UNESCO
CONICYT y las muchas dimensiones de la información
La información científica como insumo de la investigación y desarrolloLa comunicación científica como resultado de la actividad de I+DLa información científica como base de estudios y análisis de tendencias de la I+DLa información como indicador de la actividad de I+D para orientar las políticas nacionales
Un programa nacional de información
Que asegure el acceso a la información científica mundial, en forma equitativa, a todos los grupos de investigación del paísQue muestre la información generada en Chile, dé visibilidad a las revistas nacionales y las vincule con el resto del mundoQue permita conocer, valorar y medir la actividad científica nacional y mejorar los procesos de gestiónQue aplique tecnologías emergentes para llevar a cabo análisis más complejos sobre la producción científica nacional
Componentes del sistema de información científica.
Acceso a la información
científica internacional
CINCEL
Acceso a la información
nacional
SciELO
Acceso a la información del sistema chileno
de C&T
SICTI
OBSERVATORIO DE CYT
Medición y evaluación del sistema
El acceso a la información internacional
Creación de CINCEL, Consorcio para la adquisición de información científica electrónica. Participan 25 universidades con aporte fiscal y se ampliará próximamente a las privadas.Primera fase: Suscripción conjunta del Web of Science de ISISegunda fase definición de un Programa Nacional de Acceso con tres subprogramas: Estudios de colecciones base, adquisición de textos completos, entrenamiento. Proyecto aprobado para este año.
El porqué del Web of Science
Base de datos altamente selectiva con características de búsqueda propiasDe muy alto costo. Ninguna institución, por sí sola podía suscribirlaIndispensable para estudios de producción y productividad. Base de cálculo del Aporte Fiscal a las universidadesBase de producción de indicadores para la carrera docente en muchas instituciones
El acceso y visibilidad de la información generada en Chile
Programa SciELO Chile para la edición electrónica de revistas científicas publicadas en el país Actualmente 45 revistas a texto completo, la mayoría desde 1997 hasta la fecha Programa de identificación y evaluación permanente de las revistas nacionalesSistema propio de indicadores para medir producción, impacto, co autoríasBase de datos incorporada
Criterios de evaluación
Aspectos formales (basado en Latindex) Características básicas Características de presentación de la revista Características de gestión y política editorial Características de los contenidos
Evaluación de contenido por pares Últimos dos años de la revista Se envía a tres especialistas
Evaluación permanente de la calidad. Medición de visitas, citas e impacto
SciELO y los indicadores
SciELO incluye un módulo de estadísticas: De Uso (de las revistas y de cada artículo) De citas (Impacto, vida media) De Coautoría (a nivel nacional, regional e
internacional)
Indicador de artículos y citas por instituciones y autoresDesde el año 2002 considerado, junto a ISI, medida de calidad de revistas chilenasSe está transfiriendo a las universidades para la edición de sus publicaciones y mejorar red de información
Los enlaces
Están activos: Enlaces entre artículos SciELO, currículos SICTI
en Chile y Lattes de Brasil, entre referencias de artículos en SciELO Chile y SciELO Brasil, entre las referencias y bases de datos Medline y Lilacs
Están previstos De currículos SICTI y SciELO a Web of Science de
ISI De publicaciones a textos completos y otras
bases de datos secundarias, tales como CABIAcceso desde INIST/CNRS, Francia y OCLC, EE.UU
Algunos enlaces
De SciELO Chile a Currículo SICTI
Algunos enlaces
De SciELO Chile a Currículo en Brasil
Algunos enlaces
Entre artículos SciELO Chile
Algunos enlaces
De SciELO Chile a SciELO Brasil
Algunos enlaces
De SciELO Chile a Medline y LILACS
Información sobre el sistema nacional de CyT
SICTI, Sistema de información de ciencia, tecnología e innovación..Plataforma que comprende información de : Currículos de personas relacionadas con
programas de CTI Proyectos de investigación y desarrollo Instituciones científicas Productos (publicaciones, patentes y otros)
Portal de Ciencia y Tecnología Nacional
Información sobre el sistema nacional de CyT
Módulos de apoyo a la gestión de CONICYT Incluye: Un sistema de postulación en línea a los fondos
y programas que administra la institución, • Un sistema de apoyo a la evaluación,
seguimiento, control y término de los proyectos y programas.
• Posibilidad de acceso a la información en cada una de las etapas.
Plataforma transferible a las universidades para facilitar su propia gestión
Observatorio de Ciencia y Tecnología
Nuevo proyecto desarrollado dentro del Programa Bicentenario de Ciencia y Tecnología, Basado en la información producida y acumulada en el Programa Nacional y sus tres componentesAplicación de nuevas tecnologías de información para la obtención de indicadores y realización de estudios de prospectiva y vigilancia tecnológica (Colexis y Stanalyst)
Observatorio de Ciencia y Tecnología
Objetivos: Producción de indicadores básicos de ciencia,
tecnología e innovación, Indicadores de Producción. Nuevos indicadores
de “productos” (outputs), y de “efectos” (outcomes) de I+D, utilizando las bases de datos existentes y nuevas tecnologías
Generar una infraestructura tecnológica de soporte.
Llevar a cabo estudios sobre el estado de la CyT en el país
Los indicadores de producción hoy
Producción: Web of Science: Artículos semanales, anuales SciELO: Artículos en períodos de un año A nivel de personas, instituciones, disciplinas
Productividad Numero de artículos, por aportes del estado,
por proyectos, número de investigadores, etc. A nivel de personas, instituciones y disciplinas
Impacto Journal Citation Reports de ISI. Impacto de las
revistas, año a año WoS. Indice de impacto a nivel individual
Algunas conclusiones
Estamos invirtiendo, proporcionalmente, mucho en I+DNuestra ciencia no puede seguir siendo una “ciencia oculta”Debemos fomentar lo que se publica en el país para que tenga la mayor calidad científica y la mayor visibilidad posibleDebemos ayudarnos entre los países para mostrar la ciencia latinoamericana al mundo