Simposio InternacionalAcreditación de

programas de posgradoQuito, 19‐20 mayo 2011

La experiencia de Colombia La experiencia de Colombia y del CNA en la acreditaciy del CNA en la acreditacióón n de Doctoradosde Doctorados

Por: Fernando ChaparroUniversidad del Rosario

Ponencia presentada en el Simposio Internacional de Acreditación de Programas de Posgrado desarrollado el 19 y 20 de mayo de 2011. Organizado por la Comunidad Andina – Secretaría General; Parlamento Andino - Comisión II; Consejo de Evaluación, Acreditación y Aseguramiento de la Calidad de la Educación Superior CEAACES; y la Universidad Andina Simón Bolívar, Sede Ecuador. Las opiniones expresadas en este documento son de responsabilidad de su autor, por lo tanto, no representan el punto de vista oficial de los organizadores.

2

Temas que se cubrirán

1. El Sistema Nacional de Acreditación de Colombia.2. Desarrollo de los Doctorados en América Latina y en Colombia.3. Modelo de Acreditación del CNA para Maestrías y Doctorados.4. AnAnáálisis de Algunos Factores para Evaluar la Calidad de Maestrlisis de Algunos Factores para Evaluar la Calidad de Maestríías y as y

Doctorados.Doctorados.5. Temas de cooperaciTemas de cooperacióón regional en Acreditacin regional en Acreditacióón de Doctorados.n de Doctorados.

11. . El Sistema Nacional de El Sistema Nacional de AcreditaciAcreditacióón en Colombian en Colombia

Tipos de EvaluaciTipos de Evaluacióón que hay en n que hay en ColombiaColombia

Certificación de Estándares Básicos que lleva al Registro Calificado (obligatorio): CONACES.Acreditación de Alta Calidad (voluntario): CNA.Esto se realiza a tres niveles:

Acreditación de Programas de PregradoAcreditación de Maestrías y DoctoradosAcreditación Institucional

Dos procesos de evaluación relacionados con el Aseguramiento de la Calidad:

En esta presentación nos concentraremos en la Acreditación Institucional.

Sistema de AcreditaciSistema de Acreditacióón y de n y de Aseguramiento de la CalidadAseguramiento de la Calidad

CA

LID

AD

CA

LID

AD REGISTRO CALIFICADO

(CONDICIONES MÍNIMAS)CONACES

SISTEMA DE CALIDADSISTEMA DE CALIDADPROVISIONINFORMACION FOMENTO

OML

ECAES

SNIES

• Sistemas de información

• Nuevas tecnologías• Acompañamiento a

planes de mejoramiento.

ACREDITACIÓN DE ALTA CALIDAD(Programas, Instituciones)CNA

AcreditaciAcreditacióón de Alta Calidad:n de Alta Calidad:CaracterCaracteríísticas Esencialessticas Esenciales

Es de carácter voluntario, no obligatorio.La naturaleza de los procesos evaluativos es inminentemente académica.Pretende un nivel de calidad reconocido internacionalmente: Internacionalización acreditación.Se basa en un proceso de autoevaluación, complementado por la evaluación externa de pares.Garantiza a la sociedad que el servicio público de la educación se preste con la suficiente calidad.Busca crear una “cultura de la calidad”, respetando la autonomía universitaria, orientada a lograr un proceso de Mejoramiento Continuo.

Evolución Acreditación C.N.A.: 1998 - 2010

Información Actualizada a Diciembre 31 de 2010

Año Total Evaluados

Total Acreditados

Acreditación Primaria

Reacredi-tados

Recomen-dados

1998 7 7 7 0 01999 26 23 23 0 32000 46 36 36 0 102001 58 44 44 0 142002 72 59 58 1 132003 67 55 48 7 122004 54 44 37 7 102005 109 100 75 25 92006 150 129 104 25 212007 173 154 106 48 192008 147 122 76 46 252009 139 128 75 53 112010 164 145 73 72 19Total 1.212 1.046 762 284 166

2.2. Desarrollo de los Doctorados en Desarrollo de los Doctorados en AmAméérica Latina y en Colombiarica Latina y en Colombia

N.B.:N.B.: Al iniciar proceso de acreditaciAl iniciar proceso de acreditacióón de Doctorados, el n de Doctorados, el CNA comenzCNA comenzóó a recolectar informacia recolectar informacióón sobre Doctorados n sobre Doctorados en diversos campos del conocimiento en Colombia y en en diversos campos del conocimiento en Colombia y en AmAméérica Latina.rica Latina.

Colombia: Graduados en Programas de Doctorado por Área del Conocimiento y

Año

Entre el 2003 y 2007 se inicia el proceso de crecimiento rápido de los Doctorados

Basado en MEN – CNA – COLCIENCIAS. Situación actual de los doctorados en Colombia: análisis de indicadores que tipifican características importantes. Mar 2008. Documento en discusión.

Se están proyectando No. de cuantos doctores esperamos graduar en los próximos años

Basado en MEN – CNA – COLCIENCIAS. Situación actual de los doctorados en Colombia: análisis de indicadores que tipifican características importantes. Mar 2008. Documento en discusión.

DOCTORES GRADUADOS ANUALMENTE EN COLOMBIA 

Los Doctorados en ALC:No. de Doctores graduados por año: 1996-2005

Fuente: RICYT – Indicadores de CT&I Iberoamericanos

El indicador para Colombia ha mejorado notablemente. Sin embargo, está aún lejos de los parámetros latinoamericanos

NUMERO DE DOCTORES GRADUADOS POR MILLÓN DE HABITANTES,  POR AÑO

Fuente:   CONACYT, RICYT, y Estudio de Doctorados en Colombia

Crecimiento Publicaciones CientCrecimiento Publicaciones Cientííficas ficas Correlacionado con Doctorados (ISI)Correlacionado con Doctorados (ISI)

Fuente: CINDA: Educación Superior en Iberoamérica; Santiago, 2007.

Universidad 1990 1991 1992 1993 1994 1995 1996 1997 1998 1999 90-99

USP 1.208 1.160 1.288 1.330 1.479 1.882 2.092 2.454 2.756 3.130 18.779

UNAM 700 937 888 1.031 1.080 1.339 1.509 1.684 1.911 2.004 13.083

UECamp. 324 371 450 515 550 716 831 906 1.133 1.292 7.088

UFRJ 338 430 458 458 560 681 754 916 979 1.141 6.715

UBA 508 531 485 511 640 745 918 948 1.061 1.063 7.410

Univ.Chile 519 551 541 575 598 713 728 748 751 798 6.522

UEst.Paul. 193 220 284 291 291 398 494 599 733 793 4.296

UFMin.Ger. 136 193 189 230 232 294 347 461 624 666 3.372

PUC-Chile 255 260 270 319 278 329 323 362 394 467 3.257

Correlación entre Doctorados y No. publicaciones ISI de Universidades

Latinoamericanas en Ranking de Shangai: 1990-1999

Fuente: Grupo Scimago / ISI.

Universidad 2000 2001 2002 2003 2004 2005 2006 00-06 90-06

USP 3.547 3.678 4.397 4.469 5.005 5.038 5.025 31.159 49.938

UNAM 2.049 2.356 2.247 2.410 2.617 2.730 1.912 16.321 29.404

UECamp. 1.448 1.470 1.756 1.745 1.835 1.920 2.169 12.343 19.431

UFRJ 1.367 1.370 1.469 1.380 1.697 1.644 1.308 10.235 16.950

UBA 1.214 1.200 1.285 1.314 1.314 1.226 1.569 9.122 16.532

Univ.Chile 896 815 916 996 1.004 1.089 1073 6.789 13.311

UEst.Paul. 965 1.041 1.285 1.347 1.242 1.366 808 8.054 12.350

UFMin.Ger. 697 743 838 879 849 1.024 1007 6.037 9.409

PUC-Chile 546 524 577 626 715 738 432 4.158 7.415

Correlación entre Doctorados y No. publicaciones ISI de Universidades

Latinoamericanas en Ranking de Shangai: 2000-2006

Fuente: Grupo Scimago / ISI.

17

Aspecto importante que surgió: Alta correlación entre:

1. Desarrollo de Doctorados.

2. Consolidación de Grupos de Investigación con agendas claras y aportes científicos reconocibles (diversos indicadores).

3. Nivel y calidad de las publicaciones científicas.

4. Capacidad de movilizar recursos financieros para investigación. Financiación externa a la universidad.

Esto define aspectos importantes para tomar en consideración en la evaluación y acreditación.

Importancia insertar la Acreditación de Posgrados en una Política de Fomento a Doctorados

1. Fortalecimiento Marco Institucional de Política: Papel del MEN, COLCIENCIAS, ICETEX, etc.

2. Estrategias de Financiación Doctorados. Distribución entre:• Financiación del Estado.• Financiación de las IES: Programas de mejoramiento de

cuerpo profesoral. Cofinanciación con universidades.• Financiación por parte del individuo (crédito).• Criterios para asignación de recursos financieros.

3. Modalidades de apoyo a los doctorados: apoyo a individuos (becas), programas y proyectos de investigación.

4. Aseguramiento de la Calidad: CNA iniciará Acreditación de Alta Calidad. Lineamientos listos.

5. Asegurar el empleo de los doctores que se gradúen. Consolidar el mercado de trabajo para doctores. Posgrados

3.3. Modelo de AcreditaciModelo de Acreditacióón del n del CNA para MaestrCNA para Maestríías y as y

DoctoradosDoctorados

Hasta el 2010 existía solo el Registro Calificado

Hasta el 2010 en Colombia sólo existía el primer nivel: El del Registro Calificado de CONACES. Hasta la fecha CONACES ha aprobado el funcionamiento de:• Maestrías: 490• Doctorados: 110En el 2010 se inició el proceso de Acreditación de Alta Calidadpor parte del CNA. Para ello:• Se realizó un estudio de base de la situación actual de los

Doctorados en Colombia. • Se diseñó la metodología de evaluación (enfoque, criterios, etc.):

Ver “Lineamientos para la Acreditación de Doctorados”• Esto forma parte de una política más amplia de Fomento al

Desarrollo de Doctorados en Colombia.

Diferencias entre el Registro Calificado y la Acreditación de Alta Calidad

El Registro Calificado es obligatorio; la acreditación de alta calidad es voluntaria.Mayor nivel de exigencia en todos los indicadores.Para la alta calidad se requiere el Reg. Calificado como prerrequisito.Se requiere mínimo ocho años a partir del ingreso de los primeros estudiantes.Se requiere mínimo 9 egresados para Doctorados, o 20 egresadospara Maestrías, ya que se considera que este es el mínimo para poder evaluar la “calidad del programa en términos de su impacto”. Se ha sugerido 12 o 15 para Doct.Programa de pregrado debe estar acreditado.Para la acreditación de Doctorados estamos adoptando Pares Internacionales (2 colombianos, 1 de otro país).

FACTORESSon grandes áreas de desarrollo institucional que expresan los elementos con que cuenta la institución y sus programas para el conjunto del quehacer académico

INDICADORES Referentes empíricos de las características; posibilitan observar ó apreciar su desempeño en una situación dada

Estructura Modelo de Evaluación del CNA

CRITERIOSConstituyen el marco ético del CNA, y definen principios importantes que orientan el proceso de evaluación.

CARACTERÍSTICASSon dimensiones de la calidad de un programa o institución describen el nivel de logro esperable

23

Criterios: Dos Principios para Doctorados

El Doctorado es un proceso personalizado cuya meta es lograr que un estudiante se convierta en un investigador con capacidad de trabajo autónomo, con dominio de los protocolos teóricos y experimentales del campo de saber al que corresponde el doctorado, a través de desarrollar investigación significativa y rigurosa que implique un aporte original al conocimiento, bajo la dirección de un Tutor.

El proceso puede ser parcial o totalmente descolarizado y se basa en una relación unívoca Estudiante-Tutor. Por consiguiente, su éxito depende de las condiciones que debe tener el Tutor y de las capacidades del Estudiante.

Factores de Alta Calidad que se analizan en Pregrados y Posgrados

PREGRADO: 8 FACTORES:

• Misión, Visión y Proyecto Institucional

• Profesores• Estudiantes• Procesos Académicos y Estructura

Curricular• Bienestar y Ambiente Institucional• Organización, Admin. y Gestión• Egresados e Impacto sobre el Medio• Recursos Físicos y Financieros

POSGRADO: 10 FACTORES:

• Congruencia Doctorado con Misión Univ.• Profesores• Estudiantes• Procesos Académicos y Lineamientos

Curriculares• Bienestar y Ambiente Institucional• Egresados e Impacto• Recursos Físicos, Financieros y Gestión• Investigación: Calidad, Pertinencia y

Producción Científica• Articulación con el Entorno e Innovación• Internacionalización e inserción en redes

científicas

25

4. An4. Anáálisis de Algunos lisis de Algunos Factores para Evaluar la Factores para Evaluar la Calidad de MaestrCalidad de Maestríías y as y

DoctoradosDoctorados

26

4.1. Profesores4.1. Profesores--InvestigadoresInvestigadores

1. Perfil de los Profesores.2. Productividad científica de los

profesores.3. Relación Tutor/Estudiante.4. Política sobre profesores.

Profesores: Principales características

28

1. Perfil de los Profesores:

No. adecuado de profesores de tiempo completo y con doctorado, en comparación con No. de Doctorandos.

No. de Profesores Visitantes de universidades extranjeras o colombianas.No. de proyectos de investigación con financiación externa que los profesores han tenido en los últimos cinco años.No. de proyectos de investigación con financiación externa actualmente en ejecución.No. de distinciones que los profesores han recibido en los últimos cinco años (premios, como Prof. Visitante, etc.).No. de tesis doctorales que los profesores han tutoriado.Dedicación de los profesores a la investigación.

Profesores: Indicadores (1)

29

2. Producción científica de los Profesores:

No. de publicaciones científicas de los profesores en los últimos cinco años: (a) Clasificación del ScientiCol de COLCIENCIAS. (b) Bases de Datos internacionales (tales como el ISI, Scopus, etc.). Posible “standardización” por parte del OCYT. Mínimo una public. en últimos 3 años.

Impacto de las publicaciones medidas en términos de indicadores de citas bibliográficas.

Calidad del aporte científico en el respectivo campo.No. de patentes, productos tecnológicos u otro tipo de resultado de investigación, en los últimos cinco años.Participación en Comités Editoriales.Cuando sea pertinente: No. de obras musicales o artísticas sometidas a la crítica.

Profesores: Indicadores (2)

30

3. Relación Tutor / Estudiante:Relación Tutor / Estudiante en el programa (No. de estudiantes por tutor). Solo profesores de T.C.Flexibilidad del programa para permitir tutores externos. No. de Tutores Externos.Política sobre asignación de profesores como Tutores.

4. Política sobre Profesores:Existencia de políticas de relevo generacional, coherentes con las Líneas de Investigación existentes o planeadas.Política de selección, renovación y contratación de profesores.Formación continuada de profesores (años sabáticos, post-Docs). No. de profesores en últimos tres años.Política y mecanismos de evaluación de profesores.

Profesores: Indicadores (3)

31

4.2. Estudiantes4.2. Estudiantes

32

1. Características en el momento de su ingreso.2. El proceso y desempeño durante la realización de la

Maestría o Doctorado, tanto desempeño académico como su productividad científica.

3. Tiempo de duración para la graduación. El seguimiento a los egresados se hace como parte del noveno Factor.

Uno de los elementos fundamentales asociados a la calidad de las Maestrías y Doctorados es el de la calidad de los estudiantes admitidos, el tiempo de su dedicación, su inmersión en investigación y su productividad académica y científica.

Hay tres momentos importantes para evaluar la calidad de los estudiantes:

33

1. Características de Ingreso

Capacidad de atraer buenos estudiantes, vía Programas de Becas.Rigurosidad del proceso de selección de estudiantes, evaluando no solo sus competencias sino también su trayectoria, motivación e interés en la investigación.No. (o %) de estudiantes de tiempo completo.No. de estudiantes becados por Universidad o fuente externa.No. de estudiantes de otras regiones o países.

Para asegurar los mejores estudiantes que puedan contribuir a la calidad del Programa de Maestría y de Doctorado se deben analizar los siguientes aspectos:

34

2. Proceso y Desempeño durante realización de los Estudios

Tasa de deserción.No. publicaciones realizadas por los estudiantes del programa.Asistencia de estudiantes a congresos internacionales en su área.Participación de estudiantes en redes científicas y su relacionamiento con comunidades científicas internacionales.No. (o %) de “Asistentes de Docencia” o “Asistentes de Investigación” (Doctorado).Otros indicadores de productividad de estudiantes.

N.B.: Se deben diferenciar niveles para Maestría y Doctorados. Solo se aplica para Acreditación de Alta Calidad.

La evaluación de estudiantes durante la Maestría o Doctorado pone énfasis en evaluar la capacidad del estudiante para publicar y participar en eventos científicos. Algunos indicadores:

35

3. Tiempo que se requiere para la graduación, tasa de graduación

Tiempo de duración para la obtención del grado, analizando cohortes.Relación Estudiantes Graduados/Estudiantes que ingresaron, por cohortes.Seguimiento a la producción científica de los estudiantes graduados, así como características de las revistas en que publican y comunidades científicas con que se relacionan.

N.B.: Diferenciar niveles de Maestría y de Doctorados.

En esta Característica se analizan un conjunto de aspectos e indicadores, tales como los siguientes:

36

4.3. Investigaci4.3. Investigacióón: Calidad, n: Calidad, Pertinencia y Productividad Pertinencia y Productividad

CientCientííficafica

37

Principales Categorías a Analizar

1. Articulación de la Investigación al Programa.2. Grupos de Investigación y sus Líneas de

Investigación.3. Productos de la Investigación: Publicaciones

científicas y otros resultados de la investigación.4. Apreciación cualitativa de la importancia del

aporte del Doctorado a su campo del conocimiento.

Las Maestrías de Investigación y los Doctorados deben estar basados en la investigación. En este Factor se analizarán cuatro aspectos o Categorías, dentro de las cuales se plantean un conjunto de Indicadores para apreciar calidad:

38

1. Articulación de la Investigación al Programa

Existencia y claridad del componente de investigación en la estructura del Programa, tanto para Maestría de Investigación como para Doctorado.Política institucional que apoye la investigación y calidad del apoyo administrativo a la misma.Claro vínculo entre la investigación y el programa de Maestría (de investigación) o de Doctorado que se adelanta. Está en discusión el grado de investigación-acción que se requiere para Maestría de Profundización.Disponibilidad de profesores-investigadores con proyectos de investigación que puedan servir de Tutores a los Doctorandos.

Aspectos e Indicadores:

39

2. Grupos y Líneas de Investigación

Los Grupos deben tener una clara agenda de investigación expresada en Líneas de Investigación. Cada Línea con una cartera de Proyectos.No. de investigadores en cada Grupo y su dedicación. Para ser miembro activo el investigador tiene que haber desarrollado proyectos de investigación en los últimos tres años y tener publicaciones.No. de Proyectos con financiación externa (nacional o internacional) en los últimos tres años.No. de Proyectos financiados por la Universidad con recursos propios en los últimos tres años.Los integrantes de los Grupos de Investigación deben ser Profesores-Tutores en el Programa de Maestría o Doctorado.No. de Convenios o relaciones formales con otros Grupos, en el país o en el extranjeroUn aspecto básico es la apreciación de los pares de la calidad de la investigación desarrollada y su aporte a la ciencia.

Indicadores:

40

3. Productos de Investigación:Se utilizarán los Indicadores del ScientiCol

1. Productos que generan Nuevo Conocimiento:(Nos. en últimos tres años):

No. de Artículos de Investigación en Revistas IndexadasNo. de Libros de Investigación y su calidad.Capítulos de LibrosProductos o procesos PatentadosProductos Tecnológicos no patentables

N.B.: La calidad de estas publicaciones debe comprobarse con base en indicadores tales como el ISI y similares.

2. Impacto de las publicaciones científicas (ind. Cienciometría):Nivel de citaciones.Reconocimientos científicos que el programa ha obtenido.

3. Productos relacionado con la Extensión y con la Apropiación Social del conocimiento: Consultoría y Divulgación.

4. Apreciación sobre el aporte del Grupo y del Programa a su campo de la ciencia

Además de indicadores cuantitativos como los ya mencionados, el indicador más importante que se puede solicitar tanto en el Informe de Autoevaluación, como en el Informe de Pares Externos, es una apreciación de cuál es el aporte real del grupo de investigación que apoya el posgrado, o del programa mismo, a avanzar el conocimiento en su respectiva área de la ciencia. Es decir, ¿cual es la importancia de la contribución científica del programa por medio de las investigaciones que ha logrado adelantar?Para apreciar esto, se puede solicitar al programa preparar un texto breve, como parte del Informe de Autoevaluación, haciendo “un estado del arte” de los resultados de sus investigaciones y del aporte al conocimiento que esto representa. Se le puede solicitar a los pares externos revisar dicho texto críticamente, con el fin de corroborarlo o dimensionarlo.

42

4.4. Internacionalizaci4.4. Internacionalizacióón e n e InserciInsercióón en Redes n en Redes Internacionales de Internacionales de

InvestigaciInvestigacióónn

43

InternacionalizaciInternacionalizacióón: Principales n: Principales CaracterCaracteríísticassticas

1. Política institucional de internacionalización.

2. Internacionalización del currículo: pasantías, cursos/seminarios de carácter internacional.

3. Bilingüismo.

4. Internacionalización de estudiantes y profesores.

5. Proyección internacional de los egresados.

6. Internacionalización de la investigación.

44

4.5. Egresados e impacto sobre 4.5. Egresados e impacto sobre el medioel medio

Los Egresados representan una síntesis de la calidad de los estudiantes, su capacidad, la calidad misma del programa y la calidad de los docentes.

45

Producción científica de los egresados

¿Cuántos egresados tiene el programa? ¿El programa le hace seguimiento a sus egresados? ¿Cómo lo hace? ¿Dónde trabajan los egresados? Existencia de una colaboración científica entre los egresados y los grupos de investigación del programa. Producción científica de los egresados: No. de publicaciones siguiendo la misma clasificación de publicaciones utilizada en el factor 3, sobre todo las registradas en las bases de datos internacionales de revistas indexadas (ISI, SCOPUS).Premios científicos y otras distinciones obtenidas por los egresados.No. de proyectos de investigación desarrollados por lo egresados, como investigador principal y como co-investigadores.¿Qué egresados han conformado grupos nuevos de investigación , en la propia universidad o en otros ámbitos académicos?¿Qué egresados forman parte de comunidades científicas y asociaciones científicas reconocidas?

46

5. Temas de cooperaci5. Temas de cooperacióón n regional en Acreditaciregional en Acreditacióón de n de

DoctoradosDoctorados

Cuatro temas de cooperación a destacar

1. Intercambio de experiencias: Estudio de UNESCO/RIACES sobre experiencias y enfoques en la Acreditación de Doctorados.

2. “Benchmarking internacional” sobre Doctorados: Compartir información sobre indicadores de calidadimportantes de Doctorados en América Latina.

3. Movilidad de estudiantes entre Doctorados de la región: Programa Pablo Neruda.

4. Base de Datos de Pares Internacionales.

Muchas Gracias!!!Muchas Gracias!!!

F.Chaparro01@gmail.com