Avalúo en la Educación Superior

18
Prof. Lillian E. Ríos-Rodríguez Presidenta, Comité Institucional de Avalúo (CoIA) UPR - Recinto de Ciencias Médicas 22 de agosto de 2014 26 de septiembre de 2014 Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 1 Prof. Lillian E. Ríos 22 de agosto de 2014 26 de septiembre de 2014 Luego de la orientación los participantes: Reconocerán la importancia del proceso de avalúo para el funcionamiento institucional y el cumplimiento con estándares de agencias acreditadoras. Identificarán los componentes esenciales de un plan de avalúo. Examinarán los elementos de un ejemplo que ilustra el Modelo de Cinco Columnas de James O. Nichols para la efectividad institucional. Usando el ejemplo del Modelo de Cinco Columnas Nichols, esbozarán un primer borrador de avalúo de su unidad. 2

Transcript of Avalúo en la Educación Superior

Page 1: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 1

Prof. Lillian E. Ríos

22 de agosto de 201426 de septiembre de 2014

Luego de la orientación los participantes:•Reconocerán la importancia del proceso de avalúo

para el funcionamiento institucional y el cumplimiento con estándares de agenciasacreditadoras.

• Identificarán los componentes esenciales de un plan de avalúo.

•Examinarán los elementos de un ejemplo que ilustra el Modelo de Cinco Columnas de James O. Nichols para la efectividad institucional.

•Usando el ejemplo del Modelo de Cinco ColumnasNichols, esbozarán un primer borrador de avalúode su unidad.

2

Page 2: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 2

El avalúo surge gracias a la necesidad de:

• Tomar decisiones basadas en evidencia

• Rendir cuentas - exigencias de agencias acreditadoras (asociaciones regionales y profesionales)

– Middle States Association of Colleges and Secondary Schools (1887)

• Middle States Commission on Higher Education(1919)– Estándar 7: Avalúo institucional (2002)

– Estándar 14: Avalúo del aprendizaje de los estudiantes3

4

Revised: March 2009 (pages xii and xiii)

Características de Excelencia en la Educación Superior

Page 3: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 3

5

Aunque a distinta escala, las partes de una fractal tienen la misma estructuraque el conjunto. “Consisten en la repetición de formas irregulares de manera

reiterada, combinando irregularidad y estructura” (Susana Díaz-Brecia, 2009).

Asimismo es la relación entre el avalúo de la efectividad: − en las unidades (las partes) y − la institucional (el conjunto).

6

• Certificación 08 SA, 1994-1995Misión, metas y objetivos del RCM

• Certificación 49 SA, 2008-2009Revisión visión, misión y valores RCM

• Certificación 136 JS, 2003-2004Política sobre la Efectividad Institucional de UPR

• Certificación 33 S A, 2007-2008Política sobre Avalúo de la Efectividad Institucional del Recinto de Ciencias Médicas

• Certificación 03 JS, 2009-2010 30 indicadores de avalúo UPR

• Modelo de Cinco Columnas de Nichols para el avalúo de la Efectividad Institucional y del Aprendizaje

Page 4: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 4

7

http://www.rcm.upr.edu/daa

8

Institucional

Escuelas/Decanatos(Departamental/Programático)

Unidades (Administrativas/Servicios/Investigación)

Page 5: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 5

9

Fragmento del Site Visit Report de MSCHE, 2011)

• Un proceso planificado, continuo y sistemático para obtener, analizar e interpretar información que permitaconocer:

– la efectividad institucional y

– el progreso de los estudiantes y la efectividad del proceso enseñanza-aprendizaje.

(Vargas Scuotri, 2004)

[según citado en Guillemard (s.f.)]

• Debe ser reflexivo y justo10

Page 6: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 6

11

"Nos han enseñado a ser muy lógicos, pero no hay una sola decisión

supuestamente razonable que no esté ligada a una emoción."

-- Eduard Punset

• Evidenciar el logro de la misión.

• Mejorar continuamente el desempeño institucional, los servicios y la calidad de los programas en desarrollo.

• Validar que toda gestión en la que se invierten recursos humanos y fiscales esté encaminada al logro de la misión y metas.

• Responder a la creciente demanda de transparencia en los procesos.

• Tomar decisiones fundamentadas en el uso sistemático de información que esté basada en evidencia/resultados.1

2

Page 7: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 7

13

Decisión

Conocimiento

Información

Datos

14

Misión del Sistema UPR

Misiónde la Institución

Misión de los Decanatos/Escuelas

Misión de los Departamentos/

Programas Académicos

Misión de lasUnidades

Administrativasy de Servicio

Page 8: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 8

15

• Aseveración que expresa los propósitosfundamentales de una organización, departamento, unidad o programa y sucompromiso social.

• La razón por la cual existe la institución, el programa, el decanato, el departamento o la unidad.

• Imparte dirección a los esfuerzos individuales y colectivos.

• Inspira y motiva al desempeño de excelencia.

• Propicia el compromiso con la razón de ser de la institución y sus distintivos principales.

(Batista, 2002)

Nuestra misión es ser un centro académico de educación superior en las ciencias de la salud, experto en la educación a nivel profesional, subgraduada, graduada, post graduada y continua de los profesionales de la salud, líder en servicios de prevención, promoción y protección de la salud y en la investigación dirigida a adelantar el conocimiento y mejorar el estado de salud prevaleciente en Puerto Rico, en estrecha alianza con la comunidad y el sector de la salud.

16

Page 9: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 9

Misión

Metas

ObjetivosAvalúo

Requiere de instrumentos que midan el logro de los objetivos.

Si los objetivos se alcanzan se cumple con la misión. (Raquel Vargas, s.f)

Avalúo de la Efectividad Institucional

• ¿Qué servicios deben ofrecerse?

• Los servicios que se están ofreciendo, ¿son los que debemos estar prestando?

• ¿Cuán bien se están ofreciendo?

• ¿A qué nivel se están ofreciendo?

• ¿Satisface a la población servida?

• ¿Se están dando de manera ágil y costo-efectiva?

Page 10: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 10

19

Metas/Resultados esperados

Actividades/Estrategias

Avalúo del logro de las

metas

Uso de la información

(mejoramiento o reiteración)

MSCHE, 2007

Logro de la Misión

Debe incluir:

• Introducción breve (filosofía/políticas/modelo/propósito)

• Misión/metas/objetivos

• Indicadores

• Métodos/Instrumentos

• Responsables

• Calendario (itinerario)

20

Page 11: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 11

Según Banta, Jones & Black (2009), un plan avalúo efectivo es:

• Realista (tiempo, esfuerzo, costo)

• Involucra a los interesados

• Conecta el avalúo a los objetivos y procesos medulares

• Tiene un plan escrito(contiene un calendario)

• Construye una cultura basada en la evidencia

21

22

PropósitoInstitucionalExpandido

•Resultados/ Objetivos

•Métodos

•Resultados obtenidos

•Uso de resultados

Planificación:

•Académica

•Administrativa

•Presupuestaria

•Física

PlanificaciónEstratégica

Planificación Ávalúo Efectividad

Institucional

Enfoca en el presente

Enfoca en elfuturo

A Road Map for Improvement of Student Learning and Support Services Through Assessment(Nichols, 2005) Adaptación y traducción para fines educativos.

Informar el Proceso de Planificación

¿Cuán bien están aprendiendo los

estudiantes? ¿Cuán bien están funcionando los

servicios?

¿Qué acciones o recursos se

necesitan para hacer las mejoras?

Page 12: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 12

1• Enfocar los esfuerzos de la unidad para el

lineamiento/cumplimiento de la misión institucional.

2• Determinar las fortalezas y aspectos a mejorar en los

procesos y servicios que ofrece la institución.

3• Establecer controles de calidad.

4• Facilitar la toma de decisiones y acciones oportunas

basadas en la evidencia.

Misión/Metas/Objetivos:

• Torbellido de ideas sobre las experienciasen la prestación de los servicios

• Preocupaciones procedentes de otrasunidades

• Análisis de las metas/objetivos/servicio

– Grupo focal

– Estudio de necesidades

– Encuesta de satisfacción de los servicios24

Page 13: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 13

• Empoderar al recurso humano desde el inicio

• Documentar el proceso

• Discutir y divulgar ampliamente los resultados

– Tablón de resultados (“dashboard”)

– Presentaciones

– Uso de VBB

– Publicación de fotos

– Web/Intranet25

A Road Map for Improvement of Student Learning and Support Services Through Assessment (Nichols, 2005). Adaptación y traducción del modelo para fines educativos.

Propósito Institucional ExpandidoObjetivos/ Resultados esperados

Criterios de Éxito y Método de Avalúo

Resultados Obtenidos

Uso de los Resultados/Acción

tomada

Misión: Somos una biblioteca académica de carácter público especializada en ciencias de la salud, que se dedica a anticipar y satisfacer las necesidades de información de la comunidad del Recinto de Ciencias Médicas, los profesionales que laboran en el área de las ciencias de la salud en Puerto Rico y del público en general. Participamos activamente en los procesos de enseñanza, aprendizaje e investigación, así como en los servicios de cuidado y promoción de la salud del paciente, al proveer acceso a fuentes de información de calidad y al educar a los usuarios en la recuperación y el uso crítico de la misma.

Meta: Proveer los recursosbibliográficos y tecnológicos esenciales para los profesionales de la salud a niveles pre y post bachillerato hasta de post grado.

Al inicio del año académico, el personal verificará que los recursos bibliográficos esenciales paraprofesiones de la salud, son parte del inventario de recursos disponibles para los usuarios de laBiblioteca.

A través del análisis de una tabla comparativa, se observará que el 80% o más de los recursos bibliográficos esenciales para las profesiones de la salud (según lista de autoridades de la Medical Library Association (MLA), Master Guide Authoritative Information Resources in the Health Sciences, 2011), están disponibles para los usuarios de Biblioteca.

Disponibles:119 de los 126 (94%)

Se recomendó continuar con la acción reiterativa de continuar los esfuerzos de mantener el nivel de cumplimento con la métrica.

Se evaluó la viabilidad de reducir en un 5% el presupuesto asignado para este propósito sin que afecte el nivel de cumplimiento con la métrica. Dados los resultados, para el año académico 2014-2015 ese 5% del presupuesto fue asignado para mejoras en…

Page 14: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 14

1• Administradores (decanos,

directores, coordinadores, etc.)

2 • Personal (docente y no docente)

3

• Oficina de Planificación, Investigación y Avalúo Institucional (OPIAI)

• Comité Institucional de Avalúo (CoIA)

28

1. Plan Avalúo de la Efectividad Institucional 2010-2016Indicadores de Avalúo Institucional RCM (2010-2016)

2. Certificación 03 JS, 2009-2010 Indicadores de Avalúo Institucional UPR

3. Certificación 33 SA, 2007-2008Política de Avalúo del RCM

4. Certificación 136 JS, 2003-2004Política sobre la Efectividad Institucional de UPRPolítica de Avalúo de Institucional Sistema UPR

5. Recurso externo: PresentaciónAssessment for Administrative UnitsVer presentación

6. Cómo redactar objetivos

Page 15: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 15

29

30

Tarea: Modelo de NicholsSuponga que el pasado año académico (2013-2014) se avaluó un servicio o un proceso medular de la unidad en la que trabaja y que debe presentar los resultados y acciones tomadas usando el Modelo de Cinco Columnas de Nichols.

1. Comience familiarizándose con los documentos que contienen los indicadores de avalúo institucionales e identifique si usted o su unidad figura como persona responsable.

2. Identifique la misión y metas de su unidad. Si la unidad no tiene aseveraciones de misión y metas, use las del Decanato correspondiente.

3. Seleccione una meta cuyo cumplimiento dependa de procesos medulares o servicios que ofrece la unidad a la que sirve (leer los objetivos de cada meta puede ayudarle en la selección).

4. Redacte un objetivo (resultado esperado) y complete la tabla del Modelo de Nichols con datos reales o hipotéticos.

5. Use la diapositiva (“slide”) siguiente para preparer su presentación, guarde y traiga el document el 24/oct/2014. ¡Éxito!

Page 16: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 16

A Road Map for Improvement of Student Learning and Support Services Through Assessment (Nichols, 2005). Adaptación y traducción del modelo para fines educativos.

Propósito InstitucionalExpandido

Objetivos/ Resultados esperados

Criterios de Éxito y Método

de Avalúo

Resultados Obtenidos

Uso de los Resultados/Acción

tomada

Misión RCM/Decanato:-

Misión del Decanato/Unidad:-

Meta:-

- - - -

Prof. Lillian E. Ríos RodríguezPresidenta

Comité Institucional de Avalúo (CoIA)Ext. 2244, [email protected]

32

Page 17: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 17

Allen, M. J. (2004). Assessing Academic Programs in Higher Education. Boston, Massachusets: AnkerPublishing Company, Inc.

Banta, T. A., Jones, E. A. & Black, K. E. (2009). Designingeffective assessment: Principles and profiles of goodpractice. San Francisco, CA: Jossey-Bass.

Díaz-Brecia, S. (mayo, 2009). Primeras reflexiones de los fractales, la teoría del caos y su aplicación en el Aula. Revista Red Visual, 9-10. Recuperado de http://www.redvisual.net/pdf/9-10/a10.pdf. (ISSN: 1697-9966).

Maki, P. (2004). Assessing for learning: Building a sustainable commitment across institution. Virginia, US: Stylus Publishing, LLC.

33

Medina, M. R. & Verdejo, A. L. (2009). Conceptos generales de la evaluación y la medición del aprendizaje. En Isla Negra Editores (3ª ed.). Evaluación del Aprendizaje Estudiantil. (pp. 19-34). Puerto Rico: Experts Consultant, Inc.

Middle States Commission on Higher Education. (2006). Characteristics of Excellence in HigherEducation: Requirements of Affiliation and Standards for Accreditation. Recuperado de http://www.msche.org/publications/CHX06_Aug08REVMarch09.pdf (Trabajo original revisado en marzo de 2009)

Middle States Commission on Higher Education . (2009). Highlights from the 90 years history of the Middle StatesCommission on Higher Education. Recuperado de http://www.msche.org/publications/90thanniversaryhistory.pdf

34

Page 18: Avalúo en la Educación Superior

Prof. Lillian E. Ríos-RodríguezPresidenta, Comité Institucional de Avalúo (CoIA)

UPR - Recinto de Ciencias Médicas22 de agosto de 2014

26 de septiembre de 2014

Orientación: Avalúo de la Efectividad Institucional en Unidades Administrativas y de Servicios (Parte I) 18

Nichols, J. & Nichols, K. (2005). A Road Map for Improvement of Student Learning and Support Services Through Assessment. New York, US: Agathon Press.

Ortiz-García, A. L. (2008). Filosofía educativa. En Diseño y evaluación curricular (pp. 42-73). Río Piedras, Puerto Rico: Editorial Edil Inc.

Palomba, C. A. & Banta, T. W. (1999). Assessmentessentials: Planning, implementing and improvingassessment in higher education. San Francisco, CA: Jossey-Bass

Varga, R. (s.f). Presentación a directores de unidades de servicios en UPR-Río Piedras: Assessment institucional.

35