Diseño Axial de una prueba objetiva

12
http://investigando.org/educandos EL PORTAL DE LA EDUCACIÓN PERUANA http://investigando.org/educandos "ESPACIO PARA LA REFLEXIÓN, EL CUESTIONAMIENTO, LA CRÍTICA, LA INVESTIGACIÓN Y LA INNOVACIÓN DOCENTE" DISEÑO AXIAL DE UNA PRUEBA DE EVALUACIÓN Lic. Cesar Vila Guerra Miembro Consultor de EDUCANDOS Setiembre 2008

description

César Vila - Grupo Educandoshttp://investigando.org/educandos

Transcript of Diseño Axial de una prueba objetiva

Page 1: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

http://investigando.org/educandos

"ESPACIO PARA LA REFLEXIÓN, EL CUESTIONAMIENTO, L A CRÍTICA, LA INVESTIGACIÓN Y LA INNOVACIÓN DOCENTE"

DISEÑO AXIAL DE UNA PRUEBA DE EVALUACIÓN

Lic. Cesar Vila Guerra Miembro Consultor de EDUCANDOS

Setiembre 2008

Page 2: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

1. ETAPAS DE LA EVALUACIÓN DE LOS APRENDIZAJES Se consideran tres momentos etapas representativo en la evaluación: planeamiento, construcción o ejecución y análisis del proceso de evaluación. Gráfico: Etapas de la evaluación de los aprendizajes.

Determinación de los objetivos de la evaluación.

Análisis de los objetivos curriculares (capacidades, destreza, habilidades, actitudes). Precisión de indicadores.

Selección de procedimientos y elaboración de instrumentos.

PLANEAMIENTO

EJECUCIÓN

Aplicación de técnicas e Instrumentos.

Procesamiento de la información

Comunicación de resultados.

Análisis de los resultados.

Nivel de logro de las capacidades, destreza, habilidades y actitudes.

ANÁLISIS

Page 3: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

2. PLANIFICACIÓN DE LOS INSTRUMENTOS DE EVALUACIÓN: USO DE TABLAS DE ESPECIFICACIONES Y DE TAXONOMÍAS. La planificación de los instrumentos de evaluación de los aprendizajes se operativiza mediante el uso de un instrumento denominado tabla de Especificaciones o diseño axial de una prueba, que viene a ser matriz de doble entrada que contiene las capacidades de aprendizaje a evaluarse y la categoría de aprendizaje de una taxonomía de objetivos o de procesos mentales. En el ejemplo se está trabajando con la taxonomía de Bloom y/o elaborada sobre la base de los procesos mentales. En la tabla de especificaciones se busca el grado de coherencia que debe existir entre las capacidades programadas que deben ser evaluadas y los procesos mentales establecidos en la taxonomía, sustentados en una jerarquía de aprendizajes. Para la elaboración y eficiencia de los instrumentos de medición de los aprendizajes debemos tener en cuenta una serie de criterios básicos identificados previamente con claridad y precisión. 2.1. CRTERIOS BÁSICOS PARA ELABORAR UNA PRUEBA Los criterios básicos a tener en cuenta para la elaboración de pruebas de evaluación son los siguientes: Confiabilidad: Consiste en el grado de consistencia o fiabilidad del instrumento de evaluación. En otros términos, es una estimación del grado de consistencia o constancia entre repetidas mediciones efectuadas a los alumnos con el mismo instrumento. El grado de consistencia se determina mediante el hallazgo de un coeficiente de confiabilidad. Validez: Es la precisión con que una prueba mide la operación cognitiva, (capacidades, procesos mentales), el objeto (contenido) y el producto que es el resultado observable de la operación cognitiva. La Validez implica el nivel, de correspondencia entre el tipo de instrumento y el propósito de la evaluación (que puede ser una operación cognitiva, contenidos o el producto). La validez de contenido viene a ser el grado en que un test mide una muestra representativa de un contenido de una asignatura. Objetividad: Viene a ser el grado de correspondencia entre la ponderación o el valor que se le asigna a la prueba de rendimiento y los resultados de la prueba misma desarrollada por los evaluados. La objetividad implica eliminar toda manifestación de subjetividad en la puntación, calificación y valoración de la prueba. Dificultad: Constituye el grado de complejidad o facilidad que tiene la prueba de evaluación. Todo test de medición de aprendizaje debe tener un grado razonable de dificultad. Discriminación: Es el grado o nivel de separación de la prueba en función de los niveles de rendimiento (ya sea superior e inferior) a evaluar. Todo buen instrumento de medición de aprendizajes debe discriminar los grupos de más alto y los de más bajo rendimiento. Representatividad: Es el grado de equilibrio o nivel de representación de las capacidades, objetivos de la unidad, capítulo o asignatura. Balancear una prueba implica buscar la representatividad de las capacidades u objetivos a evaluarse. Si se trabaja con una taxonomía de objetivos o de capacidades implica considerar todas las categorías a ser medidas.

Page 4: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

Adecuación a lo estrictamente enseñado: Es circunscribirse a las capacidades u objetivos desarrollados en la asignatura o área curricular. Una prueba de rendimiento será más eficiente si solo intenta comprobar aquello que realmente se ha enseñado o desarrollado en la asignatura. Adecuación al tiempo estipulado: Es establecer el tiempo adecuado para la duración de la prueba de rendimiento. Se considerará bien planeada una prueba, con respecto al tiempo cuando más del 90% de los evaluados han respondido en el plazo previsto. Practicidad: Consiste en tomar en cuenta, al elaborar la prueba, criterios como: tiempo empleado en su preparación, costo, administración y puntuación. Estos criterios deben ser considerados a fin de que el instrumento sea práctico, funcional y no abrumador, tedioso y de alto costo.

2.2. PASOS PARA ELABORAR Y APLICAR UNA PRUEBA OBJETIVA (Cuadro de Referencia)

Identificación de datos específicos o señalamiento de características de la población a evaluar.

Selección de contenidos y habilidades (Capacidad – Destreza).

Preparación de la Tabla de Especificación

Selección de tipos de preguntas o ítems y elaboración de los mismos.

Montaje o diagramación de la prueba.

Elaboración de instrucciones y de la clase de respuesta.

Page 5: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

2.3. USO DE LA TABLAS DE ESPECIFICACIONES Y DE TAXONOMÍAS EN LA ELABORACIÓN DE INSTRUMENTOS DE EVALUACIÓN.

A continuación se presenta algunos ejemplos en el uso de la tabla de especificaciones.

TABLA DE ESPECIFICACIONES

Área: Ciencia Tecnología y Ambiente: CATEGORIAS DE APRENDIZAJE O PROCESOS CONTENIDOS MENTALES (*)

Conoci-miento

Compren-

sión

Aplica-

ción

Ana- lisis

Síntesis

Evalua-

ción

Total

de Items

1. ATRIBUTOS DE LOS SERES

VIVOS.

2

1

3

2. CRECIMIENTO DE LA PLANTAS.

2

2

3. GERMINACIÓN DE LA SEMILLA.

1

1

1

1

1

5

4. CIRCULACIÓN DE LA SANGRE.

SISTEMA.

1

1

2

5. RESPIRACIÓN COMPONENTES

DEL SISTEMA.

1

2

3

6. ACCIÓN DE CHOQUE. PRINCIPIOS GENERÁLES.

1

1

1

1

4

Aplicación y corrección de la prueba.

Revisión y análisis de las preguntas o ítems.

Informe sobre los resultados de la evaluación.

Page 6: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

7. ACCIÓN DE LA GRAVEDAD. PRINCIPIOS GENERALES.

1

1

1

1

4

8. MAQUINAS SIMPLES. TIPOS.

2

1

3

9. MEZCLAS. ELEMENTOS COMPUESTOS.

2

1

1

1

5

10. PROCESOS DE SEPARACIÓN DE

MEZCLAS

2

2

1

1

6

11. MAGNETISMO – PRINCIPIOS

GENERALES.

1

1

1

3

TOTAL DE ITEMS

14

7

2

2

8

7

40

PORCENTAJE %

35

17.5

5

5

20

17.5

100%

(*) CATEGORIAS = BENJAMIN BLOOM . TABLA DE ESPECIFICACIONES O DISEÑO AXIAL

DE UNA PRUEBA Concepto.- La Tabla de Especificaciones es una técnica empleada en la construcción de Test de rendimiento, que permite fácilmente correlacionar aspectos de aprendizaje con los contenidos. La Tabla de Especificaciones es una tabla de doble entrada en que los aspectos del aprendizaje (aspecto del dominio cognitivo) van a un lado de la tabla, y los contenidos de la asignatura o unidad de trabajo. Ejemplo: La tabla que presentamos como muestra nos proporciona los siguientes elementos:

En primer lugar , los aspectos del aprendizaje en que vamos a poner más énfasis durante la evaluación. Aún refiriéndolos sólo al dominio cognitivo, valiéndonos de una determinada taxonomía, podríamos evaluar desde lo más simple a lo más complejo. Estos extremos están señalados en la tabla como “conocimiento” y “evaluación”. No existe una única taxonomía; esta debe variar de acuerdo al tipo de conocimientos que se quiera evaluar. (ver taxonomía de Bloom. Dominio cognitivo).

En segundo lugar, podemos distinguir los contenidos objetos de la evaluación. La tabla puede ser construida para evaluar toda una asignatura o para evaluar partes muy pequeñas de ella.

En tercer lugar, podemos apreciar que la prueba resultante deberá constar de cuarenta ítems o preguntas. En cada celda anterior se puede apreciar el número de ítems que le corresponde. Análisis de la Tabla presentada.

Page 7: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

De un análisis rápido de la Tabla podemos concluir que el evaluador le interesa sobre todo la evaluación de aspectos aplicativo de la unidad de trabajo y su grado de compresión; además se da mayor peso a los contenidos 9 y 10, que también inciden en el aspecto práctico de la unidad. Determinación de los pesos. Para poder fácilmente determinar los pesos – el número de ítems – para cada celda de la tabla nos podríamos hacer las siguientes preguntas: ¿Qué importancia tiene cada contenido dentro de la experiencia total del aprendizaje?.

¿Qué tiempo se dedicó a cada contenido durante la instrucción?.

¿Qué aspecto del aprendizaje – dominios – tienen mayor retención y valor de transferencia?.

¿Qué importancia le asignan a cada contenido los docentes?. Resumiendo los pasos. Para la construcción de una tabla de especificaciones se deberán seguir los siguientes pasos: 1. Identificar claramente los aspectos del aprendizaje que se desea medir o evaluar. Tener una

taxonomía adecuada. 2. Determinar los contenidos sobre los que va a basar la prueba o test. 3. Asignar los pesos (número de ítems) para cada celda de la tabla, interrelacionando los dos

puntos anteriores. 4. El siguiente paso será ya la construcción de los ítems de que va a constar el test o prueba

TAXONOMÍA DE BLOOM – DOMINIO COGNITIVO Los procesos intelectuales del dominio cognoscitivo se dividen en dos clases principales:

I. Conocimiento. II. Habilidades intelectuales y destrezas.

Esta se subdividen todavía en seis ramas principales, a saber (Bloom, 1956). Reproducido de Benjamín S. Blom, Taxonomy of Educational Objetives: Cognitive Domain (Nueva York: David Mckay Co., Inc., 1956). El dominio cognoscitivo de la taxonomía es especialmente útil para diseñar los test de aprovechamiento. Está enfocado sobre una lista global y en apariencia completa, de los procesos mentales que es necesario considerar al determinar resultados de aprendizaje; proporciona un vocabulario estándar para describir y clasificar dichos resultados; y sirve como guía para describir los resultados del aprendizaje en función de las conductas específicas del estudiante.

Page 8: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

I. CONOCIMIENTO. 1.00 CONOCIMIENTO (Retención del material previamente aprendido)

1.10 Conocimientos específicos. 1.11 Conocimientos de los términos o definiciones. 1.12 Conocimientos de hechos específicos. 1.20 Conocimiento de modos y medios con casos específicos. 1.21 Conocimientos de convenciones. 1.22 Conocimientos de tendencias y secuencias. 1.23 Conocimiento de clasificación y categorías. 1.24 Conocimientos de criterios. 1.25 Conocimiento de metodología. 1.30 Conocimiento de universales y abstracciones de un área. 1.31 Conocimientos de principios y generalizaciones. 1.32 Conocimientos de teorías y estructuras.

II. HABILIDADES INTELECTUALES Y DESTREZAS.

2.00 COMPRENSIÓN (Entendimiento del significado del material) 2.10 Traducción (Convertir una forma en otra) 2.20 Interpretación (Explicar o resumir el material) 2.30 Extrapolación (Extender el significado más allá de los datos)

3.00 APLICACIÓN (Uso de la información en situaciones concretas) 4.00 ANÁLISIS (Dividir el material en sus partes)

4.10 Análisis de elementos (Identificar las partes) 4.20 Análisis de relaciones (Identificar las relaciones) 4.30 Análisis de los principios organizadores (Identificar la forma en que están organizadas las partes)

5.00 SÍNTESIS (Integrar las partes en un todo) 5.10 Elaborar una sola comunicación. 5.20 Elaborar u plan o un conjunto propuesto de operaciones. 5.30 Deducir un conjunto de relaciones abstractas.

6.00 EVALUACIÓN (Juzgar el valor de una cosa para determinado propósito, empleando criterios definidos)

6.10 Juicios en función de evidencias subjetivas. 6.20 Juicios en función de criterios objetivos.

Como se puede apreciar en este plan general, los resultados se ordenan de acuerdo con su complejidad creciente. Comienzan con la retención, relativamente simple, de la información factual, pasan al nivel más bajo del entendimiento (comprensión) y después proceden a través de niveles cada vez más complejos de aplicación, análisis, síntesis y evaluación. Las subdivisiones dentro de cada rama también están en orden de complejidad creciente. Así pues, este esquema para clasificar la conducta del estudiante es de carácter jerárquico, es decir, las conductas más complejas contienen o abarcan las conductas más simples de las categorías inferiores.

Page 9: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

ETAPAS DE CONSTRUCCIÓN O EJECUCIÓN En esta etapa el profesor lleva a la práctica la tabla de especificaciones, teniendo en cuenta las siguientes recomendaciones:

� Utilice tarjetas o fichas para elaborar sus ítems. (figura 2) � Reúna materiales que tengan relación con el tema de la prueba, ya sean cuadernos,

prácticas, revistas, libros, dibujos, esquemas, etc. Que puedan servir como fuentes para la construcción de los ítems.

� Al reverso de cada ítem coloque la clave respectiva, la fecha de escritura y una estimación de su probable dificultad (alta – media – baja). (figura 2)

� Utilice los llamados “multi ítems”, es decir, varios ítems basados en un mismo material de referencia, ya sean estos gráficos, dibujos o esquemas. Sin olvidar que cada ítem debe mantener su independencia en cuanto a su respuesta correcta.

� Cuando existan varios tipos de ítems en una misma prueba redacte las instrucciones correspondientes para que los estudiantes no se equivoquen en sus respuestas por desconocimiento de la forma de responder.

� Revise los ítems construidos, ya sea con ayuda de otros profesores o guiándose por una pauta de revisión y en caso necesario, rehaga los ítems.

� Proceda a organizar los ítems de la prueba, para ello tomará en cuenta los siguientes criterios:

a) Por dificultad. b) Por tema o subcontenido. c) Por competencia – capacidades – actitudes. d) Por estrategias – métodos sujetos a aprendizaje.

� Tener cuidado de que las claves correctas de los ítems estén repartidos al azar. � Construir la tabla de respuesta o plantilla de corrección. (Baremo). � Proceder a imprimir la prueba cuidando que los ítems queden completos en la misma

página, asegurándose que no exista errores en el tipeo y en las ilustraciones.

ANALISIS DE UNA PRUEBA Es una etapa descuidada por la mayoría de los que laboran en el campo educativo. Los docentes piensan que con la asignación de calificaciones se cierra el ciclo de construcción de una prueba. El análisis de los resultados es el que permite, realizar actividades de reforzamiento del proceso enseñanza – aprendizaje. No sólo debemos comprobar producto, sino reforzar el proceso para que los alumnos que hayan fracasado de un determinado aprendizaje reciban el apoyo o ayuda adecuada que les permita continuar con éxito en la próxima unidad, proyecto o módulo de aprendizaje. También se pretende detectar cuales son los puntos débiles del aprendizaje, los errores son objetos de estudios, en tanto que son reveladores de la naturaleza de las representaciones mentales del alumno, y de las estrategias que utiliza el estudiante para llegar a un resultado determinado, así proporcionar los mecanismo necesarios para ayudarle a superarlos. Finalmente también interesa remarcar aquellos aspectos del aprendizaje en los que los alumnos han tenido éxito, pues así se refuerza este aprendizaje y su autoestima.

Page 10: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

FORMULACIÓN DE ITEMS: Utilizar la siguiente tarjeta o ficha para elaborar cada pregunta, describiendo con un lenguaje claro y sencillo. GRADO: ________________________ ÁREA: ______________________________________ PROFESOR RESPONSABLE: ____________________________________________________

Figura Nº 1 – Lado (A)

CAPACIDAD - DESTREZA

CONTENIDO

DESARROLLO DEL ITEM: Nº____

1. _______________________________________________________________________ 2. _______________________________________________________________________

3. _______________________________________________________________________

NIVELES DE

APRENDIZAJE

( ) 1. Conocimiento ( ) 4. Análisis

( ) 2. Comprensión ( ) 5. Síntesis

( ) 3. Aplicación ( ) 6. Evaluación

Figura Nº 2 – Lado (B)

LA CLAVE DE RESPUESTAS

_________________________ Firma del Profesor

Lima…….…. de…………………... del 2008

____________________________ VºBº Coordinador(a) de grado

Page 11: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

EJEMPLO DE UNA ESCALA NOMINAL DE LAS HABILIDADES DE L PENSAMIENTO: TAXONOMÍA DE BLOM (1956)

CATEGORÍAS

DEFINICIÓN

MUESTRA DE

VERBOS

MUESTRA DE DESEMPEÑOS

CONOCIMIENTO

El alumno recordará o reconocerá

informaciones, ideas y principios de la misma forma (aproximada) en que fueron

aprendidos.

Escriba Liste

Rotule Nomine Diga Defina

El alumno definirá los seis niveles de la

Taxonomía de Bloom en el dominio cognitivo.

COMPRENSIÓN

El alumno traduce, comprende o interpreta

información en base al conocimiento previo.

Explique Resuma

Parafrasee Described

Ilustre

El alumno explicará la propuesta de la Taxonomía de Bloom para el dominio

cognitivo.

APLICACIÓN

El alumno selecciona, transfiere, y usa datos y

principios para completar un problema o tareas con un mínimo de supervisión.

Use Compute Resuelva

Demuestre Aplique

Construya

El alumno escribirá un objetivo

educacional para cada uno de los niveles de la Taxonomía de Bloom.

ANÁLISIS

El alumno distingue, clasifica y relaciona

presupuestos, hipótesis, evidencias o estructuras de una declaración o cuestión.

Analice Categorice Compare Contraste Separe

El alumno comparará y contrastará los

dominios afectivos y cognitivos.

SÍNTESIS

El alumno crea, integra y combina ideas en un

producto, plan o propuestas nuevas para el.

Cree Planee

Elabore hipótesis Invente

Desenvuelva

El alumno elaborará un esquema de calificación para escribir objetivos

educacionales que integre los dominios cognitivo, afectivo y psicomotor.

EVALUACIÓN

El alumno aprecia, evalúa o critica en base a

padrones y criterios específicos

Juzgue Recomiende

Critique Justifique

El alumno juzgará la afectividad de

escribir objetivos educacionales usando la Taxonomía de Bloom.

TAXONOMÍA DE BLOOM (*) DE HABILIDADES DE PENSAMIENT O

CATEGORÍAS CONOCIMIENTO Recoger información

COMPRENSIÓN Confirmación aplicación

APLICACIÓN Hacer uso del conocimiento

ANÁLISIS (Orden Superior) Dividir, Desglosar

EVALUAR (Orden Superior) Juzgar el resultado

CREAR (Orden Superior) Reunir, Incorporar

Descripción: Las habilidades que se deben demostrar en este nivel son:

Observación y recordación de Información; conocimiento de fechas, eventos, lugares conocimientos de las ideas principales; dominio de la

Entender la información; captar el significado; trasladar el conocimiento a nuevos contextos; interpretar hechos; comparar; contrastar;

Hacer uso de la información; utilizar métodos, conceptos, teorías, en situaciones nuevas; solucionar

Encontrar patrones; organizar las partes; reconocer significados ocultos; identificar componentes.

Compara y discriminar entre ideas; dar valor a la presentación de teorías; escoger basándose en argumentos razonados; verificar el valor de las ideas y

Utilizar ideas viejas para crear otras nuevas; generalizar a partir de datos suministrados; relacionar conocimiento de áreas

Page 12: Diseño Axial de una prueba objetiva

http://investigando.org/educandos

EL PORTAL DE LA EDUCACIÓN PERUANA

materia. ordenar; agrupar; inferir las causas predecir las consecuencias.

problemas usando habilidades o conocimientos

teorías planteadas. diversas; predecir conclusiones diversas.

BIBLIOGRAFÍA

1. Bloom Benjamin. Taxonomía de los objetos de la Educación”. La clasificación de las

metas educacionales . Editorial: El Ateneo “Argentina Buenos Aires” – 1971 (364pg).

2. Bloom BS. Hastings, J.TH y Madaus GF “Evalauación de aprendizaje”

Editorial: Troquel – Argentina BSAS – 1976 3. Damián Casas, Luís. “Evaluación de Capacidades y Valores. En la Sociedad del

Conocimiento” Editorial: Norma, Lima Perú – 2007 (232pg)

4. Gonzáles Flores, Wilfredo. Separata “Hacia una Evaluación Integral de los Aprendizajes” – Lima Perú – 2007 (26pg)

5. Gronlund Norman, E. “Elaboración de Test de Aprovechamiento”

Editorial: Trillas – México – 2001 (155pg)

6. MINISTERIO DE EDUCACIÓN. “Guía de Evaluación del Aprendizaje” Editorial: Corporación Gráfica Navarrete S.A – Lima Perú – 2007 (95pg)

7. Raez Boderos, Saraluz “Tecnología Educativa II – Evaluación”

Editorial: Ministerio de Educación – INIDE (Instituto Nacional de Investigación y Desarrollo de la Educación) – Augusto Salazar Bondy – Lima Perú – 1980 (238pg)

8. Vila Guerra César. “Orientaciones Básicas de Tecnología Educativa” impreso 3era Dirección Regional de Educación – Huancayo Perú – marzo 1981 (102pg).