1

THE WORLD BANK

701 13th St NW, Washington, DC, 20005, USA

Teléf 202-974-7819

e-mail lcrouch@rti.org

Rendición de Cuentas:Herramientas prácticas a nivel escolar

(Desde y hacia las escuelas!)

Presentado porLuis Crouch

RTI International

2

THE WORLD BANK

Esquema de la presentación

Rendición de cuentas:

1. ¿Por qué necesitamos herramientas prácticas?

2. Ejemplos de algunas herramientas

De resultados (lectura inicial)

De proceso

3

THE WORLD BANK

Para ver el “por qué”, veamos como andan la cosas al momento…10-15 datos “estilizados” de varios países… no basado en un solo país, y mayormente según

mi memoria...

Nos ayudan a pre-figurar típicos indicadores de un sistema de rendición de cuentas… y como usarlo y como no usarlo

Veamos algunos datos salteados…

1. 85% de los padres están contentos con la educación, aún cuando sabemos que los logros son bajos… Mientras más pobres y menos educados, más contentos Solo 10% a 25% correlación entre indicadores objetivos y felicidad de los padres

2. 56% de rectores dicen haber recibido entrenamiento en gestión Pero solamente 28% pueden decir para que lo usan

3. Solamente un 13% de los maestros dicen haber recibido ayuda pedagógica en base a algo que ellos habían reportado como problemático. Dicen que sí hay mucha capacitación, pero genérica y en cascada. (Rendición cuentas hacia la escuela.)

4

THE WORLD BANK

4. El 81% de los rectores dicen la formación de los maestros es casi inútil—llegan sin saber manejar un aula, sin saber programar un año lectivo

5. Solamente el 44% de los directores de escuela tienen metas de aprendizaje claras, escritas, difundidas para sus escuelas

6. Solamente un 11% de los maestros confía del rector como fuente de consejo o liderato pedagógico

7. El 95% de las escuelas tienen PEI (Plan Educ Instit.) (éxito!)… Pero, los maestros dicen que el seguimiento al PEI es “puro ritual” Anécdota: “Mire, Luis, los PEI se compran y venden.”

8. Se imparten en promedio 15 horas de instrucción a la semana De eso, un máximo de 15% se puede clasificar como aprendizaje activo, niño-

céntrico, de alto valor pedagógico—el resto es frontal, conferencial. O sea, tal vez 2.5 horas por semana de aprendizaje “real.”

9. Solamente un 68% de las escuelas tienen información actualizada y pública sobre las políticas más importantes. Y solamente un 12% tiene información pública que se origina en los estudiantes mismos.

5

THE WORLD BANK

10. A mitad del año, 36% de los alumnos habían escrito solamente unas 3-4 páginas de ejercicios, y casi 0% habían hecho alguna composición creativa (originada por ellos mismos).

11. El estudiante Latino mediano logra menos que el 95% de los estudiantes de la OCDE.

12. Los maestros sí ponen metas (más del 94% lo hace), pero… Solamente un 28% podía explicar como La correlación entre el estimado de los maestros de si los chicos van a lograr

sus metas y el logro objetivo de los chicos es de solamente 26%. Solamente el 41% de los maestros consultan los documentos curriculares

para poner metas El 95% de los rectores y 80% de los maestros consideran los documentos

curriculares demasiado difíciles de aplicar.

13. Todos los niños tienen sus libros pero… En un año lectivo de 36 semanas, los libros llegan 8 semanas después del

comienzo del año. Se pierde ¼ del año sin libros.

6

THE WORLD BANK

(Paréntesis…

¿Deprimidos?

Adivinanza: ¿Que estamos haciendo bien???)

7

THE WORLD BANK

(Paréntesis…

¿Deprimidos?

Adivinanza: ¿Que estamos haciendo bien???)

(Respuesta: mejoría en 35% en igualdad de grados cursados en los últimos 30 años.)

Es un gran logro, pero todavía hay mucha desigualdad en la calidad lograda, y es bajísima en promedio.

8

THE WORLD BANK

Así pues, el “para que” de la rendición de cuentas se puede explicar sencillamente:

Con estos datos, ni con nada cercano a esto, vamos a mejorar mucho.

Hay que revertir fuertemente estos tipos de situaciones.

Para revertir hay que medir y reportar.

O sea, rendir cuentas, presentar información, con transparencia…

Para mejorar la calidad

Así de sencillo? Bueno… casi…

9

THE WORLD BANK

¿Como estamos seguros de la importancia de la gestión con rendición de cuentas?

Los estudios muestran que en general hay tres factores clave para la calidad:

1. Los recursos: contribuyen un 30% (aprox!!)

2. El entorno socio-econ: contribuye un 30% (aprox!!)

3. La gestión, liderato, gobernabilidad y pedagogía: contribuyen un 40% (aprox!!) Dentro de la gestión y gobernabilidad, los componentes

clave son:1. Estándares, metas, consenso, curriculum

2. Rendición de cuentas en torno a éstos

3. Apoyo masivo para el logro de éstos, sobre todo en la gestión y capacidad pedagógicas (sobre todo capacitación profesional en servicio)

10

THE WORLD BANK

150

170

190

210

230

250

270

290

310

330

350

0 10 20 30 40 50 60 70 80 90 100

Índice de Vulnerabilidad Escolar

SIM

CE

Mat

emát

icas

Ef icaces yno vulnerables

Eficaces yvulnerables

No eficaces yno vulnerables

No eficaces yvulnerables

VULNERABILIDAD ESCOLAR Y RENDIMIENTO EN PRUEBA SIMCE 2005

Fuente: Informe UAI, 2006, Sección 1.7.7.Cortesía José Weinstien

11

THE WORLD BANK

Conclusiones sobre “para que”:

La mayor variabilidad de resultados entre los pobres (y no solamente el hecho que los resultados sean más bajos) sugiere que…

La falta de estándares y rendición de cuentas perjudica más a los más vulnerables…

Los más ricos logran un servicio más predecible en varias formas, aún si no hay un sistema estatal de estándares y rendición de cuentas…

12

THE WORLD BANK

Esquema de la presentación

Rendición de cuentas:

1. ¿Por qué necesitamos herramientas prácticas?

2. Ejemplos de algunas herramientas

De resultados (lectura inicial)

De proceso

13

THE WORLD BANK

Algunas sugerencias sobre rendición de cuentas…

1. De arriba hacia abajo y de abajo hacia arriba…!

No solamente desde las escuelas sino tambien hacia las escuelas: Contrato mutuo!

Que piensan los directores del producto de las normales?

Que piensan los maestros de la capacitación que ofrece el estado, las ONGs?

Que piensan los padres de los servicios de las escuelas?

Y, desde luego: desde las escuelas hacia el Estado y los padres: ¿que tal salimos en las pruebas?

14

THE WORLD BANK

Algunas sugerencias sobre rendición de cuentas…

2. ¿Teoría o práctica?

Ambos, pero hemos menospreciado la práctica

Aprender de las escuelas mismas y sobre todos los sub-sistemas

Ventaja de los sistemas estables y que han experimentado y documentado: usan sistemas de control oriundos, empíricos, refinados a través del tiempo, no importados ni basados solamente en un comité de sabios: Cuba? Fe y Alegría? (Ver aspectos sistémicos, no

solamente a nivel de escuela.)

15

THE WORLD BANK

Algunas sugerencias sobre rendición de cuentas…

3. Cuidado con la tendencia a lo puramente ritualístico

Los sistemas que tratan de hacerlo “a lo barato” caen en el puro ritual: inútil

4. Escarbar:

Las escuelas tienen PEI, pero…

Los niños tienen libros, pero…

Los rectores dicen que fueron entrenados, pero…

5. Potenciar el uso de muestras pequeñas (no se usa en educación, se usa en salud, industria), es muy útil…!!!

16

THE WORLD BANK

El más sencillo que he visto en mi vida, ¡pero relativamente efectivo! (No hay que ser complicado para ser efectivo.)

Es de un país mucho más pobre que Colombia, pero funciona…

17

THE WORLD BANK

Para que entiendan lo que digo con decir “pobre”, esta es un aula no a-típica…

18

THE WORLD BANK

19

THE WORLD BANK

20

THE WORLD BANK

21

THE WORLD BANK

Cobertura, eficiencia, y calidad!!

En 2 pizarras!!

Con un ingreso per cápita de 1/5 del de Hondras

22

THE WORLD BANK

Incluso hay instrumentos de monitoreo por padres para situaciones casi analfabetas… Uno de Pakistán me gustó mucho…

AKF Participatory Teacher Evaliuation.doc

23

THE WORLD BANK

Un ejemplo interesante porque tiende a decirle al ciudadano donde está la “falla” : niño o aula, escuela, o distrito…

24

THE WORLD BANK

AlumnoEscuelaDistritoProvincia

25

THE WORLD BANK

Esquema de la presentación

Rendición de cuentas:

1. ¿Por qué necesitamos herramientas prácticas?

2. Ejemplos de algunas herramientas

De resultados (lectura inicial)

De proceso

26

THE WORLD BANK

Algunos ejemplos más detallados

En general son 2 las cosas que hay que ver

Algo de rendición de cuentas en cuanto a resultados

Algo de rendición de cuentas en cuanto a procesos

Hagamos hincapié sobre 2 casos un poco más detallados…

1. Prueba de lectural oral: resultados

2. Instantánea de calidad escolar: procesos

27

THE WORLD BANK

Caso 1: Lectura Inicial

28

THE WORLD BANK

¿Enfocar esfuerzos en Lectura Inicial permite mejorar calidad?

Lectura + Inicial =

■ Intervenir temprano,

■ Intervenir en mejorar la lectura,

■ Evaluar/Diagnosticar Oralmente

Trataremos de defender estas conclusiones

29

THE WORLD BANK

¿Por qué Inicial?

■ Podemos citar abundante y sólidos estudios sobre los beneficios de la intervención temprana

■ Pero nos enfocaremos en algunos aspectos claves

30

THE WORLD BANK

“Porque a cualquiera que tiene, se le dará más, y tendrá en abundancia; pero a cualquiera que no tiene, aún lo que tiene se le quitará”

Efecto San Mateo (13:12)?

¿Por qué Inicial? Efecto San Mateo

31

THE WORLD BANK

Grado en años y meses (1.6 es 6 meses en Grado 1)

6

¿Por qué inicial? Efecto San Mateo en Lectura

Datos de los EEUU

Niños debajo de un cierto nivel al final de primer grado permanecen rezagados (si no hay intervención) y la brecha se abre mas

Y, si no pueden leer, se atrasan en sus otros estudios

Brecha Socioeconómica se amplifica

Pal

abra

s P

or

Min

uto

Good, Simmons, Smith (1998)

32

THE WORLD BANK

Trayectoria de Lectores con Rendimiento Bajo y Medio

RTI confidential

Good, Simmons, & Smith, 1998

¿Por qué inicial? Efecto San Mateo en LecturaP

alab

ras

por

Min

uto

33

THE WORLD BANK

¿Por qué inicial?

■ El problema, si no se resuelve, no sólo aumenta con el tiempo sino que . . .

■ De acuerdo con varios expertos, para arreglar el problema : en 1r grado demora 30 minutos en 5to grado demora 2 horas

■ Enseñar lo básico (y bien) es clave, pero se torna más difícil más tarde

34

THE WORLD BANK

¿Por qué la lectura?

■ No es lo único que importa, obviamente

■ Pero es un paso fundamental para un buen comienzo

Es una habilidad básica -

Es difícil imaginar el aprendizaje sin que los niños pueden leer bien y pronto

Puede ser un indicador -

Es difícil imaginar una escuela buena que no puede enseñar a los niños leer; si los niños de una escuela no leen, esa escuela necesita ayuda urgente

35

THE WORLD BANK

¿Por qué la lectura oral (en los grados iniciales)?

1. Es el mejor predictor temprano del éxito escolar

2. Las pruebas tradicionales tienden a dejar a muchos niños abajo del piso (0) y no indican porque están con problemas (ni como resolverlos)

3. Hay elementos sobre lectura oral incluidos en el currículo de algunos países, pero frecuentemente el currículo no tiene orientaciones específicas para los docentes sobre como enseñar y evaluar la lectura inicial

4. Estudios de los procesos cognitivos sobre la adquisición de lectura nos indica que la fluidez depende de automaticidad y que influye mucho a la comprensión

36

THE WORLD BANK

Poder de predicción de lectura oral: unos pocos ejempos ■ Wilson (2005): 0.74 correlation between oral reading measures and broader cognitive

achievement in Arizona■ Fuchs, Fuchs, Hosp, and Jenkins (2001) survey and explain the rather high correlations between

oral reading fluency and a large variety of other tests.■ Vander Meer, Lentz, and Stevens (2005): 96% of children judged to be at risk using oral reading

turned out to be “non proficient” in the Ohio’s more comprehensive test, while of those classified as “low risk” using oral reading fluency, 72% were classified as proficient using a more comprehensive test.

■ Shaw and Shaw (2002): find similar results for the relationship between simple measures of oral fluency and deeper state-wide measures of reading in Colorado

■ Fuchs, Fuchs, and Maxwell (1988): correlation of 0.91 between oral reading fluency and other comprehensive tests

■ Juel (1988) : “The probability of remaining a poor reader at the end of fourth grade, given a child was a poor reader at the end of first grade, was .88 .... the probability of remaining an average reader in fourth grade, given an average reading ability in first grade, was .87.”

■ Schilling, Carlisle, Scott, and Feng (2007): 80% of at-risk with ORF turned out to be in bottom quartile with Michigan’s own reading test at EOG

■ Wood (2006) finds significant correlations between oral reading fluency and later curriculum-based tests, and finds that oral reading fluency adds explanatory value even when other factors are considered.

■ Some of these recommend adding comprehension and vocabulary (EGRA does comprehension , not vocabulary), but ORF by itself does a pretty good job

37

THE WORLD BANK

Pruebas tradicionales no nos dicen mucho sobre las habilidades más iniciales. Este es el nivel más fácil de una prueba tradiciona. Si el niño no sale bien, ¿porqué? No se sabe.

38

THE WORLD BANK

Componente Capacidad Lectora Inicial

Habilidad demostrada por el niño:

1. Orientación a la lectura

Orientación a la letra impresa

Indicar donde comenzar a leer Indicar dirección dentro de una

línea Indicar dirección dentro de una

pagina

2. Identificación de letras

Reconocimiento de Letras

Identificar nombre de letras mayúsculas y minúsculas distribuidas de una forma aleatoria

3. Segmentación de Fonemas

Consciencia Fonológica

Segmentar palabras comunes de 2 a 5 fonemas

4. Lectura de palabras familiares

Lectura de Palabras

Leer palabras simples de 1 y 2 silabas

Componentes de EGRA y Capacidades Evaluadas

39

THE WORLD BANK

Componente Capacidad Lectora Inicial

Habilidad demostrada por el niño:

5. Decodificación de palabras no familiares

Principio Alfabético

Hacer correspondencias grafemas-fonemas

6. Lectura de párrafo y comprensión

Fluidez de Lectura Oral

Leer texto con automaticidad y fluidez a suficiente ritmo

Comprensión lectora

Responder correctamente a preguntas diferentes (literal con opción, literal e inferencia) sobre el texto que el estudiante ha leído

7. Comprensión oral

Comprensión oral Responder correctamente a preguntas diferentes (literal con opción, literal e inferencia) sobre el texto que el encuestador ha leído

8. Dictado Principio Alfabético

Escribir, deletrear y usar gramática correctamente

40

THE WORLD BANK

Prueba oral es útil porque:

Enfoca las primeras habilidades: evita el efecto San Mateo

Predice la trayectoria futura del chico

Es simple y entendida por cualquiera pero tiene amplia base científica

Verán que en la hoja del encuestador hay algunas preguntas sobre contexto y proceso

prueba oral, hoja del chico

prueba oral, hoja encuestador

41

THE WORLD BANK

Algunas precisiones más sobre la importancia de la fluidez oral

¿Porque es importante la fluidez para la comprensión y para el goce de la lectura?

La mente humana comprende si puede eslabonar las ideas

La mente (simplificando) tiene 2 grandes divisiones Memoria de largo plazo: es casi infinita Memoria de corto plazo solamente dura como 12 segundos y agarra

7 cosas Si la memoria de corto plazo no “eslabona” las cosas, no las

comprendemos, no las podemos almacenar, no las podemos relacionar con otras cosas, y no se goza ni es util la lectura

Pero es la memoria de corto plazo que “eslabona” Para eslabonar es necesario leer suficientement fluido Si nos olvidamos del comienzo de la oración cuando llegamos al final,

no podemos entender nada, ni gozar Luego: la fluidez es vital

42

THE WORLD BANK

Como 7 objetos verbales o númeroso 4 gráficos

Dura unos 12 segundos como máximo, luego es un cuello de botellamuy estrecho

Memoria de largo plazo: muy grande

Memoria de corto plazo: muy pequeñaSi no se eslabona rápido, no entra por el cuello de botella; la mente tiene que “crear compresión” bien rápido

43

THE WORLD BANK

Conclusión sobre lectural oral y fluidez La fluidez en lectura oral en grados iniciales

Es un buen “marcardor” de calidad

Sirve para rendir cuentas porque:

Es sencillo

Pero responde a amplia base científica

Si una escuela no enseña a leer bien en los grados iniciales es poco probable que las otras cosas vayan bien!!

Ojo: no es lo único que importa!!

Pero permite explicar y producir goles

Permite ver que se puede lograr con “gerencia pedagógica por resultados” en una forma bien visible y sencilla

44

THE WORLD BANK

Esquema de la presentación

Rendición de cuentas:

1. ¿Por qué necesitamos herramientas prácticas?

2. Ejemplos de algunas herramientas

De resultados (lectura inicial)

De proceso

45

THE WORLD BANK

SSME – Snapshot of School Management EffectivenessSSME – Snapshot of School Management EffectivenessIEGE – Instántanea de Efectividad de Gestión EscolarIEGE – Instántanea de Efectividad de Gestión Escolar

Hemos creado la “Instantánea de Efectividad de Gestión Escolar”

La idea es que 20 personas puedan visitar 20 escuelas, digamos, 1 día cada una, y obtener una “instántanea” de cómo van las escuelas…

Various instrumentos, orientados a producir un informe por escuela y uno agregado

directores.xls docentes.xls educandos.xls padres.xls aulas.xls centro escolar.xlshoja lectura.doc

46

THE WORLD BANK

Estos instrumentos pueden llegar a ser bastante sofisticados…

Está demostrado que el uso del tiempo es uno de los factores más importantes para entender la calidad…

En muchos países hay 2-3 horas efectivas de clase al día, y de estas tal vez un 20% se usan en actividades de alto rendimiento

Luego, hay instrumentos de todo tipo para evaluar la calidad del uso del tiempo por los maestros

Ya vieron uno, otro (tal vez el más famoso, por lo menos en EEUU) es el de Stallings

stallings snapshot.doc