Evaluación de Efectividad
description
Transcript of Evaluación de Efectividad
Promoción de la Salud
Ligia de Salazar Ph.D
I Seminario Brasilero de Efectividad en Promoción de la Salud
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
CríticosCríticosAspectos
• Intervención• Pregunta - alcance
evaluación• Diseño de la Evaluación• Métodos- Calidad de la
evidencia• Uso de resultados• Capacidad local
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
. IntervenciónIntervención• Intencionalidad -marco
lógico• Puerta de entrada • Implementación• Duración• Contexto- momento y
dependencia política• Lógica de planificación
sectorial
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
Salud Pública, Atención Primaria, Promoción de la Salud, más que
denominaciones teóricas son posiciones políticas sobre la
salud, expresadas en las estrategias y programas
gubernamentales y sociales.
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
. Puerta de entrada Puerta de entrada
SIMILITUDES- DIFERENCIAS- CONDICIONES DE VIABILIDADIMPLICACIONES EN LA EVALUACION
SALUD PUBLICAPROMOCION DE LA SALUDATENCION PRIMARIA
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
• ¿Para qué evaluamos?
• ¿Qué haremos con la información?
• ¿Cuándo la evidencia es suficiente para tomadores de decisión? QUIENES?
PreguntasPreguntas
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
• EQUIDAD
• ESTADO DE SALUD
• CONDICIONES ECONÓMICAS
• EMPLEO
• VIVIENDA
• PARTICIPACIÓN
• COHESIÓN SOCIAL
• RELACIONES DE PODER
• SOPORTE SOCIAL
• OPINIÓN PUBLICA
COMPRENDER
SISTEMATIZAR
RESULTADOSSalud y
determinantes
PROCESOconstrucción de
capacidad
Que Evaluar?
Que Evaluar?
CAUSALIDAD
EFECTIVIDAD
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
• Decidir extender, ampliar o suspender una intervención
• Justificar una inversión o rendir cuentas
• Demostrar el éxito y abogar ante decisores
• Determinar efectividad y avalar o no una nueva inversión
Institución o grupo institucional
Agencias financiadoras
Equipos de gestiónInvestigadores
Beneficiarios finales
Posibles Intereses en la
EvaluaciónEvaluación
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
Definir Tipo y Alcance de la
Evaluación
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
. ALCANCE DE LA
EVALUACIóN
HERRAMIENTA TECNICA CON FINES POLITICOS Y SOCIALES
INFLUYE ESTA DEFINICIóN EN EL DISENO DE LA EVALUACIóN?
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
. NECESIDADES QUALIFICAR INTERVENCIONES:
DOCUMENTACION & SISTEMATIZACIóN DE EXPERIENCIAS
IDENTIFICAR QUE FUNCIONA ? EFECTIVIDAD
IDENTIFICAR CONDICIONES DE EXITO: ANALISIS CONTEXTUAL
OPTIMIZAR RESULTADOS EN SALUD BAJO RESTRICCIONES DE RECURSOS? ANALISIS
ECONóMICO
Cuadro comparativo sobre tipos de evaluación
Tipo de Evaluación
Que tipo información genera
Usuarios de la
información
Utilidad de la evaluación
PROCESO
SISTEMATIZACIÓN
Cambios en la concepción e implementación de la intervención
Razones del cambio entre lo qué se propuso hacer y lo qué logra
Factores intervinientes: fortalezas y limitantes
Significado concepción y resultados de intervención para participantes
Ejecutores y beneficiarios del programa Personas involucradas directamente en la implementación
Reorientar el programa en curso y recabar lecciones para aprender de la experiencia
Ayuda a crear sentido de pertenencia y a fortalecer y cualificar la participación en las decisiones
.
Tipo de Evaluación
Que tipo información genera
Usuarios de la
información
Utilidad de la evaluación
EFECTIVIDAD
Asociación entre los resultados-efectos
Condiciones del contexto social, político y cultural asociadas con el éxito o fracaso de la intervención evaluada
Tomadores de decisión
Teóricos de la Promoción de la Salud
Información para decidir continuar, extender o suspender un programa
Reconocer condiciones necesarias para aumentar probabilidades de éxito
Pruebar y generar hipótesis para fortalecer la teoría en PS
Cuadro comparativo sobre tipos de evaluación
.
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
Aspectos Críticos
Métodos
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
• ¿La intervención responde a valores y principios PS? : empoderamiento, capacidad, respeto, participación, equidad, estado de salud?
• ¿Es representativa la muestra?; ¿son los datos válidos y confiables?, ¿existen amenazas que afecten la validez?
Calidad de la
EvidenciaEvidencia
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
Uso de Resultados
RacionalidadRacionalidadToma de
decisiones
¡Estoy ¡Estoy decidido:decidido:
No me confundan
con los hechos!!!!
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
Fuente: People in Economics, 2004. Freedon as Progress. Laura Wallace interviews, Amartya Sen
¿Cómo las preferencias de la sociedad pueden ser derivadas de las
preferencias de sus miembros?
Cuando las opiniones difieren, el problema es
encontrar métodos que junten las diferentes
opiniones en las decisiones que afectan a todos
Amartya Sen 1998Selección SocialSelección Social
Teoría de
Evalu
aci
ón y
Evid
enci
as
en S
alu
d P
úb
lica -
Lig
ia d
e S
ala
zar,
PhD
.
en el proceso de toma de decisión
• Certezas basadas en asociaciones
• Ignorar algo es igual a mas investigacion
• Realidad construida desde su racionalidad
• Estimaciones mas que certezas
• Uso de informacion incompleta
• Interesa el contexto • Decisiones con base en
aspectos no tecnicos• Realidad construida
desde la gente
Racionalidad Técnica Racionalidad Política
Racionalidades
Racionalidades
Comparación de
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Qué enfrentamos
al Evaluar
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
•¿Alcance de las intervenciones en Promoción de la Salud en la región?
•¿Qué evaluamos en Promoción de la Salud?
EfectividadEfectividadEstado del Arte de
Evidencias de
en América Latina
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
• Determinantes sociales no incluidos
• Pocas evaluaciones de calidad• Discrepancias frente a
efectividad y criterios para sintetizar evidencias
• Métodos no coherentes con pregunta
• Restricciones para atribuir efectos
• Evaluar lo que no se ha implementado
Búsqueda de Evidencias de
EfectividadEfectividad
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Distribución general de las temáticas de evaluación en
Promoción de la Salud
Fuente: UIPES, Estado del Arte de Evidencias de Efectividad en América Latina
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
DECISIONES
DEBEMOS BASAR LA PRACTICA EN PS SOLO EN RECOMENDACIONES PRODUCTO DE EVIDENCIAS PRODUCIDAS EXTERNAMENTE ?
O DEBEMOS CREAR CAPACIDAD PARA
DESARROLLAR Y HACER USO APROPIADO DE EVIDENCIAS?
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Nuevas preguntas, enfoques, modelos,
métodos, criterios de evidencia, usuarios
Fuente: Rychetnik Lucie, Hawe penélope, Waters Elizabeth, Barrat Alexandra, 2004-A Glossary for Evidence based Public Health. Journal Epidemiol Community Health 2004; 58:538-545. 10.1136/ jech. 2003.011585
Relación Proceso y Resultados?- ¿Qué funciona?
- ¿Es repetible?
EvidenciaEvidenciaOtras Fuentes de
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Propuesta
• Uso de información disponible• Claridad en uso de información• Documentación- Sistematización• Sucesivas aproximaciones• Sistemas de vigilancia• Análisis integral: cuali-cuanti• Estudios ecológicos• Analisis multinivel
MétodosMétodos
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Línea de base
Con Intervención
Sin Intervención
Documentación y Sistematizaciónde la intervención
Encuestas Grupos Poblacionales
Intervenido
Grupo Control
¿Qué?
¿Cuántos?
¿Por qué?¿Cuándo? ¿Cómo?
Estudio Ecológico y Sistemas Vigilancia
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Transformación de sitio web
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
A portal interactivo
Portal interactivo
CarteleraCalendariode eventos
Motor de Búsqueda
Interno
Área de contenidos: Experiencias, entrevistas, documentos
“Promoción de la Salud en Foco” Encuesta OnLine
Zona de usuarios
-Registro-
Interacciones on-line
miembros de la Red: Foro
virtual, Chat de la Promoción de
la Salud
Información permanente:
•Proyecto•Aliados
•Boletines•Biblioteca
•Sitios de interés
•Contáctenos
Tomando el pulso:
85% de acuerdo10% de acuerdo
5% No sabe/no está seguro
Encuesta la promoción de la salud en foco
Registro de usuarios
Ingreso mediante identificación, con login y contraseña:
• Alimenta directorio de contactos (páginas amarillas)
• Facilita control de ingresos y visitas
• Promueve participación con identidad
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Concurso de fotografía de experiencias y proyectos en PS en
la Región
• Documentar y sistematizar visualmente las experiencias de PS
• Mostrar los hechos de la PS en la Región
• Innovar en medios de presentar resultados
• Publicación de fotos en web y revista UIPES
• Membresía a UIPES
• Suscripción a revista UIPES
América LatinaAmérica LatinaCuál es la imagen de la Promoción de la
Salud en
Ayúdenos a revelarla
Premios a las
mejores imágenes
Evid
enci
as
de E
fect
ivid
ad
en P
rom
oci
ón d
e la S
alu
d
Red Latinoamericana de Efectividad
Contactos por país 396 activos
Red Latinoamericana de Efectividad
Contactos por país 396 activos
Argentina 43Colombia 41Brasil 38México 32Puerto Rico 30Chile 29Perú 22Cuba 17Uruguay 14Costa Rica 14Venezuela 13Guatemala 12Bolívia 10Ecuador 9Panamá 8República Dominicana 8 Paraguay 7Salvador 7Honduras 7Nicaragua 5Haití y Bahamas 2Trinidad 2Guyana 1Otros 25