5 de març de 2010
Luis Rajmil
Elaboració i adaptació de qüestionaris
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Universitat Autònoma de Barcelona
Les enquestes de salut
Guió de la sessió
Elaboració i adaptació de qüestionaris
Adaptació transcultural de qüestionaris
Formulació de preguntes i codificació de respostes
Variables de l’estudi / escales de mesura
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Propietats psicomètriques dels instruments de mesura
Paradigma de qüestionari de recollida de dades
L’enquesta de salut és un instrument que aporta informació rellevant per al disseny i revisió de les polítiques sanitàries
Recull informació sistemàtica (individual i/o familiar) sobre factors que influencien la salut i que solament es poden recollir a partir dels propis individus.
Font: Enquesta de Salut de Catalunya
Enquestes de salut
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Enquestes de salut per entrevista
Estats Units 1957 anual
Alemanya 1957 anual
França 1960 cada 10 anys
Regne Unit 1971 anual
Canadà 1978 esporàdica
Espanya 1987 esporàdica/bianual
País Any d’inici Periodicitat
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Enquestes de salut més rellevants en la població general espanyola
Enquesta nacional de salut (ENSE) 1987/1993/1995/1997/1999/2001/2003/ 2006
Enquesta Any
Enquesta de salut de la Comunitat1987/1992/1997/2002/2007 Autònoma Basca (ESCAV) Enquesta de salut de Navarra 1990-91/ 2000
Enquesta de salut de la Comunitat Valenciana 1990-91/ 2004-5
Enquesta de salut de Andalusia 1999/2003/ 2005
Enquesta de salut de Barcelona 1983/1986/1992/2000/2006 (ESB)
Enquesta de salut de Catalunya 1994/2002/2005-6 (ESCA) http://www.gencat.net/salut/depsan/units/sanitat/html/ca/plasalut/doc5365.html
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Elaboració del full de recollida de dades
Revisió de la literatura Opinió de experts Grups focals
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Variables principals de l’estudiDependents o de resultatIndependents o explicatives
Classificació de les variables
Altres variablesDe confusió Modificadores d’efecte
Variables universals
Variables complementàries
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Variables en escala:
Nominal
Ordinal
Interval
Proporció/ raó
Escales de mesura
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Definició de la pregunta
Ingressos hospitalaris els darrers 12 mesos
Definició conceptual
Ha ingressat alguna vegada a l’hospital durant els darrers 12 mesos? (Inclou les estades a urgències durant més de 6 hores, que incloguin com a mínim un menjar i/o una nit. Exclou ingressos dels nounats p el part)
Definició operativa
Nominal: No= 1/ Sí= 2
Ordinal No= 1/ 1 vegada=2 / 2-4 vegades=3/ 4 vegades o més=4
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Interval/raóNúm. de dies d’ingrés hospitalari- - - - - - - - -
Quants dies ha estat ingressat a l’hospital durant els darrers 12 mesos?
Alimentació. Lactància materna.Preguntes només si el/la nen/a té menys de 5 anys41.- Ha rebut el/la nen/a lactància materna durant els primers mesos de la seva vida?SÍ ________________ 1NO _______________ 2
Alimentació. Lactància materna.Preguntes només si el/la nen/a té menys de 5 anys41.- Ha rebut el/la nen/a lactància materna (LM) durant els primers mesos de la seva vida?No ha rebut lactància materna_______________ 1Ha rebut LM menys de 1 mes ________________ 2Ha rebut LM de 1 mes a menys de 3 mesos______ 3Ha rebut LM de 3 mesos a menys de 6 mesos____ 4Ha rebut LM 6 mesos o més _________________ 5
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Definició operativa
Alimentació. Lactància materna.Preguntes només si el/la nen/a té menys de 5 anys
41a.- Durant quant temps ha rebut el/la nen/a lactància materna? (Entrevistador/a: En el cas de lactants, és a dir, nens/as als quals actualment se’ls està donant el pit, indiqueu la seva edat actual en mesos i dies).Mesos _____________________________________________ |__|__|Dies_______________________________________________ |__|__|
42.- Ha rebut el/la nen/a durant algun temps llet materna com únic aliment i beguda? (Exclou aigua, sucs, llets artificials i qualsevol aliment. Només inclou vitamines, minerals i medicaments)SÍ________________________________________________ 1No________________________________________________ 2
42a.- Durant quant temps ha rebut el/la nen/a lactància materna exclusivament? (Entrevistador/a: En el cas de lactants als quals únicament se’ls està donant el pit, indiqueu la seva edat actual en mesos i dies).Mesos _____________________________________________ |__|__|Dies_______________________________________________ |__|__|
43.- Ha rebut el/la nen/a durant algun temps lactància artificial?SÍ_________________________________________________ 1NO________________________________________________ 2
Elaboració de les preguntes
Elaboració de les preguntes Claredat Balanç Extensió
Tipus de preguntes segons les categories de resposta
Obertes Tancades Semiobertes
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
En què va consistir la darrera visita mèdica?
En què va consistir la darrera visita mèdica?
Només diagnòstic i/o tractament. 1Només receptes. 2Les dos raons anteriors 3Examen preventiu 4Només tràmit administratiu 5
Altres 6ESPECIFICAR--------------------------
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Elaboració de les preguntes
Biaixos segons el tema abordat
No compromesa (biaix de memòria)
Compromesa (confidencialitat)
Coneixements (endevinar)
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Elaboració de les preguntes
Seccions d’un qüestionari
Identificació
‘Cos’ del qüestionariVariables d’interès
Secció sociodemogràfica
Variables de control del treball de camp
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Ordre de les preguntes
Format del qüestionari
Instruccions
Elaboració del qüestionari
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
El pressupost en sanitat en Espanyaaugmentarà fins al 10% del PIB i es destinarà un major percentatge a trasplants
Totalment d’acord….………….…………….......... D’acord.…………….…………….......………….………… No és segur ……….......……….……………….………
En desacord…......
……………………………………….. Totalment en desacord…….....……….…....
…….
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Quant temps fa que està a l’atur ininterrompudament?
6 mesos o menys…… ……1 De 6 a 12 mesos… ……2 De 12 mesos a 2 anys… …3 De 2 a 4 anys…… ……4 Més de 4 anys…….. …5 No ha treballat mai … …6
6 mesos o menys…… ……1 De més de 6 mesos a 12 mesos… ……2 De més de 12 mesos a 2 anys… …3 De més de 2 a 4 anys…… ……4 Més de 4 anys…….. …5 No ha treballat mai… …6
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Quan sol·licita assistència, normalment se li dona una cita pel dia que vostè la demana
Molt d’acord ………1
D’acord ………2
No ho sap ………3 En desacord ………4
Molt en desacord ………5
Molt d’acord ………1 D’acord ………2 No està segur/ a ………3 En desacord ………4 Molt en desacord ………5
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Escales multidimensionals
Recullen conceptes de salut complexos
Variables “latents” (no observables directament)
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Característiques de les mesures de salut percebuda
Generades avaluar els resultats d’intervencions
sanitàries Recullen el punt de vista de l’individu Son multidimensionals La majoria desenvolupades als païssos
anglosaxons Es classifiquen en:
Genèriques
Específiques
Adaptació de qüestionaris de salut
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Desenvolupament transcultural d’instruments de QVRS i/o Patient Reported Outcomes, PRO
Sequencial
Adaptació d’un instrument existent (SF-36)Paral.lel
Reunió d’escalas existents en diferents cultures (EORTC QLQ30)
Simultani
Desenvolupament real trans-cultural (WHOQOL, KIDSCREEN,...)
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Conceptual / semàntica / operativa-funcional?
(versión española)………¿Ha sido capaz de disfrutar de sus actividades de cada día?
Escala de Hamilton(original)…….. I feel blue
(versió espanyola …)……. Me siento azul
General Health Questionnaire (GHQ de Goldberg)
Les darreres setmanes………..
(original)… Been able to enjoy your day-to-day activities?
Quin tipus d’equivalència?
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Adaptació transcultural d’escales de salut percebuda (sequencial)
Replicar el procés de creació de la mesura Procés de traducció directa-inversa (exemple: CHIP-AE)
Fase 1Traducció (forward translation)
Primera versió consensuada
Grups de discussió Segona versió consensuada
Panel d’experts Tercera versió consensuada
Traducció inversa (backward translation) Versió final pre-test
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Classificació de ítems segons el nivell de equivalència i dificultat en la traducció
A) Equivalència acceptableB) Problemes amb alguna paraula o necessitat d’adaptació al context culturalC) Ítems sense equivalència cultural
Have o lot of good qualities
I am well coordinated
Is there a working smoke detector or smoke alarm in your home?
Tinc moltes qualitats positives A
Coordino be els meus moviments B
----- C
Versió original i adaptació espanyola del CHIP-AE
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Desenvolupament simultani
Pool d’ítems desenvolupats a cada context
Acceptabilitat, rellevància i equivalència semàntica i de continguts en cada pais
Elecció d’ítems comparables en tots els païssos
Afegir ítems específics de cada pais.
EO Have you let others know how you were feeling?BT NL Have you told others how you felt?BT D Did you show your feelings to others?BT ES Have you expressed how you feel to others?BT F Have you spoken to others about what you feel?BTHarmo-nisation
kind of expression vague, test in cognitive debriefing
Procés d’harmonització del qüestionari europeu KIDSCREEN
EO Have you felt cheerful?BT NL Have you felt cheerful?BT D Were you cheerful?BT ES Have you felt cheerful?BT F Have you felt cheerful?BTHarmo-nisation
okay
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Fase 2 Avaluar les propietats psicomètriques
Fiabilitat Validesa Sensibilitat al canvi
Adaptació transcultural d’escales de salut percebuda
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Fiabilitat
Test-retest
Consistència interna
Reproductibilitat
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Agència d’Avaluació deTecnologia i Recerca Mèdiques
Consistència interna
N=876
Alfa d
e C
ronbach
Kidscreen en població general espanyola 8-18 anys
Agència d’Avaluació deTecnologia i Recerca Mèdiques
Fiabilitat test-retest
Kidscreen en població general espanyola 8-18 anys Coeficient de Correlació intraclasse
CC
I
N=55-61
Validesa
Diferències sistemàtiques respecte a:
Contingut (face validity)
Criteri (concurrent i predictiu)
Constructe (convergent i discriminant)
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Benestar físic
Benestar emocional
Limitac. D’activitat
Satisfacció amb la salut
Autoestima
Act. física
Resolució de probl.
Salut y seguretat
Participac. familiar
Risc individual
Amenaces
Influència de companys
FACTOR 2
(SATISFACCIÓ)
FACTOR 3
(RESISTÈNCIA)
FACTOR 4
(RISCOS)
FACTOR
(BENESTAR)
0.81 (0.79)
0.68 (0.71)
0.45 (0.64)
-0.03 (0.19)0.44 (0.76)
0.41 (0.65)
0.94 (0.89)
0.36 (0.74)
0.75 (0.86)
0.51 (0.70)
0.83 (0.87)
0.41 (0.78)
0.62 (0.75)
Anàlisi factorial exploratòri /CHIP-AE Anàlisi factorial exploratòri /CHIP-AE
Font: Rajmil L, et al. Med Care 2003
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Font: Ravens-Sieberer U, et al. Value Health 2008
KIDSCREEN-52
Anàlisi factorial confirmatori amb resultats acceptables recolzen el model:
RMSEA: 0,06
CFI: 0,98
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Font: Rajmil L, et al. Med Care 2003; 41:1153-63.
Validesa de criteri- CHIP-AE
Àrea sota la corva ROC: 0,83 (IC 95% = 0,75-0,92)
1-Specificity
1.00.80.50.30,0
Sensi
tivit
y
1.0
0.8
0.5
0.3
0,0
Ne. d'assignatures suspeses (cap / 1 o
més)vs subdimensió
rendiment acadèmic del CHIP-AE
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
0.6
0.65
0.7
0.75
0.8
0.85
0.9
0.95
1
0 1 2 3 4
Number of chronic conditions
Mean
level of
well-b
ein
g (
W)
N=
32
0
N=
21
7
N=
15
6
N=
16
2
N=
98
4
Mean symptom-standardized level of well-being (W) for groups of persons reporting specific numbers of chronic conditions (weighted Pearson’s r=-0.96)
Kaplan RM et al. Health Serv Res 1976
Validesa de constructe (QWBI)
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Sensibilitat als canvis Seguiment de la QVRS en nens asmàtics
-2,5-2,0-1,5-1,0-0,50,00,51,01,52,0
0-1(n=25)
2-3(n=22)
4-5(n=19)
6-7(n=33)
Index global de canvi: 0-1= no canvi; 6-7=canvi màxim
Canvis en el PAQLQ (ES)
Adaptat de: Tauler E, et al. The Spanish version of the Pediatric Asthma Quality of Life Questionnaire (PAQLQ): metric characteristics and equivalence with the original version. Qual Life Res 2001;10:81-91.
Relació entre el PAQLQ i l’índex global de canvi recollit dels pares
Per a mesurar la variable de resultats, la de exposició i els possibles factors de confusió
Per a reduir al mínim els errors en la mesura de les variables
Per a crear un instrument que sigui fàcil d’utilitzar per a l’enquestador, comprensible per a l’enquestat i a l’hora que sigui pràctic per a processar les dades i l’anàlisi d’aquestes
¿Per què dissenyar el qüestionari?
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
L'investigador ha de tenir clar el concepte que pretén mesurar per tal de seleccionar les preguntes adequades
Què preguntar?
La frase operativa del concepte d’interès, hauria de reflexar l’escala de mesura més apropiada pel tipus d’anàlisi que es pretén fer
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
La fiabilitat de les preguntes hauria de ser avaluada en termes d’estabilitat de les respostes sobre les mateixes preguntes en el temps (test-retest), l’equivalència entre les dades recollides per diferents observadors (variabilitat interobservador), i la consistència entre les preguntes referides al mateix concepte (consistència interna).
Estem preguntant allò que pretenem preguntar?
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
La validesa hauria de mesurar-se en termes de cóm es recull el concepte a mesurar (contingut), cóm prediu (predictiva) i concorda (concurrent) amb el criteri de referència, o cóm la relació empírica observada dels conceptes concorda amb les hipòtesis teòriques sobre les relacions entre aquests conceptes (construct).
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Estem preguntant allò que pretenem preguntar?
Agència d’Avaluació deTecnologia i Recerca
Mèdiques
Gràcies