Chapter 15: Measurement and data quality
1. Measurement
Hoe goed zijn de instrumenten in het meten van de uitkomsten? We gaan zo
structureel mogelijk gaan meten, we gaan een construct gaan meten.
Depressie kan je niet meten, want dat is onmeetbaar, we gaan bloeddruk
meten.
Depressie kan je enkel meten door reeks van symptomen te omschrijven en
observeren.
We gaan iets van niet vatbaar, toch iets meetbaars van maken hoe gaan we
dit doen?
Kwantitatief onderzoek: gestructureerde metingen van constructies:
• Biofysiologische methoden
bijv. bloeddruk, lengte, gewicht
• Zelfrapportage (mensen formuleren zelf een antwoord op de vragen van de
vragenlijst)
bijv. depressie schaal
• Observatiechecklists
Checklist die je gebruikt om constructs (gedrag) te registeren en te meten.
1.1Theories of measurement
Psychometrische beoordeling:
• Kwaliteitstoetsing van (nieuwe) maatregelen: Betrouwbaarheidsgeldigheid
We hebben een instrument ontwikkelt om kennis te meten.
In welke mate meet de vragenlijst de kennis over dat specifieke thema? In
welke mate zijn we in staat om aan de hand van de vragenlijst kennis op
een valide en betrouwbare manier te meten?
Is het instrument voldoende consistency: meet het wat het moet meten?
Is het instrument ook stabiel? Er mogen geen verschillen doorheen de tijd zijn
als we de vragenlijst bij dezelfde persoon afnemen.
1
, 1.2Errors of measurement
Bronnen van fouten/bias:
• Tijdelijke persoonlijke factoren (door angst kan de RR stijgen, angst= tijdelijk
fenomeen)
bijv. ongerustheid
• Situationele verontreinigingen (omgevingsfactoren hebben invloed op obtained
score)
bijv. temperatuur, tijd van de dag
• Respons-set bias (sociaal wenselijk antwoord)
bijv. sociale wenselijkheid
• Toedieningsvariaties (meerdere mensen die data verzamelen, de ene zal
anders afnemen)
variaties in methode van gegevensverzameling
• Helderheid van instrumenten (duidelijkheid)
bijv. verschillende interpretaties
• Artikelbemonstering (de type items die zijn opgenomen hebben een impact)
welke artikelen zijn inbegrepen
De verworven score (je echte score +/- de fouten die erop zitten), de fouten
houden we zo klein mogelijk. De score die we meten moet zo dicht mogelijk
liggen bij de observeerbare score.
1.3Major types of measures
REFLECTERENDE SCHALEN EN FORMATIEF INDEXEN
2
, • Reflectieve schalen: items veroorzaakt door attribuut/constructie (we hebben
een schaal die onderzoek doet naar de symptomen die veroorzaakt zijn door
depressie)
Construct: depressie, item: de symptomen die eruit voortvloeien
Construct is oorzaak van aantal items
bijv. CES-D: symptomen veroorzaakt door depressie
• Formatieve indexen: items veroorzaken/definiëren attribuut/constructie
De items zullen het construct gaan vormen.
bijv. Holmes-Rahe schaal voor sociale aanpassing: score op stressvolle
levensgebeurtenissen definieert vatbaarheid voor door stress veroorzaakte
ziekten.
2. Metingseigenschappen: een overzicht
De taxonomie van comin-polit-yang bestaat uit vier domeineigenschappen,
opgedeeld in twee dwarsdoorsnedes.
- Cross-sectioneel: kwaliteit van metingen op 1 punt.
= De domeinen in een cross-sectionele studie zijn betrouwbaarheid en
validiteit
- Longitudinaal: kwaliteit van metingen doorheen de tijd.
= De domeinen in een longitudinale studie zijn betrouwbaarheid van het
veranderingsdomein en het responsiviteitsdomein.
3
1. Measurement
Hoe goed zijn de instrumenten in het meten van de uitkomsten? We gaan zo
structureel mogelijk gaan meten, we gaan een construct gaan meten.
Depressie kan je niet meten, want dat is onmeetbaar, we gaan bloeddruk
meten.
Depressie kan je enkel meten door reeks van symptomen te omschrijven en
observeren.
We gaan iets van niet vatbaar, toch iets meetbaars van maken hoe gaan we
dit doen?
Kwantitatief onderzoek: gestructureerde metingen van constructies:
• Biofysiologische methoden
bijv. bloeddruk, lengte, gewicht
• Zelfrapportage (mensen formuleren zelf een antwoord op de vragen van de
vragenlijst)
bijv. depressie schaal
• Observatiechecklists
Checklist die je gebruikt om constructs (gedrag) te registeren en te meten.
1.1Theories of measurement
Psychometrische beoordeling:
• Kwaliteitstoetsing van (nieuwe) maatregelen: Betrouwbaarheidsgeldigheid
We hebben een instrument ontwikkelt om kennis te meten.
In welke mate meet de vragenlijst de kennis over dat specifieke thema? In
welke mate zijn we in staat om aan de hand van de vragenlijst kennis op
een valide en betrouwbare manier te meten?
Is het instrument voldoende consistency: meet het wat het moet meten?
Is het instrument ook stabiel? Er mogen geen verschillen doorheen de tijd zijn
als we de vragenlijst bij dezelfde persoon afnemen.
1
, 1.2Errors of measurement
Bronnen van fouten/bias:
• Tijdelijke persoonlijke factoren (door angst kan de RR stijgen, angst= tijdelijk
fenomeen)
bijv. ongerustheid
• Situationele verontreinigingen (omgevingsfactoren hebben invloed op obtained
score)
bijv. temperatuur, tijd van de dag
• Respons-set bias (sociaal wenselijk antwoord)
bijv. sociale wenselijkheid
• Toedieningsvariaties (meerdere mensen die data verzamelen, de ene zal
anders afnemen)
variaties in methode van gegevensverzameling
• Helderheid van instrumenten (duidelijkheid)
bijv. verschillende interpretaties
• Artikelbemonstering (de type items die zijn opgenomen hebben een impact)
welke artikelen zijn inbegrepen
De verworven score (je echte score +/- de fouten die erop zitten), de fouten
houden we zo klein mogelijk. De score die we meten moet zo dicht mogelijk
liggen bij de observeerbare score.
1.3Major types of measures
REFLECTERENDE SCHALEN EN FORMATIEF INDEXEN
2
, • Reflectieve schalen: items veroorzaakt door attribuut/constructie (we hebben
een schaal die onderzoek doet naar de symptomen die veroorzaakt zijn door
depressie)
Construct: depressie, item: de symptomen die eruit voortvloeien
Construct is oorzaak van aantal items
bijv. CES-D: symptomen veroorzaakt door depressie
• Formatieve indexen: items veroorzaken/definiëren attribuut/constructie
De items zullen het construct gaan vormen.
bijv. Holmes-Rahe schaal voor sociale aanpassing: score op stressvolle
levensgebeurtenissen definieert vatbaarheid voor door stress veroorzaakte
ziekten.
2. Metingseigenschappen: een overzicht
De taxonomie van comin-polit-yang bestaat uit vier domeineigenschappen,
opgedeeld in twee dwarsdoorsnedes.
- Cross-sectioneel: kwaliteit van metingen op 1 punt.
= De domeinen in een cross-sectionele studie zijn betrouwbaarheid en
validiteit
- Longitudinaal: kwaliteit van metingen doorheen de tijd.
= De domeinen in een longitudinale studie zijn betrouwbaarheid van het
veranderingsdomein en het responsiviteitsdomein.
3
