Onderzoeksmethodologie en statistiek 3:
Samenvatting: Onderdeel statistiek
6. Betrouwbaarheid
, Betrouwbaarheid
Inleiding
In (medisch) wetenschappelijk onderzoek is betrouwbaarheid van meetinstrumenten zeer
belangrijk. Dit bepaalt oa. of je de meetinstrumenten kan gebruiken.
Wat bedoelt men met de term betrouwbaarheid in de literatuur?
- Reproduceerbaarheid
- In bepaalde onderzoeken gaan ze kijken of iets reproduceerbaar is. Dus
kunnen we dezelfde resultaten reproduceren in een ander onderzoek?
- Test-hertest betrouwbaarheid (je wilt telkens dezelfde waarden uitkomen)
- Inter-beoordelaarsbetrouwbaarheid = tussen verschillende beoordelaars
- Intra-beoordelaarsbetrouwbaarheid = 1 beoordelaar, meerdere metingen
Betrouwbaarheid (onderzoeksvraag bij testen: gaan de resultaten overeenkomen?):
- De test is betrouwbaar als de test stabiel is en bij herafname ongeveer dezelfde
uitslag geeft (= consistentie).
- Zegt iets over de stabiliteit en reproduceerbaarheid/herhaalbaarheid van de test.
Validiteit (onderzoeksvraag bij testen: kunnen we dat toestel gebruiken ipv dat toestel?):
- “Je meet wat je moet meten”
- Resultaat van een bepaald meettoestel vergelijken met een “gouden standaard”
- We kennen vaak al toestellen die iets bepaald meten. Als we dan een nieuw
toestel ontwikkelen, kunnen we aan de hand van het reeds gekende toestel
(gouden standaard) onderzoeken of het nieuwe toestel correct meet.
- De test is valide als de test datgene meet wat je beoogt te meten.
We hebben 3 uitkomstvariabelen:
→ Hangt af van met welke data je aan het werken bent.
Statistische maten om zowel reproduceerbaarheid als validiteit van meetinstrumenten
binnen (medisch) wetenschappelijk onderzoek weer te geven.
Voor uitkomstvariabelen van nominaal resp. ordinaal niveau:
- Nominaal: Cohen’s kappa = gewone Kappa
- Ordinaal: Gewogen kappa
Voor uitkomstvariabelen van interval en ratio (scale) niveau die normaal verdeeld zijn:
- ICC & Bland-Altman-plot (= kunnen we extra doen = spreidingsinterval waarin je nog
meer informatie over betrouwbaarheid krijgt)
- …
Samenvatting: Onderdeel statistiek
6. Betrouwbaarheid
, Betrouwbaarheid
Inleiding
In (medisch) wetenschappelijk onderzoek is betrouwbaarheid van meetinstrumenten zeer
belangrijk. Dit bepaalt oa. of je de meetinstrumenten kan gebruiken.
Wat bedoelt men met de term betrouwbaarheid in de literatuur?
- Reproduceerbaarheid
- In bepaalde onderzoeken gaan ze kijken of iets reproduceerbaar is. Dus
kunnen we dezelfde resultaten reproduceren in een ander onderzoek?
- Test-hertest betrouwbaarheid (je wilt telkens dezelfde waarden uitkomen)
- Inter-beoordelaarsbetrouwbaarheid = tussen verschillende beoordelaars
- Intra-beoordelaarsbetrouwbaarheid = 1 beoordelaar, meerdere metingen
Betrouwbaarheid (onderzoeksvraag bij testen: gaan de resultaten overeenkomen?):
- De test is betrouwbaar als de test stabiel is en bij herafname ongeveer dezelfde
uitslag geeft (= consistentie).
- Zegt iets over de stabiliteit en reproduceerbaarheid/herhaalbaarheid van de test.
Validiteit (onderzoeksvraag bij testen: kunnen we dat toestel gebruiken ipv dat toestel?):
- “Je meet wat je moet meten”
- Resultaat van een bepaald meettoestel vergelijken met een “gouden standaard”
- We kennen vaak al toestellen die iets bepaald meten. Als we dan een nieuw
toestel ontwikkelen, kunnen we aan de hand van het reeds gekende toestel
(gouden standaard) onderzoeken of het nieuwe toestel correct meet.
- De test is valide als de test datgene meet wat je beoogt te meten.
We hebben 3 uitkomstvariabelen:
→ Hangt af van met welke data je aan het werken bent.
Statistische maten om zowel reproduceerbaarheid als validiteit van meetinstrumenten
binnen (medisch) wetenschappelijk onderzoek weer te geven.
Voor uitkomstvariabelen van nominaal resp. ordinaal niveau:
- Nominaal: Cohen’s kappa = gewone Kappa
- Ordinaal: Gewogen kappa
Voor uitkomstvariabelen van interval en ratio (scale) niveau die normaal verdeeld zijn:
- ICC & Bland-Altman-plot (= kunnen we extra doen = spreidingsinterval waarin je nog
meer informatie over betrouwbaarheid krijgt)
- …
