Methodologie en Statistiek - De
betrouwbaarheid van metingen (Module
Kwaliteit)
Deze week wordt ingegaan op het meten van de betrouwbaarheid van de meting. Dit meten
wordt gedaan met behulp van het meten van de overeenkomst en 'correlatie' welke
uitgedrukt worden in uitkomstmaten zoals Pearson’s correlatie coëfficiënt en Spearman’s
Rho.
Bekijk de tutorials Methodologie en Statistiek 1a, 1b, en 2 uit week C2
Resultaat/Leerdoelen:
Door het maken van de activiteiten werk je per week aan methodologie en statistiek.
Hierdoor ben je voorbereid op de werkcolleges en op de testvisiontoets.
Je kan de klinimetrische begrippen (reproduceerbaarheid, overeenstemming,
betrouwbaarheid, responsiviteit en validiteit) uitleggen en interpreteren.
Je kan (meet)resultaten analyseren.
Je bent in staat om centrummaten, spreidingsmaten en correlatiematen te berekenen
in excel.
Je bent in staat om centrummaten, spreidingsmaten en correlatiematen te
interpreteren.
Je kan verschillende typen meetinstrumenten en verschillende meetniveaus
onderscheiden.
,Tutorial Methodologie & Statistiek 2 (Dia’s)
Betrouwbaarheid van een meetinstrument:
Ofwel hoeveel overeenstemming zit er tussen het meten bij herhaalde metingen
Test Hertest betrouwbaarheid / Intrabeoordelingsbetrouwbaarheid
Interbeoordelingsbetrouwbaarheid
Interne consistentie
Paralleltestbetrouwbaarheid
Meten van overeenstemming met verschillende maten
Meten van de betrouwbaarheid van een meting
Hoe betrouwbaar meten we?
Bijvoorbeeld hoe goed/groot is de intrabeoordelaarsbetrouwbaarheid.
De intra- en interbeoordelaarsbetrouwbaarheid wordt beoordeeld door middel van
Kappa en/of ICC waarde. De correlatie wordt berekend met een Spearman of een
Pearson.
Keuze van Kappa, ICC, Pearson of Spearman is afhankelijk van het meetniveau
Notitie: De intrabeoordelingsbetrouwbaarheid geeft de overeenkomst tussen de uitkomsten
van dezelfde metingen, uitgevoerd door dezelfde beoordelaar, weer. Wat is een Kappa,
Spearman, Pearson en ICC?
• Kappa bij nominale data
• Cohen’s Kappa bij meerdere categorische data
• Spearman rho correlatiecoefficient bij ordinale date
• Pearsons of ICC bij kwantitatieve data
• Cronbach’s alpha meet de interne consistency bij vragenlijsten
, Notitie: Als 2 radiologen 85 foto’s classificeren, op normaal, benigne, verdenking en kanker,
kunnen zij het soms ( of vaak) ook bij toeval met elkaar eens zijn. De geobserveerde
overeenkomst kan dan goed lijken.
De Kappa wordt gebruikt voor het bepalen van de betrouwbaarheid van ordinale of
dichotome schalen. Het geeft een overeenkomst weer tussen twee metingen of twee
beoordelaars, omdat op basis van toeval altijd een deel van de scores van twee herhaalde
metingen gelijk zal zijn, wordt de Kappa gecorrigeerd voor deze toevalsovereenkomst.
Daarom is de Kappa altijd lager dan de absolute overeenkomst tussen de twee metingen. De
Kappa heeft een waarde tussen 0 en 1 De waarde moet ten minste 0,70 zijn om te kunnen
spreken van een goede betrouwbaarheid.
Berekening Kappa (hoef je niet te kunnen)
betrouwbaarheid van metingen (Module
Kwaliteit)
Deze week wordt ingegaan op het meten van de betrouwbaarheid van de meting. Dit meten
wordt gedaan met behulp van het meten van de overeenkomst en 'correlatie' welke
uitgedrukt worden in uitkomstmaten zoals Pearson’s correlatie coëfficiënt en Spearman’s
Rho.
Bekijk de tutorials Methodologie en Statistiek 1a, 1b, en 2 uit week C2
Resultaat/Leerdoelen:
Door het maken van de activiteiten werk je per week aan methodologie en statistiek.
Hierdoor ben je voorbereid op de werkcolleges en op de testvisiontoets.
Je kan de klinimetrische begrippen (reproduceerbaarheid, overeenstemming,
betrouwbaarheid, responsiviteit en validiteit) uitleggen en interpreteren.
Je kan (meet)resultaten analyseren.
Je bent in staat om centrummaten, spreidingsmaten en correlatiematen te berekenen
in excel.
Je bent in staat om centrummaten, spreidingsmaten en correlatiematen te
interpreteren.
Je kan verschillende typen meetinstrumenten en verschillende meetniveaus
onderscheiden.
,Tutorial Methodologie & Statistiek 2 (Dia’s)
Betrouwbaarheid van een meetinstrument:
Ofwel hoeveel overeenstemming zit er tussen het meten bij herhaalde metingen
Test Hertest betrouwbaarheid / Intrabeoordelingsbetrouwbaarheid
Interbeoordelingsbetrouwbaarheid
Interne consistentie
Paralleltestbetrouwbaarheid
Meten van overeenstemming met verschillende maten
Meten van de betrouwbaarheid van een meting
Hoe betrouwbaar meten we?
Bijvoorbeeld hoe goed/groot is de intrabeoordelaarsbetrouwbaarheid.
De intra- en interbeoordelaarsbetrouwbaarheid wordt beoordeeld door middel van
Kappa en/of ICC waarde. De correlatie wordt berekend met een Spearman of een
Pearson.
Keuze van Kappa, ICC, Pearson of Spearman is afhankelijk van het meetniveau
Notitie: De intrabeoordelingsbetrouwbaarheid geeft de overeenkomst tussen de uitkomsten
van dezelfde metingen, uitgevoerd door dezelfde beoordelaar, weer. Wat is een Kappa,
Spearman, Pearson en ICC?
• Kappa bij nominale data
• Cohen’s Kappa bij meerdere categorische data
• Spearman rho correlatiecoefficient bij ordinale date
• Pearsons of ICC bij kwantitatieve data
• Cronbach’s alpha meet de interne consistency bij vragenlijsten
, Notitie: Als 2 radiologen 85 foto’s classificeren, op normaal, benigne, verdenking en kanker,
kunnen zij het soms ( of vaak) ook bij toeval met elkaar eens zijn. De geobserveerde
overeenkomst kan dan goed lijken.
De Kappa wordt gebruikt voor het bepalen van de betrouwbaarheid van ordinale of
dichotome schalen. Het geeft een overeenkomst weer tussen twee metingen of twee
beoordelaars, omdat op basis van toeval altijd een deel van de scores van twee herhaalde
metingen gelijk zal zijn, wordt de Kappa gecorrigeerd voor deze toevalsovereenkomst.
Daarom is de Kappa altijd lager dan de absolute overeenkomst tussen de twee metingen. De
Kappa heeft een waarde tussen 0 en 1 De waarde moet ten minste 0,70 zijn om te kunnen
spreken van een goede betrouwbaarheid.
Berekening Kappa (hoef je niet te kunnen)
