HC1 correlationeel onderzoek
Gegevens worden op verschillende manieren gegenereerd
- Toevallig
- Organisch: sociale media
- Aspirational: Wij nemen de beslissimg om data te posten en dus te
genereren.
- Transactional: data door transacties: betalen met je pasje, bonuskaart
- Doelgericht
- Ontworpen/designed: data in wetenschappelijk onderzoek
- Administratieve: overheid, belastingdienst
- Survey: nu focussen op vragenlijsten
- Experimenten
Designed: correlationele data INFERENTIËLE DOELEN
we ontwrpen een onderzoek en verzamelen gegevens om:
- De sociale werkelijkheid te beschrijven -> Beschrijven
- (Causale) relaties bestuderen -> Causaliteit
- Te generaliseren naar de doelpopulatie -> Voorspellen
Mixed models surveys: verschillende vormen samenvoegen
Verschillen tussen typen surveys
- Mate van betrokkenheid van de interviewer
- Bij face-to-face heel anders dan bij internet vragenlijsten
- Mate van betrokkenheid met de respondent
- Mate van privacy
- Communicatiemogelijkheden
- Visueel
- Auditief
- Gebruik van technologie
➔ Afhankelijk van het DOEL kiest de onderzoeker de beste manier om de vragenlijst af
te nemen
,Mode-effect: verschil tussen antwoorden op papier of online bijvoorbeeld. Dit kan de
resultaten beïnvloeden.
Cross-sectionele & panelonderzoeken - andere soort surveyonderzoeken
Panelonderzoek
Respondenten worden gevolgd over een langere periode (aantal jaren)
- Inhoud van de vragenlijsten is meestal hetzelfde - MAAR kan VERSCHILLEN
- Bijvoorbeeld elk jaar dezelfde vragenlijst invullen
- Kan ook dingen toevoegen als er dingen in de wereld gebeuren: corona bijv.
- Hier kan ook gebruikt gemaakt worden van mixed-modes
- Bijv: eerste ronde face-to-face, volgende rondes online om geld te besparen.
Voordelen panelonderzoek
- Kunnen binnen-persoon verandering (ontwikkeling van mensen) & causaliteit
meten
- Kunnen leeftijds-, periode- en cohort effecten (verklaren verschillen tussen
geboortejaren)
Nadelen panelonderzoek - Potentiële fouten
- Verloop (attrition)
- Kans afhaken van mensen groot = uitval
- Non-respons in opeenvolgende rondes
- Panel conditonering
, - Leereffecten -> Op gegeven moment weet je de antwoorden die je vorige
keren hebt gegeven nog, dus ben je nog wel eerlijk? Zijn de antwoorden nog
wel goed? -> Onderzoekers veranderen vaak lay-out of volgorde van vragen
om dit te voorkomen.
Conceptuele definitie = van begrip: wat bedoelt onderzoeker ermee (PTSS is aandoening
…)
Operationele definitie = keuze maken voor bepaald meetinstrument (PTSS-vragenlijst)
Variabele = hoe?
-> Met omgepoolde items kan schaalscore berekend worden
HC2 correlationeel
Hoe weten we of een meetinstrument een goed instrument is?
- (Begripsvaliditeit) & betrouwbaarheid
Betrouwbare meting:
- Consistentie van de meting
Valide meting
- Correctheid van de meting
Begripsvaliditeit
- Indruksvaliditeit: lijkt de meting in orde?
- Inhoudsvaliditeit: meet het alle aspecten van het construct?
- Convergente validiteit: Correleert het met een andere meting van hetzelfde
construct?
- Divergente validiteit: Correleert het niet met iets dat iets anders meet?
, - Criterium validiteit: Correleert het met een andere meting waarvan we weten dat er
een relatie is?
Sterkte van relatie meten -> met correlatie
- Een maat voor het meten van de sterkte en richting van een lineaire relatie tussen
twee interval-/ratiovariabelen
Betrouwbaarheid
Test-hertest
- Vragen lijst nog een keer aan zelfde groep mensen geven
Interbeoordelaar
- Observaties gebruiken, verschillende observanten komen op hetzelfde uit
Interne betrouwbaarheid
- Cronbach’s Alfa -> maat van interne betrouwbaarheid
- Meet interen consistentie: in welke mate zijn de items (individuele vragen) in
een vragenlijst met elkaar gecorreleerd?
- Hoe beter alle items in vragenlijst overeenkomen, hoe hoger de Cronbach’s
Alfa
-> Om betrouwbaarheidsanalyses te gebruiken, moeten alle items in dezelfde richting zijn
gecodeerd! -> Als dat niet zo (omgekeerde vragen) is krijg je lage correlaties.
Hoe Cronbach’s alfa beoordelen?
- Alfa < 0.7 slechte interne betrouwbaarheid
- Alfa > 0.8 goede interne betrouwbaarheid
- Daartussen medium
Maar dit is afhankelijk van het gebruik van de enquete (levensveranderend?)
➔ Betrouwbaarheidsanalyse
De schaal verbeteren
1. Controleer de correlaties tussen de individuele items en de schaal zonder dat item
- ‘item-rest correlatie’ of ‘item-total correlatie’
- Vuistregel: à item kan mogelijk worden verwijderd
2. Controleer bovendien wat er gebeurt met Cronbach’s Alfa als de schaal zou worden
gemaakt zonder dat specifieke item
- ‘Cronbach’s Alfa if item dropped’
- Vuistregel: α neemt het meest toe/hoogste verhoging à item kan als eerste worden
verwijderd
-> Kijk ook altijd naar de inhoud en het subjectieve belang van de items!
-> Mag maar 1 item tegelijkertijd verwijderen
-> Na eventueel paar items verwijderen à schaal is compleet (α boven de 0.8)
Van correlatie naar regressie
Correlatie wordt gebruikt om:
- De sterkte van de lineaire relatie te meten
- De richting van het lineair verband te meten
Regressie wordt gebruikt om:
- De lineaire relatie te beschrijven met een vergelijking
- Voorspellingen te doen met behulp van deze vergelijking
Gegevens worden op verschillende manieren gegenereerd
- Toevallig
- Organisch: sociale media
- Aspirational: Wij nemen de beslissimg om data te posten en dus te
genereren.
- Transactional: data door transacties: betalen met je pasje, bonuskaart
- Doelgericht
- Ontworpen/designed: data in wetenschappelijk onderzoek
- Administratieve: overheid, belastingdienst
- Survey: nu focussen op vragenlijsten
- Experimenten
Designed: correlationele data INFERENTIËLE DOELEN
we ontwrpen een onderzoek en verzamelen gegevens om:
- De sociale werkelijkheid te beschrijven -> Beschrijven
- (Causale) relaties bestuderen -> Causaliteit
- Te generaliseren naar de doelpopulatie -> Voorspellen
Mixed models surveys: verschillende vormen samenvoegen
Verschillen tussen typen surveys
- Mate van betrokkenheid van de interviewer
- Bij face-to-face heel anders dan bij internet vragenlijsten
- Mate van betrokkenheid met de respondent
- Mate van privacy
- Communicatiemogelijkheden
- Visueel
- Auditief
- Gebruik van technologie
➔ Afhankelijk van het DOEL kiest de onderzoeker de beste manier om de vragenlijst af
te nemen
,Mode-effect: verschil tussen antwoorden op papier of online bijvoorbeeld. Dit kan de
resultaten beïnvloeden.
Cross-sectionele & panelonderzoeken - andere soort surveyonderzoeken
Panelonderzoek
Respondenten worden gevolgd over een langere periode (aantal jaren)
- Inhoud van de vragenlijsten is meestal hetzelfde - MAAR kan VERSCHILLEN
- Bijvoorbeeld elk jaar dezelfde vragenlijst invullen
- Kan ook dingen toevoegen als er dingen in de wereld gebeuren: corona bijv.
- Hier kan ook gebruikt gemaakt worden van mixed-modes
- Bijv: eerste ronde face-to-face, volgende rondes online om geld te besparen.
Voordelen panelonderzoek
- Kunnen binnen-persoon verandering (ontwikkeling van mensen) & causaliteit
meten
- Kunnen leeftijds-, periode- en cohort effecten (verklaren verschillen tussen
geboortejaren)
Nadelen panelonderzoek - Potentiële fouten
- Verloop (attrition)
- Kans afhaken van mensen groot = uitval
- Non-respons in opeenvolgende rondes
- Panel conditonering
, - Leereffecten -> Op gegeven moment weet je de antwoorden die je vorige
keren hebt gegeven nog, dus ben je nog wel eerlijk? Zijn de antwoorden nog
wel goed? -> Onderzoekers veranderen vaak lay-out of volgorde van vragen
om dit te voorkomen.
Conceptuele definitie = van begrip: wat bedoelt onderzoeker ermee (PTSS is aandoening
…)
Operationele definitie = keuze maken voor bepaald meetinstrument (PTSS-vragenlijst)
Variabele = hoe?
-> Met omgepoolde items kan schaalscore berekend worden
HC2 correlationeel
Hoe weten we of een meetinstrument een goed instrument is?
- (Begripsvaliditeit) & betrouwbaarheid
Betrouwbare meting:
- Consistentie van de meting
Valide meting
- Correctheid van de meting
Begripsvaliditeit
- Indruksvaliditeit: lijkt de meting in orde?
- Inhoudsvaliditeit: meet het alle aspecten van het construct?
- Convergente validiteit: Correleert het met een andere meting van hetzelfde
construct?
- Divergente validiteit: Correleert het niet met iets dat iets anders meet?
, - Criterium validiteit: Correleert het met een andere meting waarvan we weten dat er
een relatie is?
Sterkte van relatie meten -> met correlatie
- Een maat voor het meten van de sterkte en richting van een lineaire relatie tussen
twee interval-/ratiovariabelen
Betrouwbaarheid
Test-hertest
- Vragen lijst nog een keer aan zelfde groep mensen geven
Interbeoordelaar
- Observaties gebruiken, verschillende observanten komen op hetzelfde uit
Interne betrouwbaarheid
- Cronbach’s Alfa -> maat van interne betrouwbaarheid
- Meet interen consistentie: in welke mate zijn de items (individuele vragen) in
een vragenlijst met elkaar gecorreleerd?
- Hoe beter alle items in vragenlijst overeenkomen, hoe hoger de Cronbach’s
Alfa
-> Om betrouwbaarheidsanalyses te gebruiken, moeten alle items in dezelfde richting zijn
gecodeerd! -> Als dat niet zo (omgekeerde vragen) is krijg je lage correlaties.
Hoe Cronbach’s alfa beoordelen?
- Alfa < 0.7 slechte interne betrouwbaarheid
- Alfa > 0.8 goede interne betrouwbaarheid
- Daartussen medium
Maar dit is afhankelijk van het gebruik van de enquete (levensveranderend?)
➔ Betrouwbaarheidsanalyse
De schaal verbeteren
1. Controleer de correlaties tussen de individuele items en de schaal zonder dat item
- ‘item-rest correlatie’ of ‘item-total correlatie’
- Vuistregel: à item kan mogelijk worden verwijderd
2. Controleer bovendien wat er gebeurt met Cronbach’s Alfa als de schaal zou worden
gemaakt zonder dat specifieke item
- ‘Cronbach’s Alfa if item dropped’
- Vuistregel: α neemt het meest toe/hoogste verhoging à item kan als eerste worden
verwijderd
-> Kijk ook altijd naar de inhoud en het subjectieve belang van de items!
-> Mag maar 1 item tegelijkertijd verwijderen
-> Na eventueel paar items verwijderen à schaal is compleet (α boven de 0.8)
Van correlatie naar regressie
Correlatie wordt gebruikt om:
- De sterkte van de lineaire relatie te meten
- De richting van het lineair verband te meten
Regressie wordt gebruikt om:
- De lineaire relatie te beschrijven met een vergelijking
- Voorspellingen te doen met behulp van deze vergelijking
