lOMoARcPSD|11911780
Kwantitatieve onderzoeksmethoden
WEEK 1
Hoorcollege 1
Kwaliteit onderzoek: drie aspecten
1. Validiteit
De mate waarin de gemeten kenmerken daadwerkelijk de kenmerken zijn van de
onderzochte objecten (systematische of random error).
2. Betrouwbaarheid
De mate waarin de metingen van de kenmerken dezelfde resultaten oplevert als het
onderzoek onder dezelfde omstandigheden zou worden herhaald.
3. Bruikbaarheid.
De mate waarin de onderzoeksresultaten goed aansluiten bij het probleem van de
opdrachtgever, ofwel die daadwerkelijk kunnen bijdragen aan de oplossing van een
praktijkprobleem.
Kwantitatieve data
- Onderzoeksstrategieën:
o Survey: over veel onderzoekseenheden een uitspraak doen. Survey
voor beschrijvende en exploiterende vragen.
o Experiment: e 昀昀 ect proberen te verklaren. Experiment voor toetsende vragen.
- Dataverzameling
o Vragenlijsten
o Observaties
o Inhoudsanalyse
- Data
o Primair: specifiek voor het onderzoek zelf
o Secundair: verzameld voor een ander doel
Steekproeven
Begrippen
- Populatie -> alle studenten in Nederland
- Operationele operatie -> alle studenten in Nijmegen en Utrecht
- Steekproefkader
- Steekproef
- Gerealiseerde steekproef
Technieken
- Op toevalsbasis (aselect): representativiteit mag worden verondersteld; kanssteekproeven.
- Niet op toevalsbasis: representativiteit mag niet worden verondersteld;
niet- kanssteekproeven.
Toets op representativiteit
- Representativiteit: mate waarin de steekproef op relevante kenmerken een
goede afspiegeling vormt van de populatie
- Representativiteitstoets voor één variabele
- Op basis van externe gegevens over populatie bepaal je Fe, de verwachte frequentie ->
manier van werken bij categorische variabelen.
- Theoretische verwachting: gelijkmatige (uniforme) verdeling
1
, lOMoARcPSD|11911780
Variabelen
- Nominaal: eigenschappen toewijzen. Er is geen kwantitatieve waarde en geen
volgorde tussen de waarde. Denk aan geslacht.
- Ordinaal: kennen een ordening. Denk aan tevredenheid.
- Interval: gelijke intervallen.
- Ratio: intervallen met een absoluut nulpunt.
Geslacht = nominale variabele.
Leeftijd = ratio variabele -> hierbij gebruik maken van de t-toets voor één variabele (zie OIMB).
Dit voorbeeld gaat over een categorische variabele: klanten bij bepaalde supermarkten (Aldi, Lidl
en Jumbo). Categorische variabele is een grootheid die op nominale schaal of op ordinale schaal
wordt gemeten.
Klant bij Geobserveerde aantallen (Fo)
Aldi 28
Lidl 29
Jumbo 23
Totaal 80
Klant bij Fo Fe Fo-Fe (Fo-Fe)^2 (Fo-Fe)^2 / Fe
Aldi 28 26.7 1.3 1.69 0.063
Lidl 29 26.7 2.3 5.29 0.198
Jumbo 23 26.7 -3.7 13.69 0. 513
Totaal 80 X^2 = 0.774
Chi-kwadraat hoort bij categorische variabelen.
- H0: verdeling in steekproef = verdeling in populatie
- H1: verdeling in steekproef ≠ verdeling in populatie
- Toets met een α van 0.30 -> ALLEEN BIJ DEZE TOETS, TOETSEN WE NIET MET DE
REGULIERE ALPHA VAN 0.05, MAAR MET 0.30!!
- X^2 (2 vrijheidsgraden, N = 80) = 0.77; p = 0.68
o Vrijheidsgraden = aantal categorieën – 1, dus hier 3 -1
- Statistische conclusie: (α = 0.30) p > α, H0 niet verwerpen
- Inhoudelijke conclusie: steekproef is representatief voor populatie
Output SPSS
- Aansturing
- Menu Analyze -> Non-parametric Tests -> Legacy Dialogs -> Chi-square
- Zie opdracht 1 voor meer toelichting
Waarom α van 0.30 bij representativiteit?
- Relatie tussen soorten statistische fouten type I fout (α) en type II fout (β): indien α ↑ dan β
↓ (en vice versa)
Werkelijkheid
H0 is juist H0 is onjuist
Accepteer H0 Juiste conclusie Type II
1–α fout Kans
H0 terecht accepteren β
H0 onterecht accepteren
Accepteer H1 Type I Power
fout Kans 1–β
α H1 terecht accepteren
H0 onterecht verwerpen
2
, lOMoARcPSD|11911780
- H0: verdeling steekproef = verdeling populatie
- H1: verdeling steekproef ≠ verdeling populatie (minimaal één groep wijkt af)
- Niet te snel besluiten tot representativiteit: vermijden van type II fout belangrijker dan
van type I fout
- Daarom α verhogen om lagere β te krijgen
Als het gaat om representativiteit, gaat het dan om betrouwbaarheid of om validiteit?
Externe validiteit
Data cleaning
Checken of alle gegevens in de datamatrix kloppen
- Codes
- Routings
- Response set
Missing data
Er ontbreken scores op
variabelen Problemen:
- Aantal respondenten bij analyses (power)
- Type respondenten bij analyses (validiteit): niet antwoorden vanwege de inhoud van vragen
o Gekoppeld aan selectiviteit
Data cleaning: missing data
Stappen:
1. Type missing date vaststellen
2. Omvang van de missing data vaststellen
3. Nagaan of de missing data random zijn
4. Substitutiemethode kiezen en uitvoeren
Type missing data
- Negeerbaar
o Non-respons/steekproef
o Routings
o Censored (gecontroleerd)
- Niet negeerbaar
o Geen antwoorden
o Missing categorieën
Oorzaken
Niet negeerbare missings:
- Vraagstelling
- Interviewer
- Routings
- Invoer
Omvang. Hoeveel respondenten blijven erover voor de analyse van je data?
Criterium:
- Indien percentage missing data <10%, dan is probleem verwaarloosbaar.
- Mits missing data ‘missing completely at random’ zijn
Missing completely at random MCAR
- De ontbrekende score patronen komen volledig door toeval tot stand
3
Kwantitatieve onderzoeksmethoden
WEEK 1
Hoorcollege 1
Kwaliteit onderzoek: drie aspecten
1. Validiteit
De mate waarin de gemeten kenmerken daadwerkelijk de kenmerken zijn van de
onderzochte objecten (systematische of random error).
2. Betrouwbaarheid
De mate waarin de metingen van de kenmerken dezelfde resultaten oplevert als het
onderzoek onder dezelfde omstandigheden zou worden herhaald.
3. Bruikbaarheid.
De mate waarin de onderzoeksresultaten goed aansluiten bij het probleem van de
opdrachtgever, ofwel die daadwerkelijk kunnen bijdragen aan de oplossing van een
praktijkprobleem.
Kwantitatieve data
- Onderzoeksstrategieën:
o Survey: over veel onderzoekseenheden een uitspraak doen. Survey
voor beschrijvende en exploiterende vragen.
o Experiment: e 昀昀 ect proberen te verklaren. Experiment voor toetsende vragen.
- Dataverzameling
o Vragenlijsten
o Observaties
o Inhoudsanalyse
- Data
o Primair: specifiek voor het onderzoek zelf
o Secundair: verzameld voor een ander doel
Steekproeven
Begrippen
- Populatie -> alle studenten in Nederland
- Operationele operatie -> alle studenten in Nijmegen en Utrecht
- Steekproefkader
- Steekproef
- Gerealiseerde steekproef
Technieken
- Op toevalsbasis (aselect): representativiteit mag worden verondersteld; kanssteekproeven.
- Niet op toevalsbasis: representativiteit mag niet worden verondersteld;
niet- kanssteekproeven.
Toets op representativiteit
- Representativiteit: mate waarin de steekproef op relevante kenmerken een
goede afspiegeling vormt van de populatie
- Representativiteitstoets voor één variabele
- Op basis van externe gegevens over populatie bepaal je Fe, de verwachte frequentie ->
manier van werken bij categorische variabelen.
- Theoretische verwachting: gelijkmatige (uniforme) verdeling
1
, lOMoARcPSD|11911780
Variabelen
- Nominaal: eigenschappen toewijzen. Er is geen kwantitatieve waarde en geen
volgorde tussen de waarde. Denk aan geslacht.
- Ordinaal: kennen een ordening. Denk aan tevredenheid.
- Interval: gelijke intervallen.
- Ratio: intervallen met een absoluut nulpunt.
Geslacht = nominale variabele.
Leeftijd = ratio variabele -> hierbij gebruik maken van de t-toets voor één variabele (zie OIMB).
Dit voorbeeld gaat over een categorische variabele: klanten bij bepaalde supermarkten (Aldi, Lidl
en Jumbo). Categorische variabele is een grootheid die op nominale schaal of op ordinale schaal
wordt gemeten.
Klant bij Geobserveerde aantallen (Fo)
Aldi 28
Lidl 29
Jumbo 23
Totaal 80
Klant bij Fo Fe Fo-Fe (Fo-Fe)^2 (Fo-Fe)^2 / Fe
Aldi 28 26.7 1.3 1.69 0.063
Lidl 29 26.7 2.3 5.29 0.198
Jumbo 23 26.7 -3.7 13.69 0. 513
Totaal 80 X^2 = 0.774
Chi-kwadraat hoort bij categorische variabelen.
- H0: verdeling in steekproef = verdeling in populatie
- H1: verdeling in steekproef ≠ verdeling in populatie
- Toets met een α van 0.30 -> ALLEEN BIJ DEZE TOETS, TOETSEN WE NIET MET DE
REGULIERE ALPHA VAN 0.05, MAAR MET 0.30!!
- X^2 (2 vrijheidsgraden, N = 80) = 0.77; p = 0.68
o Vrijheidsgraden = aantal categorieën – 1, dus hier 3 -1
- Statistische conclusie: (α = 0.30) p > α, H0 niet verwerpen
- Inhoudelijke conclusie: steekproef is representatief voor populatie
Output SPSS
- Aansturing
- Menu Analyze -> Non-parametric Tests -> Legacy Dialogs -> Chi-square
- Zie opdracht 1 voor meer toelichting
Waarom α van 0.30 bij representativiteit?
- Relatie tussen soorten statistische fouten type I fout (α) en type II fout (β): indien α ↑ dan β
↓ (en vice versa)
Werkelijkheid
H0 is juist H0 is onjuist
Accepteer H0 Juiste conclusie Type II
1–α fout Kans
H0 terecht accepteren β
H0 onterecht accepteren
Accepteer H1 Type I Power
fout Kans 1–β
α H1 terecht accepteren
H0 onterecht verwerpen
2
, lOMoARcPSD|11911780
- H0: verdeling steekproef = verdeling populatie
- H1: verdeling steekproef ≠ verdeling populatie (minimaal één groep wijkt af)
- Niet te snel besluiten tot representativiteit: vermijden van type II fout belangrijker dan
van type I fout
- Daarom α verhogen om lagere β te krijgen
Als het gaat om representativiteit, gaat het dan om betrouwbaarheid of om validiteit?
Externe validiteit
Data cleaning
Checken of alle gegevens in de datamatrix kloppen
- Codes
- Routings
- Response set
Missing data
Er ontbreken scores op
variabelen Problemen:
- Aantal respondenten bij analyses (power)
- Type respondenten bij analyses (validiteit): niet antwoorden vanwege de inhoud van vragen
o Gekoppeld aan selectiviteit
Data cleaning: missing data
Stappen:
1. Type missing date vaststellen
2. Omvang van de missing data vaststellen
3. Nagaan of de missing data random zijn
4. Substitutiemethode kiezen en uitvoeren
Type missing data
- Negeerbaar
o Non-respons/steekproef
o Routings
o Censored (gecontroleerd)
- Niet negeerbaar
o Geen antwoorden
o Missing categorieën
Oorzaken
Niet negeerbare missings:
- Vraagstelling
- Interviewer
- Routings
- Invoer
Omvang. Hoeveel respondenten blijven erover voor de analyse van je data?
Criterium:
- Indien percentage missing data <10%, dan is probleem verwaarloosbaar.
- Mits missing data ‘missing completely at random’ zijn
Missing completely at random MCAR
- De ontbrekende score patronen komen volledig door toeval tot stand
3
