Onderzoekspracticum 1
Lecture 1:
Errors:
- Individu is niet belangrijk, populatie staat centraal
- Soms heb je een ongelukkige steekproef waardoor je antwoorden verkeerd zijn
- Bias is beter dan random omdat je meer weet over je uitkomst, het slechte er aan is dat je niet veel
weet over de gehele populatie
Soorten errors:
Random: Sample: sampling Question: invalide antwoorden
error (honest mistake)
(it happens) - moeilijke vragen leiden tot geen valide
antwoorden voor het individu, wel voor de
populatie (spotify vraag)
Biased: Sample bias: Question bias:
- studenten op de - Heb je de literatuur voor vandaag gelezen? Tegen
eerste rij van de docent ja antwoorden tegen mede student nee
tribune antwoorden
Fouten vragen:
- Mco/s is leuk en intressant = double barreled
- Geloof jij ook dat immigranten meer diefstallen veroorzaken = sturend
Veel voorkomende fouten bij surveys:
- Slecht verwoorden vraag
- Slecht gevraagd door de interviewer
- Verkeerd begrijpen van de geïnterviewde
- Geheugen problemen van de geïnterviewde
- Verkeerd opgenomen door de interviewer
- Informatie wordt verkeerd in de computer gezet of gecodeerd
Belangrijk:
- Hebben respondenten de nodige kennis over het onderwerp
- Ja of nee vraag? Of geef je meer antwoordopties?
- Is er een 'weet ik niet' optie?
- Vraag je teveel van het geheugen van de respondenten?
Algemene regels bij het opstellen van vragen:
- Blijf altijd je onderzoeksvraag in gedachten houden
- Besluit precies wat je wilt onderzoeken
- Denk goed na over je publiek
- Beschouw jezelf als een respondent: zou jij deze vraag beantwoorden? Hoe zou jij deze vraag
beantwoorden? Merk op als sommige vragen vaag of misleidend zijn
Weet ik niet optie:
- Wanneer de optie 'weet ik niet' er is gaan mensen deze gebruiken en denken ze minder lang na
over een moeilijkere vraag (dit geldt ook voor een neutrale optie zoals ik ben het er niet mee eens en
, niet mee oneens)
- Wil je dat mensen een keuze maken? LAAT WEG
- Wil je dat mensen een keuze maken alleen als ze dat kunnen? VOEG TOE
Let op:
- Het weglaten van de 'weet ik niet' kan tot irritatie leiden bij de respondenten
- Soms is de neutrale optie een echt goed antwoord
Antwoordschalen:
- Helemaal mee eens - - helemaal mee oneens
(ordinaal)
- Mee eens - - - - - mee oneens
(ordinaal maar behandel het als interval)
Social desirability:
- antwoord geven naar wat jij denkt dat verwacht wordt en goed is
- Heb je alle literatuur voor vandaag gelezen? Nee maar je antwoord ja
- Maak het antwoorden van een undesirable antwoord minder dreigend
- Sla jij je partner? Iedereen slaat zijn partner wel eens. Sla jij je partner wel eens?
- In de afgelopen week, wat heb jij bij je partner gedaan? (knuffel, hallo zeggen, slaan, kussen) Dit
moet echt nodig zijn want het is BIAS
- Er is ook desirability tussen verschillende groepen
- Mannen zoveel mogelijk seksuele partners, vrouwen zo min mogelijk
Antwoord opties:
- Primacy: eerste antwoord categorie
- Recency: laatste antwoord categorie
- Je lost dit op door de antwoorden te roteren Bias op individueel level niet op aggregaat level
(populatie)
Openvraag:
- Minder/geen bias, betere validiteit
- Moeizaam voor de respondent
- De vraag zo duidelijk mogelijk stellen: wat is uw leeftijd in jaren?
- Moeilijk samen te voegen met anderen antwoord door zo veel verschillen
Structuur:
- Iedere interviewer moet vragen stellen in dezelfde volgorde
- Eerst algemene vragen daarna specifiek
- Hoe tevreden bent u over uw leven? Hoe tevreden bent u over uw baan?
- Eerste vragen moeten direct aan het onderwerp gerelateerd zijn
- Potentiële gevoelige of beschamende vragen op het einde
- Ene vraag kan de ander beïnvloeden met antwoorden
- Beginnen met een introductie over jezelf, het onderzoek, de ethische issues (anonimiteit)
- Informed consent
Lecture 1:
Errors:
- Individu is niet belangrijk, populatie staat centraal
- Soms heb je een ongelukkige steekproef waardoor je antwoorden verkeerd zijn
- Bias is beter dan random omdat je meer weet over je uitkomst, het slechte er aan is dat je niet veel
weet over de gehele populatie
Soorten errors:
Random: Sample: sampling Question: invalide antwoorden
error (honest mistake)
(it happens) - moeilijke vragen leiden tot geen valide
antwoorden voor het individu, wel voor de
populatie (spotify vraag)
Biased: Sample bias: Question bias:
- studenten op de - Heb je de literatuur voor vandaag gelezen? Tegen
eerste rij van de docent ja antwoorden tegen mede student nee
tribune antwoorden
Fouten vragen:
- Mco/s is leuk en intressant = double barreled
- Geloof jij ook dat immigranten meer diefstallen veroorzaken = sturend
Veel voorkomende fouten bij surveys:
- Slecht verwoorden vraag
- Slecht gevraagd door de interviewer
- Verkeerd begrijpen van de geïnterviewde
- Geheugen problemen van de geïnterviewde
- Verkeerd opgenomen door de interviewer
- Informatie wordt verkeerd in de computer gezet of gecodeerd
Belangrijk:
- Hebben respondenten de nodige kennis over het onderwerp
- Ja of nee vraag? Of geef je meer antwoordopties?
- Is er een 'weet ik niet' optie?
- Vraag je teveel van het geheugen van de respondenten?
Algemene regels bij het opstellen van vragen:
- Blijf altijd je onderzoeksvraag in gedachten houden
- Besluit precies wat je wilt onderzoeken
- Denk goed na over je publiek
- Beschouw jezelf als een respondent: zou jij deze vraag beantwoorden? Hoe zou jij deze vraag
beantwoorden? Merk op als sommige vragen vaag of misleidend zijn
Weet ik niet optie:
- Wanneer de optie 'weet ik niet' er is gaan mensen deze gebruiken en denken ze minder lang na
over een moeilijkere vraag (dit geldt ook voor een neutrale optie zoals ik ben het er niet mee eens en
, niet mee oneens)
- Wil je dat mensen een keuze maken? LAAT WEG
- Wil je dat mensen een keuze maken alleen als ze dat kunnen? VOEG TOE
Let op:
- Het weglaten van de 'weet ik niet' kan tot irritatie leiden bij de respondenten
- Soms is de neutrale optie een echt goed antwoord
Antwoordschalen:
- Helemaal mee eens - - helemaal mee oneens
(ordinaal)
- Mee eens - - - - - mee oneens
(ordinaal maar behandel het als interval)
Social desirability:
- antwoord geven naar wat jij denkt dat verwacht wordt en goed is
- Heb je alle literatuur voor vandaag gelezen? Nee maar je antwoord ja
- Maak het antwoorden van een undesirable antwoord minder dreigend
- Sla jij je partner? Iedereen slaat zijn partner wel eens. Sla jij je partner wel eens?
- In de afgelopen week, wat heb jij bij je partner gedaan? (knuffel, hallo zeggen, slaan, kussen) Dit
moet echt nodig zijn want het is BIAS
- Er is ook desirability tussen verschillende groepen
- Mannen zoveel mogelijk seksuele partners, vrouwen zo min mogelijk
Antwoord opties:
- Primacy: eerste antwoord categorie
- Recency: laatste antwoord categorie
- Je lost dit op door de antwoorden te roteren Bias op individueel level niet op aggregaat level
(populatie)
Openvraag:
- Minder/geen bias, betere validiteit
- Moeizaam voor de respondent
- De vraag zo duidelijk mogelijk stellen: wat is uw leeftijd in jaren?
- Moeilijk samen te voegen met anderen antwoord door zo veel verschillen
Structuur:
- Iedere interviewer moet vragen stellen in dezelfde volgorde
- Eerst algemene vragen daarna specifiek
- Hoe tevreden bent u over uw leven? Hoe tevreden bent u over uw baan?
- Eerste vragen moeten direct aan het onderwerp gerelateerd zijn
- Potentiële gevoelige of beschamende vragen op het einde
- Ene vraag kan de ander beïnvloeden met antwoorden
- Beginnen met een introductie over jezelf, het onderzoek, de ethische issues (anonimiteit)
- Informed consent