Section I – Beslissingen die je moet nemen voordat je het onderzoek uitvoert
In H1
Section II – Vragenlijstontwerp
In H2: algemene kenmerken enquête, beslissingen ontwerp onderzoek, omvang enquête, wie neemt
het af, enquêteformatten & beslissingen nemen obv onderzoeksvraag, doelgroep en middelen.
In H3: De begeleidende brief, enquête-instrument & organisatie.
In H4: geschikte vragen ontwikkelen.
In H5: validiteit & betrouwbaarheid van de metingen
In H6: soorten pretesting-manieren.
Section III – Een enquête uitvoeren
In H7: geschikte waarschijnlijkheidssteekproef selecteren, overwegingen over steekproefgrootte &
steekproeftechnieken.
In H8: niet-waarschijnlijkheidssteekproeven & moeilijke populaties.
In H9: steekproeffouten & strategieën om die fouten te minimaliseren.
, Hoofdstuk 1 – Introductie over surveyonderzoek
Goede survey is --> generaliseerbaar
Survey erg flexibel --> veel opties voor instrumenten & dataverzameling
Enquête is meer dan vragenlijst, afhankelijk van: goed ontwerp, representatieve steekproeven &
passend & effectief beheer van vragenlijst.
Enquêtes zien er niet altijd uit als enquêtes, bv. Multiple choice vraag op toets is het ook.
Slecht ontworpen enquête kan onjuiste info geven, met als gevolg: verkeerd handelen.
Enquêtes die zijn ontwikkeld zonder rekening houden met de concepten en eisen eraan.
Belangrijk
- We kunnen alleen goed kenmerken van de populatie beschrijven als we de juist vragen
stellen (week 1)
- Dit heeft betrekking op de interne validiteit, meten we wat we willen meten (week 1)
- We kunnen alleen goed de populatie beschrijven als onze steekproef een goede afspiegeling
is van de populatie (week 2)
- Dit heeft betrekking op de externe validiteit, kunnen we resultaten generaliseren naar de
populatie (week 2)
Kenmerken survey
- Reeks vragen
- Steekproef met respondenten
- ~Ruel: surveys zijn een effectieve onderzoeksmethode voor sociaal- & gedragsonderzoek
- Geen causaliteit vast te stellen
2 gevolgtrekkingen in survey
1. Als we de juiste vragen stellen, meten we de karakteristieken (kenmerken) in de populatie.
2. Als we de juiste steekproef trekken, is deze representatief voor de populatie.
Belangrijke beslissingen survey
1. Onderzoeksdoel:
- Wat wil je bereiken met het onderzoek?
- Welke info moet je verzamelen om dit doel te bereiken?
2. Modus om data te verzamelen:
- Hoe ga je de data verzamelen?
3. Analysemethode:
- Hoe ga je de data analyseren?
Redenen om survey te kiezen/of niet
- Respondenten kunnen veel vragen snel beantwoorden
- Je kunt vrij eenvoudig een grote groep respondenten onderzoeken
- Met de juiste steekproeftrekking kunnen conclusies getrokken worden over een populatie
- MAAR: minder diepgaande info dan bij kwalitatief onderzoek & de meeste enquêteontwerpen
zijn niet geschikt voor het beoordelen van causale verbanden
, Hoe weet je of een survey goed is?
Respondenten zien enquête vaak als wetenschappelijk & correct. Betekent niet --> enquête goed
ontworpen: respondenten niet juiste beoordelaars. Enquête is proces dat uit meer bestaat dan een
vragenlijst.
Vaak enquêtes maken onderschat. Door mensen gedaan die er geen verstand van hebben. Daardoor
kan dit zorgen voor onjuiste informatie met als gevolg er onjuist naar handelingen bv. Binnen een
bedrijf. Dan kun je beter geen enquête gebruiken.
Case 1.1 - Problematische voorbeeld enquêtevraag
‘Er zou een belastingverlaging moeten komen & een nieuw nationaal
ziektekostenverzekeringsprogramma: Eens of oneens ?’
Deze vraag is --> verwarrend. Is double-barreled question
De vraag behandelt 2 aspecten. Wat als je het eens bent met het ene aspect & niet met de andere?
Gevolg --> mensen kiezen een antwoord dat niet volledig aansluit bij hun mening.
Enquêtes over leraren: zijn zij ‘goede’ leraren?
Welke vragen zijn opgenomen, welke niet & de volgorde heeft invloed op de resultaten.
Een enquête over hoe een vak was op de UvA. De resultaten daarvan hebben invloed op de
ontwikkeling van het vak en eventueel op docenten hun baan. Echter zijn deze niet altijd door
enquêteonderzoekers opgesteld.
Als je een enquête uitvoert, doe het dan goed. Anders --> tijdverspilling & schadelijk
Wie de enquête ook maakt, er zijn altijd beperkte middelen in tijd & geld. Er worden altijd keuzes
gemaakt mbt haalbaarheid van het project. Deze beslissingen soms bepaald door individuele
voorkeuren (onbewuste vooringenomenheid) of tijdsbeperkingen.
‘Perfecte’ informatie krijgen is niet haalbaar, aangezien --> oneindige middelen niet bestaan
Het is cruciaal dat je zeker bent dat beslissingen over geld & tijd beperken, niet de kwaliteit van de
enquête beperken!! Daarom --> beslissingen niet overlaten aan onbewuste gedachten of betrokkenen
Mini case 1.2 - is een 10-jarige jongen de juiste respondent voor een enquête over light
frisdrank?
10-jarige Billy gevraagd enquête in te vullen over light frisdranken die hij moest proeven. Hij mocht dit
eigenlijk niet echt drinken nog van zijn ouders. Je zou een kind van 10 geen eens aanspreken om dit
in te vullen.
Het is wss dat het personeel een deadline had om een aantal enquêtes af te hebben. Billy sloot
helemaal niet aan bij de demografische gegevens die gezocht werden. De demografische gegevens
waren dus niet juist gecodeerd, want dan zou Billy uit de resultaten worden weggelaten & is het
verspilling van middelen van het bedrijf. Billy wss geregistreerd als volwassenen, waardoor zijn
gegevens mee worden genomen in de analyse & de resultaten beïnvloedt. Als dit vaker gebeurd -->
hele project, alle middelen, verspild.
Moet een enquête perfect zijn om nuttig te zijn? Nee. Enquête kan bv. helpen in hoe ander onderzoek
nog rijkere data kan verkrijgen. Het geeft niet de meest uitgebreide data. Voor enquête minder
middelen vaak nodig dan voor andere vormen van onderzoek.
Toepassingen van enquêteonderzoek
, Opiniepeiling = enquêteonderzoek
Houdingen & meningen meten van bevolking via kleine representatieve steekproef.
Enquêtes kunnen ook gebruikt worden in:
- Causaal onderzoek:
Doel enquête --> factoren bepalen die afhankelijke variabele beïnvloeden
- Experimenteel onderzoek:
Doel enquête --> pretests, posttests, vervolgvragen
Methodologisch ontwerp enquête
1. Cross-sectioneel
= onderzoek dat momentopname maakt van meningen op 1 punt in de tijd. Snapshot.
Bv. Opiniepeiling, politiek stemonderzoek.
2. Longitudinaal
= onderzoek dat veranderingen over tijdsperioden kan vaststellen.
Soorten:
1. Herhaalde cross-sectioneel ontwerp
= dezelfde vragenlijst op meer dan 1 punt in tijd afgenomen, om te vergelijken.
2. Vast-sample panelontwerp
= steeds dezelfde mensen (zelfde steekproef) gevraagd over loop van tijd
3. Cohortonderzoek
= volgt mensen in de tijd die een gemeenschappelijke gebeurtenis of startpunt hebben
meegemaakt.
Technologie & enquêteonderzoek
Vroeger technologie enquêteonderzoek: Telefoons & CATI (computer assisted telephone interview)
Tegenwoordig meer opties uitvoeren enquêteonderzoek, zoals ipas, webbrowsers, iphones etc.
Software als Survey Monkey & Qualtrics. Software kan veel nauwkeurige & meer info verzamelen dan
met pen-papier of telefonisch.
Ethiek van surveyonderzoek
Surveyonderzoek betreft menselijke proefpersonen, dus komt ethiek daarbij kijken.
Principes van het Belmont Rapport worden aanvaard als standaard voor surveyonderzoek. De 3
principes:
1. Rechtvaardigheid
2. Weldadigheid
3. Respect
Het rapport is vaak basis voor ethische gedragscodes zoals die van de American Sociological
Association. Insitutionele beoordelingscommissies (IRB’s) werden ontwikkeld op universiteiten om
bescherming proefpersonen te garanderen. Ethische protocollen volgen.
In H1
Section II – Vragenlijstontwerp
In H2: algemene kenmerken enquête, beslissingen ontwerp onderzoek, omvang enquête, wie neemt
het af, enquêteformatten & beslissingen nemen obv onderzoeksvraag, doelgroep en middelen.
In H3: De begeleidende brief, enquête-instrument & organisatie.
In H4: geschikte vragen ontwikkelen.
In H5: validiteit & betrouwbaarheid van de metingen
In H6: soorten pretesting-manieren.
Section III – Een enquête uitvoeren
In H7: geschikte waarschijnlijkheidssteekproef selecteren, overwegingen over steekproefgrootte &
steekproeftechnieken.
In H8: niet-waarschijnlijkheidssteekproeven & moeilijke populaties.
In H9: steekproeffouten & strategieën om die fouten te minimaliseren.
, Hoofdstuk 1 – Introductie over surveyonderzoek
Goede survey is --> generaliseerbaar
Survey erg flexibel --> veel opties voor instrumenten & dataverzameling
Enquête is meer dan vragenlijst, afhankelijk van: goed ontwerp, representatieve steekproeven &
passend & effectief beheer van vragenlijst.
Enquêtes zien er niet altijd uit als enquêtes, bv. Multiple choice vraag op toets is het ook.
Slecht ontworpen enquête kan onjuiste info geven, met als gevolg: verkeerd handelen.
Enquêtes die zijn ontwikkeld zonder rekening houden met de concepten en eisen eraan.
Belangrijk
- We kunnen alleen goed kenmerken van de populatie beschrijven als we de juist vragen
stellen (week 1)
- Dit heeft betrekking op de interne validiteit, meten we wat we willen meten (week 1)
- We kunnen alleen goed de populatie beschrijven als onze steekproef een goede afspiegeling
is van de populatie (week 2)
- Dit heeft betrekking op de externe validiteit, kunnen we resultaten generaliseren naar de
populatie (week 2)
Kenmerken survey
- Reeks vragen
- Steekproef met respondenten
- ~Ruel: surveys zijn een effectieve onderzoeksmethode voor sociaal- & gedragsonderzoek
- Geen causaliteit vast te stellen
2 gevolgtrekkingen in survey
1. Als we de juiste vragen stellen, meten we de karakteristieken (kenmerken) in de populatie.
2. Als we de juiste steekproef trekken, is deze representatief voor de populatie.
Belangrijke beslissingen survey
1. Onderzoeksdoel:
- Wat wil je bereiken met het onderzoek?
- Welke info moet je verzamelen om dit doel te bereiken?
2. Modus om data te verzamelen:
- Hoe ga je de data verzamelen?
3. Analysemethode:
- Hoe ga je de data analyseren?
Redenen om survey te kiezen/of niet
- Respondenten kunnen veel vragen snel beantwoorden
- Je kunt vrij eenvoudig een grote groep respondenten onderzoeken
- Met de juiste steekproeftrekking kunnen conclusies getrokken worden over een populatie
- MAAR: minder diepgaande info dan bij kwalitatief onderzoek & de meeste enquêteontwerpen
zijn niet geschikt voor het beoordelen van causale verbanden
, Hoe weet je of een survey goed is?
Respondenten zien enquête vaak als wetenschappelijk & correct. Betekent niet --> enquête goed
ontworpen: respondenten niet juiste beoordelaars. Enquête is proces dat uit meer bestaat dan een
vragenlijst.
Vaak enquêtes maken onderschat. Door mensen gedaan die er geen verstand van hebben. Daardoor
kan dit zorgen voor onjuiste informatie met als gevolg er onjuist naar handelingen bv. Binnen een
bedrijf. Dan kun je beter geen enquête gebruiken.
Case 1.1 - Problematische voorbeeld enquêtevraag
‘Er zou een belastingverlaging moeten komen & een nieuw nationaal
ziektekostenverzekeringsprogramma: Eens of oneens ?’
Deze vraag is --> verwarrend. Is double-barreled question
De vraag behandelt 2 aspecten. Wat als je het eens bent met het ene aspect & niet met de andere?
Gevolg --> mensen kiezen een antwoord dat niet volledig aansluit bij hun mening.
Enquêtes over leraren: zijn zij ‘goede’ leraren?
Welke vragen zijn opgenomen, welke niet & de volgorde heeft invloed op de resultaten.
Een enquête over hoe een vak was op de UvA. De resultaten daarvan hebben invloed op de
ontwikkeling van het vak en eventueel op docenten hun baan. Echter zijn deze niet altijd door
enquêteonderzoekers opgesteld.
Als je een enquête uitvoert, doe het dan goed. Anders --> tijdverspilling & schadelijk
Wie de enquête ook maakt, er zijn altijd beperkte middelen in tijd & geld. Er worden altijd keuzes
gemaakt mbt haalbaarheid van het project. Deze beslissingen soms bepaald door individuele
voorkeuren (onbewuste vooringenomenheid) of tijdsbeperkingen.
‘Perfecte’ informatie krijgen is niet haalbaar, aangezien --> oneindige middelen niet bestaan
Het is cruciaal dat je zeker bent dat beslissingen over geld & tijd beperken, niet de kwaliteit van de
enquête beperken!! Daarom --> beslissingen niet overlaten aan onbewuste gedachten of betrokkenen
Mini case 1.2 - is een 10-jarige jongen de juiste respondent voor een enquête over light
frisdrank?
10-jarige Billy gevraagd enquête in te vullen over light frisdranken die hij moest proeven. Hij mocht dit
eigenlijk niet echt drinken nog van zijn ouders. Je zou een kind van 10 geen eens aanspreken om dit
in te vullen.
Het is wss dat het personeel een deadline had om een aantal enquêtes af te hebben. Billy sloot
helemaal niet aan bij de demografische gegevens die gezocht werden. De demografische gegevens
waren dus niet juist gecodeerd, want dan zou Billy uit de resultaten worden weggelaten & is het
verspilling van middelen van het bedrijf. Billy wss geregistreerd als volwassenen, waardoor zijn
gegevens mee worden genomen in de analyse & de resultaten beïnvloedt. Als dit vaker gebeurd -->
hele project, alle middelen, verspild.
Moet een enquête perfect zijn om nuttig te zijn? Nee. Enquête kan bv. helpen in hoe ander onderzoek
nog rijkere data kan verkrijgen. Het geeft niet de meest uitgebreide data. Voor enquête minder
middelen vaak nodig dan voor andere vormen van onderzoek.
Toepassingen van enquêteonderzoek
, Opiniepeiling = enquêteonderzoek
Houdingen & meningen meten van bevolking via kleine representatieve steekproef.
Enquêtes kunnen ook gebruikt worden in:
- Causaal onderzoek:
Doel enquête --> factoren bepalen die afhankelijke variabele beïnvloeden
- Experimenteel onderzoek:
Doel enquête --> pretests, posttests, vervolgvragen
Methodologisch ontwerp enquête
1. Cross-sectioneel
= onderzoek dat momentopname maakt van meningen op 1 punt in de tijd. Snapshot.
Bv. Opiniepeiling, politiek stemonderzoek.
2. Longitudinaal
= onderzoek dat veranderingen over tijdsperioden kan vaststellen.
Soorten:
1. Herhaalde cross-sectioneel ontwerp
= dezelfde vragenlijst op meer dan 1 punt in tijd afgenomen, om te vergelijken.
2. Vast-sample panelontwerp
= steeds dezelfde mensen (zelfde steekproef) gevraagd over loop van tijd
3. Cohortonderzoek
= volgt mensen in de tijd die een gemeenschappelijke gebeurtenis of startpunt hebben
meegemaakt.
Technologie & enquêteonderzoek
Vroeger technologie enquêteonderzoek: Telefoons & CATI (computer assisted telephone interview)
Tegenwoordig meer opties uitvoeren enquêteonderzoek, zoals ipas, webbrowsers, iphones etc.
Software als Survey Monkey & Qualtrics. Software kan veel nauwkeurige & meer info verzamelen dan
met pen-papier of telefonisch.
Ethiek van surveyonderzoek
Surveyonderzoek betreft menselijke proefpersonen, dus komt ethiek daarbij kijken.
Principes van het Belmont Rapport worden aanvaard als standaard voor surveyonderzoek. De 3
principes:
1. Rechtvaardigheid
2. Weldadigheid
3. Respect
Het rapport is vaak basis voor ethische gedragscodes zoals die van de American Sociological
Association. Insitutionele beoordelingscommissies (IRB’s) werden ontwikkeld op universiteiten om
bescherming proefpersonen te garanderen. Ethische protocollen volgen.
