SAMENVATTING METHODOLOGIE
TABLE OF CONTENTS
1 HOOFDSTUK 1: INLEIDING ........................................................................................................................................ 8
1.1 INLEIDING ................................................................................................................................................................... 8
1.2 ENKELE VOORBEELDEN ................................................................................................................................................... 8
1.2.1 De opwarming van de aarde: an inconvenient truth versus the great global warming swindle ................... 9
1.2.2 De ‘war against crime’ in New York: werkt het?............................................................................................ 9
1.2.3 Botsende beschavingen ............................................................................................................................... 10
1.2.4 Polls bij verkiezingen: verteken(en)d? ......................................................................................................... 11
1.2.5 De wetenschapper als bokser ...................................................................................................................... 11
1.2.6 Verband tussen gamen en agressie ............................................................................................................. 12
1.3 DE WETENSCHAPPELIJKE AANPAK .................................................................................................................................... 12
1.3.1 Wetenschap: een specifieke benadering ..................................................................................................... 12
1.3.2 Alternatieve bronnen van kennis over de werkelijkheid .............................................................................. 13
1.4 WAT TE VERWACHTEN VAN METHODOLOGIE? ................................................................................................................... 14
2 HOOFDSTUK 2: BOUWTENEN EN SOORTEN WETENSCHAPPELIJK ONDERZOEK ........................................................ 15
2.1 INLEIDING ................................................................................................................................................................. 15
2.2 BOUWSTENEN VAN SOCIAALWETENSCHAPPELIJK ONDERZOEK ................................................................................................ 15
2.2.1 Theorie en empirie ....................................................................................................................................... 15
2.2.2 Inductie en deductie .................................................................................................................................... 18
2.2.3 De empirische cyclus van wetenschappelijk onderzoek. .............................................................................. 19
2.3 EVALUATIECRITERIA VOOR WETENSCHAPPELIJKE KENNIS ....................................................................................................... 20
2.3.1 Betrouwbaarheid......................................................................................................................................... 21
2.3.2 Validiteit ...................................................................................................................................................... 21
2.3.3 Vakmanschap als kwaliteit .......................................................................................................................... 22
2.4 SOORTEN SOCIAALWETENSCHAPPELIJK ONDERZOEK ............................................................................................................. 23
2.4.1 Toepassingsgebied: theoriegericht vs. praktijkgericht onderzoek ............................................................... 23
2.4.2 Onderzoeksmethodologie: kwantitatief vs. kwalitatief onderzoek ............................................................. 24
2.4.3 Kwalitatief onderzoek .................................................................................................................................. 24
2.4.4 Kwantitatief onderzoek ............................................................................................................................... 24
3 HOOFDSTUK 3: FILOSOFISCHE ACHTERGROND: EPISTEMOLOGISCHE BEGINSELEN .................................................. 26
3.1 INLEIDING ................................................................................................................................................................. 26
1
, 3.2 DE ONTWIKKELING VAN DE EPISTEMOLOGIE ...................................................................................................................... 26
3.2.1 Empirische natuurwetenschap: positivisme en empirisme .......................................................................... 26
3.2.2 David Humes scepticisme ............................................................................................................................ 28
3.2.3 Wiener Kreis: logisch positivisme en verificationisme ................................................................................. 28
3.2.4 Karl Popper: principe van falsificatie ........................................................................................................... 29
3.2.5 Thomas Kuhns paradigma’s ........................................................................................................................ 30
3.2.6 Imre Lakatos: theorie met meerinhoud ....................................................................................................... 31
3.3 WAT MET SOCIALE WETENSCHAPPEN? ............................................................................................................................. 32
3.3.1 Onderzoeksobject: positivisme vs. constructivisme ..................................................................................... 32
3.3.2 Positivisme of naturalisme binnen de sociale wetenschappen .................................................................... 32
3.3.3 Constructivisme binnen de sociale wetenschappen..................................................................................... 33
4 HOOFDSTUK 4: ETHIEK IN SOCIAALWETENSCHAPPELIJK ONDERZOEK ..................................................................... 39
4.1 INLEIDING ................................................................................................................................................................. 39
4.2 HOE OMGAAN MET DEELNEMERS AAN ONDERZOEK ............................................................................................................. 41
4.2.1 Vermijden van schade als basisprincipe ...................................................................................................... 41
4.2.2 Vrijwillige toestemming of informed consent .............................................................................................. 42
4.2.3 Privacy, vertrouwelijkheid, anonimisering ................................................................................................... 43
4.3 PROFESSIONELE STANDAARDEN EN DEONTOLOGIE .............................................................................................................. 44
4.4 SAMENLEVING EN WETENSCHAP ..................................................................................................................................... 47
5 HOOFDSTUK 5: ONDERZOEK ONTWERPEN: STRATEGIE EN DOELSTELLINGEN .......................................................... 49
5.1 INLEIDING ................................................................................................................................................................. 49
5.2 HET ONDERZOEKSPLAN ................................................................................................................................................ 49
5.3 PROBLEEMFORMULERING OF PROBLEEMSTELLING ............................................................................................................... 50
5.3.1 Algemene vraagstelling en onderzoeksdoelstelling: fundamenteel vs. praktijkgericht? ............................. 51
5.3.2 Literatuurstudie: status quaestionis ............................................................................................................ 52
5.3.3 Vraagstelling en onderzoeksvragen ............................................................................................................ 53
5.4 ONDERZOEKSOPZET OF (ONDERZOEK) TECHNISCH ONTWERP ................................................................................................. 55
5.4.1 Plaats en situatie van waarneming: waar? ................................................................................................. 56
5.4.2 Tijdstip en periode van waarneming: wanneer en hoe lang? ...................................................................... 57
5.4.3 Onderzoekseenheden en kenmerken: wie? ................................................................................................. 57
5.4.4 Methode van waarneming: hoe? ................................................................................................................ 57
5.4.5 Tijdsplanning en financieel overzicht ........................................................................................................... 58
6 HOOFDSTUK 6: KWANTITATIEVE EN KWALITATIEVE METINGEN.............................................................................. 59
6.1 INLEIDING ................................................................................................................................................................. 59
6.2 METEN: ENKELE BASISBEGRIPPEN ................................................................................................................................... 59
2
, 6.2.1 Het meetproces ........................................................................................................................................... 59
6.2.2 Soorten concepten ....................................................................................................................................... 60
6.2.3 Meten: kwantitatieve vs. kwalitatieve benaderingen ................................................................................. 62
6.3 KWANTITATIEF METEN ................................................................................................................................................. 63
6.3.1 Uitgangspunt: klassieke testtheorie ............................................................................................................ 63
6.3.2 Enkele kenmerken van kwantitatieve variabelen ........................................................................................ 64
6.3.3 Schaaltechnieken ......................................................................................................................................... 65
6.3.4 Operationaliseren van relaties tussen variabelen ....................................................................................... 65
6.3.5 Betrouwbaarheid nagaan............................................................................................................................ 68
6.3.6 Meetvaliditeit nagaan ................................................................................................................................. 69
6.4 KWALITATIEVE METING ................................................................................................................................................ 70
6.4.1 Het open karakter van kwalitatieve benaderingen ..................................................................................... 70
6.4.2 Enkele illustraties van kwalitatieve benaderingen ...................................................................................... 71
6.4.3 De kwaliteit van kwalitatieve metingen ...................................................................................................... 73
7 HOOFDSTUK 7: SELECTIE VAN ONDERZOEKSEENHEDEN: STEEKPROEVEN ................................................................ 75
7.1 INLEIDING ................................................................................................................................................................. 75
7.1.1 Onderzoekseenheden, populatie en steekproef........................................................................................... 75
7.1.2 Steekproeven: twee logica’s van selectie..................................................................................................... 76
7.2 TOEVALSTEEKPROEVEN ................................................................................................................................................ 77
7.2.1 Stappen bij het trekken van toevalsteekproeven ......................................................................................... 77
7.2.2 Types toevalsteekproeven ........................................................................................................................... 78
7.2.3 Foutenbronnen bij steekproeftrekking ........................................................................................................ 81
7.2.4 Steekproefgrootte ....................................................................................................................................... 84
7.2.5 Kwantitatieve niet-toevalsteekproeven ....................................................................................................... 85
7.3 THEORETISCHE STEEKPROEVEN ....................................................................................................................................... 86
7.3.1 De eigenheid van theoretische steekproeftrekking ..................................................................................... 86
7.3.2 Strategieën in theoretische steekproeftrekking........................................................................................... 87
8 HOOFDSTUK 8: EXPERIMENTELE ONTWERPEN ........................................................................................................ 90
8.1 INLEIDING ................................................................................................................................................................. 90
8.2 ONDERDELEN VAN HET KLASSIEKE EXPERIMENTELE ONTWERP ................................................................................................ 91
8.2.1 Basisschema van een klassiek experiment .................................................................................................. 92
8.2.2 Randomiseren en matchen .......................................................................................................................... 92
8.2.3 Effect van de stimulus.................................................................................................................................. 94
8.2.4 Voormeting.................................................................................................................................................. 94
8.3 BEDREIGINGEN VAN INTERNE VALIDITEIT ........................................................................................................................... 95
3
, 8.3.1 Buitenexperimentele gebeurtenissen .......................................................................................................... 95
8.3.2 Maturatie of spontane verandering ............................................................................................................ 96
8.3.3 Testeffect ..................................................................................................................................................... 96
8.3.4 Instrumentatie ............................................................................................................................................. 96
8.3.5 Statistische regressie ................................................................................................................................... 96
8.3.6 Selectie ........................................................................................................................................................ 97
8.3.7 Uitval ........................................................................................................................................................... 97
8.3.8 Verwachtingen van de onderzoeker ............................................................................................................ 97
8.4 BEDREIGINGEN VAN EXTERNE VALIDITEIT .......................................................................................................................... 98
8.4.1 Populatievaliditeit ....................................................................................................................................... 98
8.4.2 Naturalistische validiteit .............................................................................................................................. 98
8.5 ALTERNATIEVEN OP DE KLASSIEKE EXPERIMENTELE ONTWERPEN ............................................................................................. 99
8.5.1 Quasi-experimentele ontwerpen ............................................................................................................... 100
8.5.2 Pre-experimentele ontwerpen ................................................................................................................... 103
8.6 ETHISCHE BEKOMMERNISSEN ....................................................................................................................................... 104
9 HOOFDSTUK 9: SURVEYONDERZOEK ..................................................................................................................... 105
9.1 INLEIDING ............................................................................................................................................................... 105
9.2 STAPPENPLAN EN FOUTENBRONNEN .............................................................................................................................. 106
9.3 OVER VRAGEN EN ANTWOORDEN ................................................................................................................................. 108
9.4 HET ONTWERP VAN VRAGENLIJSTEN .............................................................................................................................. 109
9.4.1 Een model van vraag- en antwoordproces ................................................................................................ 109
9.4.2 Responsfouten en -stijlen .......................................................................................................................... 111
9.4.3 Aanbevelingen voor het opstellen van vragenlijsten ................................................................................. 113
9.5 DE KEUZE VOOR EEN SURVEYMODUS ............................................................................................................................. 116
9.5.1 Face-to-facesurveys ................................................................................................................................... 116
9.5.2 Zelf-in-te-vullen vragenlijst ........................................................................................................................ 117
9.5.3 Mixed-mode surveys.................................................................................................................................. 119
10 HOOFDSTUK 10: NIET-REACTIEF ONDERZOEK EN SECUNDAIRE DATA-ANALYSE ................................................ 121
10.1 INLEIDING ............................................................................................................................................................... 121
10.2 SOORTEN NIET-REACTIEVE GEGEVENS ............................................................................................................................ 122
10.2.1 Fysieke sporen ........................................................................................................................................... 122
10.2.2 Tekst: inhoudsanalyse of content analysis ................................................................................................ 122
10.2.3 Administratieve data en officiële statistieken ........................................................................................... 124
10.2.4 Big data ..................................................................................................................................................... 125
10.3 SECUNDAIRE ANALYSE VAN ONDERZOEKDATA .................................................................................................................. 127
4
TABLE OF CONTENTS
1 HOOFDSTUK 1: INLEIDING ........................................................................................................................................ 8
1.1 INLEIDING ................................................................................................................................................................... 8
1.2 ENKELE VOORBEELDEN ................................................................................................................................................... 8
1.2.1 De opwarming van de aarde: an inconvenient truth versus the great global warming swindle ................... 9
1.2.2 De ‘war against crime’ in New York: werkt het?............................................................................................ 9
1.2.3 Botsende beschavingen ............................................................................................................................... 10
1.2.4 Polls bij verkiezingen: verteken(en)d? ......................................................................................................... 11
1.2.5 De wetenschapper als bokser ...................................................................................................................... 11
1.2.6 Verband tussen gamen en agressie ............................................................................................................. 12
1.3 DE WETENSCHAPPELIJKE AANPAK .................................................................................................................................... 12
1.3.1 Wetenschap: een specifieke benadering ..................................................................................................... 12
1.3.2 Alternatieve bronnen van kennis over de werkelijkheid .............................................................................. 13
1.4 WAT TE VERWACHTEN VAN METHODOLOGIE? ................................................................................................................... 14
2 HOOFDSTUK 2: BOUWTENEN EN SOORTEN WETENSCHAPPELIJK ONDERZOEK ........................................................ 15
2.1 INLEIDING ................................................................................................................................................................. 15
2.2 BOUWSTENEN VAN SOCIAALWETENSCHAPPELIJK ONDERZOEK ................................................................................................ 15
2.2.1 Theorie en empirie ....................................................................................................................................... 15
2.2.2 Inductie en deductie .................................................................................................................................... 18
2.2.3 De empirische cyclus van wetenschappelijk onderzoek. .............................................................................. 19
2.3 EVALUATIECRITERIA VOOR WETENSCHAPPELIJKE KENNIS ....................................................................................................... 20
2.3.1 Betrouwbaarheid......................................................................................................................................... 21
2.3.2 Validiteit ...................................................................................................................................................... 21
2.3.3 Vakmanschap als kwaliteit .......................................................................................................................... 22
2.4 SOORTEN SOCIAALWETENSCHAPPELIJK ONDERZOEK ............................................................................................................. 23
2.4.1 Toepassingsgebied: theoriegericht vs. praktijkgericht onderzoek ............................................................... 23
2.4.2 Onderzoeksmethodologie: kwantitatief vs. kwalitatief onderzoek ............................................................. 24
2.4.3 Kwalitatief onderzoek .................................................................................................................................. 24
2.4.4 Kwantitatief onderzoek ............................................................................................................................... 24
3 HOOFDSTUK 3: FILOSOFISCHE ACHTERGROND: EPISTEMOLOGISCHE BEGINSELEN .................................................. 26
3.1 INLEIDING ................................................................................................................................................................. 26
1
, 3.2 DE ONTWIKKELING VAN DE EPISTEMOLOGIE ...................................................................................................................... 26
3.2.1 Empirische natuurwetenschap: positivisme en empirisme .......................................................................... 26
3.2.2 David Humes scepticisme ............................................................................................................................ 28
3.2.3 Wiener Kreis: logisch positivisme en verificationisme ................................................................................. 28
3.2.4 Karl Popper: principe van falsificatie ........................................................................................................... 29
3.2.5 Thomas Kuhns paradigma’s ........................................................................................................................ 30
3.2.6 Imre Lakatos: theorie met meerinhoud ....................................................................................................... 31
3.3 WAT MET SOCIALE WETENSCHAPPEN? ............................................................................................................................. 32
3.3.1 Onderzoeksobject: positivisme vs. constructivisme ..................................................................................... 32
3.3.2 Positivisme of naturalisme binnen de sociale wetenschappen .................................................................... 32
3.3.3 Constructivisme binnen de sociale wetenschappen..................................................................................... 33
4 HOOFDSTUK 4: ETHIEK IN SOCIAALWETENSCHAPPELIJK ONDERZOEK ..................................................................... 39
4.1 INLEIDING ................................................................................................................................................................. 39
4.2 HOE OMGAAN MET DEELNEMERS AAN ONDERZOEK ............................................................................................................. 41
4.2.1 Vermijden van schade als basisprincipe ...................................................................................................... 41
4.2.2 Vrijwillige toestemming of informed consent .............................................................................................. 42
4.2.3 Privacy, vertrouwelijkheid, anonimisering ................................................................................................... 43
4.3 PROFESSIONELE STANDAARDEN EN DEONTOLOGIE .............................................................................................................. 44
4.4 SAMENLEVING EN WETENSCHAP ..................................................................................................................................... 47
5 HOOFDSTUK 5: ONDERZOEK ONTWERPEN: STRATEGIE EN DOELSTELLINGEN .......................................................... 49
5.1 INLEIDING ................................................................................................................................................................. 49
5.2 HET ONDERZOEKSPLAN ................................................................................................................................................ 49
5.3 PROBLEEMFORMULERING OF PROBLEEMSTELLING ............................................................................................................... 50
5.3.1 Algemene vraagstelling en onderzoeksdoelstelling: fundamenteel vs. praktijkgericht? ............................. 51
5.3.2 Literatuurstudie: status quaestionis ............................................................................................................ 52
5.3.3 Vraagstelling en onderzoeksvragen ............................................................................................................ 53
5.4 ONDERZOEKSOPZET OF (ONDERZOEK) TECHNISCH ONTWERP ................................................................................................. 55
5.4.1 Plaats en situatie van waarneming: waar? ................................................................................................. 56
5.4.2 Tijdstip en periode van waarneming: wanneer en hoe lang? ...................................................................... 57
5.4.3 Onderzoekseenheden en kenmerken: wie? ................................................................................................. 57
5.4.4 Methode van waarneming: hoe? ................................................................................................................ 57
5.4.5 Tijdsplanning en financieel overzicht ........................................................................................................... 58
6 HOOFDSTUK 6: KWANTITATIEVE EN KWALITATIEVE METINGEN.............................................................................. 59
6.1 INLEIDING ................................................................................................................................................................. 59
6.2 METEN: ENKELE BASISBEGRIPPEN ................................................................................................................................... 59
2
, 6.2.1 Het meetproces ........................................................................................................................................... 59
6.2.2 Soorten concepten ....................................................................................................................................... 60
6.2.3 Meten: kwantitatieve vs. kwalitatieve benaderingen ................................................................................. 62
6.3 KWANTITATIEF METEN ................................................................................................................................................. 63
6.3.1 Uitgangspunt: klassieke testtheorie ............................................................................................................ 63
6.3.2 Enkele kenmerken van kwantitatieve variabelen ........................................................................................ 64
6.3.3 Schaaltechnieken ......................................................................................................................................... 65
6.3.4 Operationaliseren van relaties tussen variabelen ....................................................................................... 65
6.3.5 Betrouwbaarheid nagaan............................................................................................................................ 68
6.3.6 Meetvaliditeit nagaan ................................................................................................................................. 69
6.4 KWALITATIEVE METING ................................................................................................................................................ 70
6.4.1 Het open karakter van kwalitatieve benaderingen ..................................................................................... 70
6.4.2 Enkele illustraties van kwalitatieve benaderingen ...................................................................................... 71
6.4.3 De kwaliteit van kwalitatieve metingen ...................................................................................................... 73
7 HOOFDSTUK 7: SELECTIE VAN ONDERZOEKSEENHEDEN: STEEKPROEVEN ................................................................ 75
7.1 INLEIDING ................................................................................................................................................................. 75
7.1.1 Onderzoekseenheden, populatie en steekproef........................................................................................... 75
7.1.2 Steekproeven: twee logica’s van selectie..................................................................................................... 76
7.2 TOEVALSTEEKPROEVEN ................................................................................................................................................ 77
7.2.1 Stappen bij het trekken van toevalsteekproeven ......................................................................................... 77
7.2.2 Types toevalsteekproeven ........................................................................................................................... 78
7.2.3 Foutenbronnen bij steekproeftrekking ........................................................................................................ 81
7.2.4 Steekproefgrootte ....................................................................................................................................... 84
7.2.5 Kwantitatieve niet-toevalsteekproeven ....................................................................................................... 85
7.3 THEORETISCHE STEEKPROEVEN ....................................................................................................................................... 86
7.3.1 De eigenheid van theoretische steekproeftrekking ..................................................................................... 86
7.3.2 Strategieën in theoretische steekproeftrekking........................................................................................... 87
8 HOOFDSTUK 8: EXPERIMENTELE ONTWERPEN ........................................................................................................ 90
8.1 INLEIDING ................................................................................................................................................................. 90
8.2 ONDERDELEN VAN HET KLASSIEKE EXPERIMENTELE ONTWERP ................................................................................................ 91
8.2.1 Basisschema van een klassiek experiment .................................................................................................. 92
8.2.2 Randomiseren en matchen .......................................................................................................................... 92
8.2.3 Effect van de stimulus.................................................................................................................................. 94
8.2.4 Voormeting.................................................................................................................................................. 94
8.3 BEDREIGINGEN VAN INTERNE VALIDITEIT ........................................................................................................................... 95
3
, 8.3.1 Buitenexperimentele gebeurtenissen .......................................................................................................... 95
8.3.2 Maturatie of spontane verandering ............................................................................................................ 96
8.3.3 Testeffect ..................................................................................................................................................... 96
8.3.4 Instrumentatie ............................................................................................................................................. 96
8.3.5 Statistische regressie ................................................................................................................................... 96
8.3.6 Selectie ........................................................................................................................................................ 97
8.3.7 Uitval ........................................................................................................................................................... 97
8.3.8 Verwachtingen van de onderzoeker ............................................................................................................ 97
8.4 BEDREIGINGEN VAN EXTERNE VALIDITEIT .......................................................................................................................... 98
8.4.1 Populatievaliditeit ....................................................................................................................................... 98
8.4.2 Naturalistische validiteit .............................................................................................................................. 98
8.5 ALTERNATIEVEN OP DE KLASSIEKE EXPERIMENTELE ONTWERPEN ............................................................................................. 99
8.5.1 Quasi-experimentele ontwerpen ............................................................................................................... 100
8.5.2 Pre-experimentele ontwerpen ................................................................................................................... 103
8.6 ETHISCHE BEKOMMERNISSEN ....................................................................................................................................... 104
9 HOOFDSTUK 9: SURVEYONDERZOEK ..................................................................................................................... 105
9.1 INLEIDING ............................................................................................................................................................... 105
9.2 STAPPENPLAN EN FOUTENBRONNEN .............................................................................................................................. 106
9.3 OVER VRAGEN EN ANTWOORDEN ................................................................................................................................. 108
9.4 HET ONTWERP VAN VRAGENLIJSTEN .............................................................................................................................. 109
9.4.1 Een model van vraag- en antwoordproces ................................................................................................ 109
9.4.2 Responsfouten en -stijlen .......................................................................................................................... 111
9.4.3 Aanbevelingen voor het opstellen van vragenlijsten ................................................................................. 113
9.5 DE KEUZE VOOR EEN SURVEYMODUS ............................................................................................................................. 116
9.5.1 Face-to-facesurveys ................................................................................................................................... 116
9.5.2 Zelf-in-te-vullen vragenlijst ........................................................................................................................ 117
9.5.3 Mixed-mode surveys.................................................................................................................................. 119
10 HOOFDSTUK 10: NIET-REACTIEF ONDERZOEK EN SECUNDAIRE DATA-ANALYSE ................................................ 121
10.1 INLEIDING ............................................................................................................................................................... 121
10.2 SOORTEN NIET-REACTIEVE GEGEVENS ............................................................................................................................ 122
10.2.1 Fysieke sporen ........................................................................................................................................... 122
10.2.2 Tekst: inhoudsanalyse of content analysis ................................................................................................ 122
10.2.3 Administratieve data en officiële statistieken ........................................................................................... 124
10.2.4 Big data ..................................................................................................................................................... 125
10.3 SECUNDAIRE ANALYSE VAN ONDERZOEKDATA .................................................................................................................. 127
4
