ONDERZOEKSVAARDIGHEDEN:
Betrouwbaarheid en validiteit:
Belangrijke aspecten betrouwbaarheid:
Kwantitatief onderzoek;
1. Bepaal de juiste omvang van de steekproef. Te klein? --> onbetrouwbaar. Bij
een grotere omvang is de kans groter dat bij herhaling van het onderzoek het
resultaat vrijwel hetzelfde blijft.
2. Fishing= niet alles onnodig met elkaar in verband brengen. Als je in een
onderzoek veel zaken meet en je gaat onderzoeken in hoeverre deze
variabelen met elkaar samenhangen, dan heb je elke keer een kleine kans dat
dit resultaat op toeval berust.
3. Zorg voor een betrouwbaar meetinstrument. 2 manieren om je
meetinstrument betrouwbaarder te maken.
Reliability-analyse= Meerdere vragen opnemen die hetzelfde moeten meten.
Split-half betrouwbaarheid= een vragenlijst in 2e knippen en kijken of de
scores van beide helften die hetzelfde zouden moeten meten ook
overeenkomen.
Kwalitatief onderzoek:
1. Door meerdere observatoren te gebruiken en te berekenen in hoeverre die
het met elkaar eens zijn, kun je de inter-beoordelaarsbetrouwbaarheid
berekenen. Interactieprocesanalyse= een gestructureerd coderingssysteem
om de interactie tussen groepsleden in kaart te brengen.
2. Draai een keer proef bij interviews met het interviewschema.
3. Neem bij groepsdiscussies de sessies op en laat deze later door een collega
bekijken.
Betrouwbaarheid= De mate waarin het resultaat onafhankelijk van toeval is. Als je
het onderzoek op dezelfde manier over zou doen, dan zou dit dezelfde resultaten
moeten opleveren.
Belangrijke aspecten validiteit:
Validiteit= De mate waarin de uitkomsten van je onderzoek door systematische
fouten kan zijn beïnvloed.
3 vormen validiteit:
Interne validiteit:
Gaat om de vraag; Is er een alternatieve verklaring voor het gevonden verband/ de
gevonden resultaten? Met name van belang bij toetsend en exploratief onderzoek.
Storingsbronnen:
1. Een derde variabele. Het kan zijn dat zowel de afhankelijke als de
onafhankelijke veroorzaakt worden door een variabele waarmee je geen
rekening had gehouden. Is er een variabele die het verband dat ik constateer
, kan verklaren of veroorzaken anders dan de variabelen die ik in het onderzoek
had meegenomen? Bij exploratief onderzoek is het zaak om van tevoren goed
in kaart te brengen welke variabelen een rol zouden kunnen spelen.
2. History. Het is mogelijk dat in de onderzoeksperiode een gebeurtenis
plaatsvindt die van invloed is op de onderzoeksresultaten. Hierom is het van
belang om een onderzoekslogboek bij te houden.
3. Selectie. Komt vaak voor bij niet-aselecte steekproeven. Vooral als mensen
zelf kiezen of ze meedoen aan het onderzoek is de kans groot dat de mensen
die in de onderzoeksgroep zitten niet representatief zijn voor de totale
populatie. Dit kan leiden tot grote vertekening in de uitkomsten van het
onderzoek.
4. Mortaliteit of drop-outs. Tijdens het onderzoek kan het zijn dat tussen een
voor- en nameting mensen uit het onderzoek verdwijnen. Daarom zijn
exitgesprekken belangrijk om de reden van vertrek op te sporen.
5. Ambiguïteit over de richting van het verband. Bij toetsend onderzoek is het
zonder experiment vaak lastig vast te stellen of A leidt tot B of omgekeerd. Er
is vaak duidelijk aan te tonen dat er een verband is, maar de richting is lastig.
Constructvaliditeit:
Hierbij vraag je je af of je hebt gemeten wat je wilde meten. Het gaat met name om
de manier van meten. Storingsbronnen:
1. Inadequate operationalisaties. Operationaliseren is het vertalen van een
begrip in meetbare instrumenten. Zijn de variabelen goed
geoperationaliseerd? Is duidelijk wat eronder verstaan wordt en dekt de
operationalisatie het hele begrip.
2. Hypothese raden. De respondenten raden wat ze denken dat je wilt horen en
vertellen dat. Het gaat om wat de respondent denkt dat de onderzoeker wil
horen. Om dit tegen te gaan kun je een onderzoek uitvoeren onder het mom
van een ander onderwerp. De respondenten worden bewust op het verkeerde
been gezet om te voorkomen dat ze gewenst gedrag gaan vertonen.
3. Onderzoeker verwachtingen. De verwachtingen van de onderzoeker
beïnvloeden bewust of onbewust de resultaten. Er wordt daarom vaak
gebruik gemaakt van blinderen. Bijvoorbeeld het gebruik van een placebo.
Externe validiteit:
Zijn de resultaten die je gevonden hebt in de onderzoeksgroep ook generaliseerbaar
naar de hele populatie of zelfs daarbuiten? Als er bijvoorbeeld sprake is van selectie
kun je je afvragen of de resultaten nog wel voor de hele populatie zullen gelden.
Kernvraag bij externe validiteit: voor wie zijn de resultaten geldig? Voor de
onderzochte groep, de hele populatie of ook voor aanverwante groepen?
, Als je onderzoek de toets der kritiek kan doorstaan wat betreft deze hoofdvragen van
betrouwbaarheid en validiteit, dan kun je op basis van de uitkomsten met een gerust
hart conclusies trekken en eventueel aanbevelingen doen. Geef iniedergeval zelf aan
als je onderzoek wat mankeert en wat, dan kun je bespreken in welke mate het een
probleem is en eventueel aanvullende maatregelen treffen.
Onderzoeksproces:
Fase Omschrijving
Aanleiding -Wat is achterliggende motivatie van
opdrachtgever?
-Wetenschappelijk of praktijkonderzoek?
Inkadering -Doelstelling van de opdrachtgever waar het
onderzoek een bijdrage aan moet leveren,
c.q. faciliterend aan moet zijn.
-Doelstelling voor onderzoek: wat moet het
onderzoek opleveren?
-Centrale vraag: Waar wordt het onderzoek
toe afgebakend, welke vraag wordt aan het
einde als conclusie beantwoord?
-Deelvragen en onderzoeksvragen: welke
aspecten moeten onderzocht worden
alvorens je de centrale vraag kunt
beantwoorden?
Onderzoeksmethode -Deskresearch
-Fieldresearch
-Kwalitatief
-Kwantitatief
Keuze dataverzamelingsinstrument -Observatie
-Diepte-interview
-Focusgroepen
-Casestudy
-Enquetes
-gegevensanalyse
-Fysiologische metingen
-Wijze van afname van interviews en
enquetes: face-to-face, telefonisch, internet,
schriftelijk, via post etc.
Populatie en eventuele - Populatiebepaling
steekproefbehandeling -Operationele populatie
-Steekproef
-Responsverhogende maatregelen.
Informatieplan:
Betrouwbaarheid en validiteit:
Belangrijke aspecten betrouwbaarheid:
Kwantitatief onderzoek;
1. Bepaal de juiste omvang van de steekproef. Te klein? --> onbetrouwbaar. Bij
een grotere omvang is de kans groter dat bij herhaling van het onderzoek het
resultaat vrijwel hetzelfde blijft.
2. Fishing= niet alles onnodig met elkaar in verband brengen. Als je in een
onderzoek veel zaken meet en je gaat onderzoeken in hoeverre deze
variabelen met elkaar samenhangen, dan heb je elke keer een kleine kans dat
dit resultaat op toeval berust.
3. Zorg voor een betrouwbaar meetinstrument. 2 manieren om je
meetinstrument betrouwbaarder te maken.
Reliability-analyse= Meerdere vragen opnemen die hetzelfde moeten meten.
Split-half betrouwbaarheid= een vragenlijst in 2e knippen en kijken of de
scores van beide helften die hetzelfde zouden moeten meten ook
overeenkomen.
Kwalitatief onderzoek:
1. Door meerdere observatoren te gebruiken en te berekenen in hoeverre die
het met elkaar eens zijn, kun je de inter-beoordelaarsbetrouwbaarheid
berekenen. Interactieprocesanalyse= een gestructureerd coderingssysteem
om de interactie tussen groepsleden in kaart te brengen.
2. Draai een keer proef bij interviews met het interviewschema.
3. Neem bij groepsdiscussies de sessies op en laat deze later door een collega
bekijken.
Betrouwbaarheid= De mate waarin het resultaat onafhankelijk van toeval is. Als je
het onderzoek op dezelfde manier over zou doen, dan zou dit dezelfde resultaten
moeten opleveren.
Belangrijke aspecten validiteit:
Validiteit= De mate waarin de uitkomsten van je onderzoek door systematische
fouten kan zijn beïnvloed.
3 vormen validiteit:
Interne validiteit:
Gaat om de vraag; Is er een alternatieve verklaring voor het gevonden verband/ de
gevonden resultaten? Met name van belang bij toetsend en exploratief onderzoek.
Storingsbronnen:
1. Een derde variabele. Het kan zijn dat zowel de afhankelijke als de
onafhankelijke veroorzaakt worden door een variabele waarmee je geen
rekening had gehouden. Is er een variabele die het verband dat ik constateer
, kan verklaren of veroorzaken anders dan de variabelen die ik in het onderzoek
had meegenomen? Bij exploratief onderzoek is het zaak om van tevoren goed
in kaart te brengen welke variabelen een rol zouden kunnen spelen.
2. History. Het is mogelijk dat in de onderzoeksperiode een gebeurtenis
plaatsvindt die van invloed is op de onderzoeksresultaten. Hierom is het van
belang om een onderzoekslogboek bij te houden.
3. Selectie. Komt vaak voor bij niet-aselecte steekproeven. Vooral als mensen
zelf kiezen of ze meedoen aan het onderzoek is de kans groot dat de mensen
die in de onderzoeksgroep zitten niet representatief zijn voor de totale
populatie. Dit kan leiden tot grote vertekening in de uitkomsten van het
onderzoek.
4. Mortaliteit of drop-outs. Tijdens het onderzoek kan het zijn dat tussen een
voor- en nameting mensen uit het onderzoek verdwijnen. Daarom zijn
exitgesprekken belangrijk om de reden van vertrek op te sporen.
5. Ambiguïteit over de richting van het verband. Bij toetsend onderzoek is het
zonder experiment vaak lastig vast te stellen of A leidt tot B of omgekeerd. Er
is vaak duidelijk aan te tonen dat er een verband is, maar de richting is lastig.
Constructvaliditeit:
Hierbij vraag je je af of je hebt gemeten wat je wilde meten. Het gaat met name om
de manier van meten. Storingsbronnen:
1. Inadequate operationalisaties. Operationaliseren is het vertalen van een
begrip in meetbare instrumenten. Zijn de variabelen goed
geoperationaliseerd? Is duidelijk wat eronder verstaan wordt en dekt de
operationalisatie het hele begrip.
2. Hypothese raden. De respondenten raden wat ze denken dat je wilt horen en
vertellen dat. Het gaat om wat de respondent denkt dat de onderzoeker wil
horen. Om dit tegen te gaan kun je een onderzoek uitvoeren onder het mom
van een ander onderwerp. De respondenten worden bewust op het verkeerde
been gezet om te voorkomen dat ze gewenst gedrag gaan vertonen.
3. Onderzoeker verwachtingen. De verwachtingen van de onderzoeker
beïnvloeden bewust of onbewust de resultaten. Er wordt daarom vaak
gebruik gemaakt van blinderen. Bijvoorbeeld het gebruik van een placebo.
Externe validiteit:
Zijn de resultaten die je gevonden hebt in de onderzoeksgroep ook generaliseerbaar
naar de hele populatie of zelfs daarbuiten? Als er bijvoorbeeld sprake is van selectie
kun je je afvragen of de resultaten nog wel voor de hele populatie zullen gelden.
Kernvraag bij externe validiteit: voor wie zijn de resultaten geldig? Voor de
onderzochte groep, de hele populatie of ook voor aanverwante groepen?
, Als je onderzoek de toets der kritiek kan doorstaan wat betreft deze hoofdvragen van
betrouwbaarheid en validiteit, dan kun je op basis van de uitkomsten met een gerust
hart conclusies trekken en eventueel aanbevelingen doen. Geef iniedergeval zelf aan
als je onderzoek wat mankeert en wat, dan kun je bespreken in welke mate het een
probleem is en eventueel aanvullende maatregelen treffen.
Onderzoeksproces:
Fase Omschrijving
Aanleiding -Wat is achterliggende motivatie van
opdrachtgever?
-Wetenschappelijk of praktijkonderzoek?
Inkadering -Doelstelling van de opdrachtgever waar het
onderzoek een bijdrage aan moet leveren,
c.q. faciliterend aan moet zijn.
-Doelstelling voor onderzoek: wat moet het
onderzoek opleveren?
-Centrale vraag: Waar wordt het onderzoek
toe afgebakend, welke vraag wordt aan het
einde als conclusie beantwoord?
-Deelvragen en onderzoeksvragen: welke
aspecten moeten onderzocht worden
alvorens je de centrale vraag kunt
beantwoorden?
Onderzoeksmethode -Deskresearch
-Fieldresearch
-Kwalitatief
-Kwantitatief
Keuze dataverzamelingsinstrument -Observatie
-Diepte-interview
-Focusgroepen
-Casestudy
-Enquetes
-gegevensanalyse
-Fysiologische metingen
-Wijze van afname van interviews en
enquetes: face-to-face, telefonisch, internet,
schriftelijk, via post etc.
Populatie en eventuele - Populatiebepaling
steekproefbehandeling -Operationele populatie
-Steekproef
-Responsverhogende maatregelen.
Informatieplan:
