Tentamen 2
H3: Three Claims, Four validities: Interrogation Tools for Costumors of
Research
3 type claims:
- Frequency claims
- Association claims
- Causal claims
→ maken statements over variabelen of over relaties tussen variabelen.
Variabelen
Variabele = iets dat varieert, dus het moet twee levels of waardes hebben
Level/Value = de variabele kan diverse waarden aannemen. De verzameling van de waarden
is het definitiegebied van de variabele
Vb. 72% van de wereld lachte gisteren
Variabele: of iemand gister lachte of niet
Waarde: een persoon die gister lachte
Constant = iets dat mogelijk kan varieren maar slechts 1 waarde heeft
Vb. Smoking
Variabele: smoking
Waarde: rokers en niet rokers
Measured variable = de waardes van de variabele kunnen worden
gemeten/geobserveerd/opgenomen
Manipulated variable = een variabele die de onderzoeker controleert door participanten
verschillende waarden van die variabele toe te wijzen
→ Sommige variabelen kunnen niet gemanipuleerd worden zoals leeftijd, IQ en anderen
kunnen niet gemanipuleerd worden omdat het niet ethisch is. Andere variabelen kunnen
gemeten en gemanipuleerd worden, zoals haarkleur.
Conceptuele definitie = Wat bedoelt de onderzoeker precies met het begrip?
Begrip/construct (=abstract concept) definiëren. Dit moet gedefinieerd worden op
theoretisch niveau en dit worden conceptuele definities genoemd.
Operationele definitie = Hoe gaat de onderzoeker dit begrip meten, hoe verkrijgen ze data
om hun hypothese te testen? Meetinstrument kiezen/bepalen
→ Operationalisatie = een concept of begrip in een te meten of gemanipuleerde variabele
veranderen
De 3 claims
Claim = een argument dat iemand probeert te maken
1. Frequency claims = beschrijven een bepaalde mate van een enkele variabele, ze
richten zich dus op een enkele variabele zoals ‘frequency of worrying, rate of smiling,
amount of texting etc’
Vb. 4 van de 10 kinderen geeft toe dat ze appen tijdens het rijden
2. Association/Correlation claims = ook wel correlatie genoemd, stelt dat een niveau
van een variabele waarschijnlijk wordt geassocieerd met een bepaald niveau van een
andere variabele
Vb. Singles eten minder groentes
,Correlatie = als een variabele verandert, dan verandert de andere ook, ze zijn dus
gerelateerd.
Correlationeel onderzoek = een onderzoek waarbij de variabelen gemeten worden en de
relatie tussen beide getest wordt
Positieve correlatie = ‘high goes with high, low goes with low’
Vb. Partners die dankbaarheid naar elkaar uiten blijven langer bij elkaar
→ hoge scores van dankbaarheid gaan samen met het langer bij elkaar blijven
→ lage scores van dankbaarheid gaan samen met het korter bij elkaar blijven
Negatieve correlatie = ‘high goes with low, low goes with high’
Vb. Mensen die het meeste multitasken zijn er het slechtste in
→ hoge scores van multitasken gaan samen met laag vermogen van multitasken
→ lage scores van multitasken gaan samen met hoog vermogen van multitasken
Nul correlatie = er is geen correlatie tussen de variabelen
3. Causal claims = gaat verder dan de vorige claims, stelt dat een variabele
verantwoordelijk is voor het veranderen van de ander. Er zijn dus net zoals bij
correlatie claims altijd 2 variabelen.
Vb. Muzieklessen verbeteren het IQ
→ Niet alle claims zijn op onderzoek gebaseerd!
Bekijk table 3.3 voor verschillende vocabulaire van de claims
Het gebruik van de 4 soorten validiteit bij de claims
Validiteit = verwijst naar de geschiktheid van een conclusie of besluit en in het algemeen
een valide claim is redelijk, accuraat en rechtvaardig
Frequency claims
Om onderzoek te evalueren die een frequency claim bevat, moet er gefocust worden op 3
soorten van validiteit:
• Construct validiteit = Betreft hoe goed een conceptuele variabele
geoperationaliseerd is. Hoe goed hebben de onderzoekers hun variabelen gemeten?
• Externe validiteit = Betreft hoe de onderzoekers de participanten hebben gekozen.
Hoe goed representeren de participanten de bedoelde populatie? Hoe goed is dit te
generaliseren en representeert het mensen buiten de studie?
• Statistische validiteit = de mate waarin de statistische conclusies van een studie juist
en redelijk zijn. Hoe sterk ondersteunen de cijfers de claim?
Margin of error of the estimate = statistisch figuur gebaseerd op de steekproef grootte van
het onderzoek, die probeert de echte waarde in de populatie er in op te nemen
, Association claims
• Construct validiteit= Omdat je twee variabelen meet bij association claims, moet de
construct validity toegepast worden op beide.
Vb. Mensen die het meest multitasken zijn er het slechtst in
→ je moet weten hoe goed ze de frequentie van het multitasken gemeten hebben en hoe
goed ze het vermogen van mensen om te multitasken gemeten hebben
• Externe validiteit = in hoeverre kan er gegeneraliseerd worden naar andere
populaties en settings.
• Statistische validiteit = de mate waarin de statistische conclusies accuraat en redelijk
zijn.
Aspecten:
- Strenght → hoe sterk is de associatie? Sommige zijn sterker dan andere
Vb. lengte en schoenmaat, lange mensen hebben vaak ook grotere voeten
- The statistical significance → sommige associaties van studies kunnen te wijten zijn
aan ‘toevallige verbindingen’ veroorzaakt door individuen. Maar als het statistisch
belang heeft dan is dit niet te wijten aan slechts deze associaties tussen 2 variabelen
of toevalligheden. Er kunnen ook meerdere zaken meespelen.
2 foute conclusies bij statistical validity:
1. Type 1 error = Een onderzoeker kan de foute conclusies trekken dat er een associatie
is tussen twee variabelen bij de participanten in het onderzoek, terwijl er in de
gehele populatie geen associatie is
2. Type 2 error = Een onderzoeker kan de foute conclusie trekken van een sample dat
er geen associatie is tussen twee variabelen, terwijl er wel een associatie is in de
gehele populatie
Causal claims
Criteria voor causation:
- Covariance = de mate waarin twee variabelen samen worden waargenomen. Het is
van belang dat er uit de resultaten komt dat er sprake is van associatie tussen beide
variabelen.
→ De covariantie is in de statistiek en kansrekening een parameter die bij twee
toevalsvariabelen aangeeft in welke mate de beide toevalsvariabelen (lineair) met elkaar
samenhangen.
- Temporal precedence = als een variabele temporal presendence heeft, dan betekent
dit dat het eerst in de tijd komt, voor de andere variabele
Vb. Muzieklessen verbeteren IQ, moet je bewijzen dat eerst muzieklessen plaatsvinden en
vervolgens IQ verhoging.
- Internal validity = indicatie of het onderzoek het vermogen heeft om alternatieve
uitleg voor de associatie te verwerpen. Zo weet je dat iets valide is
Vb. Muziek lessen verbeteren IQ. Een alternatieve uitleg zou kunnen zijn dat de ouders die
academische vaardigheden stimuleren leiden tot de IQ verhoging. Er kan dus een intern
validiteits probleem zijn.
Experimenten kunnen causal claims ondersteunen
Het doen van experimenten waarbij één variabele gemanipuleerd (independent variable) is
en de andere variabele gemeten (dependent variable), dit kan een causale claim
ondersteunen.
H3: Three Claims, Four validities: Interrogation Tools for Costumors of
Research
3 type claims:
- Frequency claims
- Association claims
- Causal claims
→ maken statements over variabelen of over relaties tussen variabelen.
Variabelen
Variabele = iets dat varieert, dus het moet twee levels of waardes hebben
Level/Value = de variabele kan diverse waarden aannemen. De verzameling van de waarden
is het definitiegebied van de variabele
Vb. 72% van de wereld lachte gisteren
Variabele: of iemand gister lachte of niet
Waarde: een persoon die gister lachte
Constant = iets dat mogelijk kan varieren maar slechts 1 waarde heeft
Vb. Smoking
Variabele: smoking
Waarde: rokers en niet rokers
Measured variable = de waardes van de variabele kunnen worden
gemeten/geobserveerd/opgenomen
Manipulated variable = een variabele die de onderzoeker controleert door participanten
verschillende waarden van die variabele toe te wijzen
→ Sommige variabelen kunnen niet gemanipuleerd worden zoals leeftijd, IQ en anderen
kunnen niet gemanipuleerd worden omdat het niet ethisch is. Andere variabelen kunnen
gemeten en gemanipuleerd worden, zoals haarkleur.
Conceptuele definitie = Wat bedoelt de onderzoeker precies met het begrip?
Begrip/construct (=abstract concept) definiëren. Dit moet gedefinieerd worden op
theoretisch niveau en dit worden conceptuele definities genoemd.
Operationele definitie = Hoe gaat de onderzoeker dit begrip meten, hoe verkrijgen ze data
om hun hypothese te testen? Meetinstrument kiezen/bepalen
→ Operationalisatie = een concept of begrip in een te meten of gemanipuleerde variabele
veranderen
De 3 claims
Claim = een argument dat iemand probeert te maken
1. Frequency claims = beschrijven een bepaalde mate van een enkele variabele, ze
richten zich dus op een enkele variabele zoals ‘frequency of worrying, rate of smiling,
amount of texting etc’
Vb. 4 van de 10 kinderen geeft toe dat ze appen tijdens het rijden
2. Association/Correlation claims = ook wel correlatie genoemd, stelt dat een niveau
van een variabele waarschijnlijk wordt geassocieerd met een bepaald niveau van een
andere variabele
Vb. Singles eten minder groentes
,Correlatie = als een variabele verandert, dan verandert de andere ook, ze zijn dus
gerelateerd.
Correlationeel onderzoek = een onderzoek waarbij de variabelen gemeten worden en de
relatie tussen beide getest wordt
Positieve correlatie = ‘high goes with high, low goes with low’
Vb. Partners die dankbaarheid naar elkaar uiten blijven langer bij elkaar
→ hoge scores van dankbaarheid gaan samen met het langer bij elkaar blijven
→ lage scores van dankbaarheid gaan samen met het korter bij elkaar blijven
Negatieve correlatie = ‘high goes with low, low goes with high’
Vb. Mensen die het meeste multitasken zijn er het slechtste in
→ hoge scores van multitasken gaan samen met laag vermogen van multitasken
→ lage scores van multitasken gaan samen met hoog vermogen van multitasken
Nul correlatie = er is geen correlatie tussen de variabelen
3. Causal claims = gaat verder dan de vorige claims, stelt dat een variabele
verantwoordelijk is voor het veranderen van de ander. Er zijn dus net zoals bij
correlatie claims altijd 2 variabelen.
Vb. Muzieklessen verbeteren het IQ
→ Niet alle claims zijn op onderzoek gebaseerd!
Bekijk table 3.3 voor verschillende vocabulaire van de claims
Het gebruik van de 4 soorten validiteit bij de claims
Validiteit = verwijst naar de geschiktheid van een conclusie of besluit en in het algemeen
een valide claim is redelijk, accuraat en rechtvaardig
Frequency claims
Om onderzoek te evalueren die een frequency claim bevat, moet er gefocust worden op 3
soorten van validiteit:
• Construct validiteit = Betreft hoe goed een conceptuele variabele
geoperationaliseerd is. Hoe goed hebben de onderzoekers hun variabelen gemeten?
• Externe validiteit = Betreft hoe de onderzoekers de participanten hebben gekozen.
Hoe goed representeren de participanten de bedoelde populatie? Hoe goed is dit te
generaliseren en representeert het mensen buiten de studie?
• Statistische validiteit = de mate waarin de statistische conclusies van een studie juist
en redelijk zijn. Hoe sterk ondersteunen de cijfers de claim?
Margin of error of the estimate = statistisch figuur gebaseerd op de steekproef grootte van
het onderzoek, die probeert de echte waarde in de populatie er in op te nemen
, Association claims
• Construct validiteit= Omdat je twee variabelen meet bij association claims, moet de
construct validity toegepast worden op beide.
Vb. Mensen die het meest multitasken zijn er het slechtst in
→ je moet weten hoe goed ze de frequentie van het multitasken gemeten hebben en hoe
goed ze het vermogen van mensen om te multitasken gemeten hebben
• Externe validiteit = in hoeverre kan er gegeneraliseerd worden naar andere
populaties en settings.
• Statistische validiteit = de mate waarin de statistische conclusies accuraat en redelijk
zijn.
Aspecten:
- Strenght → hoe sterk is de associatie? Sommige zijn sterker dan andere
Vb. lengte en schoenmaat, lange mensen hebben vaak ook grotere voeten
- The statistical significance → sommige associaties van studies kunnen te wijten zijn
aan ‘toevallige verbindingen’ veroorzaakt door individuen. Maar als het statistisch
belang heeft dan is dit niet te wijten aan slechts deze associaties tussen 2 variabelen
of toevalligheden. Er kunnen ook meerdere zaken meespelen.
2 foute conclusies bij statistical validity:
1. Type 1 error = Een onderzoeker kan de foute conclusies trekken dat er een associatie
is tussen twee variabelen bij de participanten in het onderzoek, terwijl er in de
gehele populatie geen associatie is
2. Type 2 error = Een onderzoeker kan de foute conclusie trekken van een sample dat
er geen associatie is tussen twee variabelen, terwijl er wel een associatie is in de
gehele populatie
Causal claims
Criteria voor causation:
- Covariance = de mate waarin twee variabelen samen worden waargenomen. Het is
van belang dat er uit de resultaten komt dat er sprake is van associatie tussen beide
variabelen.
→ De covariantie is in de statistiek en kansrekening een parameter die bij twee
toevalsvariabelen aangeeft in welke mate de beide toevalsvariabelen (lineair) met elkaar
samenhangen.
- Temporal precedence = als een variabele temporal presendence heeft, dan betekent
dit dat het eerst in de tijd komt, voor de andere variabele
Vb. Muzieklessen verbeteren IQ, moet je bewijzen dat eerst muzieklessen plaatsvinden en
vervolgens IQ verhoging.
- Internal validity = indicatie of het onderzoek het vermogen heeft om alternatieve
uitleg voor de associatie te verwerpen. Zo weet je dat iets valide is
Vb. Muziek lessen verbeteren IQ. Een alternatieve uitleg zou kunnen zijn dat de ouders die
academische vaardigheden stimuleren leiden tot de IQ verhoging. Er kan dus een intern
validiteits probleem zijn.
Experimenten kunnen causal claims ondersteunen
Het doen van experimenten waarbij één variabele gemanipuleerd (independent variable) is
en de andere variabele gemeten (dependent variable), dit kan een causale claim
ondersteunen.
