Grondslagen Psychologische Diagnostiek en Testtheorie
Testtheorie 2: Validiteit
Onderwerpen college
- Introductie validiteit
- Inhoudsvaliditeit
o Cohens kappa (boek bladzijde 121 Inter-Rater Reliability)
- Begripsvaliditeit
o Factoranalyse
o Multitrek-multimethode (MTMM)-matrix
- Criteriumvaliditeit
o Multipele regressie
o Standaardschattingsfout
o Intervalschatting voorspelling
Vraag van de dag?
Vraag
Kunnen we het studiesucces (S) van Sem voorspellen?
Antwoord
Ja, dat kan met bijvoorbeeld met intelligentie (IQ) en motivatie voor studie (M) en gegeven
een causale relatie van IQ en M met S.
Maar, hoe goed eigenlijk?
Criteria testbeoordeling COTAN
1) Uitgangspunten testconstructie
2) Kwaliteit testmateriaal
3) Kwaliteit en handleiding
4) Normen
5) Betrouwbaarheid
6) Begripsvaliditeit
7) Criteriumvaliditeit
Zie BB: COTAN Beoordelingssysteem
Klassieke Testtheorie (KTT)
Systematisch
Meetfout
Toevallig
Betrouwbaarheid is de mate van precies meten. Een betrouwbare meting is een meting
waarbij sprake is van afwezigheid van de toevallige meetfout.
Validiteit is de mate waarin je meet wat je wilt meten. Een valide meting is een meting
waarbij de toevallige meetfout afwezig is, maar ook de systematische meetfout ontbreekt bij
een valide meting. Betrouwbaarheid is voor de validiteit van testscores een noodzakelijke,
maar niet een voldoende voorwaarde.
, Grondslagen Psychologische Diagnostiek en Testtheorie
Testscore opsplitsen
Als je een testscore X hebt en er is sprake van een betrouwbare meting, dan is er een kleine
toevallige fout mogelijk. Als je een testscore X hebt en er is sprake van een valide meting, dan
is er sprake van een kleine toevallige en een kleine systematische fout.
Testscore X
Betrouwbare meting
- Kleine toevallige fout
Valide meting
- Kleine toevallige fout en kleine systematische fout
(On)betrouwbaarheid testscore
De testscore voor integriteit is betrouwbaar voor het meten van integriteit. Er is hier
immers sprake van een kleine toevallige fout.
De testscore voor deskundigheid is niet betrouwbaar voor het meten van deskundigheid.
Er is hier immers sprake van een grote toevallige fout.
Validiteit
Wat als de antwoorden van een respondent sterk door sociale wenselijkheid wordt
beïnvloed? De testscore valt dan hoger uit dan ware score. De testscore is hier wel
betrouwbaar, maar niet valide voor het meten.
Testtheorie 2: Validiteit
Onderwerpen college
- Introductie validiteit
- Inhoudsvaliditeit
o Cohens kappa (boek bladzijde 121 Inter-Rater Reliability)
- Begripsvaliditeit
o Factoranalyse
o Multitrek-multimethode (MTMM)-matrix
- Criteriumvaliditeit
o Multipele regressie
o Standaardschattingsfout
o Intervalschatting voorspelling
Vraag van de dag?
Vraag
Kunnen we het studiesucces (S) van Sem voorspellen?
Antwoord
Ja, dat kan met bijvoorbeeld met intelligentie (IQ) en motivatie voor studie (M) en gegeven
een causale relatie van IQ en M met S.
Maar, hoe goed eigenlijk?
Criteria testbeoordeling COTAN
1) Uitgangspunten testconstructie
2) Kwaliteit testmateriaal
3) Kwaliteit en handleiding
4) Normen
5) Betrouwbaarheid
6) Begripsvaliditeit
7) Criteriumvaliditeit
Zie BB: COTAN Beoordelingssysteem
Klassieke Testtheorie (KTT)
Systematisch
Meetfout
Toevallig
Betrouwbaarheid is de mate van precies meten. Een betrouwbare meting is een meting
waarbij sprake is van afwezigheid van de toevallige meetfout.
Validiteit is de mate waarin je meet wat je wilt meten. Een valide meting is een meting
waarbij de toevallige meetfout afwezig is, maar ook de systematische meetfout ontbreekt bij
een valide meting. Betrouwbaarheid is voor de validiteit van testscores een noodzakelijke,
maar niet een voldoende voorwaarde.
, Grondslagen Psychologische Diagnostiek en Testtheorie
Testscore opsplitsen
Als je een testscore X hebt en er is sprake van een betrouwbare meting, dan is er een kleine
toevallige fout mogelijk. Als je een testscore X hebt en er is sprake van een valide meting, dan
is er sprake van een kleine toevallige en een kleine systematische fout.
Testscore X
Betrouwbare meting
- Kleine toevallige fout
Valide meting
- Kleine toevallige fout en kleine systematische fout
(On)betrouwbaarheid testscore
De testscore voor integriteit is betrouwbaar voor het meten van integriteit. Er is hier
immers sprake van een kleine toevallige fout.
De testscore voor deskundigheid is niet betrouwbaar voor het meten van deskundigheid.
Er is hier immers sprake van een grote toevallige fout.
Validiteit
Wat als de antwoorden van een respondent sterk door sociale wenselijkheid wordt
beïnvloed? De testscore valt dan hoger uit dan ware score. De testscore is hier wel
betrouwbaar, maar niet valide voor het meten.
