Diagnostiek en Assessment in Opvoeding, Onderwijs en Hulpverlening (nieuw instrument)
College-leerdoelen
Aan het eind van dit college kan je:
- De verschillende stappen van testontwikkeling benoeme
- Een conceptuele en operationele definitie maken
- Verschillende itemformats en antwoordschalen herkenne
- Op globale wijze de kwaliteit van een goede test, testmatrijs, testhandleiding en
psychometrische (normerings)studie evalueren
- Vaardigheidsscores en –niveaus interpreteren
Assessment-ontwikkeling in 4 stappen
1. Conceptualiseren
2. Specificeren structuur en opzet test
3. Psychometrische studies
4. Implementatie
a. beoordeling testkwaliteit (bijv. door COTAN)
Stap 1: Conceptualiseren
Wat wil je meten? (gaat vaak mis; niet voldoende operationeren wat je precies wil meten)
- Identificeer construct
- Definieer construct
- Noodzaak
o Waarom dat meten? Waarom een nieuw instrument hiervoor bedenken?
Voor wie en waar?
- Bv. Iets voor kinderen op school?; wat is realistisch?
1a. Wat wil je meten?
- Construct Een eigenschap van iets of iemand
o Vaak geen overeenstemming over wat het construct “is”
Bv. ‘wat is intelligentie?’
o Hoe meet je iets? Klopt het met de waarheid of niet?
- Definieer construct
o Conceptuele definitie: Abstracte formulering
Bv. ben je angstig
o Operationele definitie: In meetbare termen geformuleerd
Bv. gaat je ademhaling omhoog, ga je zweten etc.?
- Noodzaak: waarom is een nieuw assessment nodig?
Voorbeeld construct: Zelf-stigma
- Stigmatiseren van ouders met een kind met psychische problemen:
o incompetent, blameworthy, and shameful (Eaton et al., 2019)
- Zelf-stigma = ouders identificeren zichzelf met het (maatschappelijke) stigma dat ze
ervaren
o Het zelf-stigma bij ouders van een kind met psychische problemen komt naar
voren in de overtuiging dat ze slechte ouders zijn, zichzelf de schuld geven
van de problemen en zich ervoor schamen (= conceptuele definities)
, Definities Zelfstigma bij Ouders
Conceptuele definitie (abstract):
- Het zelf-stigma bij ouders van een kind met psychische problemen komt naar voren
in de overtuiging dat ze slechte ouders zijn, zichzelf de schuld geven van de
problemen en zich ervoor schamen.
Operationele definitie (meetbaar):
- Op de Parents’ Self-Stigma Scale (PSSS) worden de scores op drie dimensies bij
elkaar opgeteld, waarbij er sprake is van een sterker zelf-stigma naarmate ouders
hoger scoren op bad-parent beliefs, self-shame en self-blame.
Elke dimensie (subschalen)
Self-blame
- Conceptuele definitie self-blame
o De ouder ziet zichzelf als oorzaak van problemen kind
Bijv. door erfelijkheid, niet vroeg genoeg herkennen of reageren op
symptomen, blootstelling aan stressoren zoals scheiding
o De ouder voelt zich verantwoordelijk voor en geeft zichzelf de schuld van de
problemen van zijn/haar kind
- Operationele definitie self-blame
o De mate van self-blame die ouders ervaren wordt gemeten door hen te
vragen hoe vaak zij bepaalde self-blame gedachten ervaarden.
o Ouders geven aan in hoeverre de 6 stellingen over self-blame over henzelf
gaan en het gemiddelde daarvan is de mate van self-blame van de ouders.
o De scores op items over self-blame bij elkaar opgeteld, waarbij er sprake is
van een sterker zelf-stigma bij een hogere score.
o Naarmate ouders zichzelf meer de schuld geven van de psychische
problemen van hun kind scoren zij hoger op de 6 stellingen over self-blame.
o Ouders met een hogere score op de self-blame schaal hebben sterker het
gevoel dat zij de oorzaak zijn van de problemen van hun kind.
Een hoge gemiddelde score op bovenstaande items is een hogere mate van self-blame
- De noodzaak van het meten van Zelf-Stigma met de PSSS?
1b. Voor wie & waar?
- Gebruik(ers)
o Bv. ouders, leerkrachten, kinderen etc.
De voorkennis per groep is anders.
- Setting
o Doel?
o Doelgroep?
o Mogelijke besluitvorming?
- Gevolgen voor te ontwikkelen instrument:
o Afname? (bijv. snel & makkelijk)
Bv. online of juist fysiek?
o Cut-off punt? (bijv. vanaf welke score is er sprake van …?)
Waar ligt het beslissingspunt
o Kans op sociaal wenselijke antwoorden?
Dissimulatie: Patroon op meerdere items
In Zelfrapportage (persoonlijkheid & gedrag):
- 3 dissimulatie-schalen (vaak validiteitsschalen genoemd):
o F-schaal (“fake bad”): Zeldzame gedragingen, Bijv. Ik heb meerdere mensen
vermoord
College-leerdoelen
Aan het eind van dit college kan je:
- De verschillende stappen van testontwikkeling benoeme
- Een conceptuele en operationele definitie maken
- Verschillende itemformats en antwoordschalen herkenne
- Op globale wijze de kwaliteit van een goede test, testmatrijs, testhandleiding en
psychometrische (normerings)studie evalueren
- Vaardigheidsscores en –niveaus interpreteren
Assessment-ontwikkeling in 4 stappen
1. Conceptualiseren
2. Specificeren structuur en opzet test
3. Psychometrische studies
4. Implementatie
a. beoordeling testkwaliteit (bijv. door COTAN)
Stap 1: Conceptualiseren
Wat wil je meten? (gaat vaak mis; niet voldoende operationeren wat je precies wil meten)
- Identificeer construct
- Definieer construct
- Noodzaak
o Waarom dat meten? Waarom een nieuw instrument hiervoor bedenken?
Voor wie en waar?
- Bv. Iets voor kinderen op school?; wat is realistisch?
1a. Wat wil je meten?
- Construct Een eigenschap van iets of iemand
o Vaak geen overeenstemming over wat het construct “is”
Bv. ‘wat is intelligentie?’
o Hoe meet je iets? Klopt het met de waarheid of niet?
- Definieer construct
o Conceptuele definitie: Abstracte formulering
Bv. ben je angstig
o Operationele definitie: In meetbare termen geformuleerd
Bv. gaat je ademhaling omhoog, ga je zweten etc.?
- Noodzaak: waarom is een nieuw assessment nodig?
Voorbeeld construct: Zelf-stigma
- Stigmatiseren van ouders met een kind met psychische problemen:
o incompetent, blameworthy, and shameful (Eaton et al., 2019)
- Zelf-stigma = ouders identificeren zichzelf met het (maatschappelijke) stigma dat ze
ervaren
o Het zelf-stigma bij ouders van een kind met psychische problemen komt naar
voren in de overtuiging dat ze slechte ouders zijn, zichzelf de schuld geven
van de problemen en zich ervoor schamen (= conceptuele definities)
, Definities Zelfstigma bij Ouders
Conceptuele definitie (abstract):
- Het zelf-stigma bij ouders van een kind met psychische problemen komt naar voren
in de overtuiging dat ze slechte ouders zijn, zichzelf de schuld geven van de
problemen en zich ervoor schamen.
Operationele definitie (meetbaar):
- Op de Parents’ Self-Stigma Scale (PSSS) worden de scores op drie dimensies bij
elkaar opgeteld, waarbij er sprake is van een sterker zelf-stigma naarmate ouders
hoger scoren op bad-parent beliefs, self-shame en self-blame.
Elke dimensie (subschalen)
Self-blame
- Conceptuele definitie self-blame
o De ouder ziet zichzelf als oorzaak van problemen kind
Bijv. door erfelijkheid, niet vroeg genoeg herkennen of reageren op
symptomen, blootstelling aan stressoren zoals scheiding
o De ouder voelt zich verantwoordelijk voor en geeft zichzelf de schuld van de
problemen van zijn/haar kind
- Operationele definitie self-blame
o De mate van self-blame die ouders ervaren wordt gemeten door hen te
vragen hoe vaak zij bepaalde self-blame gedachten ervaarden.
o Ouders geven aan in hoeverre de 6 stellingen over self-blame over henzelf
gaan en het gemiddelde daarvan is de mate van self-blame van de ouders.
o De scores op items over self-blame bij elkaar opgeteld, waarbij er sprake is
van een sterker zelf-stigma bij een hogere score.
o Naarmate ouders zichzelf meer de schuld geven van de psychische
problemen van hun kind scoren zij hoger op de 6 stellingen over self-blame.
o Ouders met een hogere score op de self-blame schaal hebben sterker het
gevoel dat zij de oorzaak zijn van de problemen van hun kind.
Een hoge gemiddelde score op bovenstaande items is een hogere mate van self-blame
- De noodzaak van het meten van Zelf-Stigma met de PSSS?
1b. Voor wie & waar?
- Gebruik(ers)
o Bv. ouders, leerkrachten, kinderen etc.
De voorkennis per groep is anders.
- Setting
o Doel?
o Doelgroep?
o Mogelijke besluitvorming?
- Gevolgen voor te ontwikkelen instrument:
o Afname? (bijv. snel & makkelijk)
Bv. online of juist fysiek?
o Cut-off punt? (bijv. vanaf welke score is er sprake van …?)
Waar ligt het beslissingspunt
o Kans op sociaal wenselijke antwoorden?
Dissimulatie: Patroon op meerdere items
In Zelfrapportage (persoonlijkheid & gedrag):
- 3 dissimulatie-schalen (vaak validiteitsschalen genoemd):
o F-schaal (“fake bad”): Zeldzame gedragingen, Bijv. Ik heb meerdere mensen
vermoord
