Measurement theory and
assessment
THEMES
Hoorcollege 1: inleiding en ethiek
Hoorcollege 2: uitleg opdrachten
- Bestuderen: Gregory H1, blz 1-39
Hoorcollege 3: betrouwbaarheid I
Hoorcollege 4: betrouwbaarheid II
- Bestuderen: Gregory H3B, blz 87-108
Hoorcollege 5: normen
Hoorcollege 6: normen II
- Bestuderen: Gregory H3A, blz 67-86
Hoorcollege 7: validiteit
Hoorcollege 8: testconstructie
- Bestuderen: Gregory H4A, blz 109-130 (validiteit)
- Bestuderen: Gregory H4B, blz 131-150 (testconstructie)
Hoorcollege 9: intelligentie
Hoorcollege 10: vragencollege
- Bestuderen: Gregory H5A: blz 151-177
Hoorcollege 10: inleiding in de diagnostiek
Hoorcollege 11: diagnostische fouten
- Bestuderen: artikel Bornstein en Hoffrage
Hoorcollege 12: diagnostische instrumenten
Hoorcollege 13: vragencollege
, - Bestuderen: Gregory H15 en artikel Geisinger
Inleiding en ethiek
Hoofdstuk 1A: de natuur en gebruiken van
psychologische tests
De definitie van een test
Test = gestandaardiseerde procedure voor het nemen van een steekproef
van gedrag, beschreven in categorieën of scores
- Tests hebben een norm of standaard waarmee gedrag kan worden
voorspeld
Tests hebben meestal deze 5 kenmerken
- Gestandaardiseerde procedure = de procedures van de testafname
zijn hetzelfde tussen de afnemers en over settingen
Herhaalbaarheid = je zou steeds op dezelfde score moeten
uitkomen
Betrouwbaarheid
- Steekproef van gedrag
- Gebruik van scores of categorieën
- Gebruik van norm of standaard
- Predictie van non-test gedrag
We willen weten of de gedragingen die niet in de test zijn
gemeten goed voorspelbaar zijn in de test (we meten iemands
volledige woordenschat door 25 woorden te testen, maar zijn
deze wel voorspelbaar (niet per se representatief) voor de rest?)
Validiteit
Er zijn 2 moeilijkheden in testresultaten interpreteren:
- Een test bevat altijd een meetfout: X = T + e
X: score die uit de test komt
T: de daadwerkelijke score (true score)
e: meetfout (error)
We moeten de conclusie trekken of de grote van de meetfout
acceptabel is in die bepaalde situatie van meten (een test om
kanker te detecteren of een persoonlijkheidstest)
, - De personen die de test doen, moeten weten dat de resultaten niet
een vast ding laten zien, het is abstract maar kan wel dingen
voorspellen
Gevaar van testgebruik: testen worden steeds groter in de maatschappij,
omdat ze denken dat het objectief mentale eigenschappen kan meten,
maar dit blijkt erg tegen te vallen
- Meet een test wat deze moet meten?
Soms is het wat gedateerd, bijvoorbeeld een foto laten zien van
een hele oude telefoon en vragen wat het is aan een kind van 4,
die heeft natuurlijk geen idee
- Hoe en onder welke omstandigheden moet een test afgenomen
worden?
Is er een duidelijke handleiding?
- Is een verkorte versie van een test (even) betrouwbaar?
- Hoe is de referentiegroep bepaald?
Confounders
- Veel concepten zijn niet perfect gedefinieerd
- Vragen worden verkeerd gelezen/geïnterpreteerd
- Sociaal wenselijk antwoorden/context (hoeft niet expres te zijn, want
“veel” heeft voor andere mensen in andere situaties een andere
betekenis)
- Handleiding niet precies gevolgd
- Gedurende deze course krijgen we nog meer
Distincties in tests
Tests kunnen op 2 manieren worden geïnterpreteerd
- Door middel van een afkapwaarde (criterion-based)
De resultaten worden vergeleken met een bepaalde
drempelwaarde om te bepalen of de resultaten positief of
negatief zijn
- Door middel van een vergelijkingsgroep (norm-referenced)
De resultaten worden vergeleken met een andere groep om te
bekijken of er (een grote) afwijking daarvan is
Interpretatie scores = de interpretatie ten opzichte van een norm
of standaardscore
, o Scores = constructen uitgedrukt in een getal
Soorten tests (blz. 7-10)?
Waarvoor tests worden gebruikt
Er zijn 5 dingen waar tests voor worden gebruikt:
- Classificatie = iemand indelen in een bepaalde categorie (bijv.
slagen vs falen)
- Diagnose en planning van behandeling = de onderliggende dingen
van iemand zijn abnormale gedragingen vinden
- Zelfkennis
- Evaluatie van behandeling
- Onderzoek
Test afname
Diagnostiek = het door en door leren kennen van een situatie met als doel
een beslissing kunnen nemen
Psychodiagnostiek = onderzoek op het gebied van psychosociaal
functioneren
- Betrouwbare en valide beschrijving van psychosociale werkelijkheid
- Mogelijke verklaringen voor problemen
- Verklaringen toetsen (deze leerling heeft problemen, wat zijn de
verklaringen hiervoor?)
Wetenschappelijke diagnostiek
- Diagnostiek is idealiter herhaalbaar
- Diagnostiek nadert idealiter de werkelijkheid
assessment
THEMES
Hoorcollege 1: inleiding en ethiek
Hoorcollege 2: uitleg opdrachten
- Bestuderen: Gregory H1, blz 1-39
Hoorcollege 3: betrouwbaarheid I
Hoorcollege 4: betrouwbaarheid II
- Bestuderen: Gregory H3B, blz 87-108
Hoorcollege 5: normen
Hoorcollege 6: normen II
- Bestuderen: Gregory H3A, blz 67-86
Hoorcollege 7: validiteit
Hoorcollege 8: testconstructie
- Bestuderen: Gregory H4A, blz 109-130 (validiteit)
- Bestuderen: Gregory H4B, blz 131-150 (testconstructie)
Hoorcollege 9: intelligentie
Hoorcollege 10: vragencollege
- Bestuderen: Gregory H5A: blz 151-177
Hoorcollege 10: inleiding in de diagnostiek
Hoorcollege 11: diagnostische fouten
- Bestuderen: artikel Bornstein en Hoffrage
Hoorcollege 12: diagnostische instrumenten
Hoorcollege 13: vragencollege
, - Bestuderen: Gregory H15 en artikel Geisinger
Inleiding en ethiek
Hoofdstuk 1A: de natuur en gebruiken van
psychologische tests
De definitie van een test
Test = gestandaardiseerde procedure voor het nemen van een steekproef
van gedrag, beschreven in categorieën of scores
- Tests hebben een norm of standaard waarmee gedrag kan worden
voorspeld
Tests hebben meestal deze 5 kenmerken
- Gestandaardiseerde procedure = de procedures van de testafname
zijn hetzelfde tussen de afnemers en over settingen
Herhaalbaarheid = je zou steeds op dezelfde score moeten
uitkomen
Betrouwbaarheid
- Steekproef van gedrag
- Gebruik van scores of categorieën
- Gebruik van norm of standaard
- Predictie van non-test gedrag
We willen weten of de gedragingen die niet in de test zijn
gemeten goed voorspelbaar zijn in de test (we meten iemands
volledige woordenschat door 25 woorden te testen, maar zijn
deze wel voorspelbaar (niet per se representatief) voor de rest?)
Validiteit
Er zijn 2 moeilijkheden in testresultaten interpreteren:
- Een test bevat altijd een meetfout: X = T + e
X: score die uit de test komt
T: de daadwerkelijke score (true score)
e: meetfout (error)
We moeten de conclusie trekken of de grote van de meetfout
acceptabel is in die bepaalde situatie van meten (een test om
kanker te detecteren of een persoonlijkheidstest)
, - De personen die de test doen, moeten weten dat de resultaten niet
een vast ding laten zien, het is abstract maar kan wel dingen
voorspellen
Gevaar van testgebruik: testen worden steeds groter in de maatschappij,
omdat ze denken dat het objectief mentale eigenschappen kan meten,
maar dit blijkt erg tegen te vallen
- Meet een test wat deze moet meten?
Soms is het wat gedateerd, bijvoorbeeld een foto laten zien van
een hele oude telefoon en vragen wat het is aan een kind van 4,
die heeft natuurlijk geen idee
- Hoe en onder welke omstandigheden moet een test afgenomen
worden?
Is er een duidelijke handleiding?
- Is een verkorte versie van een test (even) betrouwbaar?
- Hoe is de referentiegroep bepaald?
Confounders
- Veel concepten zijn niet perfect gedefinieerd
- Vragen worden verkeerd gelezen/geïnterpreteerd
- Sociaal wenselijk antwoorden/context (hoeft niet expres te zijn, want
“veel” heeft voor andere mensen in andere situaties een andere
betekenis)
- Handleiding niet precies gevolgd
- Gedurende deze course krijgen we nog meer
Distincties in tests
Tests kunnen op 2 manieren worden geïnterpreteerd
- Door middel van een afkapwaarde (criterion-based)
De resultaten worden vergeleken met een bepaalde
drempelwaarde om te bepalen of de resultaten positief of
negatief zijn
- Door middel van een vergelijkingsgroep (norm-referenced)
De resultaten worden vergeleken met een andere groep om te
bekijken of er (een grote) afwijking daarvan is
Interpretatie scores = de interpretatie ten opzichte van een norm
of standaardscore
, o Scores = constructen uitgedrukt in een getal
Soorten tests (blz. 7-10)?
Waarvoor tests worden gebruikt
Er zijn 5 dingen waar tests voor worden gebruikt:
- Classificatie = iemand indelen in een bepaalde categorie (bijv.
slagen vs falen)
- Diagnose en planning van behandeling = de onderliggende dingen
van iemand zijn abnormale gedragingen vinden
- Zelfkennis
- Evaluatie van behandeling
- Onderzoek
Test afname
Diagnostiek = het door en door leren kennen van een situatie met als doel
een beslissing kunnen nemen
Psychodiagnostiek = onderzoek op het gebied van psychosociaal
functioneren
- Betrouwbare en valide beschrijving van psychosociale werkelijkheid
- Mogelijke verklaringen voor problemen
- Verklaringen toetsen (deze leerling heeft problemen, wat zijn de
verklaringen hiervoor?)
Wetenschappelijke diagnostiek
- Diagnostiek is idealiter herhaalbaar
- Diagnostiek nadert idealiter de werkelijkheid
