Psychometrics: an introduction - Samenvatting
Lydia Dekker - Klein Nibbelink
UvA - Testen en Meten
Deze samenvatting is gebaseerd op de 4e editie van het boek Psychometrics: an
introduction (Furr, 2022).
Referenties
Furr, R. M. (2022). Psychometrics: An Introduction (Fourth edition). SAGE.
HOOFDSTUK 1 - PSYCHOMETRICS AND THE IMPORTANCE OF
PSYCHOLOGICAL MEASUREMENT
Tests brengen zichtbaar gedrag in kaart, en koppelen dat aan onzichtbare fenomenen
die erachter werkzaam zijn. Die fenomenen noem je hypothetische constructen of latente
variabelen, omdat je nooit met zekerheid kunt zeggen dat deze constructen daadwerkelijk be-
staan (ze kunnen immers niet worden waargenomen). Voorbeelden zijn IQ, werkgeheugen,
honger, kennis, zelfbeeld. De procedures waarmee dit wordt gemeten, worden operational
definitions genoemd. Een test wordt valide genoemd wanneer het daadwerkelijk lijkt te
meten wat we denken dat het meet.
Cronbach definieert een psychologische test als “een systematische procedure voor
het vergelijken van gedrag tussen twee of meer mensen”. Hieruit volgen 3 eigenschappen:
1. De test meet een bepaald soort gedrag
2. Dit gedrag moet op een systematische manier gemeten worden
3. Het doel is om verschillen tussen mensen vast te stellen
Er zijn verschillende soorten testen. Ze kunnen verschillen op gebied van:
• Inhoud (wat beoogt het te meten?)
• Antwoordvorm (open of gesloten?)
• Afnamemethode (individueel, in groepen?)
• Toepassing (criterion referenced (met cutoff score: je voldoet of niet, bijv. een
tentamen) of norm referenced (vergelijken met een representatieve sample (reference
sample, normative sample) die de test heeft gemaakt, denk aan IQ-score))
, SAMENVATTING PSYCHOMETRICS: AN INTRODUCTION 2
• Timing (speed vs power)
• De betekenis van indicatoren (reflectief/ effect (denk aan intelligentietest: die meet
gedrag wat intelligentie reflecteert) of formatief/ causaal (Denk aan SES: die kun
je meten door te kijken naar afgeronde opleiding, werk wat iemand doet, etc., die
worden niet veroorzaakt door de SES maar zijn onderdeel van de SES)
Psychometrie richt zich op het evalueren van psychologische tests op 3 gebieden:
1. De informatie die wordt verzameld bij een test (bv. scores)
2. De betrouwbaarheid van de data
3. De validiteit van de data
Er zijn meerdere uitdagingen op het gebied van psychologische testen:
1. Complexiteit van concepten
2. Reactiviteit van participanten (denk aan demand characteristics, waarbij iemand het
doel van het onderzoek probeert te achterhalen en de onderzoeker tevreden wil stellen,
of social desirability, waarbij mensen de waarheid opzijzetten voor sociaal gewenste
antwoorden, of malingering, waarbij iemand het expres slecht doet)
3. Observantverwachting/ bias
4. Composite scores (somscores) kunnen het beeld vertroebelen, het is veel vager dan
het getal op een weegschaal.
5. Score sensitiviteit: is de test sensitief genoeg om daadwerkelijk (betekenisvolle)
verschillen te meten? Is bijv. een 5-puntsschaal duidelijk genoeg om iemands
emotionele toestand te meten? En wat zegt een score dan precies?
6. (Gebrek aan) bewustzijn van psychometrie (denk aan een toets op school: die zit vaak
psychometrisch slecht in elkaar, of er is iig niet over nagedacht)
HOOFDSTUK 2 - SCALING
Scaling gaat over het toewijzen van waarden aan psychologische eigenschappen.
Waarden kunnen het volgende zeggen (in volgorde van hoeveelheid informatie van weinig
naar veel):
1. Identiteit (hetzelfde of anders). Je deelt mensen in in groepen. Om goed te catego-
riseren moeten de mensen voldoen aan de eigenschap identiteit: mensen in dezelfde
categorie moeten hetzelfde zijn op het gebied van de specifieke eigenschap. De ca-
tegorieën moeten elkaar uitsluiten. Tot slot moeten de categorieën exhaustive zijn
(er moet geen optie zijn die tot geen enkele categorie behoort). Nummers in deze
categorie hebben geen andere waarde dan categorische waarde (nominaal).
Lydia Dekker - Klein Nibbelink
UvA - Testen en Meten
Deze samenvatting is gebaseerd op de 4e editie van het boek Psychometrics: an
introduction (Furr, 2022).
Referenties
Furr, R. M. (2022). Psychometrics: An Introduction (Fourth edition). SAGE.
HOOFDSTUK 1 - PSYCHOMETRICS AND THE IMPORTANCE OF
PSYCHOLOGICAL MEASUREMENT
Tests brengen zichtbaar gedrag in kaart, en koppelen dat aan onzichtbare fenomenen
die erachter werkzaam zijn. Die fenomenen noem je hypothetische constructen of latente
variabelen, omdat je nooit met zekerheid kunt zeggen dat deze constructen daadwerkelijk be-
staan (ze kunnen immers niet worden waargenomen). Voorbeelden zijn IQ, werkgeheugen,
honger, kennis, zelfbeeld. De procedures waarmee dit wordt gemeten, worden operational
definitions genoemd. Een test wordt valide genoemd wanneer het daadwerkelijk lijkt te
meten wat we denken dat het meet.
Cronbach definieert een psychologische test als “een systematische procedure voor
het vergelijken van gedrag tussen twee of meer mensen”. Hieruit volgen 3 eigenschappen:
1. De test meet een bepaald soort gedrag
2. Dit gedrag moet op een systematische manier gemeten worden
3. Het doel is om verschillen tussen mensen vast te stellen
Er zijn verschillende soorten testen. Ze kunnen verschillen op gebied van:
• Inhoud (wat beoogt het te meten?)
• Antwoordvorm (open of gesloten?)
• Afnamemethode (individueel, in groepen?)
• Toepassing (criterion referenced (met cutoff score: je voldoet of niet, bijv. een
tentamen) of norm referenced (vergelijken met een representatieve sample (reference
sample, normative sample) die de test heeft gemaakt, denk aan IQ-score))
, SAMENVATTING PSYCHOMETRICS: AN INTRODUCTION 2
• Timing (speed vs power)
• De betekenis van indicatoren (reflectief/ effect (denk aan intelligentietest: die meet
gedrag wat intelligentie reflecteert) of formatief/ causaal (Denk aan SES: die kun
je meten door te kijken naar afgeronde opleiding, werk wat iemand doet, etc., die
worden niet veroorzaakt door de SES maar zijn onderdeel van de SES)
Psychometrie richt zich op het evalueren van psychologische tests op 3 gebieden:
1. De informatie die wordt verzameld bij een test (bv. scores)
2. De betrouwbaarheid van de data
3. De validiteit van de data
Er zijn meerdere uitdagingen op het gebied van psychologische testen:
1. Complexiteit van concepten
2. Reactiviteit van participanten (denk aan demand characteristics, waarbij iemand het
doel van het onderzoek probeert te achterhalen en de onderzoeker tevreden wil stellen,
of social desirability, waarbij mensen de waarheid opzijzetten voor sociaal gewenste
antwoorden, of malingering, waarbij iemand het expres slecht doet)
3. Observantverwachting/ bias
4. Composite scores (somscores) kunnen het beeld vertroebelen, het is veel vager dan
het getal op een weegschaal.
5. Score sensitiviteit: is de test sensitief genoeg om daadwerkelijk (betekenisvolle)
verschillen te meten? Is bijv. een 5-puntsschaal duidelijk genoeg om iemands
emotionele toestand te meten? En wat zegt een score dan precies?
6. (Gebrek aan) bewustzijn van psychometrie (denk aan een toets op school: die zit vaak
psychometrisch slecht in elkaar, of er is iig niet over nagedacht)
HOOFDSTUK 2 - SCALING
Scaling gaat over het toewijzen van waarden aan psychologische eigenschappen.
Waarden kunnen het volgende zeggen (in volgorde van hoeveelheid informatie van weinig
naar veel):
1. Identiteit (hetzelfde of anders). Je deelt mensen in in groepen. Om goed te catego-
riseren moeten de mensen voldoen aan de eigenschap identiteit: mensen in dezelfde
categorie moeten hetzelfde zijn op het gebied van de specifieke eigenschap. De ca-
tegorieën moeten elkaar uitsluiten. Tot slot moeten de categorieën exhaustive zijn
(er moet geen optie zijn die tot geen enkele categorie behoort). Nummers in deze
categorie hebben geen andere waarde dan categorische waarde (nominaal).
