Samenvatting Mastering modern psychological testing: Leiden version & 3rd edition full
version
Inhoudsopgave
H1. Introduction to psychological assessment: why we do it and what it is ..................................................... 2
H2. The basic statistics of measurement ........................................................................................................ 21
H3. The meaning of test scores ...................................................................................................................... 37
H4. Reliability ................................................................................................................................................. 53
H5. Validity .................................................................................................................................................... 78
H6. Item development ................................................................................................................................... 97
H7. Item analysis: methods for fitting the right items to the right test ......................................................... 118
H8. Achievement test in the era of high-stakes assessment ......................................................................... 134
H9. Assessment of intelligence ..................................................................................................................... 134
H10. Assessment of personality ................................................................................................................... 134
H11. Behavioral assessment ......................................................................................................................... 134
H12. Employment and vocational testing ..................................................................................................... 149
H13. Neuropsychological testing .................................................................................................................. 149
H14. Forensic applications of psychological assessment ............................................................................... 149
H15. The problem of bias in psychological assessment................................................................................. 149
H16. Assessment accommodations .............................................................................................................. 168
H17. Best practices: legal and ethical issues ................................................................................................. 182
H18. How to develop a psychological test: a practical approach .................................................................. 195
1
,H1. Introduction to psychological assessment: why we do it and what
it is
In dit hoofdstuk wordt er duidelijk gemaakt waarom het van belang is om iets te leren over
testen en assessments. Psychologisch testen en assessment is belangrijk in vrijwel elk aspect
van professionele psychologie. Het gebruik van psychologisch testen en andere assessments
is niet gelimiteerd aan klinische of gezondheidssettings.
1.1. Brief history of testing
Het vroegste gedocumenteerde gebruik van tests wordt gewoonlijk toegeschreven aan de
Chinezen, die ambtenaren testten om hun bekwaamheid te waarborgen.
1.1.1. Earliest testing: circa 2200 BC
Het vroegste gedocumenteerde gebruik van tests wordt gewoonlijk toegeschreven aan de
Chinezen, die ambtenaren testten om hun bekwaamheid te waarborgen (analoog aan de
hedendaagse examens voor ambtenaren).
1.1.2. Eighteenth- and nineteenth- century testing
1.1.2.1. Carl Frederich Gauss
Carl Frederich Gauss (1777-1855) was een bekende Duitse wiskundige die ook belangrijke
bijdragen leverde aan de astronomie en de studie van het magnetisme. Tijdens het volgen
van de sterbewegingen ontdekte hij dat zijn collega's vaak met iets andere locaties kwamen.
Hij zette de frequentie van de waargenomen locaties systematisch uit en ontdekte dat de
waarnemingen de vorm van een kromme hadden - de kromme die we nu kennen als de
normale kromme of de normale verdeling.
1.1.2.2. Civil service examinations
Eind achttiende en begin negentiende eeuw werden in Europese landen ambtelijke tests
ingevoerd, vergelijkbaar met die welke in China werden gebruikt om overheidswerknemers
te selecteren, waaronder de invoering van ambtelijke examens door de East Indian Trading
Company in 1829. In 1883 begon de U.S. Civil Service Commission met soortgelijke proeven
om overheidsambtenaren te selecteren.
1.1.2.3. Psysicians and psychiatrists
In de negentiende eeuw ontwikkelden artsen en psychiaters in Engeland en de Verenigde
Staten classificatiesystemen om mensen met een verstandelijke beperking (voorheen
bekend als geestelijke achterstand) en andere geestelijke problemen te helpen classificeren.
• Jean Esquirol → was een van de eersten die onderscheid maakte tussen
krankzinnigheid (d.w.z. emotionele stoornissen) en geestelijke tekorten (d.w.z.
intellectuele tekorten die vanaf de geboorte aanwezig zijn). Hij geloofde ook dat
intellectuele stoornissen bestonden op een continuüm van mild tot diepgaand en
merkte op dat verbale vaardigheden de meest betrouwbare manier waren om de
mate ervan vast te stellen.
• Emil Kraepelin → bevorderde het gebruik van vrije-associatietests bij het beoordelen
van psychische patiënten. Bij vrije-associatietests worden stimulerende woorden
gepresenteerd waarop de respondent antwoordt "... met het eerste woord dat in
hem opkomt".
2
, • Sigmund Freud → breidde de techniek van het aanmoedigen van patiënten om alle
gedachten die in hen opkwamen vrijelijk uit te spreken om onderliggende gedachten
en emoties te identificeren.
1.1.3. Brass instruments era
Vroege experimentele psychologen zoals Wilhelm Wundt, Sir Francis Galton, James McKeen
Cattell en Clark Wissler leverden belangrijke bijdragen aan de ontwikkeling van het testen
van cognitieve vaardigheden. Een van de belangrijkste ontwikkelingen in deze periode was
de verschuiving naar het meten van menselijke vermogens met behulp van objectieve
procedures die gemakkelijk gerepliceerd konden worden.
1.1.3.1. Sir Francis Galton
Galton wordt beschouwd als de vader van mentale tests en metingen en was
verantwoordelijk voor de eerste grootschalige systematische verzameling van gegevens over
individuele verschillen. Een van zijn belangrijkste verwezenlijkingen was de oprichting van
een antropometrisch laboratorium op de Internationale Tentoonstelling in Londen in 1884.
Dit laboratorium werd vervolgens overgebracht naar een museum waar het enkele jaren
heeft gefunctioneerd. Gedurende deze periode werden gegevens verzameld over fysieke
(bv. lengte, gewicht, hoofdomtrek), sensorische (bv. reactietijd, sensorische discriminatie) en
motorische metingen (bv. motorsnelheid, grijpkracht) bij meer dan 17.000 personen. Dit was
de eerste grootschalige systematische verzameling van gegevens over individuele
verschillen.
1.1.3.2. James McKeen Cattell
James McKeen Cattell deelde Galton's overtuiging dat relatief eenvoudige sensorische en
motorische tests konden worden gebruikt om intellectuele capaciteiten te meten. Hoewel
later onderzoek aantoonde dat deze overtuiging te simplistisch was, speelde Cattell een
belangrijke rol bij het openen van psychologische laboratoria en het verspreiden van de
groeiende testbeweging in de V.S. Men denkt dat hij de eerste was die de term "mentale
test" gebruikte in een artikel dat hij in 1890 publiceerde. Naast zijn persoonlijke
professionele bijdragen had hij verschillende studenten die een productieve carrière in de
psychologie ontwikkelden, waaronder E.L. Thorndike, R.S. Woodworth en E.K. Strong. Galton
en Cattell droegen ook bij aan de ontwikkeling van testprocedures zoals gestandaardiseerde
vragenlijsten en beoordelingsschalen die later populaire technieken werden in de
persoonlijkheidsbeoordeling.
1.1.3.3. Clark Wissler
Clark Wissler was een van Cattells studenten wiens onderzoek het werk van zijn beroemde
leraar grotendeels in diskrediet bracht. Wissler ontdekte dat de gebruikelijke sensorisch-
motorische meetinstrumenten die werden gebruikt om intelligentie te beoordelen in wezen
geen verband hielden met academische prestaties. Hij vond ook dat de sensorisch-
motorische tests slechts een zwakke correlatie met elkaar hadden. Deze ontmoedigende
bevindingen maakten in wezen een einde aan het gebruik van de eenvoudige zintuiglijk-
motorische maatstaven voor intelligentie en vormden de basis voor een nieuwe benadering
van intellectuele beoordeling die de nadruk legde op meer verfijnde mentale processen van
hogere orde.
3
, 1.1.4. Twentieth-century testing
1.1.4.1. Alfred Binet: Bring on intelligence testing
Alfred Binet experimenteerde aanvankelijk met sensorisch-motorische metingen zoals
reac- tietijd en sensorische scherpte, maar raakte daarmee ontgoocheld en was een
pionier in het gebruik van metingen van cognitieve processen van hogere orde om
intelligentie te beoordelen. Begin 1900 gaf de Franse regering Binet en zijn collega
Theodore Simon de opdracht een test te ontwikkelen om academische prestaties te
voorspellen. Het resultaat van hun inspanningen was de eerste Binet-Simon Schaal,
uitgebracht in 1905. De schaal bevatte enkele zintuiglijk-waarneembare tests, maar de
nadruk lag op verbale items die het begrip, het redeneren, het oordeel en het
kortetermijngeheugen beoordeelden. Was de eerste intelligentietest die een goede
voorspeller was van academisch succes.
1.1.4.2. Army Alpha and Beta tests
Inlichtingentests kregen een nieuwe impuls in de Verenigde Staten tijdens de Eerste
Wereldoorlog. De American Psychological Association (APA) en een van haar vroegere
voorzitters, Robert M. Yerkes, ontwikkelden een task force die een serie proeven van
bekwaamheid ontwierp die bekend werden als de Army Alpha en Army Beta- één verbaal
(Alpha) en één non-verbaal (Beta).
1.1.4.3. Robert Woodwordth: Bring on personality testing!
In 1918 ontwikkelde Robert Woodworth de Woodworth Personal Data Sheet, die
algemeen wordt beschouwd als de eerste formele persoonlijkheidstest. Het blad met
persoonlijke gegevens werd ontworpen om persoonlijke informatie over militaire rekruten
te verzamelen. Net zoals de ontwikkeling van de Binet-schalen het tijdperk van
intelligentietests inluidde, luidde de introductie van het Woodworth Personal Data Sheet
het tijdperk van persoonlijkheidsbeoordeling in.
1.1.4.4. Rorschach Inkblot test
Hermann Rorschach ontwikkelde de Rorschach inktvlekken in de jaren 1920. Hoewel er
veel discussie is geweest over de psychometrische eigenschappen van de Rorschach (en
andere projectieve technieken), blijft het een van de meest populaire technieken voor het
beoordelen van persoonlijkheid die aan het begin van de eenentwintigste eeuw in gebruik
zijn.
1.1.4.5. College admission tests
De College Entrance Examination Board (CEEB) werd oorspronkelijk opgericht om
hogescholen en universiteiten een objectieve en geldige maatstaf te bieden voor de
academische capaciteiten van studenten en om bij de toelating over te stappen van
nepotisme en erfenis naar academische verdienste. Haar inspanningen resulteerden in de
ontwikkeling van de eerste Scholastic Aptitude Test (SAT) in 1926. Het American College
Testing Program (ACT) ging in 1959 van start en is de belangrijkste concurrent van de SAT.
Vóór de komst van deze tests waren beslissingen over toelating tot de universiteit zeer
subjectief en sterk beïnvloed door familiale achtergrond en status, dus een ander doel van
de ontwikkeling van deze instrumenten was het selectieproces steeds objectiever te maken.
4
version
Inhoudsopgave
H1. Introduction to psychological assessment: why we do it and what it is ..................................................... 2
H2. The basic statistics of measurement ........................................................................................................ 21
H3. The meaning of test scores ...................................................................................................................... 37
H4. Reliability ................................................................................................................................................. 53
H5. Validity .................................................................................................................................................... 78
H6. Item development ................................................................................................................................... 97
H7. Item analysis: methods for fitting the right items to the right test ......................................................... 118
H8. Achievement test in the era of high-stakes assessment ......................................................................... 134
H9. Assessment of intelligence ..................................................................................................................... 134
H10. Assessment of personality ................................................................................................................... 134
H11. Behavioral assessment ......................................................................................................................... 134
H12. Employment and vocational testing ..................................................................................................... 149
H13. Neuropsychological testing .................................................................................................................. 149
H14. Forensic applications of psychological assessment ............................................................................... 149
H15. The problem of bias in psychological assessment................................................................................. 149
H16. Assessment accommodations .............................................................................................................. 168
H17. Best practices: legal and ethical issues ................................................................................................. 182
H18. How to develop a psychological test: a practical approach .................................................................. 195
1
,H1. Introduction to psychological assessment: why we do it and what
it is
In dit hoofdstuk wordt er duidelijk gemaakt waarom het van belang is om iets te leren over
testen en assessments. Psychologisch testen en assessment is belangrijk in vrijwel elk aspect
van professionele psychologie. Het gebruik van psychologisch testen en andere assessments
is niet gelimiteerd aan klinische of gezondheidssettings.
1.1. Brief history of testing
Het vroegste gedocumenteerde gebruik van tests wordt gewoonlijk toegeschreven aan de
Chinezen, die ambtenaren testten om hun bekwaamheid te waarborgen.
1.1.1. Earliest testing: circa 2200 BC
Het vroegste gedocumenteerde gebruik van tests wordt gewoonlijk toegeschreven aan de
Chinezen, die ambtenaren testten om hun bekwaamheid te waarborgen (analoog aan de
hedendaagse examens voor ambtenaren).
1.1.2. Eighteenth- and nineteenth- century testing
1.1.2.1. Carl Frederich Gauss
Carl Frederich Gauss (1777-1855) was een bekende Duitse wiskundige die ook belangrijke
bijdragen leverde aan de astronomie en de studie van het magnetisme. Tijdens het volgen
van de sterbewegingen ontdekte hij dat zijn collega's vaak met iets andere locaties kwamen.
Hij zette de frequentie van de waargenomen locaties systematisch uit en ontdekte dat de
waarnemingen de vorm van een kromme hadden - de kromme die we nu kennen als de
normale kromme of de normale verdeling.
1.1.2.2. Civil service examinations
Eind achttiende en begin negentiende eeuw werden in Europese landen ambtelijke tests
ingevoerd, vergelijkbaar met die welke in China werden gebruikt om overheidswerknemers
te selecteren, waaronder de invoering van ambtelijke examens door de East Indian Trading
Company in 1829. In 1883 begon de U.S. Civil Service Commission met soortgelijke proeven
om overheidsambtenaren te selecteren.
1.1.2.3. Psysicians and psychiatrists
In de negentiende eeuw ontwikkelden artsen en psychiaters in Engeland en de Verenigde
Staten classificatiesystemen om mensen met een verstandelijke beperking (voorheen
bekend als geestelijke achterstand) en andere geestelijke problemen te helpen classificeren.
• Jean Esquirol → was een van de eersten die onderscheid maakte tussen
krankzinnigheid (d.w.z. emotionele stoornissen) en geestelijke tekorten (d.w.z.
intellectuele tekorten die vanaf de geboorte aanwezig zijn). Hij geloofde ook dat
intellectuele stoornissen bestonden op een continuüm van mild tot diepgaand en
merkte op dat verbale vaardigheden de meest betrouwbare manier waren om de
mate ervan vast te stellen.
• Emil Kraepelin → bevorderde het gebruik van vrije-associatietests bij het beoordelen
van psychische patiënten. Bij vrije-associatietests worden stimulerende woorden
gepresenteerd waarop de respondent antwoordt "... met het eerste woord dat in
hem opkomt".
2
, • Sigmund Freud → breidde de techniek van het aanmoedigen van patiënten om alle
gedachten die in hen opkwamen vrijelijk uit te spreken om onderliggende gedachten
en emoties te identificeren.
1.1.3. Brass instruments era
Vroege experimentele psychologen zoals Wilhelm Wundt, Sir Francis Galton, James McKeen
Cattell en Clark Wissler leverden belangrijke bijdragen aan de ontwikkeling van het testen
van cognitieve vaardigheden. Een van de belangrijkste ontwikkelingen in deze periode was
de verschuiving naar het meten van menselijke vermogens met behulp van objectieve
procedures die gemakkelijk gerepliceerd konden worden.
1.1.3.1. Sir Francis Galton
Galton wordt beschouwd als de vader van mentale tests en metingen en was
verantwoordelijk voor de eerste grootschalige systematische verzameling van gegevens over
individuele verschillen. Een van zijn belangrijkste verwezenlijkingen was de oprichting van
een antropometrisch laboratorium op de Internationale Tentoonstelling in Londen in 1884.
Dit laboratorium werd vervolgens overgebracht naar een museum waar het enkele jaren
heeft gefunctioneerd. Gedurende deze periode werden gegevens verzameld over fysieke
(bv. lengte, gewicht, hoofdomtrek), sensorische (bv. reactietijd, sensorische discriminatie) en
motorische metingen (bv. motorsnelheid, grijpkracht) bij meer dan 17.000 personen. Dit was
de eerste grootschalige systematische verzameling van gegevens over individuele
verschillen.
1.1.3.2. James McKeen Cattell
James McKeen Cattell deelde Galton's overtuiging dat relatief eenvoudige sensorische en
motorische tests konden worden gebruikt om intellectuele capaciteiten te meten. Hoewel
later onderzoek aantoonde dat deze overtuiging te simplistisch was, speelde Cattell een
belangrijke rol bij het openen van psychologische laboratoria en het verspreiden van de
groeiende testbeweging in de V.S. Men denkt dat hij de eerste was die de term "mentale
test" gebruikte in een artikel dat hij in 1890 publiceerde. Naast zijn persoonlijke
professionele bijdragen had hij verschillende studenten die een productieve carrière in de
psychologie ontwikkelden, waaronder E.L. Thorndike, R.S. Woodworth en E.K. Strong. Galton
en Cattell droegen ook bij aan de ontwikkeling van testprocedures zoals gestandaardiseerde
vragenlijsten en beoordelingsschalen die later populaire technieken werden in de
persoonlijkheidsbeoordeling.
1.1.3.3. Clark Wissler
Clark Wissler was een van Cattells studenten wiens onderzoek het werk van zijn beroemde
leraar grotendeels in diskrediet bracht. Wissler ontdekte dat de gebruikelijke sensorisch-
motorische meetinstrumenten die werden gebruikt om intelligentie te beoordelen in wezen
geen verband hielden met academische prestaties. Hij vond ook dat de sensorisch-
motorische tests slechts een zwakke correlatie met elkaar hadden. Deze ontmoedigende
bevindingen maakten in wezen een einde aan het gebruik van de eenvoudige zintuiglijk-
motorische maatstaven voor intelligentie en vormden de basis voor een nieuwe benadering
van intellectuele beoordeling die de nadruk legde op meer verfijnde mentale processen van
hogere orde.
3
, 1.1.4. Twentieth-century testing
1.1.4.1. Alfred Binet: Bring on intelligence testing
Alfred Binet experimenteerde aanvankelijk met sensorisch-motorische metingen zoals
reac- tietijd en sensorische scherpte, maar raakte daarmee ontgoocheld en was een
pionier in het gebruik van metingen van cognitieve processen van hogere orde om
intelligentie te beoordelen. Begin 1900 gaf de Franse regering Binet en zijn collega
Theodore Simon de opdracht een test te ontwikkelen om academische prestaties te
voorspellen. Het resultaat van hun inspanningen was de eerste Binet-Simon Schaal,
uitgebracht in 1905. De schaal bevatte enkele zintuiglijk-waarneembare tests, maar de
nadruk lag op verbale items die het begrip, het redeneren, het oordeel en het
kortetermijngeheugen beoordeelden. Was de eerste intelligentietest die een goede
voorspeller was van academisch succes.
1.1.4.2. Army Alpha and Beta tests
Inlichtingentests kregen een nieuwe impuls in de Verenigde Staten tijdens de Eerste
Wereldoorlog. De American Psychological Association (APA) en een van haar vroegere
voorzitters, Robert M. Yerkes, ontwikkelden een task force die een serie proeven van
bekwaamheid ontwierp die bekend werden als de Army Alpha en Army Beta- één verbaal
(Alpha) en één non-verbaal (Beta).
1.1.4.3. Robert Woodwordth: Bring on personality testing!
In 1918 ontwikkelde Robert Woodworth de Woodworth Personal Data Sheet, die
algemeen wordt beschouwd als de eerste formele persoonlijkheidstest. Het blad met
persoonlijke gegevens werd ontworpen om persoonlijke informatie over militaire rekruten
te verzamelen. Net zoals de ontwikkeling van de Binet-schalen het tijdperk van
intelligentietests inluidde, luidde de introductie van het Woodworth Personal Data Sheet
het tijdperk van persoonlijkheidsbeoordeling in.
1.1.4.4. Rorschach Inkblot test
Hermann Rorschach ontwikkelde de Rorschach inktvlekken in de jaren 1920. Hoewel er
veel discussie is geweest over de psychometrische eigenschappen van de Rorschach (en
andere projectieve technieken), blijft het een van de meest populaire technieken voor het
beoordelen van persoonlijkheid die aan het begin van de eenentwintigste eeuw in gebruik
zijn.
1.1.4.5. College admission tests
De College Entrance Examination Board (CEEB) werd oorspronkelijk opgericht om
hogescholen en universiteiten een objectieve en geldige maatstaf te bieden voor de
academische capaciteiten van studenten en om bij de toelating over te stappen van
nepotisme en erfenis naar academische verdienste. Haar inspanningen resulteerden in de
ontwikkeling van de eerste Scholastic Aptitude Test (SAT) in 1926. Het American College
Testing Program (ACT) ging in 1959 van start en is de belangrijkste concurrent van de SAT.
Vóór de komst van deze tests waren beslissingen over toelating tot de universiteit zeer
subjectief en sterk beïnvloed door familiale achtergrond en status, dus een ander doel van
de ontwikkeling van deze instrumenten was het selectieproces steeds objectiever te maken.
4
