Samenvatting Testtheorie Pedagogische Wetenschappen / AOLB 2020-2021
TESTTHEORIE KLAPPER
INHOUD
1. Het schrijven van items .................................................................................................................................. 2
1.1 Eisen voor toetsopgaven ....................................................................................................................... 2
1.2 Eisen voor vragenlijsten ......................................................................................................................... 2
2. Scoring en normering ..................................................................................................................................... 2
2.1 Itemscores ............................................................................................................................................. 2
2.2 Ruwe testscores en normering .............................................................................................................. 3
3. Itemanalyse .................................................................................................................................................... 3
3.1 p- en a-waarden..................................................................................................................................... 3
3.2 Item- en testscoring ............................................................................................................................... 3
3.3 Item-totaalcorrelaties ............................................................................................................................ 3
4. Artikel: Over misverstanden rond Cronbachs alfa en de wenselijkheid van alternatieven – Sijtsma ............ 4
5. COTAN Beoordelingssysteem voor de kwaliteit van tests.............................................................................. 4
Hoofdstuk 1 Uitgangspunten van de testconstructie ......................................................................................... 4
Hoofdstuk 6 Begripsvaliditeit .............................................................................................................................. 4
Hoofdstuk 7 Criteriumvaliditeit ........................................................................................................................... 5
1
, Samenvatting Testtheorie Pedagogische Wetenschappen / AOLB 2020-2021
1. HET SCHRIJVEN VAN ITEMS
De regels bij het schrijven van items kunnen het succes bevorderen. Door (te) veel items te construeren
dan nodig, kunnen de minder gelukte items worden weggegooid.
1.1 EISEN VOOR TOETSOPGAVEN
Er zijn zes eisen waar een goed testitem aan moet voldoen:
1. Relevantie
Wanneer een vraag beroep op doet kennis of vaardigheden die niet relevant zijn in relatie tot wat
er gemeten moet worden, treedt er gebrek aan relevantie op. Dit kan voor komen bij bijvoorbeeld
een te ingewikkelde of lange formulering, of bij vragen waarbij er naar letterlijke passages uit
literatuur wordt gevraagd.
2. Objectiviteit
Wanneer er onenigheid kan ontstaan over het goede antwoord (door deskundigen), is een opgave
niet objectief.
3. Specificiteit
Als een vraag alleen kan worden beantwoord door personen die de stof hebben bestudeerd, is de
vraag specifiek. Door formuleringsfouten in de antwoorden van een meerkeuzevraag kan een
respondent aanwijzingen vinden richting het goede antwoord.
4. Efficiëntie
Vragen moeten zo min mogelijk tijd kosten en dus goed, helder en kort geformuleerd worden.
5. Moeilijkheid
Er moet een goede balans zijn in de moeilijkheidsgraad van de vragen: ze moeten niet te moeilijk
of te makkelijk zijn.
6. Discriminatie
Vragen moeten beter gemaakt worden door “goede” leerlingen dan door “slechte” leerlingen.
1.2 EISEN VOOR VRAGENLIJSTEN
Verkeerde formulering in vragenlijsten kan zorgen voor een verandering in de vraag. Je moet vragen
vermijden die naar het verleden i.p.v. het heden verwijzen, die als vragen naar feiten kunnen worden
gezien, die op verschillende manieren kunnen worden geïnterpreteerd, waar de woorden ‘alles’ ‘altijd’ en
‘nooit’ in staan of die irrelevant zijn. Gebruik geen vragen waar iedereen het mee eens of oneens is, geen
moeilijke woorden en geen dubbele ontkenningen en wees zuinig met woorden zoals ‘alleen als’ en
‘slechts’. Je moet vragen kiezen die over de hele range van het eigenschapscontinuüm gespreid zijn. ook
moet je vragen kort en volledig, helder, duidelijk en grammaticaal correct stellen. liever tweemaal een korte
dan een lange ingewikkelde zin.
2. SCORING EN NORMERING
2.1 ITEMSCORES
Een item is de kleinste eenheid van scoring van een test. Bij een prestatietest is er vaak sprake van
dichotome items (het is goed of fout, je krijgt 1 of 0 punten). Bij gedragswijzetests zijn alle antwoorden
goed als ze naar waarheid zijn ingevuld. Sociale wenselijkheid kan leiden tot onbedoelde antwoorden. Bij
deze items is er sprake van alpha-beta onderscheid (0 punten voor alpha, 1 punt voor tussenin, 2 punten
voor beta) of wordt er gebruik gemaakt van een antwoordschaal. Er zijn ook itemscores die tot stand komen
door de beoordeling van een testleider. De interbeoordelaarsbetrouwbaarheid is in hoeverre de mening
van beoordelaars over een item verschilt.
2
TESTTHEORIE KLAPPER
INHOUD
1. Het schrijven van items .................................................................................................................................. 2
1.1 Eisen voor toetsopgaven ....................................................................................................................... 2
1.2 Eisen voor vragenlijsten ......................................................................................................................... 2
2. Scoring en normering ..................................................................................................................................... 2
2.1 Itemscores ............................................................................................................................................. 2
2.2 Ruwe testscores en normering .............................................................................................................. 3
3. Itemanalyse .................................................................................................................................................... 3
3.1 p- en a-waarden..................................................................................................................................... 3
3.2 Item- en testscoring ............................................................................................................................... 3
3.3 Item-totaalcorrelaties ............................................................................................................................ 3
4. Artikel: Over misverstanden rond Cronbachs alfa en de wenselijkheid van alternatieven – Sijtsma ............ 4
5. COTAN Beoordelingssysteem voor de kwaliteit van tests.............................................................................. 4
Hoofdstuk 1 Uitgangspunten van de testconstructie ......................................................................................... 4
Hoofdstuk 6 Begripsvaliditeit .............................................................................................................................. 4
Hoofdstuk 7 Criteriumvaliditeit ........................................................................................................................... 5
1
, Samenvatting Testtheorie Pedagogische Wetenschappen / AOLB 2020-2021
1. HET SCHRIJVEN VAN ITEMS
De regels bij het schrijven van items kunnen het succes bevorderen. Door (te) veel items te construeren
dan nodig, kunnen de minder gelukte items worden weggegooid.
1.1 EISEN VOOR TOETSOPGAVEN
Er zijn zes eisen waar een goed testitem aan moet voldoen:
1. Relevantie
Wanneer een vraag beroep op doet kennis of vaardigheden die niet relevant zijn in relatie tot wat
er gemeten moet worden, treedt er gebrek aan relevantie op. Dit kan voor komen bij bijvoorbeeld
een te ingewikkelde of lange formulering, of bij vragen waarbij er naar letterlijke passages uit
literatuur wordt gevraagd.
2. Objectiviteit
Wanneer er onenigheid kan ontstaan over het goede antwoord (door deskundigen), is een opgave
niet objectief.
3. Specificiteit
Als een vraag alleen kan worden beantwoord door personen die de stof hebben bestudeerd, is de
vraag specifiek. Door formuleringsfouten in de antwoorden van een meerkeuzevraag kan een
respondent aanwijzingen vinden richting het goede antwoord.
4. Efficiëntie
Vragen moeten zo min mogelijk tijd kosten en dus goed, helder en kort geformuleerd worden.
5. Moeilijkheid
Er moet een goede balans zijn in de moeilijkheidsgraad van de vragen: ze moeten niet te moeilijk
of te makkelijk zijn.
6. Discriminatie
Vragen moeten beter gemaakt worden door “goede” leerlingen dan door “slechte” leerlingen.
1.2 EISEN VOOR VRAGENLIJSTEN
Verkeerde formulering in vragenlijsten kan zorgen voor een verandering in de vraag. Je moet vragen
vermijden die naar het verleden i.p.v. het heden verwijzen, die als vragen naar feiten kunnen worden
gezien, die op verschillende manieren kunnen worden geïnterpreteerd, waar de woorden ‘alles’ ‘altijd’ en
‘nooit’ in staan of die irrelevant zijn. Gebruik geen vragen waar iedereen het mee eens of oneens is, geen
moeilijke woorden en geen dubbele ontkenningen en wees zuinig met woorden zoals ‘alleen als’ en
‘slechts’. Je moet vragen kiezen die over de hele range van het eigenschapscontinuüm gespreid zijn. ook
moet je vragen kort en volledig, helder, duidelijk en grammaticaal correct stellen. liever tweemaal een korte
dan een lange ingewikkelde zin.
2. SCORING EN NORMERING
2.1 ITEMSCORES
Een item is de kleinste eenheid van scoring van een test. Bij een prestatietest is er vaak sprake van
dichotome items (het is goed of fout, je krijgt 1 of 0 punten). Bij gedragswijzetests zijn alle antwoorden
goed als ze naar waarheid zijn ingevuld. Sociale wenselijkheid kan leiden tot onbedoelde antwoorden. Bij
deze items is er sprake van alpha-beta onderscheid (0 punten voor alpha, 1 punt voor tussenin, 2 punten
voor beta) of wordt er gebruik gemaakt van een antwoordschaal. Er zijn ook itemscores die tot stand komen
door de beoordeling van een testleider. De interbeoordelaarsbetrouwbaarheid is in hoeverre de mening
van beoordelaars over een item verschilt.
2
