Assessment en Evaluatie samenvatting open boek tentamen

1



A&E samenvatting
Inhoud
Week 1 : introductie ................................................................................................................................ 2
Hoorcollege 1 ...................................................................................................................................... 3
Werkgroep 1 ........................................................................................................................................ 4
Week 2: Confirmatieve factoranalyse (CFA) ........................................................................................... 6
Hoorcollege 2 ...................................................................................................................................... 6
Week 3: Exploratief → EFA .................................................................................................................. 10
Hoorcollege 3 .................................................................................................................................... 10
Week 4................................................................................................................................................... 12
Hoorcollege 4: betrouwbaarheid ...................................................................................................... 12
Week 5: toetsen .................................................................................................................................... 15
Hoorcollege 5 .................................................................................................................................... 15
Week 7................................................................................................................................................... 18
Hoorcollege 7: Performance Assessment & programmatisch toetsen ............................................. 18
Week 8................................................................................................................................................... 22
Hoorcollege 8.1: formatief assessment (feedback geven) ................................................................ 22
Hoorcollege 8.2: feedback geletterdheid (feedback ontvangen) ..................................................... 25

,2

, 3


Week 1 : introductie
Hoorcollege 1
Doelen en ontwikkeling instrument:

1. Vragenlijsten / Interviews → Attitudes, opvattingen, voorkeuren
2. Kennistoetsen → Kennis en beheersingsniveaus
3. Performance assessments → Vaardigheden en beheersingsniveaus
4. Formatief assessment → Cyclisch, betrokkenheid van studenten



Waarom is 1 item vaak niet voldoende:

- Construct niet altijd goed afgedekt (met 1 vraag alles dekken)
- Discriminatie en sensitiviteit meestal lager (is het de gedachten altijd zo?)
- Test voor betrouwbaarheid moelijker (ten minste 2 metingen voor betrouwbaarheid)
➔ Hoe complexer het construct, hoe uitgebreider de item



Kwaliteitseisen van assessment:

Algemene eisen
• Transparantie
Psychometrische eisen
• Validiteit
o Inhoudsvaliditeit (goede inhoud door expert (face validity)/toetsmatrijs)
o Begripsvaliditeit
▪ Convergent: Correlatie tussen soortgelijke instrumenten
▪ Divergent: Correlatie tussen verschillende meetinstrumenten
o Predictieve validiteit (theorie en multipele regressie)
• Betrouwbaarheid
o Interne consistentie (Crohnbach’s alpha)
o Objectiviteit (kallibratie)
o Test-hertest

Hoe kan aan de kwaliteitscriteria worden voldaan? → Standaardisatie




Edumetrische eisen
• Utiliteit (Benodigde (tijds)investering en consequenties (van de afname) van het instrument)
o Wordt de verwachte prestatie voldoende geoefend?
o Is het instrument werkbaar afgezet tegen de tijd (toets, studie, nakijk)?
o Is het besluit om iemand te laten slagen/zakken te rechtvaardigen?
o Is de gebruiker op de hoogte van en akkoord met de ethische aspecten?
• Impact (transparantie (van de afname) van het instrument)