Blok 2.5, college 8
Hoofdstuk 11
Testbias: Bias die wordt veroorzaakt door de test. Een test kan voor bepaalde groepen
weten wat het moet meten, maar niet voor alle groepen.
Systematische score verschillen tussen groepen die niks te maken hebben met hetgeen wat
je wil meten.
- Construct bias:
De relatie tussen observed scores en true scores verschilt systematisch voor
verschillende groepen.
Lastig taalgebruik kan hier een oorzaak van zijn, een native speaker snapt de vraag
namelijk wel, terwijl een non-native speaker moeite heeft met het begrijpen van de
vraag. De non-native speaker zou het antwoord wel weten als de vraag werd gesteld
in een andere taal of andere verwoording.
- Predictive bias:
De relatie tussen de testscore en een bepaald criterium is niet hetzelfde voor
verschillende groepen.
Vb. Begrijpend lezen testen aan de hand van vocabulaire. Bij een native speaker is
het logisch dat er sprake is van veel vocabulaire, maar het kan zijn dat deze persoon
niet goed is in begrijpend lezen. Een non-native speaker die veel leest zal
automatisch een groter vocabulaire hebben dan iemand die niet veel leest. De native
en non-native speaker zullen misschien een even groot vocabulaire hebben, maar de
non-native speaker zal waarschijnlijk beter kunnen lezen.
Deze verschillende biases kunnen onafhankelijk van elkaar optreden.
Construct opsporen:
Dit kan je checken door te kijken of de samenhang tussen verschillende items, verschillen
voor verschillende groepen. Het gaat hierbij om verschillen die niks te maken hebben met
het onderliggende construct.
- Item Discrimination Index:
Er wordt een verdeling gemaakt tussen hoog en laag scorende groepen, er wordt
gekeken naar bijvoorbeeld de 10% best en slechts scorende personen. Het totaal
plaatje moet ook aansluiten bij het item, dus de personen die over het algemeen het
beste scoren op de gehele test, moeten ook het beste scoren op item 1. Dit geldt ook
voor de slechtst scorende personen, alleen dan andersom. Het is van belang om te
kijken of dit geldt voor beide groepen
- Factor analyse:
- Differential Item Functioning Analyses:
Dit is de relatie tussen de itemscore en het onderliggende construct voor
verschillende groepen.
, - Rank order: Hierbij wordt iedereen van hoog naar laag gerangschikt. Voor de rest is
dit hetzelfde als item discrimination index.
Hoofdstuk 11
Testbias: Bias die wordt veroorzaakt door de test. Een test kan voor bepaalde groepen
weten wat het moet meten, maar niet voor alle groepen.
Systematische score verschillen tussen groepen die niks te maken hebben met hetgeen wat
je wil meten.
- Construct bias:
De relatie tussen observed scores en true scores verschilt systematisch voor
verschillende groepen.
Lastig taalgebruik kan hier een oorzaak van zijn, een native speaker snapt de vraag
namelijk wel, terwijl een non-native speaker moeite heeft met het begrijpen van de
vraag. De non-native speaker zou het antwoord wel weten als de vraag werd gesteld
in een andere taal of andere verwoording.
- Predictive bias:
De relatie tussen de testscore en een bepaald criterium is niet hetzelfde voor
verschillende groepen.
Vb. Begrijpend lezen testen aan de hand van vocabulaire. Bij een native speaker is
het logisch dat er sprake is van veel vocabulaire, maar het kan zijn dat deze persoon
niet goed is in begrijpend lezen. Een non-native speaker die veel leest zal
automatisch een groter vocabulaire hebben dan iemand die niet veel leest. De native
en non-native speaker zullen misschien een even groot vocabulaire hebben, maar de
non-native speaker zal waarschijnlijk beter kunnen lezen.
Deze verschillende biases kunnen onafhankelijk van elkaar optreden.
Construct opsporen:
Dit kan je checken door te kijken of de samenhang tussen verschillende items, verschillen
voor verschillende groepen. Het gaat hierbij om verschillen die niks te maken hebben met
het onderliggende construct.
- Item Discrimination Index:
Er wordt een verdeling gemaakt tussen hoog en laag scorende groepen, er wordt
gekeken naar bijvoorbeeld de 10% best en slechts scorende personen. Het totaal
plaatje moet ook aansluiten bij het item, dus de personen die over het algemeen het
beste scoren op de gehele test, moeten ook het beste scoren op item 1. Dit geldt ook
voor de slechtst scorende personen, alleen dan andersom. Het is van belang om te
kijken of dit geldt voor beide groepen
- Factor analyse:
- Differential Item Functioning Analyses:
Dit is de relatie tussen de itemscore en het onderliggende construct voor
verschillende groepen.
, - Rank order: Hierbij wordt iedereen van hoog naar laag gerangschikt. Voor de rest is
dit hetzelfde als item discrimination index.
