Afneming van tests en verwerking van testgegevens - Toevalscorrectie

23 belangrijke vragen over Afneming van tests en verwerking van testgegevens - Toevalscorrectie

Wat is partiele kennis?

Dit houdt in dat de proefpersoon wel iets weet, maar niet genoeg om met zekerheid het goede antwoord te geven.

Wat voor situaties zijn er bij toevalscorrectie? (3)

1. Goede antwoord ten gevolge van kennis
2. Goed gegokt
3. Fout gegokt

Hoe bereken je de aanpassing van de aftastgrens bij meerkeuzevragen?

Totaal aantal items k = 32
Aantal keuzemogelijkheden per vraag A = 4

Iemand die niets weet zou door blind te gissen naar verwachting 8 vragen goed beantwoorden ((1/4)*32). Het is dan raadzaam om dit aantal als ondergrens van de beoordelingsschaal te nemen.

Bij een gewenst kennispercentage van 60 % zou de aftastgrens dan zijn:

8 + (0,6*( 32 - 8)) = 22,4
  • Hogere cijfers + sneller leren
  • Niets twee keer studeren
  • 100% zeker alles onthouden
Ontdek Study Smart

Welke formule wordt gebruikt om uit te rekenen welk deel van de goede antwoorden gevolg is van gokken?

Xc = X - k - X
                A-1
Totaal aantal correct door kennis (Xc) = totaal aantal correct (X) minus het aantal opgaven (k) minus het totaal aantal goede antwoorden (X) delen door het aantal keuzen (A) minus 1.

Wat zijn 4 bezwaren tegen het toepassen van giscorrectie?

  1. De gokkans klopt nooit precies (ivm partiële kennis of verleidelijke afleiders)
  2. Mensen kunnen het ook gewoon fout hebben zonder dat ze gegokt hebben
  3. Gecorrigeerde scores hebben een grotere variantie
  4. De relatie tussen X en Xc is lineair, dus de ordening, correlatie en betrouwbaarheid veranderen niet - het levert dus weinig op

Welke vier kritische kanttekeningen zijn te plaatsen bij de standaard correctieformules?

1. Ze gaan uit van de lang niet altijd reële vooronderstelling dat er een scherp onderscheid bestaat tussen wel en niet weten. Partiele kennis is ook een optie. Je hebt een beetje een idee van het goede antwoord, of kunt sommige afleiders wegstrepen.

2.  Iemand kan ook een fout antwoord geven op basis van een verkeerd inzicht of onjuiste informatie. Dan is er niet gegist.

3. De voor toeval gecorrigeerde testscores hebben een grotere variantie dan de ongecorrigeerde teststores.

4. Personen kunnen ten gevolge van de giscorrectie onder een aftestgrens komen, waardoor ze zakken voor een tentamen waarvoor ze op basis van het aantal goed beantwoordde antwoorden wel een voldoende hadden gehaald.
ook blijkt de gecorrigeerde scoren (Xc) niet geschikter in het voorspellen van de criteriumscore Y dan sec het aantal goede antwoorden (X).

Welke bezwaren zijn er tegen het praktisch gebruik van de giscorrectieformule?

1. Deze formule gaan uit van de niet altijd reele vooronderstelling dat er een scherp onderscheid bestaat tussen wel en niet weten.

2. Iemand kan ook een fout antwoord geven op basis van een verkeerd inzicht of onjuiste informatie.

3. De voor toeval gecorrigeerde testscores (Xc) hebben een grotere variantie dan de ongecorrigeerde testscores (X). De test met scores Xc krijgt een tweemaal zo groot gewicht, zonder dat de eigenschappen die dit zouden kunnen verklaren (betrouwbaarheid/validiteit) zijn toegenomen.

Wat is de standaarddeviatie van de gecorrigeerde score?

factor b² = (A/(A-1))² keer zo groot

Voorbeeld:
A = 2, dan b²= 4

Hoe luidt de formule die wordt gebruikt om uit het totaal aantal goede antwoorden de het percentage gegokte antwoorden te halen als er punten zijn toegekend voor overgeslagen vragen?

Xc = X + k - X - Xf
                     A

Totaal aantal correcte antwoorden door kennis (Xc) = het totaal aantal correct (X) plus het aantal opgaven minus het aantal goede antwoorden (X) minus het aantal foute antwoorden (Xf) delen door het aantal keuzemogelijkheden.

Wat is de kritiek op het gebruik van toevalscorrectie? (3)

1. Scherp onderscheid tussen wel of niet weten
2. Het is mogelijk dat iemand een fout antwoord geeft op basis van een verkeerd inzicht of verkeerde informatie. Hiervoor wordt diegene dubbel gestraft doordat punten van het aantal goede antwoorden worden afgetrokken.
3. De variantie van de gecorrigeerde testscores is 2x zo groot, waardoor deze 2x zoveel gewicht krijgen.

Wat zijn de consequenties van de lineaire relatie tussen Xc en X met een correlatie gelijk aan 1?

1. De ordening van personenen volgens Xc is dezelfde als die van X

Sommige individuen kunnen opeens onder de aftestgrens terecht komen door de toevalscorrectie terwijl dit niet was gebeurd op basis van de ongecorrigeerde testscore.

2. De corrlatie tussen X en een andere testscore Y is identiek aan de correlatie tussen Xc en Y. Hierdoor is de gecorrigeerde testscore Xc niet geschikter dan X als voorspeller van het criteriumscore Y.

3. De nauwkeurigheid/ betrouwbaarheid van X en Xc is gelijk.

Wat is gezien de bezwaren  de conclusie m.b.t. Het gebruik van de standaard correctieformules?

De bezwaren zijn zo steekhoudend dat deze formule beter niet gebruikt kan worden. Er moet natuurlijk wel gecorrigeerd worden voor de gokkans.

Hoe bereken je een correctie waarbij een respondent voor niet-beantwoorde items alsnog punten ontvangt?

Indien het aantal fout beantwoorde items Xf is, geldt dat k-X-Xf items onbeantwoord zijn gebleven. Naar verwachting zouden bij blind gissen hiervan (1/A)*(k-X-Xf) items goed zijn beantwoord. Dit aantal wordt opgeteld bij het aantal goed.

Xc = X+((k-X-Xf)/(A))

Welke kritische kanttekeningen worden er gemaakt op het gebruik van correctieformules bij meerkeuzevragen?

Er bestaat niet altijd een scherp onderscheid tussen wel en niet weten, mensen kunnen ook keuzen maken op basis van partiële kennis of verkeerde informatie.

Een bijkomend probleem is dat de variantie bij voor toeval gecorrigeerde scores groter is dan bij ongecorrigeerde scores.

Wat zijn de gevolgen van een lineaire relatie bij de toevalscorrectie?

1. De onderlinge ordening en verhouding van verschillen tussen meetwaarden verschillen niet.
2. De gecorrigeerde en niet-gecorrigeerde score voorspellen even goed de criteriumscore.
3. Nauwkeurigheid en betrouwbaarheid van de gecorrigeerde en niet-gecorrigeerde scores is gelijk.

Welke tekens worden gebruikt bij correctie formules en wat betekenen ze?

A = aantal antwoordmogelijkheden per item
X = aantal goed gegeven antwoorden
K = het aantal items/vragen in de test
Xc (c staat voor corrected) = aantal goede antwoorden die door pure kennis zijn gegeven.
Xf (F staat voor niet ingevuld item) = niet ingevuld aantal items

We willen nu weten wat het aantal goede antwoorden is dat door louter kennis tot stand is gekomen = Xc (c staat voor 'corrected'). We veronderstellen dat de test uit k items bestaat.
Hoe vinden we Xc? (dit is de giscorrectieformule die op het totaal aantal punten kan worden toegepast)

We nemen het totale aantal goed, X, en trekken daar het deel vanaf dat door gissen goed was: dit is het aantal fout, k - X, gedeeld door A - 1:

Xc = X - k - X
                 A - 1
Deze formule geldt alleen in de situatie dat partiele kennis niet bestaat. De deelnemer weet het of weet het niet.

Wat zijn de 4 kritische kanttekeningen die van toepassing zijn op het gebruik van de correctieformule ?

  1. Scherp onderscheid tussen wel en niet weten. Sommige weten iets gedeeltelijk, dus is de gokkans groter dan (A-1)
  2. Iemand kan ook een fout antwoord geven door onjuiste informatie of door geen inzicht, in plaats van door alleen gissen
  3. Er is een grotere variantie in de voor toeval gecorrigeerde scores (Xc) dan de ongecorrigeerde scores (X)
  4. Er is een lineaire relatie tussen Xc en X; de correlatie is dus 1

Wat is het advies in plaats van het gebruiken van de toevalscorrectie? (2)

1. Bevordering van een unanieme antwoordstrategie
2. Aftestgrens verplaatsen naar het aantal mogelijk gegiste antwoorden.

Wat is een betere scoringsmethode bij meerkeuzevragen dan de toevalscorrectie toepassen?

tellen van het aantal goede antwoorden, zonder correctie of herijking. Adviseer respondenten altijd een antwoord te kiezen, ook als men het niet weet. Beter voor de score van respondenten en voor de uniformiteit van testen.

Wat kun je doen om de betrouwbaarheid en de validiteit van een test te verhogen?

· Meer items in de test opnemen. (Vergroot de betrouwbaarheid). Meer items betekend meer informatie over diens niveau. Dit leidt tot meer zekerheid en dus een grotere betrouwbaarheid.
· Beter nadenken over de inhoudt van de items. Een test die de lading van de te meten eigenschap beter meet, heeft een grotere validiteit.

Heeft het zin om de ene item een andere weging te geven dan een ander item bij het testen op een specifiek kenmerk om de validiteit en de betrouwbaarheid te verhogen?

nee, deze weging maar weinig invloed op de betrouwbaarheid en validiteit van de testscore.

Het wegen van items leidt dus niet of nauwelijks tot meer informatie over iemands niveau of een betere representatie van de te meten eigenschap.

Tot welke conclusie kwamen De Groot en Van Naerssen (1977)?

Wanneer bij alle respondenten de optimale antwoordstrategie bekend is - bij scoring volgens de giscorrectieformule is dat: raad indien je het juiste antwoord niet weet -, de betrouwbaarheid en de validiteit van de testscore bij dit soort correcties niet noemenswaardig toenemen boven het niveau van dat van de ongecorrigeerde testscore, X.
De meest aangewezen scoringsmethode voor meerkeuzevragen is in de praktijk dus eenvoudig het tellen van het aantal goede antwoorden.

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

  • Een unieke studie- en oefentool
  • Nooit meer iets twee keer studeren
  • Haal de cijfers waar je op hoopt
  • 100% zeker alles onthouden
Onthoud sneller, leer beter. Wetenschappelijk bewezen.
Trustpilot-logo