Afneming van tests en verwerking van testgegevens - Scoring van reacties op geprecodeerde items
18 belangrijke vragen over Afneming van tests en verwerking van testgegevens - Scoring van reacties op geprecodeerde items
Wat is de voornaamste zorg bij scoring van meerkeuzevragen?
Wat wordt verstaan onder de nauwkeurigheid en efficiëntie bij het scoren van meerkeuzevragen?
Welke scoringsvormen zijn er voor meerkeuzevragen?
- Met de hand
- tijdrovend, foutgevoelig
- Zelfscoring (verouderd)
- met doordrukvel
- minder foutgevoelig en sneller dan met de hand
- Machinaal (machinaal inlezen of direct afnemen op de computer)
- snel en nauwkeurig
- gegevens kunnen makkelijk worden verzameld
- Hogere cijfers + sneller leren
- Niets twee keer studeren
- 100% zeker alles onthouden
Wat zijn zorgen bij scoring van reacties op geprecodeerde items?
Welke 3 mogelijkheden zijn er om deze zorgen te minimaliseren?
1. Handscoring: correctoren tellen het aantal goed en foute antwoorden bij elkaar op. Ter vergelijking met een formulier met sleutelantwoorden
2. Zelfscoring: dmv doordrukpapier worden de antwoorden automatisch juist of onjuist ingevoerd. Een corrector hoeft alleen de foute of juiste antwoorden bij elkaar op te tellen.
3. Machinescoring: dmv van een computer worden de antwoorden gecheckt en berekeningen uitgevoerd.
Wat zijn de drie mogelijkheden voor het scoren van meerkeuzevragen?
- Handscoring
- Zelfscoring
- machinale scoring
Wat zijn de voornaamste problemen bij handscoring?
Wat zijn de nadelen van handscoring?
De tijdsduur weegt nog zwaarder omdat deze scoring 2x dient te worden uitgevoerd.
Wat zijn de voor- en nadelen van zelfscoring?
Wanneer wordt de volgende formule gebruikt? Leg de formule uit?
Xf= aantal echte fouten (dus zonder de overgeslagen)
voorbeeld van Jan, maar ditmaal heeft hij er 3 fout en 6 overgeslagen
Xc = 23 + (32-23-3) : 4
Xc = 23 + 6 : 4
Xc = 23 + 1,5
Xc = 24,5
Wat is het voordeel van machinescoring?
Zoals: verdelingen, spreidingen, rangordes, betrouwbaarheid, itembeoordelingen.
Welke scoringsvormen kunnen onderscheiden worden ten aanzien van reacties op geprecodeerde items?
Welke vier kanttekeningen worden bij deze formules gemaakt
- Giswerk is niet altijd zo zwart-wit
- iemand kan oprecht een fout antwoord als goed aanvaarden, door bv onjuiste informatie
- de voor toeval gecorrigeerde testscores Xc een grotere variantie hebben dan de ongecorrigeerde testscores X. Dit kan een ongewenste invloed hebben op andere berekeningen
- de formules verbeteren de predictieve waarde van de testscore niet. De correlatie is beide gelijk aan 1
Wat zijn de voor/nadelen van zelfscoring?
Waarom is het een probleem dat de gecorrigeerde testuitslag een grotere variantie heeft als de ongecorrigeerde testscore?
Voor toeval gecorrigeerde scores geven een grotere spreiding in scores te zien, waardoor ten onrechte zou kunnen worden geconcludeerd dat de effectiviteit van meten is toegenomen.
boek: de standaarddeviatie is dan groter. Het ongewenste effect hiervan wordt bijvoorbeeld zichtbaar als men de gecorrigeerde testscore optelt bij de scores op andere tests, zoals wel gebeurt bij de deeltests van intelligentiebatterijen. De test met score Xc, krijgt dan een tweemaal zo groot gewicht, zonder dat eigenschappen die dit zouden kunnen rechtvaardigen, zoals betrouwbaarheid en de validiteit van de meting, zijn toegenomen.
Wat zijn de voor/nadelen van machinale scoring?
Welke consequenties heeft het dat de correlatie tussen Xc en X gelijk is aan 1
- De ordening van personen volgens Xc is dezelfde als die volgens X. De giscorrectie heeft voor de onderlinge ordening en de onderlinge verhouding van verschillen tussen meetwaarden geen gevolgen. Wel geldt dat sommige personen door de giscorrectie onder een aftestgrens kunnen vallen. De remedie is hier het aanpassen van de aftestgrens.
- De correlatie van de ongecorrigeerde testscore X en een andere testscore Y is identiek aan de correlatie tussen Xc en Y. Dit resultaat impliceert dat men met beide scores even goed een criteriumscore Y voorspelt. De gecorrigeerde score is niet geschikter dan de ongecorrigeerde.
- De nauwkeurigheid of betrouwbaarheid van X en Xc is gelijk.
Wat is de eindconclusie van toevalscorrectie-formule en de bezwaren hiervan?
- Je kan beter geen vragen open laten
- er zijn te veel bezwaren voor de toevalscorrectie-formules (zowel met onbeantwoorde items als zonder), daarom wordt geadviseerd om gewoon het aantal goede te tellen en daar het cijfer op te baseren
Wat is het bezwaar voor de weging van itemscores en welk alternatief wordt benoemd?
- Het is verleidelijk items die een eigenschap beter lijken te meten zwaarder te wegen. Gebleken is echter dat weging van items maar weinig invloed heeft op de betrouwbaarheid en validiteit van de testscore
- Betere strategieën zijn de volgende
- Meer items in de test opnemen. Dit vergroot meestal de betrouwbaarheid.
- Beter nadenken over de inhoud van de items. Hiermee wordt de validiteit bevorderd, en neemt ook de praktische bruikbaarheid van de test toe
Het differentieel wegen van items leidt dus niet of nauwelijks tot meer informatie over iemands niveau of een betere representatie van de te meten eigenschap
De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:
- Een unieke studie- en oefentool
- Nooit meer iets twee keer studeren
- Haal de cijfers waar je op hoopt
- 100% zeker alles onthouden