Startpagina / Samenvattingen / Testtheorie / steekproef-item-kwaliteit

Constructie van items en kwantificering van reacties - Beoordelingvan de kwaliteit van items in vooronderzoek

Q: In welke twee fasen wordt bij testconstructie onderzoek gedaan naar de kwaliteit van de items?

Vooronderzoek: In een kleine steekproef (tussen 20 en 100) personen worden de reacties op de eerste versie van de item geanalyseerd. Grove zeef om items te identificeren die niet goed functioneren _> verwijderen Hoofdonderzoek: grote representatieve steekproef van 500 tot 2000 personen. Eventueel gestratificeerde steekproef ipv aselecte steekproef om deelgroepen even groot te maken (bijv allochtonen ). Hoofdoel is kwaliteit van de gehele test vaststellen mbt gebruik in de beoogde populatie. Eventueel vallen opnieuw ( maar minder) items weg.

Q: Hoeveel fasen kent testconstructie-onderzoek en wat houd deze in?

Twee fasen van emperisch onderzoek. eerst het vooronderzoek (20-100 pp) hierbij laat een kleine steekproef de reacties van deze personen zien op de items en worden deze geanalyseerd. De eerste fase is een soort 'zeef' om de items op te sporen die niet goed functioneren. Dan het hoofdonderzoek: dit is een grote representatieve steekproef. 500-2000 pp. Het doel van het hoofdonderzoek is de kwaliteit van de gehele test vast te stellen in verband met het gebruik ervan in de beoogde populatie,

20 belangrijke vragen over Constructie van items en kwantificering van reacties - Beoordelingvan de kwaliteit van items in vooronderzoek

In welke twee fasen wordt bij testconstructie onderzoek gedaan naar de kwaliteit van de items?

Vooronderzoek:In een kleine steekproef (tussen 20 en 100) personen worden de reacties op de eerste versie van de item geanalyseerd. Grove zeef om items te identificeren die niet goed functioneren _> verwijderen
Hoofdonderzoek: grote representatieve steekproef van 500 tot 2000 personen. Eventueel gestratificeerde steekproef ipv aselecte steekproef om deelgroepen even groot te maken (bijv allochtonen ). Hoofdoel is kwaliteit van de gehele test vaststellen mbt gebruik in de beoogde populatie. Eventueel vallen opnieuw ( maar minder) items weg.

Wat is het doel van een vooronderzoek? Wat kan worden gezegd over de omvang van de steekproef in het vooronderzoek?

Het vooronderzoek dient als grove zeef om de items te identificeren die niet goed functioneren. De steekproef hoeft bij het vooronderzoek niet representatief te zijn (20 - 100 deelnemers).

Hoeveel fasen kent testconstructie-onderzoek en wat houd deze in?

Twee fasen van emperisch onderzoek.

eerst het vooronderzoek (20-100 pp) hierbij laat een kleine steekproef de reacties van deze personen zien op de items en worden deze geanalyseerd. De eerste fase is een soort "zeef" om de items op te sporen die niet goed functioneren.

Dan het hoofdonderzoek: dit is een grote representatieve steekproef. 500-2000 pp. Het doel van het hoofdonderzoek is de kwaliteit van de gehele test vast te stellen in verband met het gebruik ervan in de beoogde populatie,

Welke 2 fasen kent een testconstructie-onderzoek?

Vooronderzoek

kleine steekproef, hoeft niet representatief (20-100 personen)
Extra items
Doel: slechte items eruit filteren

Hoofdonderzoek

representatieve grote steekproef (enkele honderden per deelgroep, totaal 500-2000)
(vaak met een gestratificeerde steekproef)
Doel: kwaliteit van de test beoordelen, normen opstellen

Hoe noemt men deelgroepen (vrouwen en mannen/autochtoon en allochtoon)?

Strata (de aldus verkregen steekproef: gestratificeerde steekproef)

Wat is een gestratificeerde steekproef?

Eerst vaststellen in populatie wie bijv. alloctoon is en wie niet. Vervolgens uit beide groepen een steekproef van bijv. 250 personen te trekken. De deelgroepen worden strata genoemd.

Welke eis wordt er gesteld aan de grote van de steekproef tijdens het hoofdonderzoek?

Alle deelgroepen moeten groot genoeg zijn om normaalverdelingen van testscores voldoende nauwkeurig in te kunnen schatten. Het is aanbevolen van elke deelgroep een even grote steekproef te nemen.

De deelgroep wordt strata genoemd en de steekproef een gestratificeerde steekproef.

Wat gebeurt er in het vooronderzoek bij testconstructieonderzoek

Er wordt een kleine steekproef (20-100) genomen die niet representatief hoeft te zijn. Slecht functionerende items worden hierna verwijderd of vervangen

Wat zijn p-waarden en a-waarden en wat kun je eruit afleiden?

P-waarden: proportie goede antwoorden
A-waarden: proportie dat een afleider gekozen wordt

Gewenst: p het hoogst (hoger dan de gokkans), alle afleiders even hoog en hoog genoeg

Wat zijn de kenmerken van een vooronderzoek naar de kaliteit van items?

Ø De reacties van proefpersonen op de eerste versie van de items worden geanalyseerd.
Ø De steekproef hoeft niet altijd representatief te zijn.
Ø Dit onderzoek dient als grote zeef om de items te identificeren die niet goed functioneren.

Bij welk van de twee categorieën van testconstructies (Voor- hoofdonderzoek) is een representatieve steekproef van belang?

Bij het hoofdonderzoek, zo geven alle groepen een voldoende nauwkeurige schatting van de normverdeling.

Wat is het hoofddoel van het hoofdonderzoek?

De kwaliteit van de gehele test vast te stellen ivm met het gebruik ervan in de beoogde populatie.

Wat gebeurt er in het hoofdonderzoek bij testconstructieonderzoek?

Er wordt een grote steekproef (500-2000) genomen ten behoeve van de mogelijkheid om in deelgroepen op te splitsen. De steekproef moet representaties zijn. Het hoofddoel is het vaststellen van de kwaliteit ivm het gebruik in de beoogde populatie. Testprestaties worden in frequentieverdelingen weergegeven zodat prestaties van individuen vergeleken kunnen worden

Wat zijn de kenmerken van een hoofdonderzoek naar de kwaliteit van items?

· De populatie wordt vaak opgesplitst in verschillende deelgroepen omdat er voor iedere groep aparte normen moeten worden opgesteld.
· Alle deelgroepen moeten groot genoeg zijn om een normverdeling van testscores voldoende nauwkeurig te kunnen schatten.
· Steekproef moet de gehele populatie representeren.
· Ook al zijn sommige deelgroepen van nature kleiner, is het aan te raden om uit elke groep een even grote steekproef te nemen. Zodat ook voor de kleinere groepen een voldoende nauwkeurige schatting gemaakt kan worden van de normverdeling.

Waarvoor is de frequentieverdeling van reacties op een item informatief?

Dit is informatief bij beoordeling van de kwaliteit van een item. Hierbij wordt vaak naar de relatieve frequentie gekeken

Wat zijn de hoofdoelen van het onderzoek naar de kwaliteit van items in een hoofdonderzoek?

Ø Kwaliteit van de gehele test vaststellen.
Ø Betrouwbaarheid: Worden de testprestaties nauwkeurig gemeten.
Ø Validiteit: Meet de test wat het beoogt te meten.
Ø Testprestaties voor de gehele steekproef en voor relevante deelgroepen worden weergegeven in een frequentieverdeling waarmee de prestaties van individuen vergeleken kunnen worden (normen)

Welke termen horen bij de relatieve frequentie bij de beoordeling van de kwaliteit van een item? (2)

1. P-waarde: relatieve frequentie op het goede antwoord
2. A-waarde: relatieve frequentie op afleiders

Hoe wordt de kwaliteit van items bepaald bij vooronderzoek naar dichotome items?

Hierbij heeft een item uit een studietoets goed gefunctioneerd als de meeste respondenten het goede alternatief hebben gekozen en de afleiders ongeveer even vaak werden gekozen

Wanner heeft een item uit een studietoets goed gefunctioneerd?

Indien de meeste respondenten het goede alternatief hebben gekozen en de afleiders door de overige respondenten ongeveer even vaak werden gekozen.

achterliggende gedachte is dat de meeste studenten het juiste item goed weten te beantwoorden en voor degene die de stof niet goed beheersen moeten de afleiders ongeveer even aantrekkelijk zijn.

Hoe wordt de kwaliteit van items bepaald bij vooronderzoek naar polytome items?

Het gemiddelde kan berekend worden als de gewogen som van de itemscores. Per item wordt de som van de itemscores berekend en elke score wordt gewogen met de relatieve frequentei

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

Testtheorie | 9789031347476 | P J D Drenth, et al

Bekijk samenvatting

Een unieke studie- en oefentool
Nooit meer iets twee keer studeren
Haal de cijfers waar je op hoopt
100% zeker alles onthouden

Onthoud sneller, leer beter. Wetenschappelijk bewezen.

Onderwerpen die gerelateerd zijn aan Constructie van items en kwantificering van reacties - Beoordelingvan de kwaliteit van items in vooronderzoek