Predictieve validiteit - fase 3: Proefafneming van bestaande of nieuwe tests

13 belangrijke vragen over Predictieve validiteit - fase 3: Proefafneming van bestaande of nieuwe tests

Wat houdt fase 3 (proefafneming van bestaande of nieuwe tests) in?

Bij een bestaande test is het proefafnemingen alleen nodig als de testprocedure plaatsvindt in een afwijkende populatie dan waarvoor de test bestemd is.

In fase 3 wordt de proefafneming uitgevoerd. De steekproef dient een zo getrouw mogelijke afspiegeling te zijn van van de populatie waarvoor de test gebruikt zal gaan worden. Welke afwijking kwa steekproef en populatie is erger en waarom? De afwijking kwa gemiddelde of de afwijking kwa spreiding?

De afwijking kwa  variatie in de spreiding van de scores is erger want de betrouwbaarheid en de validiteit zijn wel gevoelig voor variatie in de spreiding van de scores, maar niet voor de variatie in het gemiddelde van de testscores.

Wat is het voordeel van het selecteren van items op basis van item-restcorrelaties?

  1. Geeft een betrouwbare testscore terug te zien in de Cronbachs alpha ( = ondergrens van betrouwbaarheid)
  • Hogere cijfers + sneller leren
  • Niets twee keer studeren
  • 100% zeker alles onthouden
Ontdek Study Smart

Hoe kan men de kans op een representatieve steekproef vergroten?

Door vooraf rekening te houden met de samenstelling van de populatie naar voor de test belangrijke demografische en persoonlijke variabelen. Uit deze samengestelde populatie worden dan aselect getrokken. Dit is een gestratificeerde steekproef.

Hoe kan met de representativiteit van de steekproef het beste garanderen?

Door vooraf rekening te houden met de samenstelling van de populatie met naar voor de test belangrijke demografische en persoonlijke variabelen. Bijvoorbeeld door het trekken van een gestratificeerde steekproef (met bv 70% jongeren en 30% ouderen).
Dit speelt het sterkst bij kleine steekproeven.

Wat is het verschil tussen het vooronderzoek en het hoofdonderzoek bij selecteren van de populatie bij proefafname?

Het vooronderzoek dient als grote zeef om na te gaan of proefpersonen begrijpen wat er van hen verwacht wordt en of items niet te makkelijk of moeilijk zijn. Hiervoor volstaat een kleine proefgroep die niet representatief hoeft te zijn.

Het hoofdonderzoek dient om de definitieve test te construeren en vraagt een grote proefgroep die wel representatief is.

Waarom mag je er niet vanuit gaan dat een grote steekproef alle relevantie deelgroepen bevat?

Dan zou elke groep een even grote kans moeten hebben om in de steekproef te komen. En dat is vaak niet zo bij bijvoorbeeld heel jonge kinderen, bejaarden, gehandicapten, zieken, plattelandsbewoners etc.

Wanneer is het gewenst om in een vooronderzoek items op te nemen die extreem moeilijk of makkelijk zijn?

Indien de test in de populatie de gehele schaal van de eigenschap dient te bestrijken. Als dit niet het geval is, is het beter om deze items niet op te nemen.

Waar dient men rekening mee te houden met het samenstellen van een steekproef bij een proefafneming?

Een steekproef dient een zo getrouw mogelijke afspiegeling van de populatie te zijn.

Mogelijkheid tot gestratificeerde steekproef.

Waarom is het onderscheid tussen het vooronderzoek en het hoofdonderzoek belangrijk voor de eisen aan de samenstelling van de steekproef?

Het vooronderzoek is met name bedoeld om te testen of de pp begrijpen wat er van hen verlangt wordt, of items niet veel te moeilijk of juist te makkelijk zijn, of de testtijd realistisch is etc.. Dan kan je toe met een niet representatieve kleine steekproef die intensief wordt ondervraagt.
het hoofdonderzoek dient om de definitieve test te construeren en behoeft juist wel een, liefst grote, representatieve steekproef.

Op welke 2 manieren kan homogeniteit van items worden onderzocht?

1. Door middel van een factoranalyse.
2. Door selectie op basis van onderlinge correlaties, wat tevens bijdraagt aan hogeren betrouwbaarheid. Voor deze mate van betrouwbaarheid is Crombachs alfa een goed uitgangspunt.

Wat is een item-analyse in een proefafneming?

Als tests nog moeten worden geconstrueerd kan een proefafneming ook dienen als Item-analyse.
Hierin kunnen zaken als moeilijkheidsgraad en item-restcorrelatie worden geëvalueerd.  

Selecteren door factoranalyse of hoge item-rest correlaties.

samenvatting blz. 83

Als een test nog moet worden geconstrueerd, dan is itemanalyse belangrijk. Daar kan je ook het vooronderzoek al voor gebruiken. Welke aspecten van de testitems wordt in de itemanalyse geëvalueerd?

- moeilijkheidsgraad
- correlatie met andere items
- de verdeling van de itemscores over de antwoordcategoriën
- M.b.v factoranalyse inzicht krijgen welke en hoeveel factoren er gemeten worden
- item-restcorrelaties gebruiken om bv relatief betrouwbare scores te verkrijgen

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

  • Een unieke studie- en oefentool
  • Nooit meer iets twee keer studeren
  • Haal de cijfers waar je op hoopt
  • 100% zeker alles onthouden
Onthoud sneller, leer beter. Wetenschappelijk bewezen.
Trustpilot-logo