Startpagina / Samenvattingen / Testtheorie / open-antwoorden-respondent

Constructie van items en kwantificering van reacties - Vorm waarin het antwoord wordt gegeven

Q: In welke twee categorieën kunnen de reacties van respondenten/antwoordvormen worden onderscheiden?

Open vraagvorm , opdracht of essayvorm: respondent bepaalt zelf hoe hij reageert Gesloten vraagvorm , geprecodeerde vraagvorm, multiple-choice vraagvorm, meerkeuzevraagvorm. Respondent heeft de keuze uit een beperkt aantal geformuleerde reacties.

41 belangrijke vragen over Constructie van items en kwantificering van reacties - Vorm waarin het antwoord wordt gegeven

In welke twee categorieën kunnen de reacties van respondenten/antwoordvormen worden onderscheiden?

Open vraagvorm, opdracht of essayvorm: respondent bepaalt zelf hoe hij reageert
Gesloten vraagvorm, geprecodeerde vraagvorm, multiple-choice vraagvorm, meerkeuzevraagvorm. Respondent heeft de keuze uit een beperkt aantal geformuleerde reacties.

Wat zijn de voordelen van gesloten vragen?

Beantwoorden en categoriseren gaat snel
Er wordt geen gelegenheid gegeven voor irrelevante zaken
de interpretatie van het antwoord door de onderzoeker speelt geen rol

1. De vorm gaat over open of gesloten vragen. Wat zijn de meest gangbare problemen bij open vragen?

- niet duidelijk wat bedoeld wordt met vraag.
- niet antwoord op de vraag.
- niet iedereen kan evengoed gedachten op papier zetten.
- interpretatie onderzoeken.

Wat zijn 3 problemen met open vragen?

Tijdrovend
Vraag verkeerd begrijpen
Niet iedereen kan goed zijn gedachten op papier zetten en heeft een leesbaar handschrift

Noem 2 vormen waarin antwoorden worden gegeven en wat de voor en nadelen zijn

1. Gesloten vraagvorm
+ beantwoording en categorisering van antwoorden gaan zeer snel
+ Kans op verkeerd begrijpen is kleiner
- Vereist uitvoerig vooronderzoek, omdat:
- bedenken van meerkeuzevragen is lastig
- inschatten van de moeilijkheidsgraad is lastig
-De kans op goed raden is groot
- Er kunnen vaak alleen eenvoudige cognitieve vaardigheden mee worden gemeten

2. Open vragavorm:
+ veel informatie
- beoordelen en categoriseren van de antwoorden kost veel tijd
- respondenten begrijpen niet altijd wat er met de vraag wordt bedoeld
- niet alle respondenten zijn even goed in staat om hun gedachten op papier te zetten

Wat zijn 3 nadelen van open vragen t.o.v gesloten of meerkeuzevragen?

1. Het categoriseren van antwoorden is erg tijdrovend.
2. Onbegrip of emotionele betrokkenheid van de respondent kunnen zorgen voor niet relevante antwoorden.
3. Niet alle respondenten zijn in staat hun gedachten accuraat op papier te zetten.

Bij punt 2 en 3 speelt de interpretatie van de onderzoeker ook een grote rol.

Wat zijn de voordelen van open vragen?

Er wordt vaak gedacht dat open vragen beter zijn, omdat bij gesloten vragen inzicht en creativiteit ontbreken.

- Open vragen bieden meer informatie.

Wat zijn 3 voordelen van gesloten vragen tov open vragen?

Snelheid - hierdoor meer vragen mogelijk
Minder ruimte voor verkeerd begrijpen of ingaan op irrelevante zaken
Onderzoeker hoeft niet te interpreteren

Wat is heet voordeel van meerkeuzevragen?

De meerkeuzevraag vraagt slechts om een keuze uit een gegeven aantal opties en zou primair een beroep doen op het geheugen - en dan vooral herkenning, en daarmee op kennis.

Wat zijn nadelen van gesloten vragen (m.n.meerkeuzevragen)?

1. Het bedenken van meerkeuzevragen is lastig, vooral in het bedenken van de onjuiste antwoordmogelijkheden.
2. Het inschatten van de moeilijkheidsgraad vd vragen; het formuleren van de vragen.
3. Er is een kans dat de respondent door louter goed te RADEN vele goede antwoorden kan krijgen.
!!! 4. Er worden slechts eenvoudige cognitieve vaardigheden worden gemeten.!!!: meting van kennis en weetjes via een herkenningsproces.

3. Hoe kun je de kans verkleinen dat respondenten door gokken veel goede antwoorden krijgen?

Door Test voor Niet-Verbale Abstractie (Drenth) blz 124.
Door correctie toepassen voor deze goed-gegokte antwoorden.

Wat zijn de nadelen van open vragen?

1) Beoordelen en categoriseren van de antwoorden is een tijdrovende aangelegenheid.

2) De vraag kan verkeerd begrepen worden of kan het antwoord door emotionele betrokkenheid onbruikbaar zijn.

3) Niet alle respondenten zijn even goed in staat om hun gedachten op papier te zetten.

Wat zijn 3 bezwaren tegen meerkeuzevragen (in de schoolsituatie)?

Constructie is lastig en tijdrovend (vooral het bedenken van goede afleiders)
Respondenten kunnen raden

oplossingen: "kies alle goede antwoorden", gokkanscorrectie

Hogere cognitieve vaardigheden (zoals inzicht en begrip) zouden moeilijk te meten zijn - maar dit blijkt niet te kloppen

Wat is een nadeel van de meerkeuzevragen?

Ze doen geen beroep op inzicht en creativiteit.

Wat is een nadeel van gesloten vragen, mbt het antwoord van de respondent?

De situatie die genoemd wordt is nog steeds interpreteerbaar door de respondent en er is geen zicht op welke interpretatie de respondent geeft hieraan.

4. Is meerkeuze inferieur aan open vragen?

Mellenbergh analyseerde 70 studie waarin deze vraagvormen werden vergeleken > MITS meerkeuze goed geconstrueerd is - geen verschil tussen 2.
Bloom zegt: ook begrip, toepassing , analyse, synthese en evaluatie is mogelijk in meerkeuze.

Wat zijn 3 voordelen van het gebruik van een rating scale?

1. Beantwoorden kost weinig tijd waardoor meer vragen kunnen worden gesteld, wat bijdraagt aan een verhoogde betrouwbaarheid.

2. Meer vragen geeft ook een betere dekking van de bedoelde eigenschap en dus een verhoogde validiteit.

3. Interpretatie van de onderzoeker speelt geen rol.

Door welke problemen zullen er bij open vragen altijd antwoorden buiten beschouwing gelaten moeten worden? (3)

1. Beoordelen/categoriseren van antwoorden kost veel tijd
2. Respondenten begrijpen niet altijd wat met een vraag bedoeld wordt en geven antwoorden die niet relevant zijn voor de bedoelde eigenschap
3. Niet alle respondenten kunnen gedachten goed op papier zetten

Wat is een rating scale en wat zijn hier de voordelen van?

De respondent geeft op een aangeboden schaal aan in welke mate hij het met iets eens is of een schaal om een gevoel/iets anders te omschrijven.

1)

Deze manier is makkelijk en snel te categoriseren.
Meer vragen mogelijk
Meer info
Hogere betrouwbaarheid + meer vragen
Betere dekking van de bedoelde eigenschap--> betere validiteit.

2) Geen gelegenheid om in te gaan op irrelevante zaken en de kans op verkeerd begrijpen is kleiner.
3) Interpretatie van het antwoord door de onderzoeker speelt geen rol.

Wat is beter open vragen of meerkeuzevragenvorm?

Men denkt altijd open vragen, omdat men er vanuit gaat dat bij open vragen meer kennis kan worden gegeven en meerkeuze primair beroep doet op geheugen. Er zitten aan beiden voor en nadelen. Afhankelijk van het doel. Als open vragen of opdrachten worden gegeven, dan belangrijk dat de vraag kort en helder is.
als meerkeuzevragen goed zijn opgesteld meet het hetzelfde als open vragen.

Wat zijn voordelen van gesloten vraagvorm met vaste antwoordcategorieën?

1. Het beantwoorden gaat zeer snel, dus je kunt veel vragen stellen
Meer vragen => meer informatie => hogere betrouwbaarheid
Meer vragen => betere dekking van de bedoelde eigenschap => hoger validiteit

2. Respondent krijgt geen gelegenheid om op irrelevante zaken in te gaan

3. Interpretatie van beoordelaar speelt geen rol

Wat maakt een open vraag effectief?

Een korte en heldere vraag met de instructie dat het antwoord kort moet zijn.

Waardoor wordt de validiteit hoger bij het stellen van gesloten vragen?

Doordat er veel meer vragen gesteld en beantwoord kunnen worden.

Op welke 2 manieren is de gokkans bij meerkeuzevragen te verlagen?

Via de Test voor Niet-Verbale Abstractie (bijvoorbeeld 2 antwoorden kiezen uit 6)
Door het toepassen van de giscorrectie

Wat is een mogelijk nadeel van een rating scale?

Vernauwing van vragen kan leiden tot uitsluiting van bepaalde respondenten, terwijl veralgemenisering kan zorgen voor een dubbelzinnige betekenis.

Wat zijn de nadelen van meerkeuze vragen?

- Vereist uitvoerig vooronderzoek
Bedenken lastig en inschatten van de moeilijkheidsgraad is moeilijk.

- Mogelijk goede antwoorden door te raden.

- Slechts eenvoudige cognitieve vaardigheden kunnen onderzocht worden.

Hoe kun je de subjectiviteit van open vragen controleren?

Door antwoorden op open vragen te laten beoordelen door 2 beoordelaars. Bij een geringe overeenstemming moet een item woren gewijzigd of verwijderd.

Hoe wordt bij open vragen rekening gehouden met de subjectiviteit van de beoordelaar?

In de testconstructie of de categoriseringsfase worden de reacties door minstens twee beoordelaars bepaald.

Wat zijn 3 nadelen van het gebruik van gesloten vragen (meerkeuzevragen)?

1. Meerkeuzevragen vereisen een uitvoerig vooronderzoek om tot goede vragen en antwoordalternatieven te komen.

2. Respondenten kunnen door raden veel goede antwoorden krijgen.

3. Met meerkeuzevragen kunnen volgens sommigen slechts eenvoudige cognitieve vaardigheden worden getest. Kennis en weetjes via herkenning ipv reproductie.

Mellenbergh (1971) is het niet met punt 3 eens en stelt dat dezelfde vaardigheden kunnen worden gemeten als met open vragen.

Wat zijn de problemen van een gesloten vraag in een rating scale? (2)

1. Een vraag mag niet te concreet zijn omdat de vraag dan voor een te grote groep niet relevant is, waardoor veralgemenisering nodig is.
2. Veralgemenisering leidt er echter weer toe dat bepaalde respondenten uiteenlopende interpretaties kunnen hebben.

'rating scale' - gesloten vraagvorm: vanwege de geordende schaal waarop de respondent zichzelf dient te beoordelen. Wat kan in vergelijking met de open vraag hierover worden geconstateerd?

de beantwoording door de respondent en de categorisering van de antwoorden door de onderzoeker gaan zeer snel
hierdoor kan een groter aantal vragen worden gesteld
meer vragen betekent meer informatie en dus een hogere betrouwbaarheid
meer vragen betekent een betere dekking van de bedoelde eigenschap en daarmee een betere validiteit
de respondent krijgt geen gelegenheid om op voor het onderzoek irrelevante zaken in te gaan en de kans op het verkeerd begrijpen van de stelling is kleiner
de interpretatie van het antwoord door de onderzoeker speelt geen rol

Kunnen vragenlijsten volgens Mellenberg 1971 vragenlijsten van open vragen of vragenlijsten van gesloten vragen hetzelfde meten?

Ja.

Waarom is er veel vooronderzoek nodig bij meerkeuze vragen?

Het bedenken van de meerkeuze vragen is lastig, net zoals het bepalen van de moeilijkheidsgraad.

Wat is de bevinding van Mellenbergh (1971) met betrekking tot multiple choice vragen?

Dat er wel degelijk hogere cognitieve vaardigheden gemeten worden en dat ze hetzelfde meten als open vragen, mits de vragen goed geconstrueerd zijn.

Wat geldt voor een effectieve open vraag?

Voor een effectieve open vraag geldt dat de vraag kort en helder moet zijn en dat de instructie aan de respondent duidelijk moet maken dat antwoorden kort dienen te zijn.

bijv. een antwoord mag hoogstens twintig woorden bevatten of alleen enkele steekwoorden

Wat is het nadeel van gegeven antwoordmogelijkheden, mbt het antwoord geven?

De pp kan het juiste antwoord gokken.

Op welke 2 manieren kun je de gokkans bij een meerkeuzevraag berekenen?

· 2 juiste antwoorden kiezen uit de 6 zoals bij de Test voor niet verbale abstractie.
· Een giscorrectie toepassen.
Wil je de raadkans bijna 0 houden moet je een open vraag stellen.

Welke processen kunnen nooit zichtbaar worden in een meerkeuze vraaag?

Hogere mentale processen kunnen alleen in open vragen aan bod komen.

Waarom moet bij open vragen in de fase van de testconstructie de categorisering van de reacties door ten minste twee beoordelaars geschieden?

Omdat bij open vragen altijd de subjectiviteit van de beoordeling van de reactie en rol speelt en deze subjectiviteit ook bij een goede voorbereiding door de onderzoeker nooit geheel kan worden uitgesloten, moet in de fase van de testconstructie de categorisering van de reacties door ten minste twee beoordelaars geschieden. Deze beoordelaars dienen onafhankelijk van elkaar te werken.

Waarom moeten de mogelijkheden tot het meten van de hogere functies via open vragen niet worden overschat?

het is er het genoemde probleem van de onbetrouwbaarheid van de beoordeling
het concluderen uit de open vragen tot allerlei hogere mentale functies en kwaliteiten komt vaak neer op een subjectief en oncontroleerbaar fantaseren

Welke drie voordelen heeft een rating scale item?

De beantwoording en categorisering gaat heel snel, daarom kunnen er veel vragen worden gesteld
kan niet op irrelevante onderwerpen ingaan en is het verkeerd interpreteren van de vraag klein (kan wel)
interpretatie van het antwoord speelt geen rol

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

Testtheorie | 9789031347476 | P J D Drenth, et al

Bekijk samenvatting

Een unieke studie- en oefentool
Nooit meer iets twee keer studeren
Haal de cijfers waar je op hoopt
100% zeker alles onthouden

Onthoud sneller, leer beter. Wetenschappelijk bewezen.