Instrumentontwikkeling: situationele beoordelingstests

20 belangrijke vragen over Instrumentontwikkeling: situationele beoordelingstests

Omschrijf de 8 stappen instrumentontwikkeling/SJT?

1 Bepaal het doel van het instrument
2 Definieer het construct en het criteriumdomein dat je wilt meten
3 Maak plan van aanpak
4 Ontwikkel de items
5 Doe een pilotstudie
6 Selecteer en reviseer de items
7 Ontwikkel (voorlopige) normen
8 Onderzoek de validiteit

Omschrijf stap 1 van het instrumentenontwikkeling stappenplan "Bepaald het doel van het instrument": (4)

1 Onderzoek
2 Voorspellen van werkprestatie
3 Evalueren van prestatie
4 Coaching en feedback

Qa-answernotes-contentOmschrijf stap 2 van het instrumentenontwikkeling stappenplan "Definieer het construct en het criteriumdomein dat je wilt meten": (2)

1 Literatuurstudie
2 Interviews met experts
  • Hogere cijfers + sneller leren
  • Niets twee keer studeren
  • 100% zeker alles onthouden
Ontdek Study Smart

Qa-answernotes-contentOmschrijf stap 3 van het instrumentenontwikkeling stappenplan "Maak plan van aanpak": (7)

Inhoud, vorm, items (aantal/antwoordmethode), populatie (demografie, leesvaardigheden), hoe, door wie en waar wordt de test afgenomen?, lengte?, scoringsmethode?

Qa-answernotes-contentOmschrijf stap 4 van het instrumentenontwikkeling stappenplan "Ontwikkel de items": (6)

1 Dubbel aantal dan nodig
2 Vermijd dubbele vragen
3 Vermijd ontkenningen
4 Zet het belangrijkste idee aan het eind van het item
5 Vermijd feitelijke uitspraken
6 Vermijd jargon en vage bewoordingen
(Ga uit van 20-30 items per schaal)

Qa-answernotes-contentOmschrijf stap 5 van het instrumentenontwikkeling stappenplan "Doe een pilotstudie": (4)

1 Representatieve populatie
2 Item analyse (moeilijkheid/helderheid)
3 Betrouwbaarheid
4 Factoranalyse

Qa-answernotes-contentOmschrijf stap 6 van het instrumentenontwikkeling stappenplan "Selecteer en reviseer de items": (2)

1 Betrouwbaarheid
2 Scoreverdeling

Qa-answernotes-contentOmschrijf stap 7 van het instrumentenontwikkeling stappenplan "Ontwikkel (voorlopige) normen":

Zie afbeelding.

Qa-answernotes-contentqa-answernotes-contentOmschrijf stap 8 van het instrumentenontwikkeling stappenplan "Onderzoek de validiteit": (3)

1 Inhoudsvaliditeit
2 Begripsvaliditeit
3 Criteriumvaliditeit (voorspelt het het daadwerkelijke gedrag)

Omschrijf de achtergrond van de SJTs/instrumentontwikkeling?

1 Theorie: behavioral consistency (Werminont & Campbell)
2 Betrouwbaarheid: test-hertest en parallele vorm
3 Validiteit: moderator = antwoordinstructie!

Wat wordt bedoeld met de 'moderator: antwoordinstructie'? (validiteit van een SJT)

Dat de antwoordinstructie veel invloed op de validiteit heeft:

Would do = persoonlijkheid
Should do = cognitieve capaciteiten
> Hebben invloed op begripsvaliditeit (attitude vs. kennis), criteriumvaliditeit, sociaal wenselijke antwoorden en groepsverschillen.
Would do = wat zou je doen = persoonlijkheid attitude
Schould do = wat denk je dat zou moeten gebeuren = cognitieve capaciteiten
> Meten beide dus wat anders.

Welke schalen worden bij de SJTs gehanteerd? (2)

1 Beste en/of slechtste antwoord laten kiezen
2 Likert type (5, 7, 100 punten)
-Antwoorden meer onafhankelijk
-Meer items (betrouwbaarheid/validiteit)
-Meer homogene constructen?
-Minder cognitieve load?
-Individuele verschillen in gebruik antwoordschaal

Een van de recente SJT ontwikkelingen is het 'richten op een specifiek construct', leg dit uit: (3)

1 Helder wat er gemeten wordt (begripsvaliditeit)
2 Theorie m.b.t. criteriumvaliditeit
3 Generaliseerbaarheid

Wat zijn de voor- (1) en nadelen (2) uit de praktijk m.b.t. persoonlijkheidsvragenlijsten?

1 Nadeel: Angst dat deze persoonlijkheidsvragenlijsten een student brandmerken
2 Voordeel: Geeft waardevolle informatie over student
3 Voorspelt goed de studieprestatie/studiegerelateerd gedrag

Wat wordt bedoeld met de Frame-of-Reference? (FoR) (3)

Het is het toevoegen van een situatie.
1 Het idee achter het FoR is dat persoonlijkheid meer consistent is binnen 1 betekenisvolle situatie dan wanneer het wordt gemiddeld over verschillende situaties
2 Persoonlijkheid meten in een bepaalde situatie verbetert de criteriumvaliditeit van pers.vragenlijsten voor criteria die relevant zijn voor de situatie
3 Deze verhoogde criteriumvaliditeit wordt het FoR effect genoemd (Schmit)

Noem 3 voordelen van een situationele persoonlijkheidsvragenlijst (t.o.v. een algemene pers.vragenlijst)

1 Beter voorspellen
2 Positievere reacties van de deelnemers
3 Positievere reacties van de gebruikers

MPT-BS (NOA, 2009) is de persoonlijkheidsvragenlijst, welke 6 kenmerken meet deze lijst?

Conscientiousness, integrity, emotional stability, vriendelijkheid, openheid voor ervaringen en extraversie. (40 vragen per dimensie/kenmerk)

Wat bleek uit de praktijk toen de NOA vragenlijst afgenomen was? (3 nadelen)

1 Te veel schalen
2 Sommige schalen toch conceptueel niet relevant voor studiesucces/voortgang
3 Missende schalen

Toen ontstond de MPT-studie, gebaseerd op de MPT-BS, wat werd hieruit geconcludeerd? (2)

1 10 subschalen die relevant zijn voor studiegedrag
2 MPT-Studie bestaat uit 92 stellingen, allen gecontextualiseerd

Hoe kun je de MPT-studie samenvatten (4) en inzetten (2)?

Samengevat: het is de ingekorte en veranderde MPT-BS, het is volledig ingericht op studiesituaties, het is een toegankelijke vragenlijst, het meet 10 schalen.
Het kan worden ingezet bij: selectie en studieloopbaanbegeleiding.

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

  • Een unieke studie- en oefentool
  • Nooit meer iets twee keer studeren
  • Haal de cijfers waar je op hoopt
  • 100% zeker alles onthouden
Onthoud sneller, leer beter. Wetenschappelijk bewezen.
Trustpilot-logo