Estimating and evaluating covergent and discriminant validity evidence

24 belangrijke vragen over Estimating and evaluating covergent and discriminant validity evidence

Wat beschreef Hoofdstuk 8 ook alweer?

verschillende visies op validiteit en het vat 5 types van bewijs samen met die je validiteit bekijkt.

Het schatten en evalueren van convergent en discriminant validiteitbewijs

Psychologische constructen kunnen vastgelegd worden in een theoretische context. Nomologisch netwerk is de connectie tussen het construct en andere gerelateerde constructen. Metingen van bepaalde constructen zouden sterker moeten associeren met sommige andere constructen, maar zwak correleren met metingen van andere constructen. Voor de validiteit is het van belang dat de testscores zoveel mogelijk overeenkomen met de verwachte associaties.

Wat is een nomologisch netwerk?

Netwerk van betekenis rondom een construct. Welke dingen liggen ten grondslag van het construct.
  • Hogere cijfers + sneller leren
  • Niets twee keer studeren
  • 100% zeker alles onthouden
Ontdek Study Smart

Wat is een convergent en discriminant bewijs?

COnvergente en discriminante bewijzen geven de mate weer in welke test scores "goeie" relaties hebben met andere variabelen.
Convergente en discriminante bewijs is de mate waarin scoren de goede patronen van associaties met andere variabelen hebben. Psy constructen liggen in een theoretische context. Dus een variteit van andere psy constructen.

Wat houd focussed association in als het gaat om convergent en discriminant validity?

Je zou een onuitputtende lijst kunnen maken met mogelijke associaties. FA houd in dat je de belangrijkste, relevantste uitkiest.

Wat wordt bedoeld met validity generalization?

Kan er gegeneraliseerd worden voor verschillende populaties? Kan het bv worden gegeneraliseerd worden naar moeders, vaders, jongens meisjes.

Wat is een belangrijk onderdeel van het validatie process?

Een belangrijk onderdeel van het validatie proces is uit te maken in hoeverre welke test scores echt de voorspellende patroon van associaties laten zien. Hier worden nu een paar methoden en hun interpretaties besproken.

Welke 4 vormen van systematische error zijn er?

user-select
    user-select
  1. Construct (goed)user-select
  2. user-select
  3. Methode
  4. user-select
  5. Subject eigenschappen
  6. user-select
  7. Situatie/locatie

De verklaarde variantie en gekwadrateerde correlaties

Gekwadrateerde correlaties laten de proporties variantie zien die verklaard worden door de andere variabele. Men kan hiermee meer variabiliteit verklaren en hoe meer variabiliteit verklaard kan worden, hoe beter het begrepen kan worden. De variantie analyse ANOVA wordt hiervoor toegepast.

Kritiek:
1. Soms technische fout.
2. Variantie zelf is een niet-inituitieve metriek.
3. Het verband tussen de variabelen kan kleiner lijken.

Het schatten van praktische effecten

Een manier om de correlatie te interpreteren is he schatten hoeveel effect het heeft in het 'echte' leven. Hoe groter de correlatie tussen de test en de criteriumvariabele, des te succesvoller het gebruikt kan worden bij beslissingen over de criteriumvariabele.
Er zijn vier procedures om de correlatie goed te kunnen voorspellen:
1. Binominal Effect Size Display (BESD)
2. Taylor Russell Tabellen
3. Ultity Analyse
4. Gevoeligheid en specifiekheid

Welke factoren beïnvloeden de validiteitscoefficient?

- true association tussen construct
- meetfout en betrouwbaarheid
- Restricted range
- Scheve en relatieve proporties
- Methode variantie
- Tijd
- voorspelling over 1 gebeurtenis
- Non-lineaire relatie
- Moderator
- Heterosedasticiteit

True association tussen construct

Wat is de theoretische correlatie tussen de constructen. Hoe hoger de true association tussen de constructen hoe hoger de validiteitscoefficient.

Procedure 1 (voorspellen van correlatie): Binominal Effect Size Display (BESD)

Om de praktische gevolgen te laten zien van het gebruik van correlaties om beslissingen te maken. Er kan gekeken worden hoeveel voorspellingen succesvol en hoeveel voorspellingen niet succesvol gemaakt zijn op basis van de correlatie.

Voorspellen met aantal mensen in cel van de tabel:
Cel A of Cel D = 50 + 100 (r/2)
r is correlatie
Cel B of Cel C = 50 - 1-- (r/2)

Om het zo in een tabel te zetten en uit te rekenen, maakt het makkelijker om de validiteit van de test te zien.
Echter is het alleen geschikt als evenveel mensen hoog als laag scoren.

Procedure 2 (voorspellen van correlatie): Taylor Russell Tabellen

Kan gemaakt worden als de aanname van gelijke proporties ongegrond is. De tabellen geven de kans dat een voorspelling, gebaseerd op een 'acceptabele' testscore, tot een succesvolle uitvoering leiden aan. Het heeft dichotome variabelen. We hebben de validiteitscoefficient, de selectieproportie en de succesvolle selectieproportie van de selectie als het gemaakt zou zijn zonder test nodig.
Het verschil met BESD is dat er beslissingen gemaakt kunnen worden aan de hand van de verschillende proporties.

Meetfout en betrouwbaarheid bij validiteit

De validiteitscoefficient kan zwak zijn omdat de test of het criterium een lage betrouwbaarheid heeft. Wanneer de betrouwbaarheid van het criterium laag is, dan doe je de adjusted correlatie.

Procedure 3 (voorspellen van correlatie): Ultity Analyse

Het formuleert de validiteit op het gebied van kosten tegenover voordelen. Er moet eerst geschat worden wat het voordeel is van het gebruiken van deze test om beslissingen te kunnen maken in vergelijking met andere methodes. Daarna moet er geschat worden van de kosten of nadelen van de test zijn.

Non-lineaire relatie en validiteitscoefficient

niet lineaire relatie tussen test en criterium, dan is de lineaire relatie moeilijk te voorspellen. Er kan wel sprake zijn van een sterke correlatie.

Gekwadrateerde correlaties (verklaarde variantie)

Wordt gebruikt om te zeggen hoe sterk het verband tussen test en criterium is om de validiteit uit te drukken.

Nadelen gekwadrateerde correlatie

- soms technisch incorrect
- de variantie zit op een gekwadrateerde schaal
- als je correlatie kwadrateert worden ze kleiner, het lijkt of er geen verband is.

Statische significantie om validiteit te interpreteren

Een hoge correlatie in de sample kan 0 zijn in de populatie bij een kleine sample. Het is belangrijk om te kijken naar de statistische significantie om convergente en discriminerende validiteit te ontdekken.

Nadeel binomiaal effect-size display

gelijke proporties op succes en niet succes, kan leiden tot verkeerde beslissing

Succes rate (T&R tabel)

proportie juist geaccepteerde studenten (correct geaccepteerd/ correct en incorrect geaccepteerd)

Wat doen de Taylor en Russel tabellen?

- Geven de succesrate bij de gegeven base rate, test rate en validiteitscoefficient.
- Gaan uit van multivariate normaliteit, ze gaan uit van een normaalverdeling
- Bij een kleinere N is het goed om deze tabellen te gebruiken.

Wat gebeurt er met sensitiviteit, specificiteit, pos en neg predictor als de validiteitscoeffcient omhoog gaat?

Sensitiviteit gaat omhoog
Specificiteit gaat omlaag
pos pred gaat omhoog
neg pred gaat omlaag

De vragen op deze pagina komen uit de samenvatting van het volgende studiemateriaal:

  • Een unieke studie- en oefentool
  • Nooit meer iets twee keer studeren
  • Haal de cijfers waar je op hoopt
  • 100% zeker alles onthouden
Onthoud sneller, leer beter. Wetenschappelijk bewezen.
Trustpilot-logo