Validität - Psychologie 1
Validität - Psychologie 1
Validität - Psychologie
Einleitung
Validität bedeutet Gültigkeit. In der Psychologie zeigt sie, wie gut Belege und Theorie die beabsichtigte Interpretation von Messwerten stützen. Vereinfacht gefragt: Misst ein Verfahren wirklich das, was es messen soll?
Du lernst, Inhaltsvalidität, Kriteriumsvalidität und Konstruktvalidität zu unterscheiden, Validitätsbelege zu beurteilen und typische Gefährdungen zu erkennen. Präzise betrachtet ist nicht ein Test „an sich“ valide; die Gültigkeit bezieht sich auf eine bestimmte Interpretation, Zielgruppe und Verwendung der Testwerte.
Lernziele
- Validität: Du erklärst den Begriff fachgerecht.
- Testgütekriterien: Du grenzt Validität von Reliabilität und Objektivität ab.
- Validierung: Du ordnest verschiedene Validitätsbelege zu.
- Psychologische Diagnostik: Du prüfst Messinstrumente kritisch.
- Forschungsmethoden: Du überträgst das Konzept auf Studien und Alltagssituationen.
Validität als Gütekriterium
Ein psychologisches Konstrukt wie Intelligenz, Angst oder Motivation ist nicht direkt sichtbar. Es wird durch Operationalisierung in beobachtbare Antworten, Leistungen oder Verhaltensweisen übersetzt. Validität betrifft die Frage, ob diese Messwerte tragfähige Schlussfolgerungen über das beabsichtigte Konstrukt erlauben.
Beispiel: Ein Test soll Prüfungsangst messen. Fragt er überwiegend nach allgemeiner Müdigkeit, fehlen passende Inhalte. Reagieren die Werte stark auf Lesekompetenz, entsteht konstruktfremde Varianz.
Validität, Reliabilität und Objektivität
Objektivität verlangt, dass Durchführung, Auswertung und Interpretation möglichst unabhängig von der untersuchenden Person sind. Reliabilität beschreibt die Messgenauigkeit beziehungsweise Zuverlässigkeit. Validität betrifft die Angemessenheit der inhaltlichen Schlussfolgerung.
Ein Verfahren kann reliabel immer dasselbe Falsche messen. Für überzeugende Validität ist ausreichende Reliabilität in der Regel notwendig, aber nicht hinreichend.
Formen und Belege der Validität
Inhaltsvalidität
Inhaltsvalidität liegt vor, wenn die Aufgaben den relevanten Merkmalsbereich angemessen abdecken. Grundlage sind eine klare Konstruktdefinition, ein Testplan und begründete Urteile sachkundiger Personen.
Beispiel: Eine Klausur über Forschungsmethoden ist wenig inhaltsvalide, wenn sie fast nur Definitionen abfragt, obwohl auch Planung, Auswertung und Kritik geprüft werden sollen.
Kriteriumsvalidität
Kriteriumsvalidität untersucht den Zusammenhang mit einem relevanten Außenkriterium.
- Übereinstimmungsvalidität: Testwert und Kriterium werden ungefähr gleichzeitig erhoben.
- Prognostische Validität: Der Testwert sagt ein späteres Kriterium vorher.
Beispiel: Ein Studierfähigkeitstest besitzt prognostische Validitätsbelege, wenn seine Werte späteren Studienerfolg sinnvoll vorhersagen. Eine Korrelation allein beweist jedoch keine Kausalität und kann durch Stichprobe oder unzuverlässige Kriterien verzerrt sein.
Konstruktvalidität
Konstruktvalidität wird durch ein zusammenhängendes Netz theoretischer und empirischer Befunde gestützt.
- Konvergente Validität: Starke Beziehungen zu Messungen verwandter Konstrukte.
- Diskriminante Validität: Schwache Beziehungen zu theoretisch verschiedenen Konstrukten.
- Faktorielle Validität: Die Datenstruktur passt zum angenommenen Aufbau des Konstrukts.
- Nomologisches Netzwerk: Beziehungen zu anderen Merkmalen entsprechen begründeten Hypothesen.
Beispiel: Eine neue Depressionsskala sollte deutlich mit etablierten Depressionsmaßen, aber geringer mit sachlich entfernten Merkmalen zusammenhängen.
Augenscheinvalidität
Augenscheinvalidität beschreibt, ob ein Verfahren auf den ersten Blick passend wirkt. Sie kann Akzeptanz fördern, ist aber kein ausreichender wissenschaftlicher Validitätsnachweis.
Validierung als fortlaufender Prozess
Validierung ist kein einmaliger Haken, sondern ein argumentativer und empirischer Prozess.
- Konstruktdefinition: Was soll für welchen Zweck gemessen werden?
- Zielpopulation: Für wen sollen die Aussagen gelten?
- Messmodell: Wie entstehen beobachtete Werte aus dem Konstrukt?
- Evidenz: Welche Inhalts-, Struktur- und Außenbezüge stützen die Interpretation?
- Replikation: Bleiben Befunde in neuen Stichproben und Situationen tragfähig?
- Fairness: Entstehen systematische Nachteile für bestimmte Gruppen?
Typische Gefährdungen
- Konstruktunterrepräsentation: Wichtige Bestandteile des Merkmals fehlen.
- Konstruktfremde Varianz: Ergebnisse hängen von irrelevanten Fähigkeiten oder Bedingungen ab.
- Kriteriumskontamination: Das Außenkriterium enthält Informationen aus dem zu prüfenden Test.
- Varianzeinschränkung: Eine zu homogene Stichprobe schwächt beobachtbare Zusammenhänge.
- Soziale Erwünschtheit: Personen antworten eher akzeptabel als wahrheitsgemäß.
- Methodenbias: Gleiche Erhebungsmethoden erzeugen künstliche Zusammenhänge.
- Stichprobenverzerrung: Ergebnisse lassen sich nicht ohne Weiteres auf andere Gruppen übertragen.
Testvalidität und Studienvalidität
Testvalidität betrifft die Interpretation von Messwerten. Interne Validität fragt bei Studien, ob ein beobachteter Effekt plausibel auf die untersuchte Ursache zurückgeht. Externe Validität betrifft die Übertragbarkeit auf andere Personen, Situationen oder Zeiten. Diese Bedeutungen hängen zusammen, dürfen aber nicht gleichgesetzt werden.
Kurzübersicht
| Begriff | Leitfrage | Typischer Beleg |
|---|---|---|
| Inhaltsvalidität | Decken die Aufgaben den Merkmalsbereich ab? | Testplan und Expertenurteil |
| Kriteriumsvalidität | Hängen Werte mit einem relevanten Außenkriterium zusammen? | Gleichzeitige oder spätere Kriteriumswerte |
| Konstruktvalidität | Passen die Befunde zur Theorie des Konstrukts? | Konvergenz, Diskriminanz und Faktorenstruktur |
| Augenscheinvalidität | Wirkt das Verfahren offensichtlich passend? | Plausibilität für Betrachtende |
| Interne Validität | Ist eine kausale Deutung innerhalb der Studie tragfähig? | Kontrolle von Störvariablen |
| Externe Validität | Lassen sich Befunde übertragen? | Replikation in anderen Gruppen und Situationen |
Interaktive Aufgaben
Quiz: Teste Dein Wissen
Welche Leitfrage beschreibt Validität am besten? (Misst das Verfahren das beabsichtigte Merkmal angemessen) (!Liefert das Verfahren immer hohe Werte) (!Ist das Verfahren besonders kurz) (!Wurde das Verfahren digital durchgeführt)
Welche Aussage zum Verhältnis von Reliabilität und Validität trifft zu? (Ein reliables Verfahren kann dennoch nicht valide sein) (!Jedes valide Verfahren ist automatisch objektiv) (!Reliabilität und Validität sind bedeutungsgleich) (!Validität macht Reliabilität überflüssig)
Wodurch wird Inhaltsvalidität besonders gestützt? (Durch eine begründete Abdeckung des Merkmalsbereichs) (!Durch eine große Schrift im Fragebogen) (!Durch eine hohe Bearbeitungsgeschwindigkeit) (!Durch einen zufälligen Testtitel)
Was kennzeichnet prognostische Validität? (Ein Testwert sagt ein späteres Kriterium vorher) (!Ein Test wird zweimal am selben Tag bearbeitet) (!Zwei Personen werten denselben Test aus) (!Ein Fragebogen wirkt auf den ersten Blick passend)
Was spricht für konvergente Validität? (Ein neues Maß hängt stark mit verwandten Maßen zusammen) (!Ein neues Maß hängt nur mit sich selbst zusammen) (!Ein neues Maß enthält besonders viele Aufgaben) (!Ein neues Maß wird ohne Theorie entwickelt)
Was spricht für diskriminante Validität? (Ein Maß hängt nur schwach mit theoretisch fremden Konstrukten zusammen) (!Ein Maß liefert bei allen Personen denselben Wert) (!Ein Maß wird von vielen Personen ausgefüllt) (!Ein Maß besitzt eine auffällige Gestaltung)
Warum reicht Augenscheinvalidität nicht aus? (Sie beruht nur auf dem offensichtlichen Eindruck) (!Sie setzt immer ein Experiment voraus) (!Sie kann ausschließlich mit Korrelationen geprüft werden) (!Sie ist mit prognostischer Validität identisch)
Was ist Konstruktunterrepräsentation? (Wichtige Teile des Konstrukts fehlen in der Messung) (!Das Konstrukt wird in mehreren Sprachen erklärt) (!Die Stichprobe enthält zu viele Altersgruppen) (!Der Test wird zu häufig ausgewertet)
Welche Aussage zu Validierung ist richtig? (Sie sammelt fortlaufend Theorie und empirische Belege) (!Sie endet nach dem Formulieren des Testtitels) (!Sie besteht nur aus einer einzigen Korrelation) (!Sie ist unabhängig vom Verwendungszweck)
Welche Frage gehört zur externen Validität einer Studie? (Lassen sich Ergebnisse auf andere Situationen übertragen) (!Wurde der Fragebogen alphabetisch sortiert) (!Sind alle Testwerte ganze Zahlen) (!Wurde die Auswertung von einer Person vorgenommen)
Memory
| Inhaltsvalidität | Abdeckung des Merkmalsbereichs |
| Kriteriumsvalidität | Bezug zu einem Außenkriterium |
| Konstruktvalidität | Übereinstimmung mit theoretischen Erwartungen |
| Konvergenz | Zusammenhang mit verwandten Maßen |
| Diskriminanz | Abgrenzung von fremden Konstrukten |
| Prognose | Vorhersage eines späteren Ergebnisses |
| Reliabilität | Genauigkeit der Messung |
Drag and Drop
| Ordne die richtigen Begriffe zu. | Validitätsbeleg |
|---|---|
| Expertenurteil | Inhaltsvalidität |
| Späterer Studienerfolg | Prognostische Validität |
| Gleichzeitige Diagnose | Übereinstimmungsvalidität |
| Verwandtes Messverfahren | Konvergente Validität |
| Theoretisch fremdes Merkmal | Diskriminante Validität |
Kreuzworträtsel
| Konstrukt | Wie heißt ein theoretisches, nicht direkt beobachtbares Merkmal? |
| Kriterium | Wie heißt der äußere Vergleichsmaßstab bei Kriteriumsvalidität? |
| Prognose | Wie heißt die Vorhersage eines späteren Ergebnisses? |
| Inhalt | Welcher Bereich muss bei Inhaltsvalidität angemessen abgedeckt sein? |
| Konvergenz | Wie heißt die erwartete Annäherung verwandter Messungen? |
| Reliabilitaet | Welches Gütekriterium bezeichnet Messgenauigkeit? |
LearningApps
Lückentext
Offene Aufgaben
Leicht
- Alltagsmessung: Finde ein Beispiel für eine Messung, die zuverlässig, aber inhaltlich unpassend ist, und erkläre es in fünf Sätzen.
- Begriffsnetz: Erstelle eine kleine Grafik zu Objektivität, Reliabilität und Validität.
- Testkritik: Untersuche fünf Fragen eines Online-Selbsttests und markiere unklare oder konstruktfremde Inhalte.
- Erklärvideo: Produziere ein einminütiges Video, das Validität mit einem eigenen Beispiel erklärt.
Standard
- Operationalisierung: Entwickle vier Items zur Lernmotivation und begründe ihre inhaltliche Passung.
- Expertenurteil: Lass zwei Personen Deine Items unabhängig bewerten und vergleiche die Begründungen.
- Validitätsmatrix: Ordne einem selbst gewählten Test mögliche Inhalts-, Kriteriums- und Konstruktbelege zu.
- Medienanalyse: Prüfe einen Zeitungsbericht über einen psychologischen Test auf überzogene Validitätsaussagen.
Schwer
- Validierungsstudie: Plane eine kleine Studie für eine neue Kurzskala und formuliere mindestens vier prüfbare Validitätshypothesen.
- Dateninterpretation: Erfinde eine plausible Korrelationsmatrix und beurteile Konvergenz sowie Diskriminanz.
- Fairnessanalyse: Analysiere, wie Sprachkompetenz die Interpretation eines Leistungstests verzerren könnte, und entwickle Gegenmaßnahmen.
- Replikationsprojekt: Entwirf eine Folgestudie, die prüft, ob ein Validitätsbefund in einer anderen Zielgruppe bestehen bleibt.
|
|
Lernkontrolle
- Fallanalyse Prüfungsangst: Ein Fragebogen zu Prüfungsangst enthält viele Fragen über Schlaf. Beurteile Inhalts- und Konstruktvalidität und schlage Verbesserungen vor.
- Auswahlentscheidung: Eine Hochschule nutzt einen Test mit hoher Reliabilität, aber geringer Vorhersage des Studienerfolgs. Entscheide begründet, ob der Test weiterverwendet werden sollte.
- Korrelationsargument: Eine neue Skala korreliert hoch mit allgemeinem Stress und kaum mit etablierten Angstmaßen. Entwickle mindestens zwei konkurrierende Erklärungen.
- Übertragungsproblem: Ein Test wurde nur an leistungsstarken Erwachsenen validiert. Erörtere die Nutzung bei Jugendlichen mit unterschiedlichen Bildungsvoraussetzungen.
- Validitätskonflikt: Ein Verfahren wirkt sehr plausibel, zeigt aber keine erwarteten Außenbezüge. Formuliere ein Prüfprogramm, das zwischen fehlerhafter Theorie, ungeeignetem Kriterium und schwacher Messung unterscheidet.
- Forschungsdesign: Trenne in einem selbst gewählten Experiment Gefährdungen der Testvalidität von Gefährdungen der internen und externen Studienvalidität.
Lernnachweis
Für einen Lernnachweis solltest Du zeigen, dass Du
- Validität präzise definieren und auf einen Verwendungszweck beziehen kannst.
- Inhaltsvalidität, Kriteriumsvalidität und Konstruktvalidität an Beispielen unterscheidest.
- konvergente und diskriminante Validitätsbelege interpretierst.
- Reliabilität, Objektivität und Validität sachgerecht abgrenzt.
- Gefährdungen wie Konstruktunterrepräsentation, Methodenbias und Stichprobenverzerrung erkennst.
- einen begründeten Plan für eine Validierungsstudie entwickelst.
- Grenzen von Korrelationen, Stichproben und Außenkriterien reflektierst.
OERs zum Thema
- Standards for Educational and Psychological Testing: Grundlegender Standard zur Interpretation und Validierung psychologischer und pädagogischer Testwerte.
- Wikimedia Commons: Freie Grafik zum Verhältnis von Reliabilität und Validität.
- Psychologie mit Prof. Erb: Erklärvideo zur Validität psychologischer Tests.
Verknüpfte Lernbereiche
aiMOOC-Projekte
Schulfach+
|
|
aiMOOCs
aiMOOC Projekte
|
|
THE MONKEY DANCE
|
|
|