1. Klassische Testtheorie

Front 1

1. Fundamentale Fragestellungen der Psychologischen Diagnostik? (2)

- Antwort liefert?

Back 1

1. Wie genau sind unsere Messungen?

--> Reliabilität

2. Messen wir, was wir messen wollen?

--> Validität

Antwort liefert die Klassische Testtheorie

Front 2

2. Klassische Testtheorie

- Definition

Back 2

Front 3

3. Woraus besteht der Messwert bzw. die Varianz des Messwertes (jeweils 2)

Back 3

Front 4

4. Definition Reliabilität

- Berechnung Reliabilität bzw. Unreliabilität

Back 4

Die Reliabilität beschreibt die Genauigkeit, mit der ein Test eine Merkmalsdimension erfasst und spiegelt den Anteil der wahren Varianz an der Gesamtvarianz wieder

Front 5

5. Woraus besteht die Fehlervarianz? (2)

Back 5

Front 6

6. Was ist bei der Reliabilität (2) bzw. dem Bericht der Reliabilität zu beachten?

Back 6

- Die eine Reliabilität gibt es nicht

- verschiedene Wege der Bestimmung der Reliabilität

- Wir berichten: "Die Reliabilität des Tests, geschätzt nach der Methode ... war ..."

Front 7

7. Wege der Bestimmung der Relibilität (4)

Back 7

Front 8

8. Retest-Reliabilität

- Berechnung (3)

- Probleme (4)

Back 8

Berechnung

- gleicher Test

- gleiche Stichprobe

- unterschiedliche Zeitpunkte

--> Korrelation der Ergebnisse untereinander

Probleme:

- Festlegung des optimalen Zeitintervalls

- Erinnerungs- und Übungseffekte

- reale Schwankungen des erfassten Merkmals

- Konfundierung zwischen Reliabilität und Stabilität

Front 9

9. Paralleltest-Reliabilität

- Berechnung (3)

- Vorteil (2)

- Problem (2)

Back 9

= Königsweg der Reliabilitätsbestimmung

Berechnung:

- gleiche Stichprobe

- gleicher Zeitpunkt

- zwei einander parallele Testformen (gleiche wahren Werte und Fehlervarianzen)

Vorteile:

- keine Einflüsse von zeitlichen Schwankungen, Erinnerungs- oder Übungseffekten

- keine Konfundierung mit Stabilität

Hauptproblem = Herstellung paralleler Testformen, wird erschwert wenn:

- es sich um Erfassung sehr eng begrenzter Eigenschaften handelt

- Parallelierung der Items kaum möglich ist

Front 10

10. Testhälften-Reliabilität

- Berechnung (3)

- Techniken der Halbierung (4)

- geeignet, ... (2)

Back 10

Berechnung:

- gleiche Stichprobe

- gleicher Messzeitpunkt

- gleicher Test (halbiert)

Techniken der Halbierung:

- Odd-Even-Methode

- Halbierung nach laufender Nummer

- Zufallsaufteilung

- Itemzwillinge: Halbierung nach psychometrischen Eigenschaften der Items (Schwierigkeit/Trennschärfe)

geeignet:

- bei fehlender Parallelversion

- wenn kein Re-Test möglich ist (Zeitgründen / Unerreichbarkeit Pbn)

Front 11

10.1 Testhalbierungsproblem

- Lösung (2)

Back 11

- Korrelation der Testhälften unterschätzt die Reliabilität des Gesamttests

Korrektur: Spearman-Brown
--> mit zunehmender Zahl von Items wird die Messung präziser

Front 12

11. Interne Konsistenz (Cronbach's Alpha)

- Definition / Berechnung

- Bewertungsrahmen (3)

- Vorteil / Nachteile (2)

Back 12

1 Stichprobe - 1 Test - 1 Durchfürung

Bewertungsrahmen (Skala mit 10 Items)

< 0.80 = niedrig

.80 - .90 = hoch

> .90 = zu hoch (keine Trennschärfe)

Vorteil: ökonomisch

Nachtel: steigt mit Anzahl der Items an!

Front 13

12. Bewertung der Schätzmethoden (5 Kriterien)

Back 13

Front 14

13. Wie kann man den wahren Wert einer Person aus einem Testergebnis schätzen? (3 Voraussetzungen)

Back 14

Mittels eines Konfidenzintervalls, dafür wird benötigt:

- Testwert der Person

- Standardabweichung des Tests

- Reliabilität des Tests

Front 15

14. Berechnung des Konfidenzintervalls

- zwei Schritte

Back 15

Front 16

15. Definitionen

a) Standardabweichung

b) Standardmessfehler (Bedeutung, 4)

c) Itemkennwert

d) Skalenkennwert

Back 16

a) Standardabweichung (SD) = Streuung der Messwerte um den Mittelwert (Infos über Heterogenität/Varianz einer Stichprobe

b) Standardmessfehler (Se) = Abweichung des Stichprobenwertes vom Poulationsmittelwert (wird geschätzt)

- je kleiner, desto homogener Stichprobe

- je größer, desto weniger repräsentiert Stichprobe die Gesamtpopulation

--> evtl. Extremgruppe

--> geringe externe Validität (Übertragbarkeit der Ergebnisse auf Allgemeinheit)

c) Itemwerte können für jedes Item berechnet werden (= SD)

d) Skalenkennwerte benötigen mindestens 2 Items (= Reliabilität / SD)

Front 17

16. Bei Ergbnisberichten zu beachten: (3)

Back 17

- Angabe Konfidenzintervall

- Schlussfolgerung über wahren Wert untersuchtes Kriterium

- Angabe des Messinstruments

Front 18

17. Zusammenfassung

- Definition Reliabilität

- Verhältnis Reliabilität - Validität

- Problem Reliabilität

- bei Bericht der Reliabilität zu beachten:

Back 18

- Die Reliabilität stellt die Genauigkeit einer Messung dar.

- (Hohe) Reliabilität ist eine notwendige Voraussetzung für die Validität, aber keine hinreichende, weil der Nachweis, dass wir genau messen, impliziert nicht, dass wir das Richtige messen!

- Wir schätzen die Reliabilität, wir kennen sie nicht

- Beim Berichten der Reliabilität muss die Schätzmethode genannt werden.

Front 19

18. Itemschwierigkeit (ρ)

a) Definition

b) Funktion (2)

c) Berechnung

Back 19

a) Anteil der Personen, die das Item mit Ja beantworten können

b) gibt an ob ein Item zu leicht oder zu schwer ist und damit keinerlei Informationen liefert und aussortiert / ersetzt werden sollte