Spezifischer Kontext: Eine Testperson absolvierte dreimal denselben Raven's Standard Progressive Matrices IQ-Test und erzielte zuerst 115, dann 107 und schließlich 143. Derselbe Test wurde dreimal innerhalb von 3,5 Stunden durchgeführt. Da alle drei Werte unterschiedlich sind und zufällig erscheinen, wie kann man diese Ergebnisse bewerten? Dh unter der Annahme, dass die Person nicht betrogen hat, was kann über die Intelligenz der Testperson gesagt werden?
Allgemeiner:
Wie sollte man die Ergebnisse von Intelligenztests für eine Person interpretieren, die dieselbe Form desselben Tests mehrmals schnell hintereinander absolviert hat?
Intelligenztests unterscheiden sich darin, wie sehr sie Übungseffekten unterliegen.
Übungseffekte können auch unterschieden werden:
Ein weiterer allgemeiner Punkt ist, dass Intelligenztests ein solches Maß an Zuverlässigkeit haben, dass eine Punktzahl in einem Test nur eine Schätzung der wahren Stellung einer Person in Bezug auf das zu messende latente Merkmal darstellt. Offensichtlich wäre also eine gewisse Abweichung zwischen den Verabreichungen allein auf der Grundlage des Standardmessfehlers zu erwarten.
Das allgemeine Modell der Test-Retest-Zuverlässigkeit geht jedoch von angemessen kontrollierten Testbedingungen und einem Teilnehmer aus, der angemessene Anstrengungen unternimmt. Wenn diese Bedingungen nicht erfüllt sind, können Sie viel mehr Variationen sehen:
Verwaltungsprobleme sind in einer Online-Umgebung wahrscheinlicher, insbesondere wenn es entweder (a) keine Konsequenzen gibt, wenn nicht die volle Anstrengung unternommen wird, oder (b) einen Anreiz zum Schummeln gibt.
Wenn Sie versuchen, die Intelligenz zu messen, sollten Sie den Test im Allgemeinen einmal durchführen, und diese erste Messung wäre das Maß für ihre Intelligenz.
Unmittelbar darauf folgende Testverabreichungen wären mit Übungseffekten kontaminiert. Wenn Sie nicht sehr gut verstehen, wie Übungseffekte funktionieren und wie sie kontrolliert werden können, wäre es schwierig, Informationen aus diesen nachfolgenden Verabreichungen zu integrieren.
Wenn Sie jedoch zusätzliche Informationen hatten, die besagten, dass der Teilnehmer bei der ersten Verabreichung unkonzentriert war oder den Test grundsätzlich nicht verstanden hat, möchten Sie sich möglicherweise versuchsweise auf das Ergebnis einer anderen Verabreichung verlassen.
Darüber hinaus kann ein Ergebnismuster, das sich um drei Standardabweichungen (z. B. 100, 115, 145) unterscheidet, entweder darauf hindeuten, dass der Test Zuverlässigkeitsprobleme aufweist oder dass bei dieser bestimmten Person, die Sie untersuchen möchten, etwas Seltsames passiert.
Benutzer3116