Sind spielbasierte Assessments zuverlässig?

Sind spielbasierte Assessments zuverlässig? Nur mäßig: eine Metaanalyse von 2024 mit 52 unabhängigen Stichproben und 6.139 Erwachsenen, veröffentlicht im Journal of Intelligence, fand, dass spielbasierte Assessments mit klassischen kognitiven Tests bei r=0,30 korrelieren, korrigiert um Messfehler bei r=0,45. Das ist ein echter Zusammenhang, kein Zufall, aber er bleibt weit hinter dem nahezu gleichwertigen Ersatz zurück, den ein "spielen Sie das statt des alten Tests" Versprechen nahelegt.

Dieselbe Forschung, die 807 Korrelationen aus 44 Arbeiten zusammenführt, sagt es klar: Spielleistung und Ergebnisse kognitiver Tests hängen zusammen, decken aber unterschiedliche Konstrukte ab, kein einzelnes Konstrukt in zwei verschiedenen Kostümen.

Messen spielbasierte Tests dasselbe wie ein echter kognitiver Test

Die Korrelation verschiebt sich je nachdem, wie der Vergleich aufgebaut ist. Wurde die kognitive Leistungsfähigkeit in einer Studie mit mehreren klassischen Tests statt mit einem gemessen, stieg die Verbindung zur Spielleistung auf r=0,39, gegenüber r=0,28 bei einem einzelnen klassischen Test, eine Lücke, wie sie entsteht, wenn eine Seite eines Vergleichs genauer gemessen wird als die andere. Bestehende kommerzielle Spiele wie Tetris machten rund ein Drittel der Studien im Datenpool aus und schnitten nicht anders ab als eigens für kognitive Tests entwickelte Spiele, ein Ergebnis, das die Autoren selbst als unerwartet einstuften.

Warum das Spiel eines Unternehmens in seiner eigenen Studie besser abschnitt

Nicht jedes Spiel erreicht den Durchschnitt des Feldes. Eine Studie von 2023 in Frontiers in Psychology zu einem einzelnen spielbasierten Test eines Unternehmens berichtete eine konkurrente Validität von r=0,5 gegenüber einem Standardtest kognitiver Leistungsfähigkeit, mit einer Retest Reliabilität von r=0,68 über rund vier Monate, beide über dem Durchschnitt der Metaanalyse. Das belegt, dass ein bestimmtes, sorgfältig entwickeltes Instrument den Feld-Durchschnitt schlagen kann, nicht, dass spielbasierte Formate als Kategorie zuverlässig sind: die Metaanalyse oben fand bereits Ergebnisse von stark negativ bis stark positiv über die untersuchten Spiele hinweg.

Was Bewerbende selbst von dem Format halten

Dieselbe unternehmensbezogene Studie fragte Bewerbende auch, wie sich das Spiel anfühlte. Zwei der am schwächsten bewerteten Aspekte waren, ob das Assessment sich relevant für den Job anfühlte, mit 3,70 von 5, und ob es ihnen erlaubte, ihre echten Fähigkeiten zu zeigen, mit 3,64 von 5, wobei Bewerbende das Spiel als abstrakt beschrieben und seinen Bezug zur eigentlichen Rolle als unklar. Die Gesamtzufriedenheit blieb trotzdem hoch, 4,30 von 5 bei einem Net Promoter Score von 58: Die Menschen spielten gern, auch wenn sie bezweifelten, dass das Spiel zeigte, was sie wirklich können.

Was das für eine Einstellungsentscheidung bedeutet

Ein moderater Zusammenhang mit kognitiver Leistungsfähigkeit und Bewerbende, die bezweifeln, dass das Format ihre echten Fähigkeiten zeigt, weisen auf dieselbe Lösung hin: etwas Konkretes und sichtbar Jobbezogenes bewerten, statt eines Stellvertreters, dessen Bezug zur Rolle auf Vertrauen beruhen muss. Ein situativer Urteilstest stellt eine echte Arbeitssituation dar und bewertet die Antwort anhand vereinbarter Kriterien. Eine verhaltensverankerte Bewertungsskala bindet jeden Punkt dieser Skala an ein beobachtetes Verhalten, statt ein Spielergebnis dafür stehen zu lassen. Der Sechs-Bereiche-Check hinter dieser Seite folgt derselben Logik: eine bewertete Antwort auf ein reales Szenario, dessen Sinn eine bewerbende Person erkennt, kein Spiel, dessen Bezug zum Job allein auf Vertrauen beruht.