Die Wissenschaft hinter spielbasierter Bewertung

Traditionelle Tests – denken Sie an Multiple-Choice-Prüfungen oder langwierige Fragebögen – sind seit langem der Standard für die Bewertung von Studenten und Bewerbern. Doch in den letzten Jahren haben sich spielbasierte Bewertungen (GBAs) als innovative Alternative etabliert. Diese Bewertungen integrieren Testinhalte in spielerische Aktivitäten und zielen darauf ab, Fähigkeiten und Eigenschaften auf interaktivere und ansprechendere Weise zu messen. Wie funktionieren spielbasierte Bewertungen und sind sie so valide wie traditionelle Methoden? Dieser Artikel befasst sich mit der Wissenschaft hinter GBAs aus Sicht der pädagogischen Psychologie und Psychometrie.

Wie spielbasierte Bewertungen funktionieren (und was sie messen)

Im Kern sind spielbasierte Bewertungen darauf ausgelegt, verdeckt Daten über die Fähigkeiten oder die Persönlichkeit einer Person durch das Gameplay zu sammeln. Anstatt direkt Fragen zu stellen ("Sind Sie ein guter Problemlöser?"), könnte eine GBA ein Puzzle oder Szenario präsentieren und die Problemlösungsfähigkeit aus den Handlungen der Person ableiten. Ein bekanntes Konzept in diesem Bereich ist die Stealth-Bewertung, geprägt von Forschern wie Valerie Shute. Bei einer Stealth-Bewertung ist der Test in das Spielgeschehen eingewoben – oft unsichtbar für den Spieler (Shute & Moore, 2017).

Stellen Sie sich zum Beispiel ein Spiel vor, bei dem Sie durch Herausforderungen navigieren, um eine virtuelle Welt zu retten. Hinter den Kulissen wird jede Entscheidung, Reaktionszeit, Strategie und jedes Ergebnis protokolliert. Mit einem Ansatz namens Evidence-Centered Design definieren Testentwickler, welche Verhaltensweisen im Spiel auf Kompetenz in der Zielfähigkeit hinweisen. Während die Person spielt, aktualisiert ein statistisches Modell (oft Bayesianisch) kontinuierlich ihre Punktzahl basierend auf den gesammelten Beweisen.

Spielbasierte Bewertungen können eine Reihe von Konstrukten messen: kognitive Fähigkeiten (wie Gedächtnis, Aufmerksamkeit, Problemlösung), Wissen in bestimmten Bereichen und sogar Persönlichkeitsmerkmale oder Soft Skills. Forschungsergebnisse zeigen, dass diese Spielindikatoren mit traditionellen kognitiven Maßen korrelieren – eine Meta-Analyse fand eine beobachtete Korrelation von etwa r = 0,30 (die nach Korrektur für Reliabilität auf r ≈ 0,45 anstieg) zwischen spielbasierten Metriken und konventionellen kognitiven Testergebnissen (Stoet & Graaf, 2023).

Für Persönlichkeits- und Verhaltensmerkmale nutzen GBAs oft situatives Gameplay, um natürliches Verhalten hervorzurufen. Im Gegensatz zu Selbstauskunftsfragebögen, die Kandidaten bitten, sich selbst zu bewerten (was zu sozialer Erwünschtheit führen kann), kann ein Spiel spontane Reaktionen hervorrufen. Befürworter argumentieren, dass dies zu authentischeren Daten führt: Kandidaten können "vergessen", dass sie bewertet werden, und einfach spielen, was möglicherweise Faking reduziert (Equalture, 2022).

Vergleich zu traditionellen Tests: Engagement, Angst und Fairness

Eine große Motivation für spielbasierte Bewertungen ist es, einige Nachteile traditioneller Tests zu beheben. Engagement ist ein Paradebeispiel. Traditionelle Tests können trocken und stressauslösend sein; gelangweilte oder ängstliche Testteilnehmer erbringen möglicherweise nicht ihre beste Leistung, was die Validität der Ergebnisse untergraben kann. GBAs hingegen streben danach, Spaß zu machen und immersiv zu sein. Studien haben gezeigt, dass die Einbettung von Bewertungen in ein Spiel das Engagement der Testteilnehmer und sogar deren Freude steigern kann (Equalture, 2022).

Testangst ist ein weiterer kritischer Faktor. Prüfungen mit hohen Einsätzen lösen oft Angst aus, die die Leistung beeinträchtigen kann. Vorläufige Forschungsergebnisse deuten darauf hin, dass spielbasierte Bewertungen Testangst mildern können. In einer Fallstudie berichteten Studenten, die eine Prüfung über eine Spieloberfläche ablegten, von geringerer Nervosität und zeigten keine der üblichen stressbedingten Leistungseinbußen (Bonefont et al., 2022). Die interaktive, drucklose Atmosphäre eines Spiels kann ein Gefühl von Vertrauen und Ruhe fördern.

Wir müssen jedoch Fairness und Vorurteile berücksichtigen. Eine Sorge ist der Faktor der Spielerfahrung: Werden Menschen, die begeisterte Spieler sind, unabhängig vom Zielkonstrukt besser abschneiden? Forscher haben dies untersucht. Ermutigend ist, dass eine Studie zu kognitiven GBAs herausfand, dass die Bewertungen trotz eines gewissen Effekts der Spielerfahrung weiterhin kriteriumsbezogene Validität bei der Vorhersage der Arbeitsleistung zeigten (Tondello & Gutierrez, 2021). Kulturelle Voreingenommenheit kann in GBAs potenziell reduziert werden, indem weniger auf Sprache gesetzt und Herausforderungen universeller durch Visualisierungen und Interaktionen präsentiert werden.

Validität und Reliabilität: Halten GBAs stand?

Die ultimative Frage für jede Bewertung ist: Ist sie valide? Das heißt, misst sie tatsächlich das, was sie zu messen behauptet, und kann sie interessierende Ergebnisse vorhersagen? Spielbasierte Bewertungen stellen hier eine Herausforderung dar, weil sie komplex sind und oft mehrere Dinge gleichzeitig messen. Forscher nähern sich der Validierung auf mehreren Wegen:

• Inhaltsvalidität: Sicherstellen, dass die Aufgaben des Spiels wirklich die zu messenden Fähigkeiten widerspiegeln. Mit Evidence-Centered Design-Dokumentation verknüpfen Entwickler jedes Spielelement explizit mit den interessierenden Kompetenzen.
• Konstrukt- und Kriteriumsvalidität: Statistische Analyse, die spielbasierte Punktzahlen mit anderen Maßen vergleicht. Meta-Analysen haben moderate Korrelationen zwischen GBA-Punktzahlen und traditionellen Testergebnissen für kognitive Fähigkeiten gefunden.
• Reliabilität: Sicherstellen, dass jemand, der die Spielbewertung zweimal absolviert, eine ähnliche Punktzahl erhält. Durch robustes Design und Evidenzakkumulation kann eine Reliabilität erreicht werden, die mit traditionellen Bewertungen vergleichbar ist.

Es ist erwähnenswert, dass nicht alle spielbasierten Bewertungen automatisch eine starke Validität haben – es hängt von der Qualität des Designs und der dahinterstehenden Forschung ab. Daher durchlaufen Ersteller von GBAs typischerweise umfangreiche Pilottests und Iterationen, ähnlich wie bei der traditionellen Testentwicklung.

Fazit

Spielbasierte Bewertungen stellen eine bedeutende Evolution im Ansatz des Testens dar. Die Wissenschaft dahinter – von Stealth-Bewertungstechniken bis hin zu Validitätsnachweisen – wächst und ist weitgehend ermutigend. Studien haben gezeigt, dass GBAs Reliabilität erreichen und Zielkonstrukte messen können, mit moderaten bis starken Korrelationen zu etablierten Tests. Sie bringen auch zusätzliche Vorteile wie Engagement, reduzierte Angst und reichhaltigere Daten über Leistungsprozesse.

Die wichtigste Erkenntnis aus dem aktuellen Forschungsstand ist Balance: Nutzen Sie die Stärken der spielbasierten Bewertung und mindern Sie gleichzeitig ihre Schwächen. Auf diese Weise können Pädagogen und Arbeitgeber Spiele nicht nur zum Spielen, sondern für bedeutungsvolle Erkenntnisse nutzen.