Vetenskapen bakom spelbaserad bedömning

Traditionella tester – tänk flervalsprov eller långa frågeformulär – har länge varit standarden för att utvärdera studenter och arbetssökande. Men under de senaste åren har spelbaserade bedömningar (GBA) framträtt som ett innovativt alternativ. Dessa bedömningar integrerar testinnehåll i spelliknande aktiviteter och syftar till att mäta färdigheter och egenskaper på ett mer interaktivt och engagerande sätt. Hur fungerar spelbaserade bedömningar och är de lika valida som traditionella metoder? Denna artikel fördjupar sig i vetenskapen bakom GBA från ett pedagogiskt psykologi- och psykometriperspektiv.

Hur spelbaserade bedömningar fungerar (och vad de mäter)

I grunden är spelbaserade bedömningar utformade för att diskret samla in data om en persons förmågor eller personlighet genom spelande. Istället för att direkt ställa frågor ("Är du en bra problemlösare?") kan en GBA presentera ett pussel eller scenario och härleda problemlösningsförmågan från individens handlingar. Ett välkänt koncept inom detta område är stealth-bedömning, myntat av forskare som Valerie Shute. I en stealth-bedömning är testet invävt i spelets struktur – ofta osynligt för spelaren (Shute & Moore, 2017).

Tänk dig till exempel ett spel där du navigerar genom utmaningar för att rädda en virtuell värld. Bakom kulisserna loggas varje beslut, reaktionstid, strategi och resultat. Med hjälp av ett tillvägagångssätt kallat evidence-centered design definierar testutvecklare vilka beteenden i spelet som indikerar kompetens i målfärdigheten. När personen spelar uppdaterar en statistisk modell (ofta Bayesiansk) kontinuerligt deras poäng baserat på insamlade bevis.

Spelbaserade bedömningar kan mäta en rad konstrukt: kognitiva förmågor (som minne, uppmärksamhet, problemlösning), kunskap inom specifika områden och till och med personlighetsdrag eller mjuka färdigheter. Forskning visar att dessa spelindikatorer korrelerar med traditionella kognitiva mått – en metaanalys fann en observerad korrelation på cirka r = 0,30 (som steg till r ≈ 0,45 efter korrigering för reliabilitet) mellan spelbaserade mätningar och konventionella kognitiva testresultat (Stoet & Graaf, 2023).

För personlighets- och beteendeegenskaper använder GBA ofta situationsbaserat spelande för att framkalla naturligt beteende. Till skillnad från självrapporteringsformulär som ber kandidater att bedöma sig själva (vilket kan introducera social önskvärdhetsbias), kan ett spel framkalla spontana reaktioner. Förespråkare hävdar att detta leder till mer autentiska data: kandidater kan "glömma" att de bedöms och bara spela, vilket potentiellt minskar fejkande (Equalture, 2022).

Jämförelse med traditionella tester: Engagemang, ångest och rättvisa

En stor motivation för spelbaserad bedömning är att åtgärda några nackdelar med traditionella tester. Engagemang är ett utmärkt exempel. Traditionella tester kan vara torra och stressframkallande; uttråkade eller oroliga testdeltagare kanske inte presterar sitt bästa, vilket kan undergräva resultatens validitet. GBA strävar däremot efter att vara roliga och uppslukande. Studier har visat att inbäddning av bedömning i ett spel kan öka testdeltagarnas engagemang och till och med glädje (Equalture, 2022).

Testångest är en annan kritisk faktor. Prov med höga insatser ökar ofta ångesten, vilket kan försämra prestationen. Preliminär forskning tyder på att spelbaserade bedömningar kan mildra testångest. I en fallstudie rapporterade studenter som tog ett prov via ett spelgränssnitt lägre nervositet och presterade utan den vanliga stressrelaterade poängsänkningen (Bonefont et al., 2022). Den interaktiva, lågtrycksmiljön i ett spel kan odla en känsla av självförtroende och lugn.

Vi måste dock överväga rättvisa och fördomar. En oro är spelerfarenhetsfaktorn: kommer personer som är ivriga spelare att prestera bättre oavsett målkonstruktet? Forskare har undersökt detta. Uppmuntrande nog fann en studie om kognitiva GBA att även om spelerfarenhet hade viss effekt, visade bedömningarna fortfarande kriterierelaterad validitet för att förutsäga arbetsprestation (Tondello & Gutierrez, 2021). Kulturell bias kan potentiellt minskas i GBA genom att förlita sig mindre på språk och presentera utmaningar på ett mer universellt sätt genom visualiseringar och interaktioner.

Validitet och reliabilitet: Håller GBA måttet?

Den ultimata frågan för varje bedömning är: Är den valid? Det vill säga, mäter den faktiskt vad den påstår sig mäta, och kan den förutsäga intressanta utfall? Spelbaserade bedömningar utgör en utmaning här eftersom de är komplexa och ofta bedömer flera saker samtidigt. Forskare närmar sig validering genom flera vägar:

• Innehållsvaliditet: Säkerställa att spelets uppgifter verkligen återspeglar de färdigheter som ska mätas. Med evidence-centered design-dokumentation kopplar utvecklare explicit varje spelelement till de intressanta kompetenserna.
• Konstrukt- och kriterievaliditet: Statistisk analys som jämför spelbaserade poäng med andra mått. Metaanalyser har funnit måttliga korrelationer mellan GBA-poäng och traditionella testpoäng för kognitiva förmågor.
• Reliabilitet: Säkerställa att om någon tog spelbedömningen två gånger, skulle de få liknande poäng. Genom robust design och bevisackumulering kan man uppnå reliabilitet i nivå med traditionella bedömningar.

Det är värt att notera att inte alla spelbaserade bedömningar automatiskt har stark validitet – det beror på kvaliteten på designen och forskningen bakom dem. Därför genomgår skapare av GBA vanligtvis omfattande pilottester och iterationer, liknande traditionell testutveckling.

Slutsats

Spelbaserade bedömningar representerar en betydande evolution i synen på testning. Vetenskapen bakom dem – från stealth-bedömningstekniker till bevis på validitet – växer och är i stort sett uppmuntrande. Studier har visat att GBA kan uppnå reliabilitet och mäta målinriktade konstrukt, med måttliga till starka korrelationer till etablerade tester. De medför också fördelar som engagemang, minskad ångest och rikare data om prestationsprocesser.

Den viktigaste lärdomen från det nuvarande forskningsläget är balans: utnyttja styrkorna med spelbaserad bedömning samtidigt som du mildrar deras svagheter. Genom att göra det kan pedagoger och arbetsgivare använda spel inte bara för lek, utan för meningsfull insikt.