Sådan forhåndsviser og kvalitetssikrer du dit assessment, inden det går live

What you'll need

• Et assessment i kladde, samlet i builderen (afsnit, sider, blokke)
• Bedømmelsesmatricer eller svarnøgler tilknyttet hver eneste scoret opgave
• En telefon eller et smalt browservindue til gennemgangen på mobil
• 1-2 kolleger, der har tid til en kort pilotkørsel

Step 1: Åbn kandidatforhåndsvisningen fra builderens header

Start hver eneste kvalitetsgennemgang med «Preview as candidate» i builderens header. Forhåndsvisningen gengiver assessmentet præcis, som en kandidat vil se det — samme sider, blokke, instruktioner og timere — så alt, hvad du fanger her, er et rigtigt problem, der bliver rettet, før det koster dig et svar.

Modstå fristelsen til at skimme dit eget indhold. Du har skrevet opgaverne, så din hjerne udfylder huller, en kandidat ikke kan udfylde. Læs hver instruktion, som havde du aldrig set rollen før, og besvar hvert spørgsmål ærligt i stedet for at klikke dig igennem. Meningen er at opleve assessmentet, ikke at gå på rundvisning i det.

Step 2: Gennemgå hver side på computer, og svar for alvor

Gå side for side, og løs hver opgave i praksis: skriv tekstsvarene, udfyld felterne i tabellen, upload en fil, optag lyden eller videoen, hvis assessmentet beder om det. Interaktive opgavetyper fejler på måder, som en visuel skimning aldrig afslører — en upload, der afviser det oplagte filformat, en kodeopgave med en forvirrende starttilstand, en optagelsesblok en kandidat kunne overse.

Vær særligt opmærksom på layout med stimulus og spørgsmål side om side. Bekræft, at stimulusmaterialet og spørgsmålet er synlige samtidig, at lange dokumenter kan scrolles uafhængigt, og at intet tvinger kandidaten til at lære stimulusmaterialet udenad, før der svares. Et layoutproblem her ændrer stille og roligt, hvad opgaven måler — fra den kompetence, du designede efter, til arbejdshukommelse og tålmodighed.

• Hver instruktion er utvetydig for en, der står uden for jeres team
• Uploads, optagelser og kodeblokke tager imod et realistisk svar
• Stimulusmateriale og spørgsmål kan læses sammen på én skærm
• Obligatoriske felter og navigation opfører sig som forventet på hver side

Step 3: Gentag gennemgangen på en telefon

Kør den samme forhåndsvisning på en telefon eller i et smalt browservindue. Kandidater sidder ikke altid ved et skrivebord, og layout, der ser fint ud på en bred skærm, kan begrave et stimulusmateriale, beskære en tabel eller skubbe afleveringsknappen ned under en endeløs scroll på en lille skærm.

Hvis en opgave reelt kræver en computer — et kodemiljø, en lang dokumentgennemgang side om side — så skriv det udtrykkeligt i instruktionerne til assessmentet i stedet for at lade kandidaterne opdage det midt i forsøget. En sætning, der sætter forventningen på forhånd, er langt billigere end et frustreret, halvfærdigt svar.

Step 4: Tag tid på en realistisk prøvegennemgang op imod dine grænser

Gennemfør assessmentet i et realistisk arbejdstempo, og sammenlign din forbrugte tid med de samlede grænser og grænserne pr. side, du satte i builderen. Læg så margin til: du kender allerede stoffet, og en kandidat, der læser det hele for første gang, vil være mærkbart langsommere, end du var.

Kontrollér grænserne pr. side hver for sig, ikke kun den samlede. Én undervurderet side — som regel den med den rigeste arbejdsprøve — kan ødelægge et ellers veltimet assessment, fordi tidspres på en enkelt opgave rammer de omhyggelige kandidater hårdest. Hvis en side føltes forjaget selv for dig, så udvid den, før nogen anden ser den.

Step 5: Efterprøv hver bedømmelsesmatrix og svarnøgle op imod sin opgave

Åbn hver scoret opgave, og bekræft, at dens scoringsopsætning passer til opgaven, som den faktisk er skrevet — ikke som du udformede den for tre rettelser siden. For automatisk scorede spørgsmål skal du kontrollere, at svarnøglen markerer de rigtige svarmuligheder, og at pointværdierne er dem, du havde tænkt dig. Husk, at en opgave uden svarnøgle automatisk scorer til null og afventer manuel gennemgang; den scorer ikke stille og roligt nul, men den bliver liggende uscoret, indtil nogen tager sig af den.

For opgaver, der scores efter en bedømmelsesmatrix, skal du genlæse hvert kriterium op imod opgaveteksten og bekræfte, at et stærkt svar på netop denne opgavetekst rent faktisk ville kunne vise hvert kriterium. Bemærk, at bedømmelsesmatricer fryses til et øjebliksbillede, når de tilknyttes, så det er nu, formuleringen skal rettes — senere rettelser i dit bibliotek når ikke frem til det publicerede assessment.

Step 6: Ryd publiceringstjeklisten

Publiceringstjeklisten er platformens sidste port: den blokerer «Publish», indtil den nødvendige opsætning er på plads, og markerer ting som manglende scoringsopsætning eller ufuldstændig opsætning af afsnit. Arbejd dig igennem hvert punkt, den rejser, i stedet for at lede efter den hurtigste vej til en grøn knap.

Betragt tjeklisten som et gulv, ikke som et loft. Den efterprøver, om strukturen er fuldstændig; den kan ikke bedømme, om dine instruktioner er klare, eller om din timing er menneskelig. Det var det, de foregående trin var til for. Når tjeklisten er ren, og dine manuelle gennemgange er gjort, er du klar til at køre pilot.

Step 7: Kør en pilot med en eller to interne personer

Før nogen kandidat ser assessmentet, skal en eller to kolleger tage det fra ende til anden under rigtige forhold — det rigtige leveringslink, de rigtige tidsgrænser og de sikkerhedsindstillinger, du regner med at bruge, så samtykket og preflight-oplevelsen også bliver testet. Vælg folk, der ikke har været med til at bygge det; friske øjne finder det, dine ikke kan.

Hold debriefing med det samme, mens oplevelsen er frisk. Score derefter deres svar op imod dine bedømmelsesmatricer som en sidste kontrol af, at sproget i matricen virker på rigtige svar og ikke kun i teorien. Ret det, piloten afdækker, kør forhåndsvisningen igen på alt, hvad du har ændret, og send først derefter invitationer.

• Hvor føltes instruktionerne tvetydige eller overraskende?
• Hvilken side føltes mest tidspresset?
• Føltes preflight og sikkerhedsbeskederne rimelige i forhold til, hvad der står på spil?
• Kunne pilotdeltagernes svar scores rent op imod bedømmelsesmatricen?