What you'll need
- Spørgsmål klar i dit bibliotek, organiseret i mapper med tags
- En samlet varighed, der er aftalt med interessenterne
- En grov oversigt over emner eller sværhedsgrader, der skal blive til afsnit
- Et kvarter til selv at tage eksamen i forhåndsvisning, inden du publicerer
Step 1: Planlæg strukturen, inden du åbner builderen
Eksamener i SkillCort bygges som afsnit, der indeholder sider, der indeholder blokke. Afsnittene er din organiserende enhed — typisk ét pr. emne eller kompetence — og deres scoringsvægte føres videre til den endelige rollematch-score. Siderne er det, kandidaten ser én skærm ad gangen, og blokkene er de enkelte spørgsmål eller indholdselementer på en side.
Skitsér det hierarki på papir først. Beslut, hvor mange afsnit du har brug for, cirka hvor mange sider hvert af dem indeholder, og hvilke sider der fortjener deres egen tidsgrænse. En plan om «tre afsnit, fire sider i hvert, to minutter pr. side i afsnit to» tager fem minutter at skrive og sparer en time med omstrukturering senere.
Step 2: Byg afsnit og sider i builderen
Opret assessmentet, og tilføj dine afsnit. Inde i hvert afsnit opretter du sider og fylder dem med blokke — importér eksisterende spørgsmål gennem vælgervinduet, hvor du kan filtrere efter mappe, tag eller spørgsmålstype og markere flere ad gangen, eller opret nye blokke på stedet. Hold siderne overkommelige: tre til fem beslægtede spørgsmål pr. side læses bedre end én uendelig rulning.
Sæt hvert afsnits scoringsvægt nu og ikke efter leveringen. Hvis afsnit ét er grundlæggende viden, og afsnit tre er anvendt problemløsning, fortæller en vægtning på 20/30/50 scoringsmotoren — og senere Decision Board — hvad denne eksamen i virkeligheden vægter.
Step 3: Sæt den samlede tidsgrænse
Den samlede tidsgrænse for assessmentet er det overordnede budget: når den løber ud, slutter forsøget, uanset hvor kandidaten er nået til. Sæt den ud fra et realistisk tempo og ikke ud fra optimisme — tag selv eksamen i forhåndsvisning, noter din egen tid, og læg rigelig luft til, for kandidater læser ukendte spørgsmål langsommere, end forfatteren gør.
Modstå trangen til at lade den samlede grænse gøre dobbelt tjeneste som en integritetskontrol. Dens opgave er at holde eksamen proportional og sammenlignelig på tværs af kandidater. Er du bekymret for, at kandidater slår ting op, hører det hjemme i en samtale om leveringsindstillinger og er ikke en grund til at fratage alle læsetid.
Step 4: Tilføj tidsgrænser pr. side, hvor tempoet betyder noget
Tidsgrænser pr. side er strammere og mere lokale: når tiden på en side løber ud, føres kandidaten automatisk videre til næste side, og den udløbne side låses — de kan ikke vende tilbage til den. Det er præcis det, du vil have, når en senere side ville afsløre svaret på en tidligere, eller når det at arbejde under tidspres i sig selv er en del af det, du måler.
Fordi udløbet ikke er til forhandling for kandidaten, skal du bruge tidsgrænser pr. side bevidst og oplyse om dem. Skriv i kandidatinstruktionerne, hvilke sider der har deres egen tidsgrænse, og hvad der sker, når tiden løber ud. En kandidat, der bliver overrasket af en side, der låser, har en berettiget indvending; en kandidat, der fik det at vide på forhånd, blev ganske enkelt testet.
- Brug tidsgrænser pr. side, når der er risiko for, at svar siver mellem siderne
- Brug dem, når hastighed under pres er et reelt krav i jobbet
- Undlad dem på sider med lange læsetekster eller komplekst materiale
- Oplys altid om dem i kandidatinstruktionerne
Step 5: Konfigurér tilfældig rækkefølge på tre niveauer
SkillCort kan sætte rækkefølgen tilfældigt på afsnits-, side- og blokniveau, og hver tilfældig rækkefølge er seedet pr. forsøg — hver kandidat får én konsistent rækkefølge gennem hele sit forsøg, men forskellige kandidater får forskellige rækkefølger. Det gør det langt mindre nyttigt at dele svar side om side, uden at gøre den enkelte kandidats oplevelse kaotisk.
Bland blokkene inde på siderne næsten altid; bland siderne inde i et afsnit, når siderne er uafhængige; bland kun afsnittene, hvis der ikke er en tilsigtet stigning i sværhedsgrad. Hvis din eksamen bevidst varmer op, inden det svære stof kommer, så hold afsnitsrækkefølgen fast, og bland inde i afsnittene i stedet.
Step 6: Skriv kandidatinstruktioner, der fjerner overraskelser
Brug feltet med kandidatinstruktioner til at oplyse den samlede tid, hvilke sider der har deres egen tidsgrænse, om låste sider kan besøges igen (det kan de ikke), og hvad der sker, når tiden løber ud. Kandidater præsterer tættere på deres reelle formåen, når reglerne er udtrykkelige, og gennemsigtige regler er også lettere at forsvare, hvis et resultat på et tidspunkt bliver draget i tvivl.
Hold instruktionerne korte og saglige. Tre eller fire sætninger om tid, navigation og antal spørgsmål slår en mur af juridisk klingende tekst, som ingen læser. Hvis leveringen bruger nogen form for overvågning, ser kandidaterne desuden samtykkeskærmen, inden de går i gang — instruktionerne og samtykket skal fortælle den samme historie.
Step 7: Se den i forhåndsvisning som kandidat, og publicér så
Klik på «Preview as candidate» i builderens sidehoved, og tag hele eksamen i et realistisk tempo. Du tjekker tre ting: om den samlede grænse levner fornuftig luft, om nogen tidsgrænse pr. side er så stram, at den straffer omhyggelige læsere, og om de blandede rækkefølger nogensinde giver en side, der forudsætter sammenhæng fra en side, der måske kommer bagefter.
Ret det, du finder, se den i forhåndsvisning igen, og publicér så. Tjeklisten før publicering spærrer for Publish, indtil den nødvendige opsætning er på plads, så behandl ethvert uafklaret punkt som et reelt hul og ikke som en formalitet. Når du har publiceret, opretter du leveringen med navn og tidsrum og sender invitationerne.
Pro tips
- Tag tid på dig selv i forhåndsvisningen, og gang med cirka 1,5 til 2 for kandidatens grænse — forfattere læser altid deres egne spørgsmål hurtigere.
- Læg det sværeste afsnit i midten og ikke til sidst, så tidspresset ikke systematisk trykker scorerne dér ned.
- Hvis to spørgsmål skal komme i en fast rækkefølge, så læg dem på den samme side, og lad blokkene på den side stå i fast rækkefølge.
- Tidsgrænser pr. side kombineret med en rundhåndet samlet grænse slår som regel én stram samlet grænse — tempoet holdes i ave uden en afgrund til sidst.
- Kør forhåndsvisningen igen efter enhver strukturel ændring; en flyttet side kan stille og roligt bryde en antagelse om rækkefølge.