What you'll need
- En rolle å rekruttere til, med innspill fra noen som gjør eller leder arbeidet
- Et SkillCort-arbeidsområde med tillatelse til å bygge og publisere
- Bedømmerne som skal poengsette, med tid satt av til en kalibreringsøkt
- Kandidatlisten din, eller pipelinen som skal produsere den
- Enighet om hvem som eier den endelige beslutningen
Step 1: Start fra en rolleblueprint, ikke fra en spørsmålsliste
Før du rører plattformen, skriver du ned hva rollen faktisk krever: de få kompetansene som skiller en som blomstrer, fra en som sliter, og omtrent hvordan de rangeres. Denne blueprinten er ryggraden i alt nedstrøms — oppgavene viser disse kompetansene, vurderingsmatrisene poengsetter dem, vektene koder rangeringen deres, og rollematch rapporterer mot dem.
Hold den observerbar. «Håndterer uklare henvendelser med god dømmekraft» kan bli en oppgave og et kriterium i vurderingsmatrisen; «lagspiller» kan det ikke. Klarer du ikke å se for deg arbeidsprøven som ville avdekket en kompetanse, hører den ennå ikke hjemme i blueprinten.
Step 2: Bygg oppgavene og vurderingsmatrisene i oppgavebiblioteket
I oppgavebiblioteket lager du oppgavene som lar kandidatene vise hver kompetanse — organisert i mapper med mappeavgrensede etiketter, slik at neste vurdering kan gjenbruke dem. Legg arbeidsprøvene først: en realistisk henvendelse som skal besvares, en case som skal analyseres, en fil som skal produseres. SkillCorts oppgavetyper dekker tekstsvar og rik tekst, filopplasting, kode, tabellfelt, lyd- og videoopptak og mer, med oppsett der stimulusmateriale står side om side for dokumentbaserte oppgaver.
Du kan skrive manuelt, la AI generere oppgaver i bulk — opptil 100 per kjøring, eventuelt forankret i dine egne kildedokumenter — eller lime inn flervalgsspørsmål raskt. Behandle AI-utkast som utkast: gå gjennom og rediger hver genererte oppgave før den møter en kandidat.
Gi hver oppgave som poengsettes med skjønn, en vurderingsmatrise. Utled kriteriene fra blueprinten, forankre nivåene i observerbar atferd, og vekt de kriteriene som betyr mest. Design av vurderingsmatriser er et håndverk med sin egen veiledning; det som ikke er forhandlingsbart her, er at matrisene finnes før svarene gjør det.
Step 3: Sett sammen vurderingen i byggeren
I byggeren strukturerer du vurderingen som deler, sider og blokker — vanligvis én del per kompetanseområde, sider som setter tempoet i arbeidet, og blokker som holder oppgavene du importerer fra biblioteket ditt, filtrert på mappe, etikett eller type. Sett en samlet tidsgrense og grenser per side som gjenspeiler et realistisk arbeidstempo, med margin for dem som leser alt for første gang.
Sett poengvekter per del (×N) slik at de speiler rangeringen i blueprinten — disse vektene flyter rett inn i rollematchen, så det er her prioriteringene dine blir til regnestykke. Bruker du stokking for rettferdighetens skyld, tilbyr byggeren det på tre nivåer; hold arbeidsprøvesekvenser i en fast, fornuftig rekkefølge der flyten betyr noe.
Step 4: Forhåndsvis, kvalitetssikre og gjør ferdig publiseringssjekklisten
Bruk «Preview as candidate» fra topplinjen i byggeren, og gå gjennom hver side på datamaskin og på mobil, og svar på ordentlig. Ta tiden på deg selv mot grensene dine, kontroller hver vurderingsmatrise og fasit mot oppgaven slik den til slutt ble skrevet, og husk at en oppgave uten fasit får en automatisk poengsum med verdien null — flagget for manuell gjennomgang, ikke null poeng.
Publiseringssjekklisten blokkerer «Publish» til nødvendig oppsett er på plass; gjør den ferdig, og kjør så en kort pilot med én eller to kolleger under reelle forhold før noen kandidat inviteres. Hele rutinen for kvalitetssikring har sin egen veiledning — ikke hopp over den, for en feil som en kandidat finner, koster deg signal du ikke får tilbake.
Step 5: Sett opp leveringen med forholdsmessig sikkerhet
Publiser, og opprett så leveringen: et navn, tidsvinduet kandidatene kan gjennomføre i, og sikkerhet som står i forhold til det som står på spill. SkillCort tilbyr Lockdown med valgfrie bruddgrenser, blokkering av kopier/lim inn, oppdagelse av ekstra skjerm, webkamera- eller skjermopptak og ID-kontroll — brytere, ikke en pakkeløsning.
Forholdsmessig er det avgjørende ordet. En arbeidsprøve i første runde rettferdiggjør sjelden webkameraopptak; en sertifiseringsprøve kan rettferdiggjøre de fleste bryterne. Kandidatene møter en samtykke- og preflight-port før de starter, så det du slår på, blir opplyst og kontrollert på forhånd — hver kontroll du legger til, er friksjon for ærlige kandidater, så legg bare til det som står på spill kan forsvare.
Step 6: Inviter kandidater og følg med i vinduet
Send e-postinvitasjoner fra leveringen. Rundt invitasjonen setter du forventningene i klart språk: hva vurderingen innebærer, hvor lang tid den tar, at den fungerer best på datamaskin hvis noen oppgave krever det, og at svarene poengsettes mot en konsistent vurderingsmatrise av menneskelige bedømmere.
I løpet av vinduet følger du med på fullføring, ikke på prestasjon. Gi dem som ikke har startet, en påminnelse før vinduet lukkes, og noter eventuelle integritetshendelser til strukturert gjennomgang senere — under leveringen er de observasjoner på en tidslinje, ikke dommer. Motstå fristelsen til å kikke på tidlige svar og danne deg inntrykk; poengsettingen begynner etter kalibreringen, mot vurderingsmatrisen — ellers var matrisen teater.
Step 7: Vurder med et kalibrert panel
Før poengsettingen begynner, kjører du en kalibreringsøkt: bedømmerne poengsetter uavhengig av hverandre to eller tre referansesvar mot den felles vurderingsmatrisen, sammenligner avvikene per kriterium og dokumenterer tolkningene de blir enige om. Det tar en time, og det er forskjellen mellom poeng som er sammenlignbare, og poeng som gjenspeiler hvem som tilfeldigvis vurderte hvem. Formatet på økten har sin egen veiledning.
Så poengsetter dere. I den nivåbaserte matrisen klikker bedømmerne på nivåkortet med den forankrede beskrivelsen som passer svaret, og fester notater til som dokumentasjon. AI kan lage utkast til sammendrag og forslag på kriterienivå — ut fra svar eller intervjuutskrifter, med modell og versjon logget — men en navngitt person bekrefter eller overstyrer hvert poeng. Flere bedømmere gjennomsnittsberegnes innenfor hvert kriterium før vektene kombinerer noe som helst.
- Kalibrer før gjennomgangsvinduet åpner, ikke underveis
- Fest et dokumentasjonsnotat til hvert kriteriepoeng
- Send automatiske poengsummer med verdien null (ingen fasit) raskt til manuell gjennomgang
- Kjør en blind kontroll av avdrift ved ny poengsetting hvis vinduet strekker seg over uker
Step 8: Beslutt på tavlen og eksportér auditpakken
På Decision Board leser du rollematch som et vektet utgangspunkt: den gjenspeiler vektene dine på kriterie-, ferdighets- og delnivå, og den ordner oppmerksomheten din. Sammenlign finalistene per kompetanse, bor deg fra et hvilket som helst poeng ned i dokumentasjonen bak — oppgavebesvarelser, notater i vurderingsmatrisen, integritetstidslinjen — og avklar risikoflagg som kontekst for menneskelig gjennomgang, aldri som automatiske avslag. Å lese tavlen godt er en veiledning i seg selv.
Registrer beslutningen sammen med begrunnelsen, og eksportér så dokumentene: en dokumentasjonsrapport for kandidaten som kan merkes med din egen profil, til samtaler med interessenter, og auditpakken som det varige arkivet — én selvstendig fil med vurderingens struktur og vekter, versjoner av vurderingsmatrisene, hvert poeng med navngitt bedømmer og tidsstempel, metodikk i klart språk, AI-opphav, avklaringer av integritetshendelser og beslutningsloggen.
Den filen er poenget med hele øvelsen. Du rangerte ikke bare kandidater; du produserte en beslutning du kan forklare — for en interessent, for en revisor, eller for en kandidat som spør hvordan avgjørelsen ble tatt.
Pro tips
- Sett en tidsramme for første gjennomkjøring: en fokusert vurdering som sendes denne uken, slår en altomfattende som sendes neste måned, og biblioteket gjør den andre gjennomkjøringen dramatisk raskere.
- La blueprinten disiplinere omfanget — hver oppgave, hvert kriterium og hver vekt bør kunne spores til en kompetanse, ellers måler den noe du ikke har valgt.
- Gjenbruk bevisst: mapper og etiketter i oppgavebiblioteket gjør denne vurderingen til utgangspunktet for den neste rollen i familien.
- Hold den samlede tiden kandidatene bruker, forholdsmessig til stadiet — en lang vurdering siler etter ledig tid, ikke etter ferdighet.
- Gjør et tilbakeblikk etter første kull: hvilke oppgaver skilte kandidatene, hvilke holdepunkter i vurderingsmatrisen skapte nøling, og hvilke sikkerhetsbrytere var friksjonen verdt.