Bedømmelse og dokumentation
Bedøm dokumentationen, ikke indtrykket.
Giv bedømmerne det oprindelige svar, den samme nedskrevne standard og et tydeligt sted at notere deres vurdering. Hver score forbliver koblet til det arbejde, der understøtter den.
AI kan opsummere og foreslå. En navngiven bedømmer noterer scoren; mennesker træffer beslutningen.
Et arbejdsområde til gennemgang, hvor standarden og beviset bliver sammen
Vælg det beskrevne niveau, der svarer til arbejdet.
Matrixmatricer kobler hvert kriterium til nedskrevne beskrivelser på hvert niveau. Bedømmerne vælger den adfærd, de rent faktisk kan se, i stedet for at læne sig op ad en privat fortolkning af et tal.
- Beskrivelser for hvert kriterium på hvert niveau
- Observerbare holdepunkter for bedømmelsen
- Udtrykkelige vægte på kriterierne
- Fælles for alle bedømmere
Brug direkte talindtastning, hvor det passer.
Klassiske matricer beholder den samme kriteriestruktur og vægtning, men lader bedømmeren indtaste en talscore direkte.
- Talscore per kriterium
- Definitioner af kriterierne
- Vægtet sammenregning
- Bedømmerens noter
Hold reglerne for automatisk og menneskelig bedømmelse udtrykkelige.
Opgaver med svarnøgle kan give en automatisk score. Svar uden svarnøgle står ubedømte og afventer gennemgang; i opsummeringen af rollematchet bruges en foreliggende menneskelig matrixscore i stedet for opgavens automatiske match.
- Bedømmelse ud fra svarnøgle
- Manglende score betyder »skal gennemgås«, ikke nul
- Matrixscoren bruges til rollematch, når den findes
- Bedømmelsesmetoden er synlig i byggeværktøjet
Hold uafhængige vurderinger sporbare til den, der gav dem.
Mere end én bedømmer kan bedømme det samme svar. Hver score gemmes med sin navngivne bedømmer og et tidsstempel og gennemsnitsberegnes derefter inden for hvert kriterium, før vægtene anvendes.
- Navngiven bedømmer bag hver score
- Tidsstemplet bedømmelse
- Gennemsnit per kriterium
- De enkelte vurderinger forbliver synlige
Behold kandidatens arbejde som den autoritative kilde.
Skriftlige svar, uploadede filer, optagelser og transskriptioner fra interviews eller simuleringer forbliver tilgængelige til gennemgang i stedet for at blive erstattet af et resumé.
- Skriftlige opgavebesvarelser
- Uploadede leverancer
- Lyd- og videosvar
- Transskriptioner fra interviews og simuleringer
Gem ræsonnementet ved siden af scoren.
Noterne knyttes til bedømmelsen af opgaven, så bedømmeren kan forklare, hvad vedkommende observerede, og hvorfor arbejdet svarede til et bestemt kriterium eller niveau.
- Noter til gennemgangen på opgaveniveau
- Ræsonnementet ved siden af tallene
- Kontekst fra den navngivne bedømmer
- Tilgængelig i dokumentationen af gennemgangen
Gennemgå hændelserne i sessionen uden at gøre dem til en score.
Når integritetskontroller er slået til, vises deres hændelser som en særskilt tidslinje. Bedømmerne fortolker den kontekst; hændelserne sænker ikke assessmentscoren og afviser ikke en kandidat automatisk.
- Tidslinje over hændelser til gennemgang
- Kildedokumentationen forbliver vedhæftet
- Adskilt fra kompetencebedømmelsen
- Menneskelig afklaring
Tag dokumentationen med videre i overleveringen.
Printbare rapporter opsummerer bedømmelsen, bedømmerens kontekst, de afklarede integritetsforhold og den endelige menneskelige beslutning. Bedømmerne kan vende tilbage til arbejdsområdet for de oprindelige medier og samtaledokumentationen.
- Printbart resumé af resultatet
- Metode for den vægtede bedømmelse
- Navngiven bedømmer
- Beslutning og integritetskontekst
Brug AI til at nedbringe læsetiden uden at overdrage vurderingen.
Uddrag af dokumentation
AI kan ordne de relevante passager fra et langt svar efter matrixkriterierne, så en bedømmer kan granske dem.
Forslag til scorer i udkast
Forslag på kriterieniveau står uden for bedømmerens score, indtil et menneske udtrykkeligt anvender eller erstatter dem.
Gennemgang af transskriptioner
Hjælpen til interviews og simuleringer arbejder ud fra kandidatens ord i transskriptionen, ikke ud fra ansigtsudtryk eller stemmens følelser.
Proveniens for det genererede
AI-understøttede bedømmelsesresultater bærer proveniens for model og version, så det assisterede trin kan spores senere.
Fra svar til rollematch er hvert trin forklarligt.
Bedømmelsen begynder ved svaret, ikke ved en abstrakt score. Bedømmerne anvender et fastfrosset øjebliksbillede af matricen, noterer deres vurdering per kriterium og holder noterne sammen med opgavedokumentationen.
Bedømmernes scorer gennemsnitsberegnes inden for hvert kriterium, kriterierne lægges sammen efter matricens vægte, og opgavedokumentationen løber via kompetence- og afsnitsvægte videre til rollematchet. Beslutningstavlen kan derefter sammenligne resultatet uden at skjule, hvordan det er blevet til.
Se kandidatsammenligningenÅbn svaret
Læs eller afspil kandidatens oprindelige arbejde og opgavens kontekst.
Anvend matricen
Bedøm hvert kriterium mod de fælles definitioner eller niveaubeskrivelser.
Notér ræsonnementet
Vedhæft bedømmerens noter, så vurderingen følger med scoren.
Regn gennemsigtigt sammen
Læg kriterier, kompetencer og afsnit sammen ud fra deres udtrykkelige vægte.
Bedømmelseskontroller, der holder gennemgangen ensartet og mulig at granske
Fælles bedømmelsesmatricer
Klassiske matricer og matrixmatricer giver alle bedømmere de samme kriterier og udtrykkelige vægte.
Kildedokumentation
Oprindelige svar, filer, optagelser, transskriptioner og noter forbliver tilgængelige i arbejdsområdet til gennemgang.
Navngiven vurdering
Scorer gemmes sammen med den bedømmer, der noterede dem, og det tidspunkt, de blev afgivet.
AI som hjælp
Resuméer og forslag til scorer hjælper bedømmerne med at orientere sig; de beslutter ikke og skriver ikke en score på egen hånd.
Fra spredte holdninger til en vurdering, der kan gennemgås
Ustruktureret bedømmelse
- Én score uden et synligt grundlag
- Bedømmernes kommentarer gemt i et andet værktøj
- Forskellige standarder for forskellige kandidater
- AI-output behandlet som et svar
- Ingen tydelig vej tilbage til det oprindelige arbejde
Bedømmelse og dokumentation i SkillCort
- Kriteriescorer bundet til en fælles bedømmelsesmatrix
- Noter holdt ved siden af svaret
- Navngivne bedømmere og udtrykkelige vægte
- AI-forslag holdt adskilt fra menneskelige scorer
- Hvert resultat kan spores til kildedokumentationen
En score, der kan forsvares, er ikke bare konsekvent matematik. Det er en vurdering, hvis standard, dokumentation og ophavsmand alle kan granskes.
Hold AI på bedømmerens side af stregen.
AI kan forkorte vejen gennem et langt svar eller en transskription, men SkillCort holder forslagene strukturelt adskilt fra bedømmernes scorer. Et menneske skal anvende eller erstatte et forslag, og beslutningerne om kandidaterne bliver i menneskehænder.
- Ingen AI-skrevet kandidatbeslutning
- Ingen automatisk afvisning
- Det oprindelige svar forbliver synligt
- Forslag på kriterieniveau
- Et menneskeligt trin, hvor forslaget anvendes eller erstattes
- Proveniens for model og version
Spørgsmål om bedømmelse og dokumentation
Klassiske matricer tager imod en talscore per kriterium. Matrixmatricer definerer bedømte niveauer med en nedskreven beskrivelse for hver kombination af kriterium og niveau. Begge understøtter vægte på kriterierne og noter fra bedømmerne.
Scorer fra flere bedømmere gennemsnitsberegnes inden for hvert kriterium. Kriteriegennemsnittene lægges derefter sammen efter matricens vægte, før opgaverne løber videre via de tilknyttede kompetencer og afsnitsvægtene.
Den står ubedømt og skal gennemgås; den behandles ikke i det stille som nul. I opsummeringen af rollematchet bruges en menneskelig matrixscore i stedet for opgavens automatiske match, når begge dele findes.
Nej. AI kan lave udkast til forslag på kriterieniveau og til resuméer, men den skriver ikke på egen hånd bedømmernes scorer eller beslutningerne om kandidaterne. En navngiven person gennemgår dokumentationen og noterer vurderingen.
Afhængigt af opgaven kan arbejdsområdet til gennemgang indeholde skriftlige svar, uploadede filer, lyd- eller videosvar, transskriptioner fra interviews og simuleringer, bedømmernes noter, matrixscorer og en særskilt tidslinje over integritetshændelser, når de kontroller var slået til. Printbare rapporter opsummerer beslutningsdokumentationen frem for at indlejre hver enkelt medietype.
Bedøm et rigtigt svar sammen.
Tag en opgave og en bedømmelsesmatrix med til en demo. Vi følger den oprindelige dokumentation gennem bedømmerens scoring, rollematchet, rapporteringen og den endelige menneskelige beslutning.