Sådan beregnes rollematch
Opsummeringen følger en fast kæde. Først beregnes gennemsnittet inden for hvert kriterium i matricen af de point, alle bedømmere har givet det kriterium. Dernæst lægges kriteriernes gennemsnit sammen efter matricens vægte på kriterierne og danner opgavens point. Opgavernes point lægges så sammen til de færdigheder, de måler.
Til sidst vægtes hver færdigheds bidrag med sin færdighedsvægt ganget med sin afsnitsvægt, og rollematchprocenten kommer af denne vægtede opsummering. Fordi hvert trin er deterministisk, giver den samme dokumentation altid det samme tal for rollematch.
Point fra matricen går forud for automatiske point
Nogle opgaver bærer både et automatisk point (for eksempel fra en facitnøgle til multiple choice) og et point fra matricen, indtastet af bedømmerne. Findes begge for den samme opgave, vinder matricens point og er det, der bruges i opsummeringen.
En beslægtet regel er værd at huske: en opgave uden facitnøgle sættes automatisk til null, hvilket betyder, at den kræver manuel gennemgang. Null behandles aldrig som nul, så besvarelser, der ikke er gennemgået, kan ikke i det stille trække en kandidats rollematch ned.
Hvor I sætter vægtene
Vægtene bor to steder i builderen. Vægtene på kriterierne sættes i matriceredigeringen: hvert kriterium bærer en faktor (skrevet som ×N), der styrer, hvor meget det tæller inde i sin opgave. Afsnitsvægtene sættes på hvert afsnit — åbn afsnittets redigeringsformular i strukturredigeringen, og sæt dens Scoring weight. Panelet Scoring & reporting opsummerer derefter vægtene skrivebeskyttet sammen med antallet af automatiske point, point fra matricen og manuelle point på tværs af assessmentet.
Vægtene kan redigeres på både assessments som udkast og live. Fordi rollematch beregnes ud fra gemte point med de aktuelle vægte, genberegner en ændret vægt på et live-assessment rollematchet for hver kandidat, også dem der allerede har afleveret — rå point ændrer sig aldrig, men procenterne forskyder sig. På assessments, der er koblet til et blueprint, beholder registrerede beslutninger et øjebliksbillede af rollematchet fra beslutningstidspunktet. Lukkede og arkiverede assessments er låst; dupliker til et nyt udkast for at ændre dem.
- Vægte på kriterier: matriceredigeringen, pr. kriterium (×N).
- Afsnitsvægte: hvert afsnits redigeringsformular i strukturredigeringen; opsummeret i Scoring & reporting.
- Ændringer i vægte på et live-assessment genberegner rollematchet for alle; rå point ændrer sig aldrig.
Hvor vægtene dukker op i rapporterne
Kandidater og gennemgående kan se, at der er vægtet. I dokumentationsrapporten for kandidaten grupperes opgaverne efter afsnit, hver gang assessmentet har flere afsnit eller vægte, hver gruppe med egen vægt bærer et ×N-vægtmærke, og en note om vægtet pointgivning forklarer, at pointene er lagt sammen efter vægt frem for gennemsnittet fladt. Auditpakken registrerer også afsnitsvægte, vægte på matricens kriterier og koblinger til færdigheder sammen med en metodebeskrivelse i almindeligt sprog.
At a glance
- Inden for et kriterium beregnes gennemsnittet af bedømmernes point; kriterierne lægges sammen efter matricens vægte.
- Opgavernes point lægges sammen til færdigheder; hver færdighed bidrager med færdighedsvægt gange afsnitsvægt.
- Rollematchprocenten er resultatet af denne vægtede opsummering.
- Har en opgave både et point fra matricen og et automatisk point, vinder matricen.
- Vægtene fremgår som mærker i dokumentationsrapporterne for kandidaterne, med en note om vægtet pointgivning.