Poengvekter og rollematch

Slik regnes rollematchen ut

Sammenstillingen følger en fast kjede. Først midles poengene fra alle bedømmerne som poengsatte det kriteriet, innenfor hvert kriterium i vurderingsmatrisen. Deretter settes kriteriegjennomsnittene sammen etter kriterievektene i vurderingsmatrisen, og gir et oppgavepoeng. Oppgavepoengene sammenstilles så til ferdighetene de måler.

Til slutt vektes hver ferdighets bidrag med ferdighetsvekten ganger seksjonsvekten, og prosenten for rollematch kommer ut av denne vektede sammenstillingen. Fordi hvert trinn er deterministisk, gir den samme dokumentasjonen alltid det samme tallet for rollematch.

Poeng fra vurderingsmatrisen overstyrer automatiske poeng

Noen oppgaver bærer både et automatisk poeng (for eksempel fra fasiten til et flervalgsspørsmål) og et poeng registrert av bedømmere. Finnes begge for samme oppgave, vinner poenget fra vurderingsmatrisen, og det er det som brukes i sammenstillingen.

Én beslektet regel er verdt å huske: et spørsmål uten fasit får ingen automatisk poengsum, og verdien blir tom, noe som betyr at det trenger manuell gjennomgang. En tom verdi behandles aldri som null poeng, så svar som ikke er gjennomgått, kan ikke trekke en kandidats rollematch ned i det stille.

Hvor du setter vektene

Vektene ligger to steder i builderen. Kriterievekter settes i redigeringen av vurderingsmatrisen: hvert kriterium bærer en faktor (skrevet som ×N) som styrer hvor mye det teller inne i oppgaven sin. Seksjonsvekter settes på hver seksjon — åpne seksjonens redigeringsskjema i strukturredigeringen og sett Scoring weight. Panelet Scoring & reporting oppsummerer så vektene skrivebeskyttet, ved siden av tellingen av automatisk, matrisebasert og manuell poengsetting gjennom hele assessmentet.

Vektene kan redigeres både i assessments som er utkast, og i aktive assessments. Fordi rollematch regnes ut fra lagrede poeng med gjeldende vekter, vil det å endre en vekt i et aktivt assessment regne om rollematchen for hver kandidat, også for dem som allerede har levert — rå poeng endres aldri, men prosentene forskyver seg. I assessments som er knyttet til et blueprint, beholder registrerte beslutninger et øyeblikksbilde av rollematchen fra beslutningstidspunktet. Lukkede og arkiverte assessments er låst; dupliser til et nytt utkast for å endre dem.

• Kriterievekter: redigeringen av vurderingsmatrisen, per kriterium (×N).
• Seksjonsvekter: redigeringsskjemaet til hver seksjon i strukturredigeringen; oppsummert i Scoring & reporting.
• Endringer i vekter i et aktivt assessment regner om rollematchen for alle; rå poeng endres aldri.

Hvor vektene dukker opp i rapportene

Kandidater og de som går gjennom, kan se at vekting er brukt. I dokumentasjonsrapporten for kandidaten grupperes oppgavene etter seksjon når assessmentet har flere seksjoner eller vekter, hver gruppe med egen vekting bærer et ×N-vektmerke, og en merknad om vektet poengsetting forklarer at poengene ble satt sammen etter vekt framfor midlet flatt. Auditpakken registrerer også seksjonsvekter, kriterievekter i vurderingsmatrisen og ferdighetskoblinger, ved siden av en metodikk i klarspråk.