Miten roolisopivuus lasketaan
Kooste noudattaa kiinteää ketjua. Ensin kunkin arviointimatriisin kriteerin sisällä keskiarvoistetaan kaikkien kyseistä kriteeriä pisteyttäneiden arvioijien pisteet. Seuraavaksi kriteerien keskiarvot yhdistyvät arviointimatriisin kriteeripainojen mukaisesti tehtäväpistemääräksi. Tehtävien pisteet kootaan sitten niihin taitoihin, joita ne mittaavat.
Lopuksi kunkin taidon osuus painotetaan sen taitopainon ja osiopainon tulolla, ja roolisopivuusprosentti syntyy tästä painotetusta koosteesta. Koska jokainen vaihe on deterministinen, sama näyttö tuottaa aina saman roolisopivuusluvun.
Arviointimatriisin pisteet ohittavat automaattiset pisteet
Joillakin tehtävillä on sekä automaattinen pistemäärä (esimerkiksi monivalinnan vastausavaimesta) että arvioijien syöttämä arviointimatriisin pistemäärä. Kun molemmat ovat olemassa samalle tehtävälle, arviointimatriisin pistemäärä voittaa ja sitä käytetään koosteessa.
Yksi tähän liittyvä sääntö kannattaa muistaa: tehtävä ilman vastausavainta pisteytyy automaattisesti arvoon null, mikä tarkoittaa manuaalisen tarkistuksen tarvetta. Nullia ei koskaan kohdella nollana, joten tarkastamattomat vastaukset eivät voi hiljaisesti laskea hakijan roolisopivuutta.
Missä asetat painot
Painot sijaitsevat rakennustyökalussa kahdessa paikassa. Kriteeripainot asetetaan arviointimatriisin editorissa: jokaisella kriteerillä on kerroin (merkitään ×N), joka määrää, kuinka paljon se painaa tehtävänsä sisällä. Osiopainot asetetaan kullekin osiolle — avaa osion muokkauslomake rakenne-editorissa ja aseta sen Scoring weight. Scoring & reporting -paneeli tiivistää painot vain luettavassa muodossa yhdessä arvioinnin automaattisen, arviointimatriisipohjaisen ja manuaalisen pisteytyksen määrien kanssa.
Painot ovat muokattavissa sekä luonnoksissa että julkaistuissa arvioinneissa. Koska roolisopivuus lasketaan tallennetuista pisteistä nykyisillä painoilla, painon muuttaminen julkaistussa arvioinnissa laskee roolisopivuuden uudelleen jokaiselle hakijalle, myös jo palauttaneille — raakapisteet eivät koskaan muutu, mutta prosentit siirtyvät. Blueprintiin kytketyissä arvioinneissa kirjatut päätökset säilyttävät päätöshetken roolisopivuuden tilannevedoksen. Suljetut ja arkistoidut arvioinnit on lukittu; monista uudeksi luonnokseksi muuttaaksesi niitä.
- Kriteeripainot: arviointimatriisin editori, kriteeriä kohden (×N).
- Osiopainot: kunkin osion muokkauslomake rakenne-editorissa; tiivistettynä Scoring & reporting -paneelissa.
- Painojen muutokset julkaistussa arvioinnissa laskevat roolisopivuuden uudelleen kaikille; raakapisteet eivät koskaan muutu.
Missä painot näkyvät raporteissa
Hakijat ja tarkastajat voivat nähdä, että painotusta on sovellettu. Hakijan näyttöraportissa tehtävät ryhmitellään osioittain aina kun arvioinnissa on useita osioita tai painoja, kukin erikseen painotettu ryhmä kantaa ×N-painomerkinnän, ja painotetun pisteytyksen huomautus selittää, että pisteet yhdistettiin painon mukaan eikä tasakeskiarvona. Auditointipaketti kirjaa myös osiopainot, arviointimatriisin kriteeripainot ja taitokytkennät selkokielisen menetelmäkuvauksen rinnalla.
At a glance
- Kriteerin sisällä arvioijien pisteet keskiarvoistetaan; kriteerit yhdistyvät arviointimatriisin painoilla.
- Tehtävien pisteet kootaan taidoiksi; kukin taito vaikuttaa taidon painon ja osion painon tulolla.
- Roolisopivuusprosentti on tämän painotetun koosteen tulos.
- Jos tehtävällä on sekä arviointimatriisin pistemäärä että automaattinen pistemäärä, arviointimatriisi voittaa.
- Painot näkyvät merkintöinä hakijoiden näyttöraporteissa, painotetun pisteytyksen huomautuksen kanssa.