Siirry sisältöön
SkillCort

8 min · 8 stepsArvioinnin opastus

Näin suunnittelet arviointimatriisin

Arviointimatriisi on ero lauseen „pidin hänen vastauksestaan” ja sellaisen pistemäärän välillä, jonka voit selittää hakijalle, kollegalle tai auditoijalle. Tämä opastus käy läpi sellaisen suunnittelun SkillCortissa — kriteerien johtamisesta roolista tasojen ankkuroimiseen havaittavaan käyttäytymiseen ja tuloksen testaamiseen oikeilla vastauksilla ennen kuin se menee eläväksi.

What you'll need

  • Selkeä kuva roolin kompetensseista (rooliblueprint auttaa)
  • Työnäytetehtävä jota matriisi pisteyttää, lähes lopullisessa muodossaan
  • 2–3 esimerkkivastausta, oikeita tai luonnosteltuja, eri laatutasoilta
  • Näkemys joltakulta joka tekee tai johtaa itse työtä

Step 1: Johda kriteerit roolista, älä tehtävästä

Aloita kysymyksestä johon arviointi on olemassa vastatakseen: mistä kompetensseista tämä rooli tosiasiassa riippuu? Kunkin matriisikriteerin pitäisi jäljittyä johonkin niistä. Jos aloitat sen sijaan tehtävästä, päädyt pisteyttämään lopputuotteen satunnaisia piirteitä — muotoilua, pituutta, työkaluvalintaa — sen taidon sijaan jonka paljastamiseksi tehtävä rakennettiin.

Pidä lista lyhyenä. Kolmesta kuuteen kriteeriä matriisia kohti on yleensä oikein: tarpeeksi erottamaan erilliset taidot, tarpeeksi vähän jotta arvioijat pystyvät pitämään ne kaikki mielessä lukiessaan yhtä vastausta. Jos kaksi kriteeriä näyttävät aina nousevan ja laskevan yhdessä, yhdistä ne; jos yksi kriteeri kätkee kaksi riippumatonta harkintaa, jaa se.

Step 2: Kirjoita havaittavia käyttäytymisiä, älä ominaisuuksia

„Vahva viestijä” on ominaisuus; „tunnustaa asiakkaan ongelman ennen kuin ehdottaa korjausta, ja päättää konkreettiseen seuraavaan askeleeseen” on käyttäytyminen jonka arvioija voi osoittaa vastauksesta. Kukin kriteeri pitäisi muotoilla niin, että kaksi samaa vastausta lukevaa ihmistä katsoisi samaa näyttöä sitä pisteyttäessään.

Hyödyllinen testi: kysy kunkin kriteerin kohdalla „mitä alleviivaisin vastauksesta perustellakseni tämän pistemäärän?” Jos vastaus on tunne eikä lause, päätös tai jokin hakijan tuotoksessa oleva artefakti, kirjoita kriteeri uusiksi kunnes se nimeää havaittavan asian.

  • Korvaa henkilöä koskevat adjektiivit työtä koskevilla verbeillä
  • Nimeä artefakti: mikä vastauksessa osoittaa tämän?
  • Vältä kriteerejä jotka vaativat aikomuksen tai persoonan arvailua
  • Yksi kriteeri, yksi harkinta — ei „selkeys ja täsmällisyys” -hybridejä

Step 3: Valitse klassisen pistesyötön ja tasopohjaisen matriisin välillä

SkillCort tukee kahta matriisityyliä. Klassinen pistesyöttö antaa arvioijille numeerisen asteikon kriteeriä kohti — nopea ja tuttu, mutta se nojaa kunkin arvioijan yksityiseen käsitykseen siitä mitä 7 tarkoittaa. Tasopohjainen matriisi määrittelee eksplisiittiset tasot kriteeriä kohti, kullakin ankkuroitu kuvaus siitä käyttäytymisestä joka sen ansaitsee, ja arvioijat pisteyttävät klikkaamalla vastausta vastaavaa tasokorttia.

Kaikkeen jossa on useita arvioijia tai aitoja panoksia, valitse matriisi. Ankkuroidut kuvaukset tekevät kalibrointityön etukäteen: sen sijaan että jokainen tarkastaja keksisi oman asteikkonsa, he kaikki sovittavat vastauksia samaa kirjoitettua mittapuuta vasten. Klassinen syöttö on edelleen järkevä matalan panoksen, yhden arvioijan pisteytykseen.

Step 4: Ankkuroi kukin taso konkreettisiin, erotettaviin kuvauksiin

Kirjoita matriisieditorissa kuvaus jokaiselle solulle — kullekin kriteerille kullakin tasolla. Hyvät ankkurit kuvaavat mitä tuon tason vastaus tosiasiassa tekee: mitä huippuvastaus sisältää, minkä hyväksyttävä saa oikein ja mitä se ohittaa, mitä heikko jättää tekemättä. Epämääräiset asteikot kuten „hyvä”, „erittäin hyvä”, „erinomainen” pakottavat arvioijat takaisin yksityiseen harkintaan, mikä tekee matriisin tyhjäksi.

Tee vierekkäisistä tasoista aidosti erotettavia. Testi on rajatapausvastaus: jos ankkureitasi lukeva arvioija voisi perustella yhtä hyvin kahta naapuritasoa, terävöitä eroa — yleensä nimeämällä sen yhden käyttäytymisen joka ne erottaa. Kolmesta viiteen tasoa kriteeriä kohti riittää tyypillisesti; useammat tasot tarkoittavat hienompia erotteluja kuin useimmat näytöt kestävät.

Step 5: Painota kriteerit vastaamaan sitä mitä rooli palkitsee

Kaikki kriteerit eivät ansaitse yhtä suurta sananvaltaa. SkillCortissa voit painottaa kutakin kriteeriä (×N), ja nuo painot virtaavat suoraan tehtävän pistemäärään ja siitä edelleen roolisopivuuteen. Painota niitä kriteerejä joista rooli eniten riippuu — harkintaratkaisua, kirjallisen vastauksen laatua — tukevien kuten muotoilun tai kattavuuden yläpuolelle.

Ole tässä harkittu, koska painot ovat se paikka jossa arviointimatriisi hiljaa koodaa rekrytointifilosofiasi. Matriisi joka painottaa kiiltoa harkinnan yli nostaa esiin kiillotettuja hakijoita. Tarkista painot järkevyystestillä jonkun roolia lähellä olevan kanssa: „jos hakija loisti kriteerissä A mutta mokasi kriteerin B, olisimmeko silti kiinnostuneita?” Painojen pitäisi olla samaa mieltä vastauksen kanssa.

Step 6: Päätä pitäisikö hakijoiden nähdä arviointimatriisi

SkillCort voi tehdä arviointimatriisista hakijalle näkyvän. Sen näyttäminen kertoo hakijoille miltä hyvä näyttää, mikä on rehellistä ja tuottaa yleensä vastauksia jotka käsittelevät sitä mistä oikeasti välität — testaat taitoa, et kykyä arvata kriteerisi. Piilottaminen on järkevää silloin kun kriteerien tunteminen kirjoittaisi vastauksen triviaalisti valmiiksi, kuten joissakin harkintaskenaarioissa.

Valitsitpa kumman tahansa, valitse se matriisikohtaisesti ja tarkoituksella. Näkyvä matriisi nostaa rimaa ankkurien kirjoittamisessa, koska hakijatkin lukevat ne — yksi syy lisää sille miksi konkreettinen, käyttäytymistä kuvaava kieli on tärkeää. Se myös viestii reiluutta: hakijat jotka tuntevat mittapuun kokevat arvioinnin oman työnsä arviointina eivätkä arvausleikkinä mieltymyksistäsi.

Step 7: Testaa arviointimatriisi esimerkkivastauksilla ennen liittämistä

Ota kaksi tai kolme esimerkkivastaustasi ja pisteytä ne matriisiluonnosta vasten — mieluiten niin että toinen henkilö pisteyttää itsenäisesti. Testaat matriisia, et vastauksia: sijoittavatko ankkurit kunkin vastauksen siististi jollekin tasolle, vai epäröittekö molemmat saman solun kohdalla? Epäröinti merkitsee sen ankkurin joka pitää kirjoittaa uusiksi.

Tarkista myös laskutoimitus. Voittaako vahva vastaus painojen kanssa heikon mukavasti, ja marginaalilla joka tuntuu oikealta? Jos keskinkertainen vastaus pisteytyy lähes yhtä hyvin kuin erinomainen, joko ankkurit eivät erota laatua tai jokin paino on väärässä paikassa.

Step 8: Liitä arviointimatriisi ja ymmärrä tilannekuva

Kun liität arviointimatriisin arviointiin, se jäätyy tilannekuvaksi. Myöhemmät muokkaukset pankissasi olevaan matriisiin eivät koskaan muuta elävää arviointia — jokainen tuon arvioinnin hakija pisteytetään täsmälleen samaa mittapuuta vasten, mikä on juuri se mikä tekee pisteistä vertailukelpoisia ja puolustettavia.

Tämä tarkoittaa että hetki ennen liittämistä on viimeinen halpa tilaisuutesi korjata sanamuotoja, tasoja tai painoja tätä arviointia varten. Jatka pankkiversion parantamista sitä mukaa kun opit oikeista vastauksista; nuo parannukset hyödyttävät seuraavaa arviointia joka liittää sen, häiritsemättä sitä joka on jo lennossa.

Pro tips

  • Kirjoita arviointimatriisi ennen kuin näet oikeita hakijavastauksia — jälkikäteen kirjoitetut kriteerit kuvaavat yleensä saamiasi vastauksia, eivät tarvitsemaasi taitoa.
  • Luonnostele ankkurit kuvaamalla näkemääsi oikeaa työtä: paras vastaus jonka tiimiläinen on koskaan kirjoittanut, ja se laji joka vaati uudelleenkirjoituksen.
  • Lue ankkurisi ääneen jollekulle projektin ulkopuolelta; jos hän ei pysty kuvittelemaan vastausta, hakijalle näkyvä matriisi ei auta hakijoitakaan.
  • Käytä ×N-painoja säästeliäästi — kaksi tai kolme erillistä painotasoa viestii prioriteetit paremmin kuin eri luku jokaisella kriteerillä.
  • Pidä lyhyt muistiinpano siitä miksi kukin kriteeri on olemassa; se nopeuttaa kalibrointi-istuntoja ja tulevia matriisitarkastuksia.

Usein kysytyt kysymykset

Montako kriteeriä ja tasoa arviointimatriisissa pitäisi olla?
Kolmesta kuuteen kriteeriä ja kolmesta viiteen tasoa kriteeriä kohti kattaa useimmat työnäytteet. Vähempi kriteerejä tarkoittaa yleensä niputettuja harkintoja; useampi tarkoittaa yleensä että matriisi pisteyttää lopputuotteen piirteitä roolin kompetenssien sijaan.
Mikä on ero klassisen pistesyötön ja tasopohjaisen matriisin välillä?
Klassinen syöttö pyytää arvioijilta luvun kriteeriä kohti nojaten heidän sisäiseen asteikkoonsa. Matriisi määrittelee ankkuroidut tasot kriteeriä kohti, ja arvioijat klikkaavat sitä tasokorttia jonka kuvaus vastaa vastausta. Matriisi siirtää kalibroinnin etupainotteiseksi, joten usean arvioijan pisteytys pysyy johdonmukaisena.
Jos muokkaan arviointimatriisia liittämisen jälkeen, päivittyvätkö elävät arvioinnit?
Eivät. Liittäminen jäädyttää matriisin tilannekuvaksi, eivätkä myöhemmät pankkimuokkaukset koskaan muuta elävää arviointia. Näin jokainen arvioinnin hakija pisteytetään identtistä mittapuuta vasten. Tekemäsi parannukset pätevät tuleviin arviointeihin jotka liittävät matriisin.
Miten kriteeripainot vaikuttavat muuhun pisteytykseen?
Tehtävän sisällä arvioijat keskiarvoistetaan ensin kriteeriä kohti, sitten kriteerit yhdistyvät painojensa mukaan tehtävän pistemääräksi. Tehtäväpisteet kokoontuvat taito- ja osiopainojen kautta roolisopivuudeksi. Kriteerin paino on siis todellinen vipu lopulliseen vertailuun, ei kosmeettinen merkintä.
Pitäisikö hakijoiden nähdä arviointimatriisi?
Usein kyllä — näkyvä matriisi kertoo hakijoille miltä hyvä näyttää ja tuottaa vastauksia jotka tähtäävät siihen taitoon josta välität. Pidä se piilossa silloin kun kriteerit kirjoittaisivat vastauksen valmiiksi, kuten harkintaskenaarioissa joissa oikean siirron tunnistaminen on itse taito.

For hiring teams

Tee pisteytyksestä näyttöä

Katso SkillCortin tasopohjainen matriisieditori, kriteeripainot ja arviointimatriisin tilannekuvat toiminnassa — ja se miten ne pitävät jokaisen arvioijan pisteyttämässä samaa mittapuuta vasten. Varaa esittely.

Näin suunnittelet arviointimatriisin | SkillCort