By Daniel Whitmore, MSc in Industrial and Organizational Psychology
Qısaca
Qiymətləndirici kalibrlənməsi qısa iş sessiyasıdır: ballandıranlar eyni nümunə cavabları ortaq qiymətləndirmə matrisinə qarşı müstəqil şəkildə qiymətləndirir, ballarını meyar-meyar müqayisə edir və hər hansı real namizədə baxılmazdan əvvəl hər səviyyənin nə demək olduğu barədə razılığa gəlirlər. Bu, matris ballarını qiymətləndiricilər arasında ardıcıl etməyin ən effektiv yoludur — və dövri təkrar yoxlamalar tələb edir, çünki ballandıran sürüşməsi zamanla geri qayıdır.
Qiymətləndirmə matrisi balları niyə sürüşür
Ballandıran sürüşməsi xarakter qüsuru deyil; o, çoxqiymətləndiricili hər prosesin defolt vəziyyətidir. Hər nəzərdən keçirən öz şəxsi daxili standartı ilə gəlir — bu standartı işə götürdüyü son komanda, yadında qalan ən güclü namizəd və qüsurlu cavablara öz dözümü formalaşdırır. Qiymətləndirmə matrisi həmin variasiyanı daraldır, lakin «aydın növbəti addım» və ya «uyğun ton» kimi sözlər yenə də şərh üçün yer buraxır — sürüşmə isə məhz şərhdə yaşayır.
Sürüşmə həm də zamanla toplanır. Bir həftədə iyirmi daxili satış rol oyunu ballandıran qiymətləndirici matrisə deyil, dəstəyə qarşı qiymətləndirməyə başlayır: üç zəif zəngdən sonra orta səviyyəli kəşfiyyat zəngi güclü görünür. Başqaları son tarix təzyiqi altında sərtliyə və ya yumşaqlığa sürüşür. Bunların heç biri balların özündə görünmür və məhz buna görə təhlükəlidir — bir nəzərdən keçirənin verdiyi 4 ilə digərinin verdiyi 4 iki fərqli namizədi təsvir edə bilər.
Həll daha mürəkkəb qiymətləndirmə matrisi deyil. Müəyyən həddən sonra əlavə matris təfərrüatı uzlaşma əlavə etmədən oxu yükü əlavə edir. Həll kalibrlədir: qiymətləndiricilərə eyni işi ballandırtmaq, fərqlərini üzə çıxarmaq və hamısının sonradan işarə edə biləcəyi ortaq standartı razılaşdırmaq — hər hansı canlı namizədin nəticəsi kimin oxunuşunun üstün gəldiyindən asılı olmamışdan əvvəl.
Kalibrləmə sessiyası, addım-addım
Hər hansı canlı ballandırma başlamazdan əvvəl bir strukturlaşdırılmış sessiya keçirin. Əsl tapşırığa verilmiş iki və ya üç real cavab seçin — məsələn, namizədin əsəbi müştəriyə yazdığı cavab və ya satış rolu üçün qeydə alınmış etiraz idarəetmə çalışması. Qəsdən seçin: biri açıq-aydın güclü, biri açıq-aydın zəif və biri həqiqətən sərhəddə. Kalibrləmə öz haqqını məhz sərhəd nümunəsində qazanır.
Sessiyanın özü sadə ardıcıllıqla gedir və sıra əhəmiyyət daşıyır. Müstəqil ballandırma birinci gəlməlidir; bir qiymətləndirici danışdığı an digərləri həmin rəyə lövbərlənir və çalışma uzlaşmanı deyil, uyğunlaşmanı ölçür. Üç və ya dörd qiymətləndiricidən ibarət heyət üçün təxminən bir saat ayırın və sessiyaya opsional əlavə kimi deyil, qiymətləndirməni işə salmağın bir hissəsi kimi baxın.
- Hər qiymətləndirici hər nümunəni matrisə qarşı müstəqil ballandırır, hər meyar üzrə yazılı əsaslandırma ilə — hələ müzakirə yoxdur.
- Bütün balları eyni anda açın və fərqləri yalnız namizəd üzrə deyil, meyar üzrə hesablayın.
- Yalnız balların bir səviyyədən çox ayrıldığı meyarları müzakirə edin; uzlaşmaya efir vaxtı lazım deyil.
- Hər fikir ayrılığı üçün matris səviyyəsinin əslində nə tələb etdiyinə qərar verin və sözlər hər iki oxunuşa yol veribsə, təsviri yenidən yazın.
- Müzakirə olunmuş nümunələri razılaşdırılmış balları və əsaslandırması ilə birlikdə matrisə bərkidilmiş lövbər nümunələr kimi saxlayın.
İnsanları yox, fərqləri müzakirə edin
Ballar açıldıqdan sonrakı söhbət işin bütün mahiyyətidir və o, proqnozlaşdırıla bilən şəkildə səhv istiqamətə gedir: kimin haqlı olduğu barədə mübahisəyə çevrilir. Onu yenidən çərçivələyin. Sual heç vaxt «buna niyə 2 verdin?» deyil, «cavabda nə və matrisdə nə səni ora gətirdi?» olmalıdır. Hər iki qiymətləndirici adətən matrisi sədaqətlə tətbiq edir — sadəcə onun fərqli oxunuşlarını.
Fərqlərin çoxu üç səbəbdən birinə gedib çıxır: matris təsviri çoxmənalıdır, qiymətləndiricilər alt meyarları fərqli çəkiləyir, yaxud bir nəzərdən keçirən matrisin ümumiyyətlə əhatə etmədiyi bir şeyi ballandırır — məsələn, mühakiməni ölçməli olan tapşırıqdakı yazı səhvlərini. Hansı səbəblə üzləşdiyinizi adlandırmaq mübahisəni redaktəyə çevirir. Çoxmənalılıq yenidən yazılmış təsvir alır; gizli çəkilənmə açıq edilir; əhatədən kənar meyarlar açıq şəkildə istisna olunur.
Hər müzakirəni bir məhsulla bitirin. Yalnız xoş söhbət yaradan kalibrləmə sessiyasını bir aydan sonra təkrarlamaq lazım gələcək. Daha dəqiq təsvirlər və saxlanmış lövbər nümunələr yaradan sessiya isə heyətə hər yeni qiymətləndirici qoşulanda və hər sərhəd namizədi qrupu bir səviyyənin dəqiq ifadəsinə qaytaranda öz faydasını verir.
Qiymətləndirmə matrisini real cavablarla lövbərləyin
Mücərrəd təsvirlər sürüşməyə dəvət edir; konkret nümunələr ona müqavimət göstərir. Əhəmiyyət daşıyan hər ballandırma səviyyəsi üçün — adətən «qəbuledilən» ilə «güclü» arasındakı sərhəd, işə qəbul qərarlarının əslində döndüyü yer — kalibrləmədən real, anonimləşdirilmiş cavab və onun niyə həmin səviyyədə dayandığını izah edən bir cümlə bərkidin. «3 həlli təklif etməzdən əvvəl müştərinin narazılığını qəbul edir; bu cavab bunu edir, lakin növbəti addımı basdırır» bir abzas sifətdən dəyərlidir.
Lövbərlər qiymətləndiricilərin iş üsulunu dəyişir. «Bu cavab nə qədər yaxşıdır?» — şəxsi standartlara dəvət edən sual — əvəzinə onlar «bu, 3-ün lövbərinə, yoxsa 4-ün lövbərinə daha yaxındır?» sualını verirlər. Müqayisə mütləq qiymətləndirmədən qat-qat etibarlı mühakimədir və heyətdəki hamı üçün eyni mühakimədir, o cümlədən altı ay sonra qoşulacaq və ilkin sessiyada heç vaxt olmamış qiymətləndirici üçün.
Davamlı seçmə yoxlamaları: kalibrləmə birdəfəlik hadisə deyil
Tək kalibrləmə sessiyası standartı qoyur; onu saxlamır. Sürüşmə həcm, zaman və heyətdəki kadr dəyişikliyi ilə geri qayıdır. Baxım ritualı yüngüldür: müntəzəm kadansla artıq ballanmış az sayda cavabı kor şəkildə ikinci qiymətləndiriciyə yönləndirin və müqayisə edin. Siz axını yenidən ballandırmırsınız — fikir ayrılığı üçün ondan nümunə götürürsünüz.
Fərdi büdrəməyə deyil, nümunəyə baxın. Sərhəd cavabında bir iki-ballıq fərq normaldır; eyni qiymətləndirici cütü arasında davamlı bir səviyyəlik boşluq sürüşmədir və cütlər arasında davamlı fikir ayrılığı yaradan meyar insan problemi deyil, matris problemidir. Nümunə göründükdə yalnız həmin meyar üzrə qısa yenidən kalibrləmə keçirin — bir nümunə ballandırın, müzakirə edin, təsviri dəqiqləşdirin. İyirmi dəqiqə, seminar yox.
Qiymətləndirmə platforması da öz haqqını məhz burada qazanır: hər bal əsaslandırması ilə birlikdə matrisə qarşı qeydə alındıqda qiymətləndirici üzrə nümunələr lətifə deyil, görünən olur və seçmə yoxlaması uzun ballandırma dövrünün sonunda qurduğunuz cədvəl deyil, oxuduğunuz hesabata çevrilir. Ritual nə qədər yüngüldürsə, məşğul işə qəbul mövsümü ilə təmasa tab gətirmə ehtimalı bir o qədər yüksəkdir.
İki ballandıran canlı namizəd barədə razılaşmadıqda
Real namizəd barədə fikir ayrılığı prosesin uğursuzluğu deyil — bu, prosesin həqiqətən yaxın bir qərarı üzə çıxarmasıdır. Səhv reaksiyalar tənbəl olanlardır: balları səssizcə ortalamaq və ya yüksək vəzifəli qiymətləndiricinin susmaqla qalib gəlməsinə imkan vermək. Ortalama fikir ayrılığını gizlədir; vəzifə pilləsi isə onu sübutla deyil, iyerarxiya ilə həll edir. Hər ikisi sizi balı sonradan izah edə bilməz vəziyyətdə qoyur.
Bunun əvəzinə ciddi fikir ayrılığına hərəkət üçün siqnal kimi baxın. İki qiymətləndirici əsaslandırmalarını matrisə və onun lövbərlərinə qarşı müqayisə edir; hər ikisi eyni təsvirə işarə etdikdə boşluqların çoxu dəqiqələr içində həll olunur. Yenə də razılaşmasalar, cavabı ilk iki balı görmədən kor şəkildə ballandıran üçüncü qiymətləndirici cəlb edin və müzakirə üç müstəqil oxunuşdan davam etsin.
Həll nə olursa olsun, onu qeydə alın: ilkin ballar, əsaslandırmalar və yekun balın niyə məhz orada dayandığı. Həmin qeyd yaxın bir qərarı işə qəbul meneceri üçün — və ya namizədin gələcək müdafiəçisi üçün — izah oluna bilən edir və həll olunmuş hər fikir ayrılığı lövbər kitabxanasına namizədə çevrilir, beləliklə eyni mübahisənin iki dəfə baş verməsinə ehtiyac qalmır.
Əsas məqamlar
- Ballandıran sürüşməsi çoxqiymətləndiricili hər prosesdə defoltdur; qiymətləndirmə matrisləri onu daraldır, lakin yalnız kalibrləmə bağlayır.
- Canlı ballandırmadan əvvəl kalibrləmə sessiyası keçirin: əvvəlcə müstəqil ballar, sonra yalnız fərqlərin müzakirəsi, sonra sözlərin iki oxunuşa yol verdiyi yerdə matrisin düzəldilməsi.
- Lövbər nümunələr — ballandırma səviyyələrinə bərkidilmiş real cavablar — mütləq qiymətləndirmələri müqayisələrə çevirir və müqayisələr xeyli daha ardıcıldır.
- Uzlaşmanı yüngül, müntəzəm kor seçmə yoxlamaları ilə saxlayın və nümunə göründükdə tək bir meyarı yenidən kalibrləyin.
- Canlı fikir ayrılığını heç vaxt ortalayıb yox etməyin: əsaslandırmaları müqayisə edin, lazım gələrsə kor üçüncü oxunuş əlavə edin və necə həll olunduğunu qeydə alın.