What you'll need
- 採用したい職務と、その仕事をしている人または管理している人からの意見
- 組み立てて公開する権限のある SkillCort のワークスペース
- 採点する評価者と、目線合わせの場のために確保した時間
- 候補者の一覧、またはそれを生む流れ
- 最終の決定を誰が担うのかについての合意
Step 1: 設問の一覧ではなく、職務ブループリントから始める
プラットフォームに触れる前に、その職務が実際に必要としているものを書き出してください。生き生きと働ける人と、苦しむ人とを分ける、ひと握りの能力と、そのおおまかな順位です。このブループリントが、その先すべての背骨になります。課題はこれらの能力を示させ、評価ルーブリックはそれを採点し、重みはその順位を表し、職務適合度はそれに照らして報告します。
観察できる形に保ってください。「曖昧な依頼に筋の通った判断で向き合う」は課題にも評価ルーブリックの基準にもできますが、「協調性がある」はできません。ある能力を明らかにするワークサンプルを思い描けないなら、それはまだブループリントに入るべきではありません。
Step 2: 問題バンクで課題と評価ルーブリックを組み立てる
問題バンクで、それぞれの能力を候補者が示せる課題を作ります。次のアセスメントで使い回せるよう、フォルダに閉じたタグを付けたフォルダで整理してください。まずはワークサンプルから。答えるべき現実味のある問い合わせ、分析するべき事案、作るべきファイル。SkillCort の設問の種類は、文章とリッチテキストの回答、ファイル提出、コード、表の入力、音声と映像の録音などを扱い、文書を使う課題には左右に並べた画面があります。
手で書くことも、AI でまとめて生成すること — 1 回につき最大 100 問、必要なら自分の元資料を根拠にできます — も、多肢選択を貼り付けることもできます。AI の下書きは下書きとして扱ってください。候補者の前に出す前に、生成された設問は一つひとつ確認して直します。
判断で採点するすべての課題に、評価ルーブリックを与えてください。基準はブループリントから導き、水準は観察できる行いにつなぎ、最も大切な基準を重くします。評価ルーブリックの設計はそれ自体が技であり、独立したチュートリアルがあります。ここで譲れないのは、回答より先に評価ルーブリックが存在していることです。
Step 3: ビルダーでアセスメントを組み立てる
ビルダーでは、アセスメントをセクション、ページ、ブロックとして組み立てます。たいていは能力の領域ごとに一つのセクション、仕事の歩みを整えるページ、そしてバンクからフォルダ、タグ、種類で絞り込んで取り込んだ設問を抱えるブロックです。全体の制限時間とページごとの制限は、現実味のある働く速さに、初めて読む人のための余裕を足して決めてください。
セクションの採点の重みは、ブループリントの順位を映すように置いてください。この重みはそのまま職務適合度に流れ込むので、ここがあなたの優先順位が計算になる場所です。公平さのために並べ替えを使うなら、ビルダーは三つの段でそれを用意しています。流れが大切なワークサンプルの並びは、意味のある固定の順序に保ってください。
Step 4: 下見し、確かめ、公開のチェックリストを片づける
ビルダーの見出しから候補者と同じ画面の下見を開き、画面の大きい端末でも携帯電話でも、実際に答えながらすべてのページを歩いてください。自分の時間を制限と比べ、すべての評価ルーブリックと答えの基準を、最終的に書かれた課題と突き合わせて確かめます。答えの基準のない課題の自動採点は空になること — 0 点ではなく、手作業の確認の印が付くこと — を覚えておいてください。
必要な設定が済むまで公開のチェックリストが公開を止めます。それを片づけ、候補者を招く前に、実際の条件のもとで同僚 1〜2 人に短く試してもらってください。確認のひと通りの手順には独立したチュートリアルがあります。飛ばさないでください。候補者に見つけられた不具合は、取り戻せない手がかりを失わせます。
Step 5: 重要度に見合った守りで配信を設定する
公開したら配信を作ります。名前、候補者が受験できる期間、そして重要度に見合った守りです。SkillCort には、必要なら違反の上限を伴う Lockdown、複写と貼り付けの遮断、二つ目の画面の検知、カメラや画面の録画、身分証の確認があります。まとめ売りではなく、一つひとつの切り替えです。
肝心なのは「見合っている」という言葉です。一次選考のワークサンプルがカメラの録画に見合うことはめったにありませんし、資格認定の試験なら多くの切り替えに見合うかもしれません。候補者は始める前に同意と事前確認の画面を見るので、有効にしたものはすべて先に伝えられ、確かめられます。加えるすべての手立ては、正直な候補者にとっての摩擦です。重要度が見合うぶんだけ加えてください。
Step 6: 候補者を招き、期間を見守る
配信からメールの招待を送ります。招待の周りでは、平たい言葉で期待を伝えてください。このアセスメントで何をするのか、どれくらいかかるのか、画面の大きい端末が要る課題があるならそのほうが良いこと、そして回答は人の評価者が一貫した評価ルーブリックで採点すること。
期間のあいだは、出来ばえではなく、どれだけ終えられているかを見てください。まだ始めていない人には期間が閉じる前にひと声かけ、不正防止の出来事はあとで筋道立てて確認するために控えておきます。配信の最中、それらは時系列の上の観察であって、判断ではありません。早く届いた回答をのぞいて印象を作るのは避けてください。採点は目線合わせのあとに、評価ルーブリックに照らして始まります。そうでなければ、評価ルーブリックは芝居だったことになります。
Step 7: 目線を合わせた一団で評価する
採点を始める前に、目線合わせの場を持ってください。評価者が二つか三つの参照になる回答を、共有の評価ルーブリックに照らして別々に採点し、基準ごとの差を突き合わせ、合意した解釈を書き残します。1 時間で済み、比べられるスコアと、誰が誰を確認したかを映すだけのスコアとを分けます。その場の進め方には独立したチュートリアルがあります。
そのうえで採点します。水準で刻んだマトリクスでは、評価者は手がかりの記述が回答に合う水準のカードを選び、証拠としてメモを添えます。AI は要約と基準ごとの案を下書きでき — 回答からでも面接の書き起こしからでも、モデルと版は記録されます — 、一つひとつのスコアを確かめるか上書きするのは記名された人です。複数の評価者は、重みが何かを合わせる前に、それぞれの基準の中で平均されます。
- 確認の期間が開いてからではなく、その前に目線を合わせる
- 基準ごとのスコアに、証拠としてのメモを添える
- 空の自動採点(答えの基準のない課題)は、速やかに手作業の確認へ回す
- 確認の期間が何週にもわたるなら、伏せた再採点でぶれを確かめる
Step 8: 画面の上で決め、監査パックを書き出す
Decision Board では、職務適合度を重みづけされた出発点として読んでください。基準、スキル、セクションの重みを映し、目を向ける順序を決めます。最終候補を能力ごとに比べ、どのスコアからも背後の証拠 — 課題の成果物、評価ルーブリックのメモ、不正防止の時系列 — へ掘り下げ、リスクの印は人が確認するための文脈として決着させます。自動の不合格ではありません。この画面をうまく読むことにも、独立したチュートリアルがあります。
決定をその理由とともに記録し、そのうえで成果物を書き出します。関係者との会話のための white-label の候補者の証拠レポートと、長持ちする記録としての監査パックです。監査パックは、それ自体で完結する一つのファイルで、アセスメントの構造と重み、評価ルーブリックの版、記名された評価者とタイムスタンプを伴うすべてのスコア、平易な言葉の方法論、AI の来歴、不正防止の決着、そして決定の記録が入ります。
そのファイルこそ、この営み全体のねらいです。あなたは候補者に順位を付けただけではありません。説明できる決定を作ったのです。関係者にも、監査する人にも、どう決めたのかと尋ねる候補者にも。
Pro tips
- 最初の一巡は時間を区切ってください。今週送り出す焦点の定まったアセスメントは、来月送り出す網羅的なものに勝りますし、バンクのおかげで二巡目は劇的に速くなります。
- 範囲はブループリントに律してもらってください。すべての課題、基準、重みは、どれかの能力にさかのぼれるべきです。さかのぼれないなら、選んでいないものを測っています。
- 意図をもって使い回してください。問題バンクのフォルダとタグが、このアセスメントを、同じ系統の次の職務の出発点に変えます。
- 候補者の合計時間は、その段に見合わせてください。長いアセスメントが選り分けるのは、スキルではなく空いている時間です。
- 最初の集団のあとに振り返りをしてください。どの課題が候補者を分けたか、どの手がかりがためらいを生んだか、どの守りの切り替えが、その摩擦に見合っていたか。