手順 1: AI が実際に助けになる場所を決める
まず、判断に触れることなく時間を節約できる、確認の具体的な仕事を名指しすることから始めてください。たいていの採用の流れでは、三つがその場所に値します。長い回答を要約すること（15 分のインサイドセールスのロールプレイの書き起こしを、候補者が何を尋ね、何を主張し、何を約束したかにまで縮めること）、証拠を指し示すこと（サポートの返信が返金の方針という基準に応えた、まさにその行を引くこと）、そして人が確認または訂正するための、基準ごとのスコアの提案を下書きすることです。
この一覧に入っていないものに目を留めてください。候補者を順位づけること、誰かをふるい落とすこと、不合格の理由づけを書くこと。それらは決定であり、モデルがそれを行った瞬間に、この手続きは説明できるものでなくなります。あなたの流れがどの助けを使い、どれを禁じるのかを書き残してください。その一段落が、この手引きの残りすべてが守らせる方針です。
- 要約する: 書き起こしや長い記述の回答を、決定に関わる要点まで縮める。
- 証拠を指し示す: 回答が評価ルーブリックのそれぞれの基準に触れた箇所を引く。
- スコアを下書きする: 裏づけとなる引用を添えて、基準ごとのスコアを提案する。
- 決してしないこと: 人の確認を経ずに、順位づけ、不合格の判断、候補者に向かう理由づけを生み出すこと。
手順 2: 確認または上書きの一歩を、はっきりしたままにする
下書きのスコアは、答えではなく問いとして届かなければなりません。確認する人は、AI の提案を、それが引く証拠と並べて見て、そのうえではっきりと行いを選びます。確認するか、自分のスコアと短い理由で上書きするかです。ここで欠かせない設計上の性質は、人が動くまでスコアが存在しないことです。放っておかれた提案が、黙って記録されたスコアになることはありません。
これを誠実に保つのが、証拠へのつながりです。営業の候補者が値段への押し返しを組み替えた、その引用されたやり取りの隣に「反論の受け止め: 強い」という提案が出ていれば、確認する人は数秒でその主張を確かめられます。証拠のない提案は、確認する人にその数値を信じることを教え、証拠のある提案は、仕事そのものを読むことを教えます。読むことこそが、その務めです。
この流れが根づいてきたら、あなた自身の確認の割合を見ていてください。ある確認する人が、下にある回答を一度も開かずにすべての提案を確認しているなら、この手続きは形だけの追認へ流れています。その人は仕組みのうえでは間に入っていますが、もう判断の中にはいません。上書きを安く記録できるようにし、吟味されていない確認が続いていることは、時間の節約ではなく、対話のきっかけとして扱ってください。
手順 3: 助けを借りたすべての出力に、モデルと版を記録する
すべての要約、証拠の指し示し、下書きのスコアには、どのモデルが、どの版で、いつ生み出したのかの記録が付いているべきです。これは、初めて必要になるまでは形式ばって感じられます。何か月かのちに候補者が決定について問いを立てたとき、確認する人が何を見たのか、モデルが何を提案したのか、そして人がそれを確認したのか上書きしたのかを、正確にお見せできるのです。
版の記録は、移り変わりも見えるようにします。モデルは更新されますし、更新されたモデルは違うふうに要約したり、スコアの下書きの寛さがずれたりします。採用の一巡の途中で提案の傾きが変わったとき、この記録は、変わったのが候補者なのかモデルなのかを教えてくれます。それがなければ二つを見分けられず、候補者どうしの比べ方が、静かに同じ土俵ではなくなっていきます。
- 助けを借りたすべての出力に、モデルの名前、版、時刻を記録する。
- 確認する人の行いを記録する: 確認したか、上書きしたか、そして上書きの理由。
- その記録は、説明の対象であるスコアの隣、決定のファイルの中に置く。
手順 4: AI の提案を、人のスコアと抜き取りで突き合わせる
助けを借りた流れへの信頼は、前提にするものではなく、標本を取って得るものです。採用の一巡につき一度、いくつかの回答を取り出し、AI の下書きのスコアを、目線の合った人の確認する人が決めたものと比べてください。探しているのは、いつも同じ向きに現れる形です。サポートの語り口のスコアを、いつもこの場より高く下書きするモデル。あるいは候補者の言葉がなめらかだったために、営業のヒアリングの回答で確かめ落としを見のがすモデルです。
見つけたことは、評価者のずれと同じように扱ってください。ある基準でモデルが寛いなら、確認する人にはその提案を疑って読むように伝えてください。あるいはその基準ではスコアの下書きをやめ、証拠の指し示しだけを残してください。この抜き取りの確かめは、公平さも守ります。ある候補者の集まりや、ある回答の書きぶりについて提案がいつも違う出方をするなら、それは珍しい見ものではなく、ただちに手を打つべき見つけものです。
それぞれの抜き取りが何を対象にし、何を見つけたのかを、答えが「何もなし」であっても記録してください。自分たちの道具を自分たちで確かめてきた記録そのものが、説明できる手続きの一部です。助けが盲目的に信じられたのではなく、見守られていたことを示しますし、次のモデルの更新のあとに比べるための足場にもなります。
手順 5: 確認されていないものは、候補者に届かない
最後の線を、最も大切なところに引いてください。人が確認していない AI の出力が、候補者に向かう結果に触れることはありません。不合格の知らせ、面接への前進、レポートの中の講評、顧客が見るスコア。そのどれもが、証拠を読み、その判断を持つ記名された人を通ります。「なぜ私は不合格だったのですか」への答えが「モデルが低く採点しました」であることは決してありません。「私たちの確認する人が、その回答はお客さまの本当の問いに応えていないと見ました。評価ルーブリックはこちらです」が答えです。
この線こそが、この組み立て全体を持つに値するものにしています。決定に自分の名前が載ると知っている確認する人は、証拠を読みます。要約と指し示しは、その読みを速くするのであって、省けるようにするのではありません。結果として、はじめから望んでいた取り替えが起こります。読む荷を AI が引き受け、判断は人が持ち続け、そして誰が何を、どの証拠に基づいて決めたのかを正確に示す決定のファイルが残るのです。
要点
- AI の役目を、確認における三つの仕事 — 要約すること、証拠を指し示すこと、基準ごとのスコアを下書きすること — に限り、順位づけ、不合格の判断、確認されていない候補者向けの理由づけを書くことは禁じてください。
- 下書きのスコアが本物になるのは、人がはっきりと確認するか上書きしたときだけです。提案は、必ずそれが引く証拠とともに届きます。
- 助けを借りたすべての出力について、モデル、版、そして確認する人の行いを、決定のファイルの中に記録してください。
- 採用の一巡ごとに、AI の提案を、目線の合った人のスコアと突き合わせて抜き取りで確かめ、いつも同じ向きにずれている点には手を打ってください。
- 確認されていない AI の出力が、候補者に向かう決定に届くことはありません。すべての判断を、記名された人が持ちます。