本文へスキップ
SkillCort

Help articleBuilding assessments

評価ルーブリック: classic と matrix

評価ルーブリックは、開かれた回答を一貫した、根拠を示せるスコアに変えます。SkillCort は 2 つの種類 — スコアを入力する classic と、水準に基づく matrix — に対応しています。この記事では、その作り方、重みの付け方、そしてアセスメントに割り当てたときに何が起きるのかを説明します。

classic のスコア入力の評価ルーブリック

classic の評価ルーブリックは基準を並べ、評価者がそれぞれに数値のスコアを入力できるようにします。こちらは軽いほうの選択肢です。作るのも採点するのも速いので、経験のある評価者や、文章による手がかりを必要としない基準に向いています。評価のあいだ、評価者は基準ごとにスコアを入力し、そこにどうたどり着いたかの証拠としてメモを添えられます。

水準に基づく matrix の評価ルーブリック

matrix の評価ルーブリックは、それぞれ名称とスコアを持つ水準の組を定め、次にそれぞれの基準について、各水準がどのように見えるかを記述します。この基準ごとの行動の記述が、尺度を地に着けます。評価者は数を選ぶのではなく、記述が回答に合う水準のカードを選び、その水準のスコアが記録されます。

記述による手がかりこそが、複数の評価者を一貫させるものです。全員が、3 が何を意味するかという各自の私的な感覚ではなく、各水準の同じ文章による定義に照らして採点します。同じ回答を複数の評価者が採点したとき、そのスコアはそれぞれの基準の中で平均されるので、共通の手がかりは最終的な数字の信頼性を直接高めます。

基準の重み

それぞれの基準は、倍率として表される重みを持ちます。評価ルーブリックが基準のスコアを合わせるとき、x2 の重みの基準は x1 の重みの基準の 2 倍に数えられます。すべての基準を等しく数えさせるのではなく、その職務にとって本当に大切なものを映すために重みを使ってください。採点の集計では、基準の中で評価者のスコアが平均され、基準はこれらの重みで合わさります。

候補者へ評価ルーブリックを表示する

アセスメント中に、候補者へ評価ルーブリックを見えるようにすることもできますし、基準の重みも合わせて含められます。これは候補者に、自分が何によって判断されるのかを正確に伝えるので、あなたが大切にする基準に向けた回答を促します。

この表示が結果にまで及ぶことはありません。評価ルーブリックの表示の設定にかかわらず、スコアが候補者に表示されることはありません。候補者は自分が判断される基準と、必要に応じてそれらの重み付けを見られますが、評価者が記録したスコアはあなたのワークスペースの中に留まります。

スナップショット: 評価ルーブリックの編集はどうアセスメントに届くか

評価ルーブリックをアセスメントに割り当てると、SkillCort はそのスナップショットを固定します。あとから元の評価ルーブリックを編集しても、すでに実施されたアセスメントが黙って変わることはありません。そのアセスメントを受けた候補者は特定の評価ルーブリックに照らして採点されており、その記録は安定していなければならないからです。

下書きは、設計としての例外です。公開すると、現在の元の評価ルーブリックからすべてのスナップショットが固定し直されるので、下書きは常に最新のバージョンで公開されます。公開中のアセスメントでは、課題の評価ルーブリックを意図的に更新します。builder でその課題を編集して保存し直すと、そのスナップショットがあなたの変更とともに固定し直されます。終了済みとアーカイブ済みのアセスメントはロックされています。代わりに複製して新しい下書きにしてください。

At a glance

  • classic の評価ルーブリックは基準ごとに数値のスコアを取ります。matrix の評価ルーブリックは、スコアを記述された水準に結び付けます。
  • matrix の水準は名称とスコアを持ち、水準ごとに基準ごとの行動の記述が付きます。
  • 基準の重みは、評価ルーブリックの中でその基準の影響を倍にします。
  • アセスメント中に、候補者へ評価ルーブリックを表示することもできます。スコアが表示されることはありません。
  • 評価ルーブリックを割り当てるとスナップショットが固定されます。元の評価ルーブリックの編集は下書きには流れますが、実施済みのアセスメントを黙って変えることはありません。

よくあるご質問

元の評価ルーブリックで誤字を直したら、割り当て済みのアセスメントもそれを取り込みますか。
下書きは取り込みます。公開すると、現在の元の評価ルーブリックからスナップショットが固定し直されるからです。実施済みのアセスメントは、あなたが動くまで固定されたスナップショットを保ちます。公開中のアセスメントでは、builder でその課題を開いて保存し直すと、修正を反映して固定し直されます。
候補者は自分の評価ルーブリックのスコアを見られますか。
いいえ。アセスメント中に評価ルーブリックそのものを、必要に応じてその重みも表示するかどうかは選べますが、スコアが候補者に表示されることはありません。
課題に評価ルーブリックのスコアと自動採点のスコアの両方があるとき、どちらが数えられますか。
評価ルーブリックのスコアが優先されます。自動採点のスコアは、その課題に評価ルーブリックのスコアがないときに使われます。

Need a hand?

We'll help you set it up

Our team helps with setup, assessment design, and rollout — bring your questions to a live session.