成績分布を読む — 平均85点は喜ぶべき数字か

コールドオープン（約30秒）

[映像] 会議室。長机に配られた成績一覧表。各科目の平均点の列にカメラが寄る。 [テロップ] 平均95点の科目、平均62点の科目

年度末の成績判定会議。配られた一覧表には、平均95点の科目と、平均62点の科目が並んでいます。さて、どちらが「良い教育」をした科目でしょうか——実は、平均点だけでは何も分かりません。今日は、成績分布を科目設計の「レントゲン写真」として読む方法をお話しします。

セクション1: 分布は設計の鏡 — 三つのパターン

[映像] 三つのヒストグラムが順に描かれるアニメーション。 [テロップ] 天井効果／二峰性／極端な低平均

成績分布には、設計上の問題を映す典型的な形が三つあります。第一に天井効果。ほぼ全員が高得点に張りつく形です。めでたく見えますが、「全員が到達した」のか「試験が易しすぎて差を測れていない」のか、区別がつきません。体温計が全員に36.5度を返しているようなものです。第二に二峰性。高得点の山と低得点の山に割れる形で、授業が一部の学生にしか届いていないサインであることが多い。しかも平均点には隠れてしまうので、ヒストグラムを描いてはじめて見えます。第三に極端な低平均。「今年の学生は勉強不足だ」と言いたくなりますが、まず疑うべきは、目標・授業・試験の不整合です。分布は原因を断定する道具ではなく、次に何を調べるかを教えてくれる仮説生成の道具です。

セクション2: 問題を診る聴診器 — 難易度指数と識別指数

[映像] 一問の正答率と、上位群・下位群の正答率の差を示す簡単な図。 [テロップ] 難易度指数=正答率／識別指数=上位群と下位群の差

科目全体のレントゲンが分布なら、一問一問を診る聴診器が難易度指数と識別指数です。難易度指数はその問題の正答率。名前に反して、値が大きいほど易しい問題です。識別指数は、成績上位の学生と下位の学生で正答率がどれだけ違うかを見ます。差が大きければ、実力を見分けている良問。ゼロなら誰にも差がつかない問題。マイナスなら、上位の学生ほど間違えているということですから、複数正解や曖昧な問題文といった作問上の欠陥を疑ってください。多くの採点システムはこの数字を自動で出してくれます。試験のあとに一度眺める——その習慣だけで作問は確実に上達します。

セクション3: 「合格点60点」の根拠 — 基準設定とAngoff法

[映像] 「60」と大きく書かれた数字に「なぜ？」の吹き出しが重なる。 [テロップ] 集団準拠評価から基準準拠評価へ

ところで、合格点はなぜ60点なのでしょうか。順位や偏差値で判定するのが集団準拠評価、あらかじめ定めた基準で判定するのが基準準拠評価です。医師養成は本質的に後者です。問うべきは「同級生より上か」ではなく「患者を安全に診療できる水準か」だからです。では基準はどう決めるか。ここで使われるのが基準設定の手法、代表がAngoff法です。複数の教員が「ぎりぎり合格レベルの学生」の姿を共有し、各問題についてその学生が正答する確率を見積もり、合計して合格点を導きます。完全に客観的ではありません。しかし「なんとなく60点」と違って、根拠を説明でき、来年も再現できる。評価の公正性とは、この説明可能性のことです。

セクション4: 科目の外へ — カークパトリックとIR

[映像] 4段の階段のイラスト。下から「反応→学習→行動→成果」と積み上がる。 [テロップ] カークパトリック・モデルの4段階

最後に、科目の外に目を向けましょう。カリキュラム全体を検証する営みがプログラム評価、その代表的枠組みがカークパトリック・モデルです。反応・学習・行動・成果の4段階——多くの教育改善は「アンケートの満足度が高かった」というレベル1で止まっています。試験はできるのに病棟で動けない、というK教授の悩みは、レベル2とレベル3の乖離そのものでした。K教授は過去3年の成績データを調べ、平均85点の正体が、難易度指数0.9超の問題が7割という「測定の失敗」だったことに気づきます。そして科目間の成績データを組織として分析し、意思決定を支えるのがインスティテューショナル・リサーチです。科目間の分布のばらつきは、教員個人の責任ではなく、共通の設計言語がまだないことの現れ——第1回の問いに、データの言葉で答えが返ってきました。

まとめと次回予告

[映像] 三つの分布、Angoff法、4段の階段が一画面に並ぶ。 [テロップ] 次回・評価編の最終回: 構成的整合 — 自分の科目を点検する

今日の要点は三つ。分布は設計の鏡として読む。合格点は基準設定で説明できるものにする。教育の効果は満足度で止めず、行動と成果まで確かめる。次回は評価編の最終回。構成的整合のマトリクスを使って、あなた自身の科目を点検します。お楽しみに。