問題 No.2124
企業向けの重要文書自動分類システムにおいて、通常の文書を誤って重要文書（陽性）と判定してしまうリスクを最小限に抑えたい場合、モデルの閾値を調整して特に高めるべき評価指標はどれか。
【正解の解説】
適合率
「オオカミ少年」の話を思い出してください。ウソつきの少年が「オオカミだ！」と叫んだとき、本当にオオカミだった確率が適合率です。今回は「普通の文書を誤って重要文書にしてしまうリスクを抑えたい」、つまり「重要だと太鼓判を押したからには絶対に間違いがない状態」を作りたい場面なので、警察の誤認逮捕をゼロにする厳格な判断基準である適合率を極限まで高める必要があります。
スポンサーリンク
【その他の選択肢の解説】
再現率
再現率は「実際の重要文書をどれだけ取りこぼさずにキャッチできたか」を示す指標です。空港のセキュリティチェックに例えると、再現率は「テロリストを絶対に逃さない（怪しい人は全員一旦引っ張る）」というアプローチです。これだと普通の文書まで重要文書として誤判定してしまうリスクが高まるため、誤判定を減らしたい今回の要件とは真逆の動きになってしまいます。
正解率
正解率は、テストで全体の何問に正解したかを示すような、最も直感的な全体スコアです。しかし、例えば全文書のうち重要文書がわずか1%しかないような極端な偏りがある場合、「すべて普通の文書である」と適当に予測するだけで正解率は99%になってしまいます。重要な文書の誤判定リスクを評価したい今回のケースでは、全体の正解率は全くあてにならないフェイクの指標となってしまいます。
F値
F値は、スポーツの総合力テストにおける「総合評価A判定」のようなもので、適合率と再現率のバランスが両方とも高いかを測ります。今回は「誤判定（誤って重要文書にすること）の抑制」という特定の目的に特化して閾値を調整したい状況です。バランス型であるF値を追いかけてしまうと、肝心の「誤認リスクを徹底的に削る」というピンポイントの対策がぼやけてしまうため、選択肢として除外されます。