Do Judges Behave Like Algorithms?

すべての決定が巨大で見えない計算機によって下される世界を想像してみてください。人工知能と法律という科学の領域において、研究者たちは常にこう問いかけています。誰を刑務所に入れ、誰を自由のままにするかといった重大な判断を、コンピュータに任せるべきだろうか、と。これを理解するには、二つの意思決定の方法を知る必要があります。一つ目は、厳格なレシピのようなものです。「三振ったらアウト」というルールです。これは明確で公平であり、誰もが同じ結果を得られます。二つ目は、シェフがスープを味見するようなものです。「少し塩気が足りないけれど、トマトが酸っぱすぎなければ、そのままでもいいかもしれない」といった具合です。これは柔軟で個人的なものですが、シェフの気分や記憶に左右されます。何十年もの間、人々は、裁判官が厳格なレシピに従うべきか、それとも柔軟な味見を行うべきかについて議論してきました。今、コンピュータが賢くなるにつれ、議論は変化しました。ロボットで裁判官を置き換えるべきかどうかではなく、科学者たちはもっと奇妙な問いを投げかけているのです。裁判官は「すでにロボットのように振る舞っているのではないか？」と。もし裁判官が隠れたレシピに従っているだけなら、私たちはそのレシピを見つけ出し、修正することができます。しかし、もし彼らが目に見えない感情に基づいて「スープの味見」をしているのだとしたら、それは解決するのがはるかに難しい問題になります。

この論文は、テキサス州ハリス郡の21人の治安判事（裁判官）の思考を覗き見ることで、この謎に迫ります。彼らは、被告人が裁判前に釈放されるべきか、それとも勾留されるべきかを決定しています。研究者たちは、これらの裁判官を「ブラックボックス」として扱い、その意思決定プロセスをリバースエンジニアリングしようと試みました。彼らはこう問いかけました。特定の裁判官が何をするかを予測できる、単純で理解しやすい数式を書くことができるだろうか？ そして、もし書けるとしたら、すべての裁判官が同じ数式を使っているのか、それとも各裁判官が自分だけの秘密のコードを持っているのだろうか？

チームは、22,000件を超える膨大なデータセットの整理から始めました。まず、「不具合」に対処しなければなりませんでした。彼らは、裁判官の決定のうち約2%から33%が、いかなる論理的なルールでも説明できないことを発見しました。詳しく調査したところ、これらは神秘的な魔法や偏見によるものではなく、単なるエラーであることが分かりました。コンピュータのフォームが誤って記入されていたり、裁判官がデータベースには載っていない別件の犯罪を知っていたり、あるいは法廷での詳細な内容が書面記録に残っていなかったりしたのです。これらの「ノイズ」となるケースを取り除いたとき、真の物語が浮かび上がってきました。

研究の結果、驚くべきことに、ほとんどの裁判官はアルゴリズムのように振る舞っていることが判明しました。21人中16人の裁判官については、チームは裁判官の決定を85%から100%の精度で予測できる、ごく小さな単純な決定木（数ステップのフローチャート）を構築することができました。これらの数式は、被告の年齢、未解決の逮捕状の数、および起訴された具体的な犯罪の種類といった、いくつかの明確な要因に基づいています。結局のところ、多くの裁判官にとって、「スープの味見」とは実際には非常に具体的で再現可能なレシピに従っているだけなのです。

しかし、ここにひねりがあります。裁判官はアルゴリズムのように振る舞ってはいるものの、彼らは皆「異なる」アルゴリズムを使っているのです。研究では、裁判官は自分自身に対しては非常に一貫性があることが分かりました。つまり、裁判官Aは似たようなケースに対して通常76%の確率で同じ選択を下します。しかし、裁判官同士の一貫性については極めて劣っています。研究者が裁判官Aの「レシピ」を使って裁判官Bの行動を予測しようとしたとき、その予測は惨めに失敗し、ランダムな推測よりも優れた結果を出せませんでした。実際、特定の組み合わせの裁判官においては、若年層（24歳未満）に関するほぼすべてのケースで意見が食い違っていました。ある裁判官は、逮捕状を持っている若者を見て「釈放」とする一方で、別の裁判官は全く同じプロフィールを見て「勾留」とするのです。

論文はまた、どの変数が重要であったかについても考察しました。年齢や逮捕状の数はほとんどの裁判官にとって重要でしたが、他の要因に与える重みは大きく異なっていました。ホームレスであることや性別を深く重視する裁判官もいれば、それらの要素を完全に無視する裁判官もいました。このことは、保釈聴取の結果が、被告の事実関係だけでなく、「どの裁判官に当たるか」に大きく依存していることを示唆しています。

最終的に、著者らは、裁判官をコンピュータに置き換えようとするのではなく、これらの知見を用いて、裁判官がすでに使用している「隠れたレシピ」を理解すべきだと提案しています。もし裁判官Xが裁判官Yよりも常に若者を異なる扱いをしていることや、データの欠落によって裁判官の決定が変わることを私たちが把握できれば、それらの不一致を修正することができます。これらの目に見えないルールを可視化することで、司法制度をより公平で予測可能なものにし、誰が料理を作ろうとも、その「レシピ」がすべての人にとって同じであることを保証できるのです。