S0153嚴重

法官過度信賴風險評估工具

運行與監控

風險描述

司法人員過度依賴 AI 再犯率預測工具(如 COMPAS)做出量刑決定。ProPublica 的調查發現 COMPAS 系統對黑人被告的再犯預測錯誤率顯著高於白人被告。當法官過度信賴此類工具而忽略個案的特殊情況(如改過自新的證據),可能導致系統性的不公正量刑。

框架對照

iso 23894R7
nist ai rmfMEASURE 2.6
tw principle人類自主
tw principle公平與不歧視
tw risk type部署互動問題(Deployment Interaction)

控制措施

  • AI 僅作為參考
  • 強制個案評估
  • 定期偏見審計

處理步驟

  1. 法規明確規定 AI 評估僅作為參考因素之一
  2. 強制要求法官記錄個案特殊考量因素
  3. 定期進行 AI 工具的種族和社經偏見審計
  4. 建立量刑異常偵測機制(如特定群體量刑顯著偏重時告警)