S0031重大

多語言訓練數據分佈不均

設計與開發

風險描述

LLM 訓練數據以英語為主導(通常佔 80% 以上),導致模型在非英語語言上的表現顯著下降。對中文、台語、客語等語言的理解可能出現文化誤讀和語義錯誤。低資源語言的使用者無法獲得與英語使用者同等品質的 AI 服務,加劇全球數位不平等。

框架對照

iso 23894R3
tw principle公平與不歧視
tw principle永續發展與福祉
tw risk type技術設計缺陷(Technical Design Flaw)

控制措施

  • 多語言數據平衡策略
  • 跨語言品質基準測試

處理步驟

  1. 評估訓練數據的語言分佈,識別嚴重不足的語言
  2. 針對目標語言(如繁體中文)擴充高品質訓練數據
  3. 建立跨語言品質基準測試,定期評估各語言表現差異
  4. 對低資源語言實施數據增強和遷移學習策略