多語言訓練數據分佈不均
設計與開發
風險描述
LLM 訓練數據以英語為主導(通常佔 80% 以上),導致模型在非英語語言上的表現顯著下降。對中文、台語、客語等語言的理解可能出現文化誤讀和語義錯誤。低資源語言的使用者無法獲得與英語使用者同等品質的 AI 服務,加劇全球數位不平等。
框架對照
iso 23894R3
tw principle公平與不歧視
tw principle永續發展與福祉
tw risk type技術設計缺陷(Technical Design Flaw)
控制措施
- 多語言數據平衡策略
- 跨語言品質基準測試
處理步驟
- 評估訓練數據的語言分佈,識別嚴重不足的語言
- 針對目標語言(如繁體中文)擴充高品質訓練數據
- 建立跨語言品質基準測試,定期評估各語言表現差異
- 對低資源語言實施數據增強和遷移學習策略