合成數據放大偏見
設計與開發
風險描述
使用 AI 生成合成訓練數據時,若原始數據存在偏見,生成模型會學習並放大這些偏見。研究顯示「model collapse」現象:當 AI 生成的數據被用於訓練下一代 AI 時,少數群體的特徵會逐代被稀釋,最終形成偏見的正回饋迴路。這在 LLM 訓練數據日益依賴 AI 生成內容的趨勢下尤其危險。
框架對照
iso 23894R3
tw principle公平與不歧視
tw risk type技術設計缺陷(Technical Design Flaw)
控制措施
- 合成數據偏見檢測
- 原始數據比例維持
處理步驟
- 在合成數據生成後,比對原始數據的分佈特徵是否被保留
- 設定合成數據在訓練集中的最大佔比(建議不超過 30%)
- 對合成數據執行與原始數據相同的偏見審計
- 追蹤多代訓練中少數群體特徵的保留率