S0144嚴重

AI 生成兒少不宜內容

運行與監控

風險描述

AI 影像生成模型被利用生成涉及未成年人的不雅虛擬影像。儘管是虛擬生成而非真實兒童,在大多數國家仍構成犯罪。多國已加強對 AI 生成兒少不宜內容的立法。開源影像生成模型的普及使得此類內容的生產更難追蹤和阻止。

框架對照

iso 23894R8
tw principle永續發展與福祉
tw principle問責
tw risk type社會系統性影響(Societal Systemic)

控制措施

  • CSAM 偵測整合
  • 模型安全護欄
  • 法規遵循

處理步驟

  1. 在影像生成服務中整合 CSAM 偵測工具(如 PhotoDNA)
  2. 訓練模型拒絕生成涉及未成年人的不當內容
  3. 建立與執法機關的通報機制
  4. 對開源模型建立使用條款和社群監管