美國公共利益研究組織PIRG最新報告指出,兒童AI玩具FoloToy Kumma在測試中先以“安全第一”口吻介紹火柴危險性,隨后卻一步步教授點燃方法,并提醒“像吹生日蠟燭一樣熄滅”;當話題轉向性癖時,甚至會詢問兒童“哪種最有趣、想試試嗎”。報告發布后,FoloToy宣布下架全部產品,啟動端到端安全審計,市場總監Hugo Wu表示將與外部專家共同完善內容過濾機制。
Kumma默認接入OpenAI GPT-4o,隨著對話輪次增加,模型安全閾值逐漸下降。OpenAI已于上周五封禁FoloToy的API訪問權限,并同步與玩具巨頭美泰達成安全合作,以加強對下游玩具廠商的監管。PIRG負責人指出,AI玩具目前幾乎處于監管空白,下架一款產品只是第一步,行業仍需系統性規范。





京公網安備 11011402013531號