作者 | 趣解商業(yè) 張語格

“去年國慶假期，有人過了7天假，被我整整罵了8天。”

近日，雷軍在兩會期間提到自己去年被網(wǎng)友用AI換臉、擬聲，做各類視頻的“嘴替”和“臉替”；雷軍直言，對于這些“盜版”雷軍，自己想通過法律維權(quán)，卻發(fā)現(xiàn)對此沒有專門的立法，只能用隱私權(quán)、肖像權(quán)、名譽權(quán)等法律起訴，而這些都要量化損失，因此深受其擾。

圖源：抖音截圖

如今社交平臺AI視頻屢見不鮮，由AI生成的真人形象已經(jīng)到了以假亂真的程度，在各種各樣的“AI騙局”里，雷軍還不算最大的受害者；面對這些“AI真人”的誘導(dǎo)，照單全收的幾乎都是無防備心的中老年人。

01.“AI孫子”硬控老年人

“我奶奶沉迷抖音上的假孫子以后，我就失寵了。”陸俊（化名）的奶奶今年79歲，從春節(jié)開始每天都要看胖小孩短視頻，視頻里的胖小孩穿著小棉襖、小肚兜，每喊一句“奶奶”，陸俊的奶奶都會大笑起來。

仔細看視頻里的胖小孩，皮膚光滑到有些失真，背景局部模糊，手指長短和擺放位置也不自然，AI創(chuàng)作痕跡極重，是很多年輕人眼里的“一眼假”。

圖源：抖音截圖

然而，中老年人幾乎沒有識別AI創(chuàng)作的能力。陸俊不止一次提醒奶奶這是“假的”，是AI生成的，有些視頻下方會有AI創(chuàng)作的提示，但奶奶都不以為意。陸俊對此也十分無奈，“我第一次提醒奶奶的時候，她有點震驚，但之后還是繼續(xù)看，她并不在乎小孩是真的還是假的，只覺得能讓自己開心的就是好東西。”

“AI寶寶”，瞄準(zhǔn)的是中老年群體被忽視的情感需求。有些網(wǎng)友甚至將AI寶寶當(dāng)成了懷孕許愿池，希望自己的家人也能有一個視頻里這樣的寶寶，并紛紛在評論區(qū)留言“接寶寶”。

圖源：抖音截圖

如果單純只是把這當(dāng)作消遣也無妨，令人擔(dān)心的是，這些AI形象說的話，家里老人全都信。劉然（化名）的外公經(jīng)常往家族群里轉(zhuǎn)發(fā)一些養(yǎng)生專家的科普，有次劉然點開看才發(fā)現(xiàn)，外公嘴里的專家其實是AI創(chuàng)作的數(shù)字人。

劉然醫(yī)學(xué)專業(yè)畢業(yè)，今年已經(jīng)是腎科博士學(xué)位在讀，但外公提到養(yǎng)生治病相關(guān)的話題還是會跟他抬杠。比起自己的親外孫，外公更相信短視頻里的數(shù)字人“專家”，即使這個賬號里的專家并沒有任何權(quán)威認證。

圖源：抖音截圖

在很多年輕人看來，家里長輩信任數(shù)字人和當(dāng)初沉迷“反智營銷號”一樣令人費解。劉然對此非常無奈，外公當(dāng)初也是讀過大學(xué)的，“網(wǎng)上所謂的‘老師’和‘專家’隨口說幾句，他們就覺得是真理，卻不愿意聽一聽身邊親人的實話。”

“趣解商業(yè)”觀察到，如今社交平臺上充斥著針對中老年群體的AI賬號，這些賬號的視頻內(nèi)容，大多是由AI生成的真人形象，通過套近乎、講哲理等“話術(shù)”，吸引中老年人的關(guān)注和信任；有些AI賬號，已經(jīng)靠這份“信任”通過櫥窗帶貨賺起了第一桶金。

圖源：視頻號截圖

例如上圖中的視頻號“·古元·”，瞄準(zhǔn)的就是渴望關(guān)懷的高齡女性。視頻大多以“我的寶貝姐姐開頭”，發(fā)布的視頻大多圍繞老年女性的生活常態(tài)展開，“我發(fā)覺姐姐近來面容憔悴，弟弟跑了好多地方，找到這款面霜特別適合姐姐”，隨后引導(dǎo)用戶點擊主頁關(guān)注、下單。

雖然該賬號發(fā)布視頻數(shù)量不多，但櫥窗商品的銷量已突破三位數(shù)；評論區(qū)大多是對被視頻里“男人”溫柔話語打動的用戶。

圖源：視頻號截圖

事實上，養(yǎng)生、情感內(nèi)容一直是“收割”老年人的重災(zāi)區(qū)，被騙的人通常與受教育程度無關(guān)，而是沉迷視頻帶來的情緒價值。

據(jù)“藍鯨新聞”此前報道，收割老人的數(shù)字人視頻如今已經(jīng)發(fā)展成一條灰色產(chǎn)業(yè)鏈。市面上涌現(xiàn)出制作數(shù)字人的外包公司，服務(wù)價格在5000-10000元不等。商家會幫助客戶搭建數(shù)字人形象，指導(dǎo)運營賬號。

很多AI賬號是利用老年人的同理心賣貨，但值得注意的是，隨著技術(shù)的快速迭代，針對中老年的AI換臉的詐騙案也開始頻繁出現(xiàn)。

兩會期間，除了雷軍吐槽自己被做成AI，政協(xié)委員靳東也提到了AI換臉的危害，他表示，一些喜歡我影視劇的觀眾，被AI換臉視頻騙得很慘。

圖源：視頻截圖

據(jù)“趣解商業(yè)”了解，去年，就曾有一位江西老人被換臉視頻蒙蔽，要貸款200萬給網(wǎng)戀男友“靳東”拍戲。

02.AI發(fā)展和治理“兩手抓”

人們警惕提高的速度，跟不上技術(shù)進步的速度；不僅老年人，有一定科技閱歷的年輕人也深受AI造假的迫害。

據(jù)《北京商報》報道，2024年2月有詐騙犯運用Deepfake 深度偽造技術(shù)，制作出公司高層發(fā)言視頻，誘導(dǎo)職員先后15次將2億港元轉(zhuǎn)至指定賬戶。

除此之外，還有用AI換臉真人制作色情影片、盜刷醫(yī)保的違法案例。

杭州曾有人通過AI換臉偽造女明星涉黃視頻，甚至還組建群聊，滿足定制換臉色情影片的需求，根據(jù)時長、視頻難度收取相應(yīng)的費用，杭州蕭山檢察最終在該群內(nèi)查獲的淫穢視頻高達1200余部。

圖源：央視新聞截圖

AI讓造假越來越容易。詐騙能根據(jù)后果量刑，但想要根除互聯(lián)網(wǎng)上AI虛假信息卻并不容易。

在去年底的西藏定日發(fā)生地震后，一張“小男孩被埋”的圖片在社交媒體上瘋狂流傳，但最后被證實是AI生成；今年1月洛杉磯爆發(fā)山火，好萊塢標(biāo)志牌著火的照片，在國內(nèi)外社交平臺上瘋傳，隨州這張照片也被官方媒體辟謠說是由AI偽造。令人憂慮的是，在官方辟謠定論之后，至今仍有不少網(wǎng)友將這些AI圖片當(dāng)作真實照片。

圖源：微博截圖

無底線造假必然要付出代價。北京周泰律師事務(wù)所張子航律師表示，在公共事件中，故意歪曲事實，用AI或者其他技術(shù)手段制作圖片、視頻，并在社交平臺傳播造成負面影響的，首先要追究的是制作者的責(zé)任，制作者面臨的可能是行政責(zé)任，也可能是刑事責(zé)任。此外，發(fā)布虛假信息的社交平臺，也有可能要承擔(dān)法律責(zé)任。

“AI安全”同樣也是今年的兩會熱詞。全國政協(xié)委員、奇安信科技集團董事長齊向東提議，針對人工智能安全問題，要從技術(shù)保障、制度保障、成果應(yīng)用三方面入手，系統(tǒng)提升安全能力。

全國政協(xié)委員、360集團創(chuàng)始人周鴻祎認為，傳統(tǒng)網(wǎng)絡(luò)安全的解題方法解決不了人工智能的安全問題。智能體的安全、知識數(shù)據(jù)的安全、客戶端的安全、基座模型的安全，構(gòu)成人工智能安全的新領(lǐng)域。他建議，應(yīng)由既懂安全又懂AI的企業(yè)牽頭，以模制模，通過打造安全大模型來解決大模型的應(yīng)用安全問題。

圖源：微博截圖

如今，各平臺都在加強對AI內(nèi)容的治理。抖音、視頻號、小紅書等都推出了針對AI治理的管理政策。“趣解商業(yè)”了解到，騰訊等互聯(lián)網(wǎng)公司已經(jīng)在研究檢測AIGC的第三方工具，這些工具根據(jù)相似檢索、內(nèi)容檢測和水印追溯等方法，支持文本、圖片等AI生成內(nèi)容的檢測。

在頭部互聯(lián)網(wǎng)公司從事AI研究的Lisa表示，如今生成內(nèi)容越來越逼真，真實圖片與生成圖片的特征差異越來越小，檢測工具的模型學(xué)習(xí)難度其實也在增加。

想要減少被AI蒙騙的發(fā)生，需要平臺監(jiān)管、用戶意識提高以及相關(guān)法律法規(guī)完善等多方合力。

2024年9月14日，國家互聯(lián)網(wǎng)信息辦公室發(fā)布了《人工智能生成合成內(nèi)容標(biāo)識辦法（征求意見稿）》公開征求意見的通知，以規(guī)范人工智能生成合成內(nèi)容標(biāo)識，維護國家安全和社會公共利益，保護公民、法人和其他組織的合法權(quán)益。多項規(guī)定和監(jiān)管政策的相繼落地，讓剛性治理有了更多具體的抓手。

新的技術(shù)進步呼吁新的監(jiān)管體系，而這一點并不能完全指望科技商業(yè)公司的自我約束，需要監(jiān)管方、平臺方的共同努力。盡管AI的應(yīng)用范圍廣泛且難以限定，但法律和道德的邊界始終清晰；未來，政策監(jiān)管和平臺審核的力度必然會更加深入，社交平臺上的內(nèi)容生態(tài)還會因此發(fā)生哪些改變，值得進一步關(guān)注。