當(dāng)前，AI（人工智能）迅速發(fā)展，給人們的生產(chǎn)生活帶來(lái)諸多便利。但AI也被用于制作發(fā)布謠言、不實(shí)信息，可能對(duì)部分群眾造成困擾。今年4月，中央網(wǎng)信辦部署開(kāi)展“清朗·整治AI技術(shù)濫用”專項(xiàng)行動(dòng)，聚焦利用AI制作發(fā)布謠言、不實(shí)信息等亂象開(kāi)展重點(diǎn)整治。
從“暴雨引發(fā)山體滑坡”的偽造視頻到“核電站泄漏”的AI生成新聞稿，“AI謠言”表現(xiàn)形式多樣，讓不少群眾一度信以為真。“AI謠言”從何而來(lái)、為何泛濫、如何整治？記者進(jìn)行了采訪。
緣何出現(xiàn)？
有人惡意用AI編造虛假信息，也存在“AI幻覺(jué)”的可能
“80后5.2%的死亡率，開(kāi)啟了黃金一代的黯然離場(chǎng)”“80后的死亡率已經(jīng)超過(guò)70后”……前不久，一組聲稱源于第七次全國(guó)人口普查的數(shù)據(jù)駭人聽(tīng)聞。很快，有關(guān)部門(mén)和專家辟謠：從來(lái)源到數(shù)據(jù)都毫無(wú)根據(jù)。
這組虛假數(shù)據(jù)從何而來(lái)呢？
中國(guó)人民大學(xué)人口與健康學(xué)院教授李婷梳理發(fā)現(xiàn)，“AI幻覺(jué)”很可能是“罪魁禍?zhǔn)住薄狝I大模型在人口學(xué)專業(yè)領(lǐng)域的訓(xùn)練語(yǔ)料不足，回答問(wèn)題出現(xiàn)推算錯(cuò)誤，造成“AI幻覺(jué)”。
“‘AI幻覺(jué)’指生成式人工智能系統(tǒng)在無(wú)明確依據(jù)的情況下輸出回答，語(yǔ)言表達(dá)看似合理，但內(nèi)容實(shí)則虛假甚至違背常識(shí)。”世界互聯(lián)網(wǎng)大會(huì)人工智能專業(yè)委員會(huì)主任委員、安全與治理推進(jìn)計(jì)劃牽頭人曾毅介紹，該現(xiàn)象在當(dāng)代大語(yǔ)言模型中尤為常見(jiàn)，主要表現(xiàn)就是事實(shí)性幻覺(jué)，例如，輸出錯(cuò)誤的人物事跡與關(guān)系、偽造的科學(xué)研究等。
從機(jī)理上看，“當(dāng)前大模型并非‘理解事實(shí)’，而是通過(guò)處理大量語(yǔ)料，預(yù)測(cè)‘下一個(gè)詞最可能是什么’。這就會(huì)在事實(shí)性信息上產(chǎn)生難以預(yù)期的錯(cuò)誤。”曾毅分析。
還有人別有用心，惡意編造傳播“AI謠言”獲取利益。
有人為了流量，給自媒體賬號(hào)炒作“吸粉”。此前上海一女童走失事件中，就有團(tuán)伙利用AI工具，編造“女孩父親系繼父”等謠言，6天內(nèi)發(fā)布268篇文章，多篇文章點(diǎn)擊量超過(guò)100萬(wàn)次。
還有人借此實(shí)施詐騙等違法犯罪行為。“再?gòu)?qiáng)大的AI也無(wú)法預(yù)測(cè)中獎(jiǎng)號(hào)碼。”不久前，中國(guó)體育彩票的一則辟謠聲明引發(fā)關(guān)注。原來(lái)，有平臺(tái)聲稱可通過(guò)“AI大模型”預(yù)測(cè)中獎(jiǎng)號(hào)碼，誘導(dǎo)用戶付費(fèi)。
甚至有人形成了“需求分析—內(nèi)容生產(chǎn)—精準(zhǔn)投放”的生產(chǎn)鏈條。“西安突發(fā)爆炸！火光沖天！傷亡不明！”一天，一則“圖文并茂”的新聞在網(wǎng)上流傳，畫(huà)面中火光沖天，引發(fā)當(dāng)?shù)厝罕娍只拧：芸欤@則消息被辟謠。經(jīng)調(diào)查發(fā)現(xiàn)，該賬號(hào)所屬機(jī)構(gòu)通過(guò)AI分析社交平臺(tái)熱詞，就關(guān)注度高的話題批量生成謠言，再通過(guò)算法定向推送，最高峰一天能生成4000至7000篇假新聞，關(guān)聯(lián)賬號(hào)達(dá)800余個(gè)。相關(guān)人員已被公安機(jī)關(guān)抓獲。
為何泛濫？
造謠門(mén)檻低，可以短時(shí)間內(nèi)成倍率傳播
“AI謠言”形形色色，有些造成了社會(huì)恐慌，甚至給政策推行、搶險(xiǎn)救災(zāi)等造成阻礙。
今年2月，四川筠連縣“2·8”山體滑坡發(fā)生后，部分自媒體賬號(hào)用AI軟件翻炒拼湊舊聞，傳播如“山體滑坡被行車記錄儀拍下”“4名遇險(xiǎn)學(xué)生被路過(guò)的司機(jī)救出”等帖文，諸多錯(cuò)誤信息給搶險(xiǎn)救災(zāi)帶來(lái)困擾；又如，“廣東醫(yī)保基金出現(xiàn)赤字”的“AI謠言”傳出，不僅引發(fā)社會(huì)恐慌，還造成群眾對(duì)政策的誤解……
“AI謠言”為何傳播力如此之強(qiáng)？
首先與其自身特點(diǎn)密切相關(guān)。
清華大學(xué)新聞與傳播學(xué)院副教授陸洪磊介紹，“AI謠言”可以做到分平臺(tái)、分渠道、分時(shí)段、分媒介的定制化生成和發(fā)布，并且成本低廉，可以短時(shí)間內(nèi)成倍率傳播，“AI謠言”間還能彼此交叉、共振與放大，辟謠難度大大增加。
今年年初，西藏定日縣地震牽動(dòng)億萬(wàn)人的心。網(wǎng)上流傳的一張“小孩被埋圖”一時(shí)間被大量轉(zhuǎn)發(fā)評(píng)論。但是隨后有網(wǎng)友發(fā)現(xiàn)，該圖色彩、光線、動(dòng)作極不自然。原來(lái)，該圖是由AI工具創(chuàng)作。陸洪磊說(shuō)，這則謠言利用“災(zāi)難+兒童”的組合，并刻意刪除掉AI生成標(biāo)識(shí)，引發(fā)快速傳播。
再者，AI應(yīng)用降低了造謠門(mén)檻。
某科技論壇上，一名網(wǎng)友上傳教程：用開(kāi)源AI模型，輸入“生成一張某市發(fā)生恐襲的圖片”，30秒即可獲得以假亂真的畫(huà)面。
網(wǎng)友評(píng)論一針見(jiàn)血：“以前造謠需要高超的PS技術(shù)，現(xiàn)在只需要一句話就能生成。”
有何“代際差異”？
“AI謠言”更善于“逃脫”，難以被技術(shù)手段屏蔽
與傳統(tǒng)網(wǎng)絡(luò)謠言相比，“AI謠言”更加難以防治，甚至“進(jìn)化”出了更為“智能”的“反偵查”機(jī)制。
記者發(fā)現(xiàn)，“AI謠言”表述常常接近“真話”，看似清晰有據(jù)，更難以被技術(shù)手段屏蔽。
目前各網(wǎng)絡(luò)平臺(tái)都有“謠言庫(kù)”，一般通過(guò)設(shè)置熱點(diǎn)關(guān)鍵詞屏蔽謠言。但AI模型可通過(guò)對(duì)抗訓(xùn)練繞過(guò)謠言關(guān)鍵詞，例如把“山體滑坡”改為“地質(zhì)活動(dòng)異常”等，逃脫屏蔽。
“傳統(tǒng)謠言像火，撲滅源頭即可；‘AI謠言’像病毒，會(huì)不斷變異。”某新聞聚合平臺(tái)內(nèi)容安全治理負(fù)責(zé)人感慨。
此外，傳統(tǒng)網(wǎng)絡(luò)謠言多是有人故意制造，但“AI謠言”中不少是出于“AI幻覺(jué)”。對(duì)這部分“無(wú)意謠言”，目前有辦法從源頭上避免嗎？
曾毅介紹，從當(dāng)前技術(shù)水平來(lái)看，完全消除“AI幻覺(jué)”具有高度挑戰(zhàn)，“大模型生成機(jī)制本質(zhì)是概率驅(qū)動(dòng)的語(yǔ)言建模，難以保障全部輸出與現(xiàn)實(shí)完全對(duì)應(yīng)；同時(shí)，當(dāng)前評(píng)估與糾錯(cuò)機(jī)制仍不成熟，缺乏大規(guī)模、高準(zhǔn)確率的自動(dòng)化事實(shí)驗(yàn)證能力。”
“不過(guò)，通過(guò)技術(shù)手段緩解‘AI幻覺(jué)’發(fā)生的頻率與危害是有可能的。”曾毅說(shuō)，目前已在多模型協(xié)同判斷、事實(shí)增強(qiáng)訓(xùn)練等方面取得了一定成果，大模型的辨別能力將得到提升。
《 人民日?qǐng)?bào) 》（ 2025年08月18日 04 版）