国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

AI投毒,比你想象的低端得多,也危險得多

0
分享至

最近有媒體做了一個測試,記者花了39.9元,雇了一個"AI內(nèi)容優(yōu)化"團伙,對方用批量生成的軟文往公網(wǎng)上一鋪,幾個小時后,一個完全虛構(gòu)的商品就出現(xiàn)在了AI大模型的推薦榜單里。不是排名靠后,是"名列前茅"。很多人看完的第一反應(yīng)是:"啊,AI推薦可以買水軍?"但我想說,這個理解只對了一半——買水軍是舊時代的玩法,更深的那層是:花39.9元操控的,不只是這次的推薦結(jié)果,而是AI模型學(xué)習(xí)世界的方式本身。這就是數(shù)據(jù)投毒,AI時代最隱蔽、成本最低、危害最持久的攻擊方式。


要理解為什么這件事比"買水軍"嚴重得多,你需要先明白大模型是怎么"學(xué)習(xí)"的。簡單說,大模型的能力來自喂給它的海量訓(xùn)練數(shù)據(jù)——它讀了多少,就"知道"多少,判斷力就是從這些數(shù)據(jù)里提煉出來的。如果訓(xùn)練數(shù)據(jù)是干凈的,模型就會有相對準確的世界觀;如果訓(xùn)練數(shù)據(jù)里混入了"毒",模型的世界觀就會被悄悄歪掉,而且一旦歪了,你不重新訓(xùn)練就很難糾正——那個錯誤的認知已經(jīng)被編碼進了權(quán)重,像一枚釘子釘進了木頭,拔不出來。上面那個測試曝光的攻擊手法有個名字叫GEO投毒:攻擊者批量生成"符合大模型偏好"的內(nèi)容——高原創(chuàng)度、多關(guān)鍵詞、權(quán)威句式——鋪滿公網(wǎng),讓AI在爬取訓(xùn)練數(shù)據(jù)時主動把這些毒內(nèi)容當(dāng)成優(yōu)質(zhì)素材吞進去,之后這個模型給任何人推薦相關(guān)產(chǎn)品時,都會偏向那個被操縱的商品。這不是一次性欺騙,這是永久性污染。

更讓人頭皮發(fā)涼的是,這種攻擊的成本正在快速趨向于零。Anthropic聯(lián)合英國AI安全研究院做過一項實測研究,結(jié)果發(fā)現(xiàn):在一個擁有130億參數(shù)的大模型中,僅需混入250個精心構(gòu)造的惡意網(wǎng)頁,就能穩(wěn)定植入一個可觸發(fā)的后門行為——觸發(fā)特定詞語時,模型會給出攻擊者預(yù)設(shè)的錯誤輸出。更不安的發(fā)現(xiàn)是,參數(shù)越大的模型,對這種微量投毒反而越敏感。對于企業(yè)常用的中小型模型,甚至只需要50個惡意樣本,就能讓推理準確率下降30%以上。換成白話就是:你的AI助手原本能答對10道題,被人悄悄投了幾十條毒之后,就開始穩(wěn)定答錯3道——不是隨機的"幻覺",是在特定方向上被定向控制的錯。


你可能覺得這是大公司和算法工程師的事,跟自己沒關(guān)系。但我想舉一個離普通人近得多的例子:2025年底,某電商企業(yè)的AI推薦系統(tǒng)遭遇了數(shù)據(jù)投毒攻擊,大量偽造的競品好評和自有產(chǎn)品差評被納入訓(xùn)練集,之后這套系統(tǒng)就開始持續(xù)把流量推向競品——這家企業(yè)花了整整兩周才定位到攻擊源頭,直接損失達百萬級銷售額。你在某平臺搜索一個品類,AI給你推薦了某款產(chǎn)品,你信任了它,下單,收到貨發(fā)現(xiàn)完全不是那么回事——你以為是AI"出錯了",其實那個推薦從很久之前就已經(jīng)被人買通了,只不過不是買通了人,而是買通了數(shù)據(jù)。

更讓安全研究者擔(dān)心的是:數(shù)據(jù)投毒正在經(jīng)歷"平民化"。過去,要對一個大模型發(fā)動有效的訓(xùn)練數(shù)據(jù)污染攻擊,需要算法專家、需要大規(guī)模數(shù)據(jù)工程能力——這是國家級攻擊者的游戲。而現(xiàn)在,隨著生成式AI工具的普及,批量生成符合大模型偏好的高質(zhì)量惡意內(nèi)容,幾十元加幾小時就能搞定;隨著開源模型的泛濫,任何人都可以下載一個預(yù)訓(xùn)練模型,往里注入惡意數(shù)據(jù),再重新打包上傳回開源平臺,等著別人下載使用。奇安信在2026年網(wǎng)絡(luò)安全趨勢報告里明確指出,從訓(xùn)練數(shù)據(jù)污染到MCP工具植入,供應(yīng)鏈攻擊已經(jīng)貫穿AI應(yīng)用的全生命周期,而內(nèi)部人員——數(shù)據(jù)標注員、算法工程師、模型運維工程師——的權(quán)限管控已成為重點預(yù)警方向。換句話說,這條攻擊鏈上最薄弱的環(huán)節(jié),可能就是坐在你公司隔壁工位、每天幫模型打標簽的那個同事。


說到這里補充一點,防止陷入純粹的焦慮:數(shù)據(jù)投毒能生效,有一個重要前提——攻擊者能接觸到訓(xùn)練數(shù)據(jù),或者能讓模型主動爬取他們投放的毒內(nèi)容。對于數(shù)據(jù)來源嚴格管控、訓(xùn)練流程封閉的大模型,這種攻擊的難度會大得多。國內(nèi)頭部大模型公司已經(jīng)陸續(xù)建立了訓(xùn)練數(shù)據(jù)清潔流程,國家層面也在推動訓(xùn)練數(shù)據(jù)的合規(guī)審查標準。但現(xiàn)實的問題是:大量中小企業(yè)部署AI時用的是開源模型,數(shù)據(jù)來源沒有經(jīng)過嚴格審計,模型上線后沒有人持續(xù)監(jiān)測輸出是否偏移——在這種情況下,它們其實是完全暴露的。知道了威脅是什么,才能知道該防什么。

讀完這篇,想請你在評論區(qū)聊聊三個問題:你日常用的AI工具——搜索推薦、購物助手、內(nèi)容生成——你有沒有想過它們的訓(xùn)練數(shù)據(jù)來自哪里,有沒有人在里面動過手腳?"AI推薦結(jié)果可以用39.9元買通"這件事,你覺得最該被追責(zé)的是誰——提供投毒服務(wù)的團伙、使用工具的商家,還是沒有做好審查的平臺?最后這個問題是整個專欄想反復(fù)追問的:如果一個AI助手在99%的情況下表現(xiàn)完全正常,只在特定場景下給出被操控過的答案,作為普通用戶,你有沒有任何辦法自己發(fā)現(xiàn)這件事?

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
男人的生理需求能有多難忍?網(wǎng)友:我對我老公只有動物本能

男人的生理需求能有多難忍?網(wǎng)友:我對我老公只有動物本能

帶你感受人間冷暖
2026-02-07 03:58:56
“華人神探”李昌鈺美國家中去世 四個月前回國時老態(tài)龍鐘 輪椅代步

“華人神探”李昌鈺美國家中去世 四個月前回國時老態(tài)龍鐘 輪椅代步

娛樂的硬糖吖
2026-03-28 16:49:28
巴薩暴怒!拉菲尼亞重傷:休戰(zhàn)5周+無緣6場惡戰(zhàn) 弗里克批他太魯莽

巴薩暴怒!拉菲尼亞重傷:休戰(zhàn)5周+無緣6場惡戰(zhàn) 弗里克批他太魯莽

風(fēng)過鄉(xiāng)
2026-03-28 06:12:10
26.7萬!豐田官宣:新車正式發(fā)布

26.7萬!豐田官宣:新車正式發(fā)布

高科技愛好者
2026-03-28 23:00:14
香港馬拉松現(xiàn)場,陳松伶林志玲同框引熱議,這倆真不像同齡人

香港馬拉松現(xiàn)場,陳松伶林志玲同框引熱議,這倆真不像同齡人

雅兒姐游世界
2026-03-27 19:22:50
大外交|美國“帶著炸彈談判”,中方密集外交促和:斡旋伊朗局勢的關(guān)鍵變量

大外交|美國“帶著炸彈談判”,中方密集外交促和:斡旋伊朗局勢的關(guān)鍵變量

澎湃新聞
2026-03-27 22:10:26
中東實戰(zhàn)打出真相!伊朗越猛越顯中國實力,美軍徹底慌了神

中東實戰(zhàn)打出真相!伊朗越猛越顯中國實力,美軍徹底慌了神

小舟談歷史
2026-03-28 04:42:18
這是41歲?布朗尼:上次跟我爸在家單挑,他直接把籃板扣碎了

這是41歲?布朗尼:上次跟我爸在家單挑,他直接把籃板扣碎了

懂球帝
2026-03-28 16:10:11
前白宮經(jīng)濟學(xué)家:美國升級伊朗戰(zhàn)爭的概率超五成 料美聯(lián)儲別無選擇只能加息

前白宮經(jīng)濟學(xué)家:美國升級伊朗戰(zhàn)爭的概率超五成 料美聯(lián)儲別無選擇只能加息

財聯(lián)社
2026-03-27 23:14:53
67歲王朔現(xiàn)狀:只能死在這兒了,女兒不讓死屋里,怕房子不好賣

67歲王朔現(xiàn)狀:只能死在這兒了,女兒不讓死屋里,怕房子不好賣

談史論天地
2026-03-27 17:05:03
特朗普正式宣布美國取勝!稱伊朗政權(quán)已被推翻!?;馂榫壬习偃f人

特朗普正式宣布美國取勝!稱伊朗政權(quán)已被推翻!?;馂榫壬习偃f人

近史閣
2026-03-28 23:31:30
17歲費曼長到188cm!陪媽媽看展太帥了,王麗萍罕見出鏡氣質(zhì)絕了

17歲費曼長到188cm!陪媽媽看展太帥了,王麗萍罕見出鏡氣質(zhì)絕了

觀魚聽雨
2026-03-27 16:48:38
今日金價:大家坐好扶穩(wěn)了,下周金價或?qū)⒅噩F(xiàn)15年歷史行情!

今日金價:大家坐好扶穩(wěn)了,下周金價或?qū)⒅噩F(xiàn)15年歷史行情!

趣味萌寵的日常
2026-03-28 17:01:21
防守能力大幅提升了!湖人替補中鋒的綜合能力確實是進步了不少?

防守能力大幅提升了!湖人替補中鋒的綜合能力確實是進步了不少?

稻谷與小麥
2026-03-29 01:02:57
越扒越有!張雪峰去世早有預(yù)兆,他的2個不良愛好,或成催命符

越扒越有!張雪峰去世早有預(yù)兆,他的2個不良愛好,或成催命符

孤城落日
2026-03-28 03:41:07
很多人只看到了"老頭樂起訴小米"的荒誕感,卻沒看到雷軍不敢戀戰(zhàn)背后的“惶恐”

很多人只看到了"老頭樂起訴小米"的荒誕感,卻沒看到雷軍不敢戀戰(zhàn)背后的“惶恐”

新浪財經(jīng)
2026-03-28 00:31:15
3.28日早評|中東升級!美股大跌!A股要爆了!

3.28日早評|中東升級!美股大跌!A股要爆了!

龍行天下虎
2026-03-28 11:44:12
「深田詠美」宣布破產(chǎn),背上8000萬債務(wù),男朋友也分手了

「深田詠美」宣布破產(chǎn),背上8000萬債務(wù),男朋友也分手了

孤獨的獨角獸影視
2026-03-27 09:30:07
55年授銜,當(dāng)主席看到名單中有個熟悉的名字,大筆一揮:他不是少將

55年授銜,當(dāng)主席看到名單中有個熟悉的名字,大筆一揮:他不是少將

睡前講故事
2025-12-12 13:58:11
快訊!伊朗導(dǎo)彈打不完的真正秘密!

快訊!伊朗導(dǎo)彈打不完的真正秘密!

達文西看世界
2026-03-28 10:58:45
2026-03-29 01:40:49
待月聽濤
待月聽濤
對牛談琴
14文章數(shù) 30關(guān)注度
往期回顧 全部

科技要聞

華為盤古大模型負責(zé)人王云鶴確認離職

頭條要聞

美媒:和歐盟"外長"發(fā)生激烈交鋒 魯比奧"顯然很惱火"

頭條要聞

美媒:和歐盟"外長"發(fā)生激烈交鋒 魯比奧"顯然很惱火"

體育要聞

“我是全家最差勁的運動員”

娛樂要聞

陳牧馳陳冰官宣得子 曬一家三口握拳照

財經(jīng)要聞

臥底"科技與狠活"培訓(xùn):化工調(diào)味劑泛濫

汽車要聞

置換補貼價4.28萬起 第五代宏光MINIEV正式上市

態(tài)度原創(chuàng)

房產(chǎn)
數(shù)碼
手機
親子
公開課

房產(chǎn)要聞

首日430組來訪,單日120組認籌!??谑讉€真四代,徹底爆了!

數(shù)碼要聞

蘋果或重啟與長江存儲合作 國行機型擬采用國產(chǎn)NAND

手機要聞

華為手機全面回歸!暢享90 Pro Max下周首銷:1699元起

親子要聞

小孩子能口無遮攔到什么程度!網(wǎng)友:恨不得當(dāng)場找個地縫鉆進去

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關(guān)懷版