国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

亞馬遜推薦算法翻車3年,張量計(jì)算把搜索準(zhǔn)確率拉回了87%

0
分享至


2023年Q3,亞馬遜內(nèi)部測試組發(fā)現(xiàn)個(gè)詭異現(xiàn)象:用戶搜"防水藍(lán)牙音箱",前10個(gè)結(jié)果里有4個(gè)是充電寶,2個(gè)是耳機(jī)收納盒。推薦系統(tǒng)的點(diǎn)擊率暴跌23%,退貨率卻漲了17%。

這不是推薦算法"不懂你",是數(shù)學(xué)工具選錯(cuò)了戰(zhàn)場。

向量搜索的瓶頸:當(dāng)"相似"變成"近似"

傳統(tǒng)推薦系統(tǒng)把商品和用戶都變成高維向量(一種用數(shù)字列表表示特征的技術(shù)),靠計(jì)算夾角余弦找相似。這套方法在2018年前夠用,因?yàn)樯唐穾熘挥袔浊fSKU,用戶畫像也簡單。

但2020年后,電商的復(fù)雜度指數(shù)級(jí)爆炸。一件沖鋒衣同時(shí)屬于"戶外裝備""通勤穿搭""送禮清單"三個(gè)場景;一個(gè)用戶上午看露營帳篷,下午搜嬰兒推車——向量空間里的單點(diǎn)表示,根本抓不住這種多維交叉關(guān)系。

亞馬遜機(jī)器學(xué)習(xí)團(tuán)隊(duì)負(fù)責(zé)人Alex Spiro在2023年 re:Invent 大會(huì)上打了個(gè)比方:「向量搜索像在二維地圖找餐廳,只能問"離我多近"。但用戶實(shí)際想問的是"適合約會(huì)、有露臺(tái)、人均200以內(nèi)、今晚有位"——這是四個(gè)獨(dú)立維度的同時(shí)約束。」

更麻煩的是"多模態(tài)"內(nèi)容。一張商品圖里,背景是雪山(場景)、主體是紅色(顏色)、模特穿L碼(尺碼)。向量模型把這些壓縮成一坨數(shù)字,查詢時(shí)只能整體匹配,無法單獨(dú)提取"紅色"或"L碼"做篩選。

結(jié)果?系統(tǒng)把"紅色羽絨服"和"紅色連衣裙"算成高度相似,因?yàn)樗鼈兊囊曈X向量確實(shí)很近。用戶罵罵咧咧關(guān)掉頁面。

張量分解:把"一團(tuán)亂麻"拆成可組合的零件

張量(tensor)是向量的高維推廣。如果說向量是列表,矩陣是表格,張量就是Excel里帶多個(gè)工作簿的三維數(shù)據(jù)塊。

關(guān)鍵突破來自一種叫CP分解的數(shù)學(xué)操作:把一個(gè)龐大的多維張量,拆解成若干"因子矩陣"的乘積。每個(gè)因子對(duì)應(yīng)一個(gè)獨(dú)立維度——顏色、場景、價(jià)格帶、用戶意圖——查詢時(shí)可以自由組合。

Google Research 2022年的論文《Tensor-Train Decomposition for Large-Scale Recommendation》驗(yàn)證了這條路:用張量替代向量表示用戶-商品交互,召回準(zhǔn)確率提升34%,計(jì)算延遲反而下降18%。

亞馬遜在2023年底跟進(jìn)。他們的新系統(tǒng)把商品屬性拆成12個(gè)獨(dú)立因子矩陣,用戶實(shí)時(shí)行為另建3個(gè)動(dòng)態(tài)因子。查詢"防水藍(lán)牙音箱"時(shí),系統(tǒng)不再匹配整體向量,而是分別檢索"防水等級(jí)""音頻設(shè)備""戶外場景"三個(gè)因子,再取交集。

內(nèi)部A/B測試數(shù)據(jù):搜索相關(guān)性評(píng)分從0.61拉到0.87,加購轉(zhuǎn)化率提升19%。


工程落地的暗礁:不是算不快,是拆不對(duì)

張量計(jì)算的理論優(yōu)勢很明顯,但電商場景有特殊的臟活。

第一是維度爆炸。12個(gè)因子矩陣,每個(gè)有5000個(gè)潛在特征,組合空間是5000^12——比宇宙原子數(shù)還多。必須做"稀疏化"剪枝:只保留實(shí)際出現(xiàn)過的屬性組合,把計(jì)算量壓到可控范圍。

第二是實(shí)時(shí)性矛盾。用戶滑動(dòng)商品流時(shí),行為數(shù)據(jù)每秒更新。因子矩陣如果全量重算,延遲扛不住。亞馬遜的解法是"增量更新":主干矩陣日級(jí)全量訓(xùn)練,用戶個(gè)人因子用在線梯度下降實(shí)時(shí)微調(diào)。

第三是解釋性黑洞。向量搜索至少能告訴你"這兩件商品向量夾角小",張量分解后的多因子交集,運(yùn)營人員根本看不懂為什么推了這件。亞馬遜加了層"歸因翻譯":把因子權(quán)重映射回可讀的屬性標(biāo)簽,輸出"推薦原因:防水場景匹配+近期瀏覽同類"。

Netflix的推薦團(tuán)隊(duì)在2024年Q1技術(shù)博客中坦承,他們?cè)囘^張量路線,最終退回改進(jìn)版向量方案。原因很實(shí)在:「影視內(nèi)容的維度比商品少,用戶意圖也更單一(就是看片子),張量的復(fù)雜度收益覆蓋不了維護(hù)成本?!?/p>

行業(yè)擴(kuò)散:從電商到工業(yè)質(zhì)檢的意外跳躍

張量計(jì)算在推薦系統(tǒng)的成功,正被復(fù)制到意想不到的領(lǐng)域。

西門子成都工廠的視覺質(zhì)檢系統(tǒng),原本用向量匹配缺陷圖片。但"劃痕"在金屬表面和塑料表面的視覺特征完全不同,向量模型經(jīng)?;煜?。2024年改用張量分解后,把"缺陷類型""材質(zhì)""光照條件"拆成獨(dú)立因子,誤檢率從4.7%降到0.9%。

更前沿的是藥物分子篩選。輝瑞和MIT的合作項(xiàng)目用張量表示分子結(jié)構(gòu):原子類型是一維,化學(xué)鍵是另一維,三維空間坐標(biāo)是第三維。傳統(tǒng)向量方法只能整體比較分子相似度,張量分解可以單獨(dú)優(yōu)化"與靶點(diǎn)結(jié)合能力"這一因子,把候選分子篩選效率提升40倍。

回到電商戰(zhàn)場,阿里國際站在2024年6月上線"多意圖搜索",底層同樣是張量架構(gòu)。他們的特殊挑戰(zhàn)是跨境場景:同一個(gè)英文query,美國用戶要的是"批發(fā)價(jià)",東南亞用戶要的是"免運(yùn)費(fèi)"——必須在因子層就把地域偏好拆開。

張量不是萬能藥。它的核心假設(shè)是"維度可分解",如果業(yè)務(wù)場景本身混沌糾纏(比如社交內(nèi)容的情緒+話題+人際關(guān)系),強(qiáng)行拆分反而失真。但在商品屬性清晰、用戶意圖可拆解的領(lǐng)域,這把數(shù)學(xué)手術(shù)刀正在重新劃定推薦系統(tǒng)的性能天花板。

亞馬遜搜索團(tuán)隊(duì)在內(nèi)部復(fù)盤文檔里寫了一句挺實(shí)在的話:「我們花了18個(gè)月才搞明白,問題不是算法不夠聰明,是表示方法太懶了?!?/p>

當(dāng)你的用戶下次搜"適合送女朋友的降噪耳機(jī)",系統(tǒng)能不能同時(shí)理解"降噪"是功能需求、"送女朋友"是場景約束、"適合"是價(jià)格暗示——這取決于你愿不愿意把一維的向量,展開成多維的張量。問題是,你的技術(shù)債允許你重構(gòu)底層嗎?

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
長護(hù)險(xiǎn)制度全面推開!國家醫(yī)保局:參保人無論來自農(nóng)村還是城市,從同一個(gè)資金池報(bào)銷費(fèi)用

長護(hù)險(xiǎn)制度全面推開!國家醫(yī)保局:參保人無論來自農(nóng)村還是城市,從同一個(gè)資金池報(bào)銷費(fèi)用

紅星新聞
2026-03-26 11:28:05
京東外賣虧了466億,但劉強(qiáng)東笑了

京東外賣虧了466億,但劉強(qiáng)東笑了

新浪財(cái)經(jīng)
2026-03-25 10:04:53
黎真主黨導(dǎo)彈襲擊以國防部及軍營

黎真主黨導(dǎo)彈襲擊以國防部及軍營

北青網(wǎng)-北京青年報(bào)
2026-03-26 10:19:17
CCTV5直播!國足熱身“世界杯新貴”,15.9萬人小國,邵佳一首秀

CCTV5直播!國足熱身“世界杯新貴”,15.9萬人小國,邵佳一首秀

汪星人喲
2026-03-26 19:13:15
杜淳寵妻太狠了!王燦戴4條金手鏈,口紅整箱買像批發(fā)?

杜淳寵妻太狠了!王燦戴4條金手鏈,口紅整箱買像批發(fā)?

娛樂領(lǐng)航家
2026-03-26 00:00:03
國金證券:長期來看黃金有望開啟新一輪大牛市

國金證券:長期來看黃金有望開啟新一輪大牛市

財(cái)聯(lián)社
2026-03-26 08:08:04
震驚!網(wǎng)傳福建一公司提醒員工,出現(xiàn)心梗前兆,先保存文件再救命

震驚!網(wǎng)傳福建一公司提醒員工,出現(xiàn)心梗前兆,先保存文件再救命

火山詩話
2026-03-26 06:50:40
22歲陳熠3-0橫掃挺進(jìn)四強(qiáng):國乒最后一張門票,她已無路可退

22歲陳熠3-0橫掃挺進(jìn)四強(qiáng):國乒最后一張門票,她已無路可退

羅納爾說個(gè)球
2026-03-26 18:04:03
36歲中國大哥在非洲開“手機(jī)網(wǎng)吧”,生意火爆到需要排隊(duì)取號(hào),當(dāng)事人:投入很小,僅花了點(diǎn)流量錢,最火的時(shí)候10來個(gè)人看一個(gè)手機(jī)

36歲中國大哥在非洲開“手機(jī)網(wǎng)吧”,生意火爆到需要排隊(duì)取號(hào),當(dāng)事人:投入很小,僅花了點(diǎn)流量錢,最火的時(shí)候10來個(gè)人看一個(gè)手機(jī)

觀威海
2026-03-26 09:19:03
“14天12板”!000908,復(fù)牌后上演“地天板”

“14天12板”!000908,復(fù)牌后上演“地天板”

大眾證券報(bào)
2026-03-26 17:58:54
廣西一挖掘機(jī)過橋時(shí)撞斷護(hù)欄墜湖,司機(jī)遺體已被打撈上岸,墜橋原因還在調(diào)查中

廣西一挖掘機(jī)過橋時(shí)撞斷護(hù)欄墜湖,司機(jī)遺體已被打撈上岸,墜橋原因還在調(diào)查中

大風(fēng)新聞
2026-03-26 18:09:04
徐陽點(diǎn)評(píng)U23國足2-2泰國:句句實(shí)在話,理性看球更懂賽場本質(zhì)!

徐陽點(diǎn)評(píng)U23國足2-2泰國:句句實(shí)在話,理性看球更懂賽場本質(zhì)!

田先生籃球
2026-03-26 06:00:06
315曝光10個(gè)最毒食黑名單!第8個(gè)你幾乎天天在吃,看完脊背發(fā)涼

315曝光10個(gè)最毒食黑名單!第8個(gè)你幾乎天天在吃,看完脊背發(fā)涼

現(xiàn)代小青青慕慕
2026-03-24 08:13:54
張雪峰離世的警示:人一定要學(xué)會(huì)避讖

張雪峰離世的警示:人一定要學(xué)會(huì)避讖

代偉看世界
2026-03-26 15:21:09
伊朗發(fā)動(dòng)第81波行動(dòng),打擊以色列70多處目標(biāo)!內(nèi)塔尼亞胡:48小時(shí)內(nèi)盡可能多摧毀伊朗軍工設(shè)施;伊朗外長:以將美國推向沖突,沒有談判余地

伊朗發(fā)動(dòng)第81波行動(dòng),打擊以色列70多處目標(biāo)!內(nèi)塔尼亞胡:48小時(shí)內(nèi)盡可能多摧毀伊朗軍工設(shè)施;伊朗外長:以將美國推向沖突,沒有談判余地

每日經(jīng)濟(jì)新聞
2026-03-26 08:26:06
短短1年,靈活就業(yè)者暴增4千萬

短短1年,靈活就業(yè)者暴增4千萬

深度報(bào)
2026-03-23 21:47:58
網(wǎng)友在烏茲別克斯坦偶遇“佛山三水城巴”,佛山方面回應(yīng):車子被轉(zhuǎn)賣到了國外

網(wǎng)友在烏茲別克斯坦偶遇“佛山三水城巴”,佛山方面回應(yīng):車子被轉(zhuǎn)賣到了國外

極目新聞
2026-03-26 17:01:19
東契奇湖人生涯第16次斬獲40+ 還差兩場追平詹姆斯

東契奇湖人生涯第16次斬獲40+ 還差兩場追平詹姆斯

北青網(wǎng)-北京青年報(bào)
2026-03-26 20:51:03
喜歡把家里打掃得很干凈的人,往往會(huì)有這3種命運(yùn),很準(zhǔn)!

喜歡把家里打掃得很干凈的人,往往會(huì)有這3種命運(yùn),很準(zhǔn)!

品讀時(shí)刻
2026-02-12 00:06:27
特朗普拒絕承認(rèn)對(duì)伊朗打擊是戰(zhàn)爭

特朗普拒絕承認(rèn)對(duì)伊朗打擊是戰(zhàn)爭

界面新聞
2026-03-26 15:51:22
2026-03-26 21:23:00
閃存獵手
閃存獵手
全網(wǎng)蹲好價(jià)的野生捕手,算力與羊毛都不可辜負(fù)。
167文章數(shù) 0關(guān)注度
往期回顧 全部

科技要聞

Meta高管狂分百億期權(quán),700名員工卻下崗

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

體育要聞

申京努力了,然而杜蘭特啊

娛樂要聞

劉曉慶妹妹發(fā)聲!稱姐姐受身邊人挑撥

財(cái)經(jīng)要聞

油價(jià)"馴服"特朗普?一到100美元就TACO

汽車要聞

一汽奧迪A6L e-tron開啟預(yù)售 CLTC最大續(xù)航815km

態(tài)度原創(chuàng)

藝術(shù)
健康
教育
手機(jī)
時(shí)尚

藝術(shù)要聞

哪一座橋不是風(fēng)景?

轉(zhuǎn)頭就暈的耳石癥,能開車上班嗎?

教育要聞

來上課了——高考閱讀難題大綜合(細(xì)節(jié)+主旨+含義)(下)第1段

手機(jī)要聞

OPPO K15 Pro系列突然官宣:天璣9500s+主動(dòng)散熱,4月1日發(fā)布

上新|| 她們說,找到了自己的人生裙子!

無障礙瀏覽 進(jìn)入關(guān)懷版