国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

亞馬遜推薦算法翻車(chē)3年,一個(gè)數(shù)學(xué)工具讓它翻身

0
分享至


2023年,亞馬遜內(nèi)部有個(gè)數(shù)據(jù)讓產(chǎn)品經(jīng)理失眠:用戶(hù)搜索"防水手機(jī)殼",前3個(gè)推薦里2個(gè)是iPhone 7的殼子——那款手機(jī)已經(jīng)停產(chǎn)5年了。

這不是個(gè)例。當(dāng)時(shí)平臺(tái)有34%的搜索返回結(jié)果包含已下架商品,用戶(hù)點(diǎn)進(jìn)去才發(fā)現(xiàn)"該商品無(wú)法購(gòu)買(mǎi)"。推薦系統(tǒng)的核心邏輯是"用戶(hù)買(mǎi)了A,所以推薦B",但當(dāng)商品生命周期越來(lái)越短,這套基于用戶(hù)行為矩陣的協(xié)同過(guò)濾(Collaborative Filtering)開(kāi)始集體失靈。

問(wèn)題出在數(shù)據(jù)的"形狀"上。

矩陣的崩潰:當(dāng)二維表格裝不下三維世界

傳統(tǒng)推薦系統(tǒng)把用戶(hù)和商品拍扁成一張大表格:行是用戶(hù),列是商品,格子里的數(shù)字是評(píng)分或點(diǎn)擊。這套方法在Netflix年代管用,因?yàn)殡娪皫?kù)相對(duì)穩(wěn)定,一部《肖申克的救贖》能被推薦20年。

但電商場(chǎng)景變了。商品有SKU(庫(kù)存單位)、顏色、尺寸、季節(jié)屬性;用戶(hù)有場(chǎng)景、時(shí)段、地理位置。把這些全塞進(jìn)二維矩陣,就像用Excel管理一家超市—— technically可行,實(shí)際上災(zāi)難。

亞馬遜的工程師試過(guò)加更多列:給每個(gè)商品打上200+標(biāo)簽,把"用戶(hù)-商品"矩陣擴(kuò)展成"用戶(hù)-商品-時(shí)間""用戶(hù)-商品-地點(diǎn)"的多維結(jié)構(gòu)。結(jié)果矩陣變得極其稀疏:99.7%的格子是空的,計(jì)算資源燒在填零上。

「我們像是在用漁網(wǎng)撈水?!箒嗰R遜應(yīng)用科學(xué)家李沐在2023年Re:Invent大會(huì)上回憶,「網(wǎng)格越細(xì),漏掉的東西越多?!?/p>


轉(zhuǎn)機(jī)來(lái)自一個(gè)被冷落了十年的數(shù)學(xué)工具:張量(Tensor)。

張量登場(chǎng):給數(shù)據(jù)升維,而不是加列

張量不是什么新發(fā)明。物理學(xué)家用它描述應(yīng)力分布,愛(ài)因斯坦靠它寫(xiě)廣義相對(duì)論。簡(jiǎn)單說(shuō),標(biāo)量是0維(一個(gè)數(shù)),向量是1維(一串?dāng)?shù)),矩陣是2維(一張表),張量是n維——可以是3維、4維、任意維。

關(guān)鍵洞察:張量不是"更大的矩陣",而是完全不同的數(shù)據(jù)結(jié)構(gòu)。矩陣乘法有嚴(yán)格的行列匹配規(guī)則,張量運(yùn)算則更靈活,能捕捉多維度之間的耦合關(guān)系。

亞馬遜團(tuán)隊(duì)重新設(shè)計(jì)了推薦架構(gòu)。他們把"用戶(hù)-商品-時(shí)間-場(chǎng)景"建模成一個(gè)4維張量,然后用張量分解(Tensor Decomposition)技術(shù)壓縮信息。這有點(diǎn)像JPEG壓縮圖片:保留核心特征,扔掉冗余噪聲。

具體做法是CP分解(CANDECOMP/PARAFAC分解),把高維張量拆成多個(gè)低秩因子的組合。打個(gè)比方:一道菜的味道可以分解為"甜、咸、酸、辣"四個(gè)基底的加權(quán)組合,張量分解就是在找數(shù)據(jù)里的"味覺(jué)基底"。

2024年上線(xiàn)的新系統(tǒng),把推薦準(zhǔn)確率提升了23%,但更重要的是召回率(Recall)——找到用戶(hù)真正可能買(mǎi)的東西,而不是安全地推薦爆款。那個(gè)iPhone 7手機(jī)殼的問(wèn)題,根源在于舊系統(tǒng)過(guò)度依賴(lài)歷史點(diǎn)擊數(shù)據(jù),張量模型引入了時(shí)間衰減因子,讓近期行為權(quán)重更高。

行業(yè)跟進(jìn):從電商到短視頻的遷移


張量方法正在擴(kuò)散。TikTok的推薦團(tuán)隊(duì)2024年發(fā)表論文,用張量建模"用戶(hù)-視頻-音樂(lè)-拍攝手法"的四維關(guān)系,解決"同一首歌配不同畫(huà)面,用戶(hù)反饋完全不同"的細(xì)粒度推薦問(wèn)題。

國(guó)內(nèi)某頭部電商平臺(tái)的算法工程師告訴我,他們?cè)?024年Q2上線(xiàn)了類(lèi)似架構(gòu),核心改動(dòng)是把"直播間"作為獨(dú)立維度加入張量——同一件商品,在李佳琦直播間和店鋪?zhàn)圆ラg的轉(zhuǎn)化邏輯完全不同,傳統(tǒng)矩陣方法只能粗暴地打標(biāo)簽,張量能學(xué)到這種交互效應(yīng)。

技術(shù)門(mén)檻依然存在。張量分解的計(jì)算復(fù)雜度隨維度指數(shù)增長(zhǎng),亞馬遜的解決方案是結(jié)合隨機(jī)投影(Randomized Projection)和GPU集群,把訓(xùn)練時(shí)間從兩周壓到18小時(shí)。這不是小公司能隨便抄的作業(yè)。

更隱蔽的挑戰(zhàn)是解釋性。矩陣推薦還能說(shuō)"因?yàn)槟阗I(mǎi)了A所以推薦B",張量模型的決策路徑像黑箱。歐盟《人工智能法案》要求高風(fēng)險(xiǎn)AI系統(tǒng)具有可解釋性,推薦算法是否算"高風(fēng)險(xiǎn)"還在扯皮,但合規(guī)團(tuán)隊(duì)已經(jīng)開(kāi)始緊張。

一個(gè)有趣的副作用:張量模型對(duì)冷啟動(dòng)(新用戶(hù)/新商品)更友好。因?yàn)樗灰蕾?lài)完整的"用戶(hù)-商品"交互歷史,可以從其他維度(時(shí)間、場(chǎng)景、屬性)推斷偏好。這意味著新品牌獲得曝光的機(jī)會(huì)在增加,頭部效應(yīng)在減弱——至少是理論上。

2024年底,亞馬遜把這套技術(shù)開(kāi)源為SageMaker的一個(gè)組件,取名「TensorRec」。GitHub倉(cāng)庫(kù)的Issue區(qū)有個(gè)高頻問(wèn)題:"為什么我的3維張量比原來(lái)的矩陣還慢?" 官方回復(fù)很直接:「張量不是銀彈,維度選擇錯(cuò)了,復(fù)雜度會(huì)反噬你。」

那個(gè)iPhone 7手機(jī)殼的Bug,現(xiàn)在被工程師們當(dāng)作經(jīng)典案例寫(xiě)進(jìn)內(nèi)部文檔。不是因?yàn)樗夹g(shù)多深?yuàn)W,而是因?yàn)樗┞读艘粋€(gè)常識(shí):當(dāng)業(yè)務(wù)場(chǎng)景變復(fù)雜,繼續(xù)給舊工具打補(bǔ)丁,不如換一套思維方式。

張量不是什么魔法,它只是承認(rèn)了一個(gè)事實(shí)——現(xiàn)實(shí)世界本來(lái)就是多維的。硬拍扁成表格,省事的是工程師,買(mǎi)單的是用戶(hù)。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
風(fēng)向徹底變了!西方媒體集體改口:中國(guó),無(wú)需再向世界證明什么

風(fēng)向徹底變了!西方媒體集體改口:中國(guó),無(wú)需再向世界證明什么

大衛(wèi)聊科技
2026-03-25 12:22:18
上海一男子每天3包煙,持續(xù)幾十年!醫(yī)生:全身沒(méi)一根血管是好的

上海一男子每天3包煙,持續(xù)幾十年!醫(yī)生:全身沒(méi)一根血管是好的

上觀新聞
2026-03-24 13:32:07
白宮堅(jiān)稱(chēng)美伊仍在談判,威脅伊朗“切勿誤判”;伊朗外長(zhǎng):美國(guó)談?wù)摗罢勁小睙o(wú)異于承認(rèn)“失敗”,伊朗放聲開(kāi)新戰(zhàn)線(xiàn)

白宮堅(jiān)稱(chēng)美伊仍在談判,威脅伊朗“切勿誤判”;伊朗外長(zhǎng):美國(guó)談?wù)摗罢勁小睙o(wú)異于承認(rèn)“失敗”,伊朗放聲開(kāi)新戰(zhàn)線(xiàn)

每日經(jīng)濟(jì)新聞
2026-03-26 17:08:49
追悼會(huì)前,張雪峰婚姻狀況被扒,現(xiàn)任身份不一般,恐影響遺產(chǎn)分配

追悼會(huì)前,張雪峰婚姻狀況被扒,現(xiàn)任身份不一般,恐影響遺產(chǎn)分配

喜歡歷史的阿繁
2026-03-26 14:40:54
巴薩舊將:當(dāng)時(shí)赫萊布知道自己要離隊(duì),他往功能飲料里兌酒喝

巴薩舊將:當(dāng)時(shí)赫萊布知道自己要離隊(duì),他往功能飲料里兌酒喝

懂球帝
2026-03-26 06:43:09
已刪除!鐘麗緹發(fā)文道歉:在孩子教育問(wèn)題上有疏忽

已刪除!鐘麗緹發(fā)文道歉:在孩子教育問(wèn)題上有疏忽

半島晨報(bào)
2026-03-24 15:30:03
人過(guò)五十才懂:和子女最好的相處,不是給錢(qián)出力,而是守住這條線(xiàn)

人過(guò)五十才懂:和子女最好的相處,不是給錢(qián)出力,而是守住這條線(xiàn)

荷蘭豆愛(ài)健康
2026-03-23 01:42:20
瘋了!有新聯(lián)賽硬剛NBA!想搶詹姆斯約基奇!

瘋了!有新聯(lián)賽硬剛NBA!想搶詹姆斯約基奇!

柚子說(shuō)球
2026-03-26 22:00:29
學(xué)醫(yī)后才知道,保護(hù)心血管最好的運(yùn)動(dòng),不是慢跑快走,而是這個(gè)

學(xué)醫(yī)后才知道,保護(hù)心血管最好的運(yùn)動(dòng),不是慢跑快走,而是這個(gè)

醫(yī)學(xué)科普匯
2026-03-23 21:55:03
紫薇老公也是2cm

紫薇老公也是2cm

毒舌扒姨太
2026-03-24 22:44:57
美媒:萬(wàn)斯將出面

美媒:萬(wàn)斯將出面

極目新聞
2026-03-26 09:51:54
以色列已經(jīng)告訴世界:日本若敢擁有核武器,美國(guó)并不會(huì)第一個(gè)翻臉

以色列已經(jīng)告訴世界:日本若敢擁有核武器,美國(guó)并不會(huì)第一個(gè)翻臉

八斗小先生
2025-12-26 09:33:27
無(wú)人機(jī)真是中國(guó)領(lǐng)先嗎?為何戰(zhàn)場(chǎng)上被打下的,全都是中國(guó)無(wú)人機(jī)

無(wú)人機(jī)真是中國(guó)領(lǐng)先嗎?為何戰(zhàn)場(chǎng)上被打下的,全都是中國(guó)無(wú)人機(jī)

安安說(shuō)
2026-03-19 13:00:22
重磅!新加坡國(guó)立大學(xué)原副校長(zhǎng),全職加盟清華大學(xué)

重磅!新加坡國(guó)立大學(xué)原副校長(zhǎng),全職加盟清華大學(xué)

TOP大學(xué)來(lái)了
2026-03-26 17:43:56
全國(guó)多地學(xué)校宣布:取消早讀!家長(zhǎng):孩子每天多睡近一小時(shí),早上吃飯也不慌了

全國(guó)多地學(xué)校宣布:取消早讀!家長(zhǎng):孩子每天多睡近一小時(shí),早上吃飯也不慌了

山西晚報(bào)
2026-03-26 17:30:54
德轉(zhuǎn)列世預(yù)賽附加賽球隊(duì)身價(jià)排行:意大利8.39億歐居首

德轉(zhuǎn)列世預(yù)賽附加賽球隊(duì)身價(jià)排行:意大利8.39億歐居首

懂球帝
2026-03-26 15:59:41
1965年,毛主席點(diǎn)名讓彭德懷復(fù)出,背后有人拼命阻撓,這人后來(lái)判了18年

1965年,毛主席點(diǎn)名讓彭德懷復(fù)出,背后有人拼命阻撓,這人后來(lái)判了18年

史海孤雁
2026-03-25 18:31:11
只剩6天!醫(yī)保全國(guó)統(tǒng)一,41-61歲抓緊辦這幾件事,否則就晚了!

只剩6天!醫(yī)保全國(guó)統(tǒng)一,41-61歲抓緊辦這幾件事,否則就晚了!

另子維愛(ài)讀史
2026-03-25 22:09:07
“油價(jià)飆升至200美元”?特朗普?qǐng)F(tuán)隊(duì)被爆評(píng)估極端情景,白宮緊急否認(rèn)

“油價(jià)飆升至200美元”?特朗普?qǐng)F(tuán)隊(duì)被爆評(píng)估極端情景,白宮緊急否認(rèn)

第一財(cái)經(jīng)資訊
2026-03-26 18:58:56
國(guó)足VS庫(kù)拉索:留洋小將坐鎮(zhèn)中場(chǎng),韋世豪王鈺棟領(lǐng)銜,張玉寧沖鋒

國(guó)足VS庫(kù)拉索:留洋小將坐鎮(zhèn)中場(chǎng),韋世豪王鈺棟領(lǐng)銜,張玉寧沖鋒

零度眼看球
2026-03-26 07:23:48
2026-03-27 04:40:49
灰度測(cè)試中
灰度測(cè)試中
生活正在重構(gòu),目前還在灰度測(cè)試階段,暫不全量發(fā)布。
212文章數(shù) 2關(guān)注度
往期回顧 全部

科技要聞

美團(tuán)發(fā)布外賣(mài)大戰(zhàn)后成績(jī)單:虧損超200億

頭條要聞

特朗普:伊朗允許10艘油輪通行霍爾木茲海峽

頭條要聞

特朗普:伊朗允許10艘油輪通行霍爾木茲海峽

體育要聞

申京努力了,然而杜蘭特啊

娛樂(lè)要聞

劉曉慶妹妹發(fā)聲!稱(chēng)姐姐受身邊人挑撥

財(cái)經(jīng)要聞

油價(jià)"馴服"特朗普?一到100美元就TACO

汽車(chē)要聞

一汽奧迪A6L e-tron開(kāi)啟預(yù)售 CLTC最大續(xù)航815km

態(tài)度原創(chuàng)

房產(chǎn)
手機(jī)
數(shù)碼
親子
旅游

房產(chǎn)要聞

突發(fā),三亞又有大批征遷補(bǔ)償方案出爐!

手機(jī)要聞

1499 iQOO Z11系列發(fā)布丨9020mAh電池 165Hz高刷

數(shù)碼要聞

英特爾發(fā)Q1.26版Arc Pro專(zhuān)業(yè)顯卡驅(qū)動(dòng),支持B70 / B65顯卡

親子要聞

試工育兒嫂被查出傳染病,寶媽崩潰!家政服務(wù)“健康關(guān)”如何保障?

旅游要聞

河南開(kāi)封萬(wàn)歲山武俠城,游客買(mǎi)300元門(mén)票:給妻子拍照被保安阻攔

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版