搜索推薦系統(tǒng)中,重排模塊的定位以及常見策略
在推薦搜索系統(tǒng)中,我們常??梢砸姷街嘏拍K,那么你知道重排模塊的作用是什么嗎?在本篇文章里,作者就介紹了重排模塊的作用,以及常見的重排策略,一起來看看吧,或許會對想了解搜索推薦系統(tǒng)的你有所幫助。
很多人在最開始了解搜索推薦系統(tǒng)時,不明白為什么還需要單獨(dú)設(shè)立一個重排模塊,重排模塊和精排模塊能不能進(jìn)行合并。本篇我們就詳細(xì)介紹一下重排模塊的作用以及常見的重排策略。
一、推薦系統(tǒng)常見架構(gòu)我們先介紹一下目前行業(yè)里先進(jìn)的推薦系統(tǒng)架構(gòu)是什么樣的,分別介紹各個功能模塊的定位。
(相關(guān)資料圖)
上圖是目前工業(yè)界常見的推薦系統(tǒng)架構(gòu),整體系統(tǒng)鏈路上至少分為以下5層:
召回層:從億級別的物料中初篩出用戶感興趣的物料,輸出的物料在萬級別,大幅降低物料量級,減少后續(xù)系統(tǒng)中的性能壓力。一般都是多路召回架構(gòu),接近20路的召回策略。粗排層:針對召回層返回的物料,預(yù)估召回點擊率再進(jìn)行排序,篩選出千級別的物料。過濾層:基于一些硬規(guī)則過濾掉最后不能在前端露出的物料,比如內(nèi)容領(lǐng)域命中了黑詞、電商領(lǐng)域無庫存的商品等。過濾層也可以放在粗排層之前。精排層:將過濾層返回的所有物料進(jìn)行CTR預(yù)估,然后按照Pctr進(jìn)行排序,輸出百級別的物料給到下一層。重排層:重排層會基于全局最優(yōu)和相關(guān)業(yè)務(wù)規(guī)則等對于精排返回的物料順序進(jìn)行再次調(diào)整,一般都只是微調(diào)。最終一次請求中返回在百級別以內(nèi)的物料給到前端。每一個模塊都有自己的定位,早期的推薦系統(tǒng)就只有一個最簡單的排序模塊,發(fā)展到現(xiàn)在推薦系統(tǒng)架構(gòu)已經(jīng)非常精細(xì)化,不同模塊各司其職。
二、重排模塊的定位在搜推系統(tǒng)的眾多模塊中,重排模塊主要實現(xiàn)以下三個目標(biāo):全局最優(yōu) + 流量調(diào)控 + 用戶體驗。
1. 全局最優(yōu)精排實現(xiàn)的是單點最優(yōu),但是用戶實際在瀏覽推薦信息流時是連續(xù)瀏覽多個商品。不同商品之間的排列組合將影響用戶整體的點擊率。
就如同人穿搭衣服一樣,精排模塊的視角,是單點為用戶選擇最好看的上衣、褲子和鞋子。
而重排模塊是站在整體視角,為用戶選擇既好看然后風(fēng)格又匹配的最優(yōu)的上衣、褲子和鞋子的組合,所以重排模塊最終需要在精排的排序基礎(chǔ)上,按照用戶的瀏覽行為為其挑選出最優(yōu)的一組商品或者內(nèi)容組合。
2. 流量調(diào)控重排模塊是對物料的最后一道排序環(huán)節(jié),很多時候業(yè)務(wù)的特殊流量訴求都是在重排模塊進(jìn)行干預(yù)。比如電商場景中對于新品的扶持,淘寶當(dāng)年做直播生態(tài)時對于直播內(nèi)容進(jìn)行加權(quán)。這些特殊的流量訴求需要干預(yù)整體排序時,最好的實現(xiàn)方式都是在重排模塊進(jìn)行干預(yù)。
3. 用戶體驗精排和重排整體的排序邏輯還是基于模型預(yù)估的CTR,但是有時候完全按照CTR大小來進(jìn)行排序的內(nèi)容會比較極端,比如連續(xù)多坑都是同一種類型的商品或者內(nèi)容,導(dǎo)致用戶審美疲勞,這種就是線上的問題案例,解決這類case都需要在重排模塊做一些頻控策略。
電商推薦里需要針對同三級類目、同品牌、同封面圖的商品進(jìn)行打散,內(nèi)容推薦場景里需要針對同類型、同封面圖、同作者的內(nèi)容進(jìn)行打散。打散可以有效防止用戶審美疲勞化,同時有利于探索和捕捉用戶的潛在興趣,對用戶體驗和長期目標(biāo)都很關(guān)鍵。
三、常見的重排策略針對上述介紹的三大類目標(biāo),我們分別介紹實現(xiàn)三大類目標(biāo)常用的策略。
1. 全局最優(yōu)-List Wise策略List Wise本身不是一個具體的算法或者模型,只是一個模型的優(yōu)化目標(biāo)或者是損失函數(shù)的定義方式,List Wise關(guān)注整個列表中物料之間的順序關(guān)系,需要結(jié)合上下文的信息。List Wise整個策略分為兩個步驟:
1)序列生成
標(biāo)簽:
- 搜索推薦系統(tǒng)中,重排模塊的定位以及常見策略
- 【全球聚看點】159元買個0.3元的冬青樹苗?當(dāng)心!快遞代收貨款有坑
- 天天播報:去死皮之后可以做補(bǔ)水面膜嗎_去死皮面膜
- 傳古科技首期1.2GW異質(zhì)結(jié)電池片項目簽約落地
- 業(yè)績連虧 先鋒新材賣殼重組
- 中物聯(lián):2023年6月份中國物流業(yè)景氣指數(shù)為51.7%
- 新資訊:寧晉經(jīng)濟(jì)開發(fā)區(qū):營造新環(huán)境釋放新活力
- 6月份中國倉儲指數(shù)發(fā)布:需求穩(wěn)中有增 行業(yè)保持良好運(yùn)行態(tài)勢-頭條焦點
- 杭州銀行:6月30日獲融資買入485.76萬元,占當(dāng)日流入資金比例10.66%|天天微資訊
- 地球數(shù)億年后再進(jìn)化人類? 當(dāng)前聚焦
- 北京口岸迎來暑運(yùn)高峰 出入境人次再創(chuàng)新高
- 定州市科協(xié)志愿服務(wù)隊-全球快報
- 最像純元的其實不是甄嬛,也不是玉嬈,而是她,僅出場2次的女人
- 愛朋醫(yī)療控股股東擬減持不超3.06%股份 環(huán)球滾動
- 環(huán)球焦點!又高溫又雷電 悶熱難當(dāng)!今夜局部大雨! 明日又高溫
- 2023年07月嗶哩嗶哩全球片單
- 通訊:肯尼亞鳀魚登陸中國市場 促進(jìn)當(dāng)?shù)厮{(lán)色經(jīng)濟(jì)|每日速看
- 怎樣學(xué)好音樂 學(xué)好音樂的方法_世界熱消息
- 塔塔汽車一季度總銷量226245輛 每日熱聞
- 【世界時快訊】iphone 14 pro max多少錢(iphone 14 pro max重量)
- 天天熱點!襄荊鐵路項目舉行隧道坍塌應(yīng)急救援演練
- 全球熱點!蘋果手機(jī)怎么倒通訊錄到安卓手機(jī)通訊錄(蘋果手機(jī)怎么倒通訊錄)
- 全球最資訊丨SpaceX 成功發(fā)射 ESA 歐幾里德空間望遠(yuǎn)鏡
- 汪小菲今日接娃回京,S妥協(xié)丟最后王牌
- 閆振鐸的藝術(shù)格調(diào)
- 喝衡水老白干,品白酒文化歷史!|速看
- 世界簡訊:剛剛!新能源車數(shù)據(jù)出爐
- 烏魚粥做法? 世界今頭條
- 世界今頭條!下輩子不做男人主題歌
- 歸位?Uzi成名VN獵殺WE 西卡更博:你回來了嗎 全球速看料
- 韓國電信公布未來五年非基礎(chǔ)設(shè)施投資預(yù)算撥出12萬億韓元
- 冰墩墩設(shè)計者給北京四中學(xué)生回信:祝??蓯蹔^進(jìn)的中國少
- 江蘇南通發(fā)現(xiàn)1人檢測結(jié)果呈陽性 系外地返通人員
- 湖南郴州報告2例香港返湘人員新冠肺炎確診病例
- 廣西百色疫情社區(qū)傳播鏈基本阻斷
- 廣西新增1例本土確診病例 本輪本土疫情累計報告確診病例
- 葫蘆島市兩醫(yī)院不再收治非綏中地區(qū)患者 就醫(yī)患者閉環(huán)管理
- 蘇州14日新增本土確診1例,無癥狀感染者3例 詳情及軌跡公布
- 2021年北京空氣質(zhì)量創(chuàng)歷史最優(yōu) 首次全面達(dá)標(biāo)
- 化屋村火起來了
- 國家藥監(jiān)局:“小金盾”不是質(zhì)量認(rèn)證標(biāo)志
- 大霧!湖南18條高速通行受影響 157個收費(fèi)站臨時交通管制
- “0蔗糖”就是無糖、不渴不用喝水等謠言入選2021年度十大
- 廣西:監(jiān)督推動鄉(xiāng)村振興政策項目資金落地見效
- 各國動植物“精靈”慶冬奧 你能猜到她是誰嗎?
- 二七廠蝶變:科技自立自強(qiáng)
- 從貨擔(dān)郎到日售數(shù)千斤 蘭州手藝人40余載“滾”元宵留年
- 大陸學(xué)生在臺度春節(jié):不一樣的年味與團(tuán)圓
- 廣東惠州全市全部封控管控解除
- 為人民健康提供可靠保障
- 青海藏族女孩小拉毛春節(jié)“重生記”
- 讓群眾遇事不煩辦事不難
- 黑河市疫情期間發(fā)放6500份元宵餃子“暖心包”
- 市場監(jiān)管總局:全國已建成869個進(jìn)口冷鏈?zhǔn)称芳斜O(jiān)管倉