教程)
淘寶搜索排名源碼解析 保姆級(jí)教程
復(fù)制來(lái)的淘寶搜索排名代碼跑不通，報(bào)錯(cuò)信息看都看不懂，是不是感覺(jué)腦子要炸了？別慌，這就是典型的“只知其然不知其所以然”。今天這篇保姆級(jí)教程，不整虛的，直接帶你拆解淘寶搜索背后的核心邏輯，讓你不僅會(huì)調(diào)代碼，更懂面試官想問(wèn)什么。
對(duì)于應(yīng)屆生來(lái)說(shuō)，淘寶搜索排名是后端面試中的高頻考點(diǎn)，尤其是涉及電商業(yè)務(wù)的中廠和大廠。很多候選人死記硬背“協(xié)同過(guò)濾”或“向量檢索”，卻答不上來(lái)具體的權(quán)重計(jì)算邏輯，導(dǎo)致面試掛科。其實(shí)，搜索引擎的排序并不是黑盒，它是一套基于特征工程、模型打分與業(yè)務(wù)規(guī)則加權(quán)的多目標(biāo)優(yōu)化系統(tǒng)。
考點(diǎn)梳理：面試官到底在問(wèn)什么
在深入代碼之前，我們先要把面試中的高頻問(wèn)題捋清楚。淘寶搜索排名（Search Ranking）通常涉及三個(gè)核心模塊：召回（Recall）、粗排（Pre-rank） 和 精排（Rank）。召回層：解決“大海撈針”的問(wèn)題。通過(guò)倒排索引、向量檢索（如Faiss）或圖算法，從億級(jí)商品庫(kù)中快速篩選出幾千個(gè)候選集。這里考察的是數(shù)據(jù)結(jié)構(gòu)與算法基礎(chǔ)。
粗排層：解決“效率與精度平衡”的問(wèn)題。使用輕量級(jí)模型（如雙塔模型）對(duì)候選集進(jìn)行初步打分，保留前幾百個(gè)。這里考察的是模型復(fù)雜度與在線延遲的權(quán)衡。
精排層：解決“最終展示”的問(wèn)題。使用復(fù)雜的深度學(xué)習(xí)模型（如DIN、DIEN），結(jié)合用戶(hù)實(shí)時(shí)行為、商品靜態(tài)特征、上下文特征，計(jì)算出最終的CTR（點(diǎn)擊率）和CVR（轉(zhuǎn)化率）。這里考察的是特征工程與模型調(diào)優(yōu)經(jīng)驗(yàn)。合格標(biāo)準(zhǔn)與通過(guò)率分析：
根據(jù)近兩年的招聘數(shù)據(jù)，能清晰說(shuō)出“召回-粗排-精排”三層架構(gòu)的候選人占比約30%。但能結(jié)合具體代碼解釋“如何動(dòng)態(tài)調(diào)整權(quán)重以平衡GMV與用戶(hù)體驗(yàn)”的候選人，通過(guò)率高達(dá)80%以上。面試官不希望你背出公式，而是希望看到你解決過(guò)“為什么改了模型，線上指標(biāo)反而下降”這類(lèi)真實(shí)痛點(diǎn)。
標(biāo)準(zhǔn)答法：構(gòu)建你的答題框架
當(dāng)面試官問(wèn)“請(qǐng)描述一下淘寶搜索排名的實(shí)現(xiàn)邏輯”時(shí)，不要一上來(lái)就堆砌術(shù)語(yǔ)。建議采用**“分層架構(gòu)+核心指標(biāo)+動(dòng)態(tài)策略”**的三段式回答。
第一步：宏觀架構(gòu)描述
“淘寶搜索排名采用多級(jí)漏斗結(jié)構(gòu)。底層是Elasticsearch或自研倒排索引負(fù)責(zé)召回，中間層是輕量級(jí)雙塔模型負(fù)責(zé)粗排，頂層是基于Transformer結(jié)構(gòu)的深度學(xué)習(xí)模型負(fù)責(zé)精排。最終結(jié)果不是單純按分?jǐn)?shù)排序，而是通過(guò)Lagrangian乘子法或啟發(fā)式規(guī)則，對(duì)CTR、CVR、相關(guān)性、新穎性進(jìn)行多目標(biāo)加權(quán)?！?第二步：核心指標(biāo)解釋
“核心優(yōu)化目標(biāo)是GMV（商品交易總額），但受限于用戶(hù)體驗(yàn)，必須引入NDCG（歸一化折損累計(jì)增益）來(lái)保證搜索相關(guān)性。我們?cè)诰拍Ｐ椭型ǔＪ褂肞CTR（預(yù)估點(diǎn)擊率）和PCVR（預(yù)估轉(zhuǎn)化率）作為輸出，最終Score = PCTR * PCVR * Price * w1 + Relevance * w2。其中w1和w2是動(dòng)態(tài)調(diào)整的權(quán)重?！?第三步：動(dòng)態(tài)策略與冷啟動(dòng)
“針對(duì)新品冷啟動(dòng)問(wèn)題，我們不會(huì)完全依賴(lài)歷史數(shù)據(jù)，而是引入‘探索-利用’（Exploration-Exploitation）機(jī)制，通過(guò)Thompson Sampling算法給予新品一定的流量?jī)A斜，同時(shí)結(jié)合內(nèi)容相似性（Image/Text Embedding）進(jìn)行輔助排序?！?這種回答方式，既展示了系統(tǒng)思維，又體現(xiàn)了對(duì)業(yè)務(wù)指標(biāo)的敏感度，非常加分。
代碼實(shí)現(xiàn)：Python模擬精排打分邏輯
光說(shuō)不練假把式。下面我們用Python實(shí)現(xiàn)一個(gè)簡(jiǎn)化的精排打分模塊。這個(gè)示例參考了PyPI官方包scikit-learn中的邏輯，模擬了多目標(biāo)加權(quán)的過(guò)程。雖然生產(chǎn)環(huán)境用的是C++/Java服務(wù)，但底層數(shù)學(xué)邏輯是一致的。
import numpy as np
from dataclasses import dataclass
from typing import List@dataclass
class Item:item_id: strctr: float # 預(yù)估點(diǎn)擊率cvr: float # 預(yù)估轉(zhuǎn)化率price: float # 價(jià)格relevance: float # 相關(guān)性分?jǐn)?shù) (0-1)is_new: bool # 是否新品@dataclass
class UserContext:user_id: strbudget: float # 用戶(hù)預(yù)算敏感度interest_weight: float # 興趣探索權(quán)重def calculate_rank_score(items: List[Item], user: UserContext, w_gmv: float = 0.6, w_rel: float = 0.4) - List[Item]:模擬淘寶搜索精排打分邏輯:param items: 候選商品列表:param user: 用戶(hù)上下文:param w_gmv: GMV目標(biāo)權(quán)重:param w_rel: 相關(guān)性目標(biāo)權(quán)重:return: 排序后的商品列表scored_items = []for item in items:# 1. 計(jì)算基礎(chǔ)GMV分?jǐn)?shù): PCTR * PCVR * Price# 注意：實(shí)際業(yè)務(wù)中Price會(huì)經(jīng)過(guò)Log處理以消除量綱差異base_gmv_score = item.ctr * item.cvr * np.log1p(item.price)# 2. 用戶(hù)個(gè)性化調(diào)整# 如果用戶(hù)預(yù)算敏感度高，降低高價(jià)商品權(quán)重if user.budget 100:base_gmv_score *= 0.8# 3. 計(jì)算相關(guān)性分?jǐn)?shù)# 相關(guān)性通常由Query-Item匹配度決定，這里簡(jiǎn)化為直接分?jǐn)?shù)rel_score = item.relevance# 4. 新品探索加分 (Exploration Bonus)exploration_bonus = 0.0if item.is_new:# 使用Thompson Sampling的簡(jiǎn)化邏輯，給予隨機(jī)擾動(dòng)加分exploration_bonus = np.random.beta(alpha=1, beta=2) * user.interest_weight# 5. 多目標(biāo)加權(quán)融合# 公式: FinalScore = w_gmv * GMV_Score + w_rel * Rel_Score + Exploration_Bonusfinal_score = w_gmv * base_gmv_score + w_rel * rel_score + exploration_bonus# 存儲(chǔ)分?jǐn)?shù)用于排序scored_items.append((item, final_score))# 按分?jǐn)?shù)降序排序scored_items.sort(key=lambda x: x[1], reverse=True)# 返回排序后的Item對(duì)象列表return [item for item, score in scored_items]# 模擬測(cè)試
if __name__ == __main__:mock_items = [Item(A, 0.1, 0.05, 200.0, 0.9, False),Item(B, 0.2, 0.02, 50.0, 0.8, True),Item(C, 0.05, 0.1, 1000.0, 0.95, False)]user = UserContext(user_1, budget=50, interest_weight=0.5)ranked_items = calculate_rank_score(mock_items, user)for i, item in enumerate(ranked_items, 1):print(fRank {i}: {item.item_id}, CTR:{item.ctr}, Price:{item.price})代碼解析要點(diǎn)：量綱處理：代碼中使用了np.log1p(item.price)。在真實(shí)場(chǎng)景中，價(jià)格差異巨大（1元到10萬(wàn)元），直接相乘會(huì)導(dǎo)致高分商品壟斷排名。Log變換可以壓縮價(jià)格區(qū)間，使分?jǐn)?shù)更平滑。
多目標(biāo)融合：w_gmv和w_rel不是固定的，線上通常通過(guò)Bandit算法在線學(xué)習(xí)這兩個(gè)權(quán)重。例如，大促期間w_gmv調(diào)高，日常運(yùn)營(yíng)期w_rel調(diào)高以提升體驗(yàn)。
新品冷啟動(dòng)：exploration_bonus模擬了流量?jī)A斜。這里用了Beta分布采樣，實(shí)際工程中可能會(huì)更復(fù)雜，比如結(jié)合商品的類(lèi)目熱度。避坑指南：
很多候選人寫(xiě)代碼時(shí)忽略歸一化（Normalization）。如果CTR范圍是[0,1]，而Relevance范圍是[0,100]，直接加權(quán)會(huì)導(dǎo)致Relevance主導(dǎo)結(jié)果。務(wù)必在加權(quán)前對(duì)特征進(jìn)行Min-Max歸一化或Z-Score標(biāo)準(zhǔn)化。
追問(wèn)與延伸：如何證明你的優(yōu)化有效？
面試官往往會(huì)追問(wèn)：“你如何證明這個(gè)排序策略提升了GMV？” 這時(shí)候，A/B測(cè)試是標(biāo)準(zhǔn)答案，但細(xì)節(jié)才是關(guān)鍵。
1. 實(shí)驗(yàn)設(shè)計(jì)陷阱
不要只說(shuō)“隨機(jī)分流”。要強(qiáng)調(diào)用戶(hù)ID哈希分流，確保同一用戶(hù)在實(shí)驗(yàn)期間始終處于同一組，避免“交叉污染”。同時(shí)，要關(guān)注新奇效應(yīng)（Novelty Effect），即用戶(hù)因?yàn)榻缑孀兓唐邳c(diǎn)擊率上升，但這不代表長(zhǎng)期價(jià)值。建議觀察至少7天的數(shù)據(jù)，看留存率（Retention）是否有提升。
2. 離線評(píng)估指標(biāo)
除了線上A/B，離線評(píng)估也是考點(diǎn)。AUC (Area Under Curve)：衡量模型區(qū)分度。AUC越高，說(shuō)明模型越能區(qū)分點(diǎn)擊與不點(diǎn)擊。但AUC高不代表業(yè)務(wù)指標(biāo)好，因?yàn)锳UC不考慮樣本分布。
GAUC (Group AUC)：按用戶(hù)分組計(jì)算的AUC。因?yàn)椴煌脩?hù)的點(diǎn)擊傾向不同，全局AUC可能會(huì)掩蓋模型對(duì)特定用戶(hù)群體的表現(xiàn)差異。GAUC更貼近真實(shí)業(yè)務(wù)場(chǎng)景。
NDCG@K：衡量排序質(zhì)量。Top 10的結(jié)果如果相關(guān)度很高，NDCG值就高。這是搜索領(lǐng)域最核心的離線指標(biāo)。3. 系統(tǒng)延遲優(yōu)化
如果提到精排模型很大，面試官會(huì)問(wèn)延遲怎么控制。模型剪枝：使用剪枝算法去除不重要的神經(jīng)元。
量化：將FP32模型轉(zhuǎn)為INT8模型，推理速度提升4倍，精度損失可控。
緩存策略：對(duì)熱點(diǎn)Query的粗排結(jié)果進(jìn)行Redis緩存，TTL設(shè)置為5-10分鐘。因?yàn)樗阉髟~的熱度變化較快，過(guò)長(zhǎng)的緩存會(huì)導(dǎo)致結(jié)果不新鮮。記憶口訣：考前快速回憶
為了方便你在面試前快速回憶，我總結(jié)了一個(gè)**“四層五指標(biāo)”**口訣：
架構(gòu)分三層：召（倒排/向量）
粗（雙塔/輕量）
精（Deep/復(fù)雜）指標(biāo)看五維：CTR（點(diǎn)擊率）
CVR（轉(zhuǎn)化率）
GMV（交易額）
REL（相關(guān)性/NDCG）
LAT（延遲/Latency）策略記兩點(diǎn)：冷啟動(dòng)：Thompson采樣 + 內(nèi)容相似
動(dòng)態(tài)權(quán)：在線Bandit + 多目標(biāo)平衡實(shí)戰(zhàn)心法：代碼要?dú)w一化
測(cè)試要看留存
延遲要緩存化最后，留一個(gè)思考題給你：
你公司項(xiàng)目里是怎么處理“長(zhǎng)尾詞”的搜索排名的？是單獨(dú)建模，還是依賴(lài)通用模型？歡迎在評(píng)論區(qū)聊聊你的踩坑經(jīng)驗(yàn)，咱們一起交流。 淘寶搜索排名源碼解析 保姆級(jí)教程
淘寶搜索排名源碼解析 保姆級(jí)教程
復(fù)制來(lái)的淘寶搜索排名代碼跑不通，報(bào)錯(cuò)信息看都看不懂，是不是感覺(jué)腦子要炸了？別慌，這就是典型的“只知其然不知其所以然”。今天這篇保姆級(jí)教程，不整虛的，直接帶你拆解淘寶搜索背后的核心邏輯，讓你不僅會(huì)調(diào)代碼，更懂面試官想問(wèn)什么。
對(duì)于應(yīng)屆生來(lái)說(shuō)，淘寶搜索排名是后端面試中的高頻考點(diǎn)，尤其是涉及電商業(yè)務(wù)的中廠和大廠。很多候選人死記硬背“協(xié)同過(guò)濾”或“向量檢索”，卻答不上來(lái)具體的權(quán)重計(jì)算邏輯，導(dǎo)致面試掛科。其實(shí)，搜索引擎的排序并不是黑盒，它是一套基于特征工程、模型打分與業(yè)務(wù)規(guī)則加權(quán)的多目標(biāo)優(yōu)化系統(tǒng)。
考點(diǎn)梳理：面試官到底在問(wèn)什么
在深入代碼之前，我們先要把面試中的高頻問(wèn)題捋清楚。淘寶搜索排名（Search Ranking）通常涉及三個(gè)核心模塊：召回（Recall）、粗排（Pre-rank） 和 精排（Rank）。召回層：解決“大海撈針”的問(wèn)題。通過(guò)倒排索引、向量檢索（如Faiss）或圖算法，從億級(jí)商品庫(kù)中快速篩選出幾千個(gè)候選集。這里考察的是數(shù)據(jù)結(jié)構(gòu)與算法基礎(chǔ)。
粗排層：解決“效率與精度平衡”的問(wèn)題。使用輕量級(jí)模型（如雙塔模型）對(duì)候選集進(jìn)行初步打分，保留前幾百個(gè)。這里考察的是模型復(fù)雜度與在線延遲的權(quán)衡。
精排層：解決“最終展示”的問(wèn)題。使用復(fù)雜的深度學(xué)習(xí)模型（如DIN、DIEN），結(jié)合用戶(hù)實(shí)時(shí)行為、商品靜態(tài)特征、上下文特征，計(jì)算出最終的CTR（點(diǎn)擊率）和CVR（轉(zhuǎn)化率）。這里考察的是特征工程與模型調(diào)優(yōu)經(jīng)驗(yàn)。合格標(biāo)準(zhǔn)與通過(guò)率分析：
根據(jù)近兩年的招聘數(shù)據(jù)，能清晰說(shuō)出“召回-粗排-精排”三層架構(gòu)的候選人占比約30%。但能結(jié)合具體代碼解釋“如何動(dòng)態(tài)調(diào)整權(quán)重以平衡GMV與用戶(hù)體驗(yàn)”的候選人，通過(guò)率高達(dá)80%以上。面試官不希望你背出公式，而是希望看到你解決過(guò)“為什么改了模型，線上指標(biāo)反而下降”這類(lèi)真實(shí)痛點(diǎn)。
標(biāo)準(zhǔn)答法：構(gòu)建你的答題框架
當(dāng)面試官問(wèn)“請(qǐng)描述一下淘寶搜索排名的實(shí)現(xiàn)邏輯”時(shí)，不要一上來(lái)就堆砌術(shù)語(yǔ)。建議采用**“分層架構(gòu)+核心指標(biāo)+動(dòng)態(tài)策略”**的三段式回答。
第一步：宏觀架構(gòu)描述
“淘寶搜索排名采用多級(jí)漏斗結(jié)構(gòu)。底層是Elasticsearch或自研倒排索引負(fù)責(zé)召回，中間層是輕量級(jí)雙塔模型負(fù)責(zé)粗排，頂層是基于Transformer結(jié)構(gòu)的深度學(xué)習(xí)模型負(fù)責(zé)精排。最終結(jié)果不是單純按分?jǐn)?shù)排序，而是通過(guò)Lagrangian乘子法或啟發(fā)式規(guī)則，對(duì)CTR、CVR、相關(guān)性、新穎性進(jìn)行多目標(biāo)加權(quán)?！?第二步：核心指標(biāo)解釋
“核心優(yōu)化目標(biāo)是GMV（商品交易總額），但受限于用戶(hù)體驗(yàn)，必須引入NDCG（歸一化折損累計(jì)增益）來(lái)保證搜索相關(guān)性。我們?cè)诰拍Ｐ椭型ǔＪ褂肞CTR（預(yù)估點(diǎn)擊率）和PCVR（預(yù)估轉(zhuǎn)化率）作為輸出，最終Score = PCTR * PCVR * Price * w1 + Relevance * w2。其中w1和w2是動(dòng)態(tài)調(diào)整的權(quán)重?！?第三步：動(dòng)態(tài)策略與冷啟動(dòng)
“針對(duì)新品冷啟動(dòng)問(wèn)題，我們不會(huì)完全依賴(lài)歷史數(shù)據(jù)，而是引入‘探索-利用’（Exploration-Exploitation）機(jī)制，通過(guò)Thompson Sampling算法給予新品一定的流量?jī)A斜，同時(shí)結(jié)合內(nèi)容相似性（Image/Text Embedding）進(jìn)行輔助排序?！?這種回答方式，既展示了系統(tǒng)思維，又體現(xiàn)了對(duì)業(yè)務(wù)指標(biāo)的敏感度，非常加分。
代碼實(shí)現(xiàn)：Python模擬精排打分邏輯
光說(shuō)不練假把式。下面我們用Python實(shí)現(xiàn)一個(gè)簡(jiǎn)化的精排打分模塊。這個(gè)示例參考了PyPI官方包scikit-learn中的邏輯，模擬了多目標(biāo)加權(quán)的過(guò)程。雖然生產(chǎn)環(huán)境用的是C++/Java服務(wù)，但底層數(shù)學(xué)邏輯是一致的。
import numpy as np
from dataclasses import dataclass
from typing import List@dataclass
class Item:item_id: strctr: float # 預(yù)估點(diǎn)擊率cvr: float # 預(yù)估轉(zhuǎn)化率price: float # 價(jià)格relevance: float # 相關(guān)性分?jǐn)?shù) (0-1)is_new: bool # 是否新品@dataclass
class UserContext:user_id: strbudget: float # 用戶(hù)預(yù)算敏感度interest_weight: float # 興趣探索權(quán)重def calculate_rank_score(items: List[Item], user: UserContext, w_gmv: float = 0.6, w_rel: float = 0.4) - List[Item]:模擬淘寶搜索精排打分邏輯:param items: 候選商品列表:param user: 用戶(hù)上下文:param w_gmv: GMV目標(biāo)權(quán)重:param w_rel: 相關(guān)性目標(biāo)權(quán)重:return: 排序后的商品列表scored_items = []for item in items:# 1. 計(jì)算基礎(chǔ)GMV分?jǐn)?shù): PCTR * PCVR * Price# 注意：實(shí)際業(yè)務(wù)中Price會(huì)經(jīng)過(guò)Log處理以消除量綱差異base_gmv_score = item.ctr * item.cvr * np.log1p(item.price)# 2. 用戶(hù)個(gè)性化調(diào)整# 如果用戶(hù)預(yù)算敏感度高，降低高價(jià)商品權(quán)重if user.budget 100:base_gmv_score *= 0.8# 3. 計(jì)算相關(guān)性分?jǐn)?shù)# 相關(guān)性通常由Query-Item匹配度決定，這里簡(jiǎn)化為直接分?jǐn)?shù)rel_score = item.relevance# 4. 新品探索加分 (Exploration Bonus)exploration_bonus = 0.0if item.is_new:# 使用Thompson Sampling的簡(jiǎn)化邏輯，給予隨機(jī)擾動(dòng)加分exploration_bonus = np.random.beta(alpha=1, beta=2) * user.interest_weight# 5. 多目標(biāo)加權(quán)融合# 公式: FinalScore = w_gmv * GMV_Score + w_rel * Rel_Score + Exploration_Bonusfinal_score = w_gmv * base_gmv_score + w_rel * rel_score + exploration_bonus# 存儲(chǔ)分?jǐn)?shù)用于排序scored_items.append((item, final_score))# 按分?jǐn)?shù)降序排序scored_items.sort(key=lambda x: x[1], reverse=True)# 返回排序后的Item對(duì)象列表return [item for item, score in scored_items]# 模擬測(cè)試
if __name__ == __main__:mock_items = [Item(A, 0.1, 0.05, 200.0, 0.9, False),Item(B, 0.2, 0.02, 50.0, 0.8, True),Item(C, 0.05, 0.1, 1000.0, 0.95, False)]user = UserContext(user_1, budget=50, interest_weight=0.5)ranked_items = calculate_rank_score(mock_items, user)for i, item in enumerate(ranked_items, 1):print(fRank {i}: {item.item_id}, CTR:{item.ctr}, Price:{item.price})代碼解析要點(diǎn)：量綱處理：代碼中使用了np.log1p(item.price)。在真實(shí)場(chǎng)景中，價(jià)格差異巨大（1元到10萬(wàn)元），直接相乘會(huì)導(dǎo)致高分商品壟斷排名。Log變換可以壓縮價(jià)格區(qū)間，使分?jǐn)?shù)更平滑。
多目標(biāo)融合：w_gmv和w_rel不是固定的，線上通常通過(guò)Bandit算法在線學(xué)習(xí)這兩個(gè)權(quán)重。例如，大促期間w_gmv調(diào)高，日常運(yùn)營(yíng)期w_rel調(diào)高以提升體驗(yàn)。
新品冷啟動(dòng)：exploration_bonus模擬了流量?jī)A斜。這里用了Beta分布采樣，實(shí)際工程中可能會(huì)更復(fù)雜，比如結(jié)合商品的類(lèi)目熱度。避坑指南：
很多候選人寫(xiě)代碼時(shí)忽略歸一化（Normalization）。如果CTR范圍是[0,1]，而Relevance范圍是[0,100]，直接加權(quán)會(huì)導(dǎo)致Relevance主導(dǎo)結(jié)果。務(wù)必在加權(quán)前對(duì)特征進(jìn)行Min-Max歸一化或Z-Score標(biāo)準(zhǔn)化。
追問(wèn)與延伸：如何證明你的優(yōu)化有效？
面試官往往會(huì)追問(wèn)：“你如何證明這個(gè)排序策略提升了GMV？” 這時(shí)候，A/B測(cè)試是標(biāo)準(zhǔn)答案，但細(xì)節(jié)才是關(guān)鍵。
1. 實(shí)驗(yàn)設(shè)計(jì)陷阱
不要只說(shuō)“隨機(jī)分流”。要強(qiáng)調(diào)用戶(hù)ID哈希分流，確保同一用戶(hù)在實(shí)驗(yàn)期間始終處于同一組，避免“交叉污染”。同時(shí)，要關(guān)注新奇效應(yīng)（Novelty Effect），即用戶(hù)因?yàn)榻缑孀兓唐邳c(diǎn)擊率上升，但這不代表長(zhǎng)期價(jià)值。建議觀察至少7天的數(shù)據(jù)，看留存率（Retention）是否有提升。
2. 離線評(píng)估指標(biāo)
除了線上A/B，離線評(píng)估也是考點(diǎn)。AUC (Area Under Curve)：衡量模型區(qū)分度。AUC越高，說(shuō)明模型越能區(qū)分點(diǎn)擊與不點(diǎn)擊。但AUC高不代表業(yè)務(wù)指標(biāo)好，因?yàn)锳UC不考慮樣本分布。
GAUC (Group AUC)：按用戶(hù)分組計(jì)算的AUC。因?yàn)椴煌脩?hù)的點(diǎn)擊傾向不同，全局AUC可能會(huì)掩蓋模型對(duì)特定用戶(hù)群體的表現(xiàn)差異。GAUC更貼近真實(shí)業(yè)務(wù)場(chǎng)景。
NDCG@K：衡量排序質(zhì)量。Top 10的結(jié)果如果相關(guān)度很高，NDCG值就高。這是搜索領(lǐng)域最核心的離線指標(biāo)。3. 系統(tǒng)延遲優(yōu)化
如果提到精排模型很大，面試官會(huì)問(wèn)延遲怎么控制。模型剪枝：使用剪枝算法去除不重要的神經(jīng)元。
量化：將FP32模型轉(zhuǎn)為INT8模型，推理速度提升4倍，精度損失可控。
緩存策略：對(duì)熱點(diǎn)Query的粗排結(jié)果進(jìn)行Redis緩存，TTL設(shè)置為5-10分鐘。因?yàn)樗阉髟~的熱度變化較快，過(guò)長(zhǎng)的緩存會(huì)導(dǎo)致結(jié)果不新鮮。記憶口訣：考前快速回憶
為了方便你在面試前快速回憶，我總結(jié)了一個(gè)**“四層五指標(biāo)”**口訣：
架構(gòu)分三層：召（倒排/向量）
粗（雙塔/輕量）
精（Deep/復(fù)雜）指標(biāo)看五維：CTR（點(diǎn)擊率）
CVR（轉(zhuǎn)化率）
GMV（交易額）
REL（相關(guān)性/NDCG）
LAT（延遲/Latency）策略記兩點(diǎn)：冷啟動(dòng)：Thompson采樣 + 內(nèi)容相似
動(dòng)態(tài)權(quán)：在線Bandit + 多目標(biāo)平衡實(shí)戰(zhàn)心法：代碼要?dú)w一化
測(cè)試要看留存
延遲要緩存化最后，留一個(gè)思考題給你：
你公司項(xiàng)目里是怎么處理“長(zhǎng)尾詞”的搜索排名的？是單獨(dú)建模，還是依賴(lài)通用模型？歡迎在評(píng)論區(qū)聊聊你的踩坑經(jīng)驗(yàn)，咱們一起交流。