1. 互聯網AbTest系統的背景介紹
https://www.jianshu.com/p/de8d9f0b14f4
背景
長期以來,搜索需求迭代比較頻繁,包活搜索模塊排序,搜索相關性調優,客戶端展現等多種需求。針對每次策略調整,新策略全量上線,則存在以下問題:
1 全量上線新策略風險較大,實際效果可能與期望不符,小流量上線更加合理
2 新策略上線後無法精確給出新舊策略結果對比,無法精確評估出新策略導致的變化
3 同時上線多個策略,無法評估單個策略產生的影響
針對以上存在的問題,對搜索結果新策略上線添加ab-test機制,先小流量上線,方便對比以得出新策略對搜索結果帶來的影響