品牌名稱
OPPO
企業(yè)規(guī)模
1001-5000人
OPPO-個性化推薦
350次閱讀
一、項目背景：
OPPO自2018年起開始大舉進(jìn)軍互聯(lián)網(wǎng)業(yè)務(wù)，創(chuàng)立了信息流、信息流廣告、應(yīng)用商店、游戲中心、商業(yè)中心等諸多業(yè)務(wù)線，并迅速積累了大量的用戶和數(shù)據(jù)。由于業(yè)務(wù)規(guī)模的急劇擴(kuò)張， OPPO 原來在單機上搭建的訓(xùn)練系統(tǒng)不具備處理大規(guī)模數(shù)據(jù)和訓(xùn)練大型推薦系統(tǒng)的能力，嚴(yán)重制約了互聯(lián)網(wǎng)的業(yè)務(wù)發(fā)展，急需更好的框架體系來滿足業(yè)務(wù)方對于模型訓(xùn)練速度、效果指標(biāo)增長的需求。
二、應(yīng)用方案：
基于飛槳的能力對應(yīng)用商店進(jìn)行了升級：采取高性能數(shù)據(jù)讀取接口Dataset完成大規(guī)模數(shù)據(jù)的讀取；采用基于參數(shù)服務(wù)器的大規(guī)模CPU分布式的全異步訓(xùn)練模型，以較低的資源消耗來訓(xùn)練海量的數(shù)據(jù)以及極大的稀疏參數(shù)。
三、應(yīng)用效果：
性能強：全異步大規(guī)模訓(xùn)練集群規(guī)模，業(yè)務(wù)模型訓(xùn)練速度提升效果顯著;
參數(shù)規(guī)模大:Embedding規(guī)模&模型擴(kuò)大數(shù)倍；
效果好：在多個場景(廣告，信息流等)，線上關(guān)鍵指標(biāo)提升效果顯著；
性價比高：參數(shù)服務(wù)器訓(xùn)練，大幅度減少內(nèi)存開銷。
