基于淘寶廣告數(shù)據(jù)的點(diǎn)擊概率預(yù)估模型研究

高 巍, 張奧南, 李大舟, 王淮中

(沈陽(yáng)化工大學(xué) 計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院, 遼寧 沈陽(yáng) 110142)

隨著互聯(lián)網(wǎng)技術(shù)與應(yīng)用的飛速發(fā)展,人類(lèi)開(kāi)始步入大數(shù)據(jù)時(shí)代,面對(duì)越來(lái)越繁雜的數(shù)據(jù)量,如何搭建準(zhǔn)確率高的點(diǎn)擊概率預(yù)估模型從而篩選數(shù)據(jù)成為網(wǎng)絡(luò)服務(wù)提供商以及互聯(lián)網(wǎng)用戶(hù)的共同難題.點(diǎn)擊概率主要從用戶(hù)的行為分析包括點(diǎn)擊、瀏覽、收藏等操作來(lái)反映用戶(hù)的興趣與需求,搭建一個(gè)準(zhǔn)確率高的點(diǎn)擊概率預(yù)估模型,極大地提升在線(xiàn)廣告、營(yíng)銷(xiāo)、商品推薦等效果.當(dāng)前工業(yè)上使用的基于點(diǎn)擊概率預(yù)估模型需要對(duì)用戶(hù)-商品的行為數(shù)據(jù)進(jìn)行處理,在用戶(hù)-商品的行為數(shù)據(jù)中提取出大量的特征,這些特征就能夠反映出用戶(hù)是否會(huì)喜歡某一件商品.目前的點(diǎn)擊概率預(yù)估模型不僅要考慮用戶(hù)-商品數(shù)據(jù)中的特征對(duì)推薦結(jié)果的影響,還要考慮到兩個(gè)特征之間的組合,或者多個(gè)特征之間的組合對(duì)最終結(jié)果產(chǎn)生的影響,因此大量基于特征工程的點(diǎn)擊概率模型相繼誕生.

2010年之前在推薦系統(tǒng)中應(yīng)用點(diǎn)擊概率預(yù)估模型都是線(xiàn)性模型,例如LR模型、FTRL[1]模型,這類(lèi)線(xiàn)性模型采用梯度下降[2]的方法提取數(shù)據(jù)中的線(xiàn)性關(guān)系,由于其簡(jiǎn)單、易于并行化實(shí)現(xiàn)、可解釋性強(qiáng)等優(yōu)點(diǎn)而被廣泛使用.然而,由于線(xiàn)性模型本身的局限不能處理特征和目標(biāo)之間的非線(xiàn)性關(guān)系,因此模型效果嚴(yán)重依賴(lài)于算法工程師的特征工程經(jīng)驗(yàn).為使模型能夠自動(dòng)學(xué)習(xí)到原始特征之間的關(guān)系,于2010年因子分解機(jī)(FM)系列算法相繼誕生,從剛開(kāi)始的FM算法[3]提出了將特征進(jìn)行兩兩組合以達(dá)到自動(dòng)學(xué)習(xí)特征之間關(guān)系的目的,到之后延進(jìn)化的FFM算法[4]將相同性質(zhì)的特征歸結(jié)于同一個(gè)類(lèi)別,提出隱向量概念,進(jìn)一步提高了模型對(duì)數(shù)據(jù)中特征之間組合的效率.2015年,為了能夠同時(shí)學(xué)習(xí)出高階特征與低階特征之間的組合,點(diǎn)擊概率預(yù)估模型進(jìn)入了深度學(xué)習(xí)的時(shí)代,一大批將線(xiàn)性模型與深度神經(jīng)網(wǎng)絡(luò)相結(jié)合的模型誕生.比較著名的有Wide and Deep[5]、DeepFM算法[6],這類(lèi)模型是將線(xiàn)性模型與DNN模型進(jìn)行組合的模型.Google發(fā)表的論文Deep Neural Networks for YouTube Recommendations[7]介紹了推薦系統(tǒng)中比較經(jīng)典的兩層結(jié)構(gòu):召回和排序.同樣是利用DNN對(duì)數(shù)據(jù)進(jìn)行訓(xùn)練達(dá)到產(chǎn)生候選集和排序的效果.FNN[8]、PNN[9]、GBDT[10-11]利用神經(jīng)網(wǎng)絡(luò)對(duì)非線(xiàn)性特征擬合能力較強(qiáng)的優(yōu)點(diǎn)將神經(jīng)網(wǎng)絡(luò)應(yīng)用在點(diǎn)擊概率預(yù)估模型中.筆者對(duì)當(dāng)前比較流行的點(diǎn)擊概率預(yù)估模型進(jìn)行研究總結(jié),并提出了因子交互全連接網(wǎng)絡(luò)模型,以達(dá)到增加推薦結(jié)果準(zhǔn)確率的效果.

1 算法設(shè)計(jì)

1.1 因子交互全連接網(wǎng)絡(luò)

對(duì)當(dāng)前比較主流的點(diǎn)擊概率預(yù)估模型進(jìn)行分析,提出并搭建一種因子交互全連接網(wǎng)絡(luò)模型,整體構(gòu)架如圖1所示.首先加入壓縮交互網(wǎng)絡(luò)(CIN)模型[12],并將其與因子分解機(jī)(FM)模型和深度神經(jīng)網(wǎng)絡(luò)(DNN)模型進(jìn)行組合.3個(gè)部分共享相同的輸入.因子分解機(jī)部分負(fù)責(zé)解決數(shù)據(jù)經(jīng)過(guò)獨(dú)熱編碼后稀疏的問(wèn)題并提取數(shù)據(jù)中的低階數(shù)據(jù)進(jìn)行組合;深度神經(jīng)網(wǎng)絡(luò)部分負(fù)責(zé)提取和組合數(shù)據(jù)中的高階特征;壓縮交互網(wǎng)絡(luò)負(fù)責(zé)顯性地對(duì)數(shù)據(jù)中的特征進(jìn)行組合,在向量級(jí)上進(jìn)行計(jì)算,使過(guò)程變得可見(jiàn)和可控.

模型中提到的高階特征、低階特征即為數(shù)據(jù)中原始特征的組合.將數(shù)據(jù)中的特征分別組成維度為1×10的特征矩陣,然后將特征矩陣進(jìn)行兩兩組合計(jì)算兩個(gè)特征之間的相關(guān)性即為低階特征;將多個(gè)特征矩陣進(jìn)行組合計(jì)算得到的即為高階特征.

筆者將嵌入層處理后的維度為1×10的特征矩陣記為X矩陣,數(shù)據(jù)集中包含多個(gè)特征向量(例如每個(gè)用戶(hù)對(duì)應(yīng)的ID、每個(gè)物品對(duì)應(yīng)的ID等),每個(gè)特征向量對(duì)應(yīng)一個(gè)索引值.進(jìn)行特征向量處理分類(lèi)后會(huì)有39個(gè)類(lèi)別的特征矩陣X,分別記為X0,X1,X2,…,XK,將這些特征矩陣分別帶入模型的每個(gè)模塊中.

模型首先將數(shù)據(jù)進(jìn)行獨(dú)熱編碼然后分別輸入到FM、CIN、DNN模塊中,其中FM算法可以利用矩陣分解的原理將稀疏的數(shù)據(jù)轉(zhuǎn)化為稠密數(shù)據(jù)進(jìn)行訓(xùn)練,訓(xùn)練后得到FM算法的輸出為一個(gè)變量.CIN、DNN模塊則需要將經(jīng)過(guò)獨(dú)熱編碼后的稀疏數(shù)據(jù)先輸入到嵌入層進(jìn)行降維變成稠密數(shù)據(jù),然后再將得到的特征向量輸入到模塊中進(jìn)行訓(xùn)練.最終將3個(gè)模塊得到的結(jié)果進(jìn)行累加,然后通過(guò)Sigmoid函數(shù)得到模型的最終結(jié)果.

圖1 因子交互全連接網(wǎng)絡(luò)結(jié)構(gòu)

1.2 獨(dú)熱編碼

在點(diǎn)擊概率預(yù)估模型領(lǐng)域中要提取的數(shù)據(jù)的特征一般都?xì)w屬于多個(gè)類(lèi)別的離散數(shù)據(jù).對(duì)這些離散數(shù)據(jù)進(jìn)行獨(dú)熱編碼,將他們變成特征矩陣.然而用于點(diǎn)擊率預(yù)估的每個(gè)類(lèi)別中都會(huì)有空缺部分,如某個(gè)用戶(hù)對(duì)體育類(lèi)的商品不感興趣并且從未點(diǎn)擊過(guò)這類(lèi)廣告,那么在數(shù)據(jù)中關(guān)于他的體育類(lèi)別的數(shù)據(jù)就會(huì)是缺失的,這類(lèi)數(shù)據(jù)經(jīng)過(guò)獨(dú)熱編碼后就會(huì)造成數(shù)據(jù)稀疏問(wèn)題,如果將稀疏的特征矩陣進(jìn)行組合就會(huì)造成維度爆炸.為了解決這類(lèi)問(wèn)題,筆者在模型中加入嵌入層(embedding)使數(shù)據(jù)變得低維且稠密.

1.3 嵌入層

嵌入層的主要功能是將輸入的稀疏向量壓縮為低維稠密向量.在點(diǎn)擊率預(yù)估模型領(lǐng)域,輸入一般都是基于用戶(hù)的行為數(shù)據(jù)集,與圖像或者語(yǔ)音類(lèi)輸入不同,圖像、語(yǔ)音的輸入一般是連續(xù)而且密集的,而用于點(diǎn)擊概率預(yù)估的輸入一般無(wú)法達(dá)到每個(gè)用戶(hù)對(duì)每一個(gè)類(lèi)別都有過(guò)點(diǎn)擊行為,所以數(shù)據(jù)一般都是稀疏的,因此要加入嵌入層.其原理類(lèi)似于兩個(gè)矩陣相乘,類(lèi)別矩陣的維度為1×n(n為數(shù)據(jù)中的特征數(shù)量),嵌入層中的權(quán)重矩陣為n×k(k為設(shè)定的嵌入層尺寸),相乘得到嵌入層輸出的特征矩陣為1×k.盡管不同類(lèi)別(field)的輸入長(zhǎng)度不同,但是經(jīng)過(guò)嵌入層之后向量的長(zhǎng)度均為k.

1.4 神經(jīng)網(wǎng)絡(luò)模型

筆者采用的神經(jīng)網(wǎng)絡(luò)為多層前饋神經(jīng)網(wǎng)絡(luò),是一種最簡(jiǎn)單的神經(jīng)網(wǎng)絡(luò),如圖2所示,各神經(jīng)元分層排列.每個(gè)神經(jīng)元只與前一層的神經(jīng)元相連,接收前一層的輸出,并輸出給下一層.

圖2 多層前饋神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)

將嵌入層處理后的特征向量X0,X1,X2,…,XK輸入到神經(jīng)網(wǎng)絡(luò)中, 由于經(jīng)過(guò)網(wǎng)絡(luò)多層的組合,最終可以實(shí)現(xiàn)對(duì)多個(gè)特征進(jìn)行組合的效果,即提取數(shù)據(jù)中的高階特征.但是,特征交互是發(fā)生在特征向量中每個(gè)元素上的,而不是對(duì)整個(gè)特征向量進(jìn)行計(jì)算,這一點(diǎn)違背了因子分解機(jī)的初衷.因此,筆者在模型中加入了CIN模塊以解決這個(gè)問(wèn)題.

1.5 壓縮交互網(wǎng)絡(luò)(CIN)

為了實(shí)現(xiàn)自動(dòng)學(xué)習(xí)顯式的高階特征交互,并使交互發(fā)生在向量級(jí)上,在模型中加入壓縮交互網(wǎng)絡(luò)模型.在該模型中,隱向量是一個(gè)單元對(duì)象,因此將輸入的原始特征和神經(jīng)網(wǎng)絡(luò)中的隱層都分別組成一個(gè)矩陣,記為X0和XK.壓縮交互網(wǎng)絡(luò)中每一層的神經(jīng)元都是根據(jù)前一層的隱層以及原特征向量計(jì)算而來(lái),其計(jì)算公式為

(1)

在CIN中,第k層隱層含有Hk條神經(jīng)元向量.隱層的計(jì)算可以分成兩個(gè)步驟:根據(jù)前一層隱層的狀態(tài)XK和原特征矩陣X0,計(jì)算出一個(gè)中間結(jié)果Zk+1,它是一個(gè)三維的張量,如圖3所示.

圖3 壓縮交互網(wǎng)絡(luò)結(jié)構(gòu)

在中間結(jié)果Zk+1上,用Hk+1個(gè)尺寸為m×Hk的卷積核生成下一層隱層的狀態(tài).這一操作與計(jì)算機(jī)視覺(jué)中最流行的卷積神經(jīng)網(wǎng)絡(luò)大體一致,唯一的區(qū)別在于卷積核的設(shè)計(jì).壓縮交互網(wǎng)絡(luò)中一個(gè)神經(jīng)元相關(guān)的接受域是兩個(gè)矩陣組合之后形成的若干個(gè)平面,而CNN中的接受域是當(dāng)前神經(jīng)元周?chē)木植啃》秶鷧^(qū)域,因此壓縮交互網(wǎng)絡(luò)中經(jīng)過(guò)卷積操作得到的特征圖是一個(gè)向量,即特征交互之后的特征向量,而不是一個(gè)矩陣,達(dá)到了顯式學(xué)習(xí)特征交互的目的.

CIN的特點(diǎn)是最終學(xué)習(xí)出的特征交互階數(shù)由網(wǎng)絡(luò)層數(shù)決定,每一層隱層都通過(guò)一個(gè)池化操作連接到輸出層,從而保證輸出單元可以見(jiàn)到不同階數(shù)的特征交互模式.最終原數(shù)據(jù)集中的特征輸入到CIN模塊中進(jìn)行顯性的特征交互,使計(jì)算發(fā)生在向量級(jí)上,即最終得到的結(jié)果是向量形式,從而解決了點(diǎn)擊概率預(yù)估模型中無(wú)法顯性組合特征的難題.

1.6 因子分解機(jī)模型(FM)

FM算法首先將數(shù)據(jù)分為若干個(gè)類(lèi)別(field),每個(gè)類(lèi)別中包含若干個(gè)特征,FM算法負(fù)責(zé)對(duì)這些特征進(jìn)行兩兩組合,最終計(jì)算出特征之間的相關(guān)性.為了解決輸入的數(shù)據(jù)經(jīng)過(guò)獨(dú)熱編碼后會(huì)變得高維且稀疏的問(wèn)題,FM算法提出了隱向量的概念,即對(duì)模型的參數(shù)矩陣進(jìn)行矩陣分解,得到低維稠密特征向量.

(2)

式中:xi、xj分別代表第i和第j個(gè)特征(本實(shí)驗(yàn)中為1×10的特征矩陣),Vi、Vj即為特征i、j的隱向量.具體計(jì)算方式采用矩陣分解的原理進(jìn)行計(jì)算,將經(jīng)過(guò)獨(dú)熱編碼后稀疏的特征向量進(jìn)行交互得到一個(gè)特征矩陣,再將得到的特征矩陣進(jìn)行分解,得到稠密的特征向量,其原理與算法中的嵌入層功能一致,在最終的算法中加入FM算法是為了自動(dòng)、顯式地提取組合數(shù)據(jù)中的低階特征.由公式(2)可以看出:FM算法能夠進(jìn)行特征之間的兩兩交互,也就是只能提取數(shù)據(jù)中的低階特征,但事實(shí)證明數(shù)據(jù)中的高階和低階特征對(duì)最終的結(jié)果都會(huì)有影響,比如一個(gè)用戶(hù)可能會(huì)點(diǎn)擊的廣告包含多個(gè)類(lèi)別,所以筆者在模型中加入了神經(jīng)網(wǎng)絡(luò)模塊用來(lái)組合數(shù)據(jù)中的高階特征.

2 實(shí)驗(yàn)結(jié)果及分析

2.1 數(shù)據(jù)集

筆者采用淘寶廣告展示數(shù)據(jù)集進(jìn)行訓(xùn)練,該數(shù)據(jù)集是在淘寶網(wǎng)站中隨機(jī)抽樣114萬(wàn)用戶(hù)8 d內(nèi)的廣告展示/點(diǎn)擊日志(2600萬(wàn)條記錄)構(gòu)成原始的樣本數(shù)據(jù).數(shù)據(jù)中包含用戶(hù)ID、廣告ID、時(shí)間、廣告展示的位置、行為類(lèi)型和品牌ID等特征類(lèi)別.

樣本數(shù)據(jù)經(jīng)過(guò)處理后得到4個(gè)文件:廣告點(diǎn)擊的樣本數(shù)據(jù) raw_sample.csv(用戶(hù)對(duì)不同位置廣告點(diǎn)擊、沒(méi)點(diǎn)擊的情況);廣告基本信息數(shù)據(jù)ad_feature.csv[每個(gè)廣告的類(lèi)目(ID)、品牌(ID)、價(jià)格特征];用戶(hù)基本信息數(shù)據(jù) user_profile.csv(用戶(hù)群組、性別、年齡、消費(fèi)購(gòu)物檔次、所在城市級(jí)別等特征);用戶(hù)行為日志數(shù)據(jù) behavior_log.csv[用戶(hù)對(duì)商品類(lèi)目(ID)、品牌(ID)的瀏覽、加購(gòu)物車(chē)、收藏、購(gòu)買(mǎi)等信息].將這些數(shù)據(jù)分別組成訓(xùn)練集和測(cè)試集,分別帶入到模型中進(jìn)行訓(xùn)練并分析實(shí)驗(yàn)結(jié)果.

2.2 實(shí)驗(yàn)環(huán)境

實(shí)驗(yàn)使用Window系統(tǒng),采用NVIDIA GTX 1060 顯卡.筆者提出的模型使用TensorFlow框架搭建,如圖4、圖5所示.

圖4 AUC、Logloss與網(wǎng)絡(luò)深度關(guān)系

圖5 AUC、Logloss與隱含層節(jié)點(diǎn)數(shù)關(guān)系

由圖4、圖5可以看出:當(dāng)筆者所提模型的網(wǎng)絡(luò)深度為3時(shí),得到的AUC值最高、Logloss值最低;當(dāng)選擇的隱含層節(jié)點(diǎn)數(shù)量為200時(shí),模型得到的AUC值最高、Logloss值最小.因此,模型選擇3層結(jié)構(gòu),分別為輸入層、隱含層和輸出層;隱含層的節(jié)點(diǎn)設(shè)置為200個(gè).為了簡(jiǎn)化實(shí)驗(yàn)配置,定義所有模型的特征嵌入維度統(tǒng)一固定為10.

2.3 評(píng)價(jià)指標(biāo)

實(shí)驗(yàn)采用曲線(xiàn)下面積(AUC)和對(duì)數(shù)損失函數(shù)(Logloss)指標(biāo)作為模型的評(píng)估指標(biāo).

點(diǎn)擊概率預(yù)估模型的本質(zhì)就是二分類(lèi)問(wèn)題,即預(yù)測(cè)某一用戶(hù)對(duì)某一物品的點(diǎn)擊概率.當(dāng)預(yù)測(cè)的結(jié)果表明用戶(hù)接下來(lái)的行為后,利用AUC來(lái)對(duì)比預(yù)測(cè)的行為與測(cè)試集中原始特征是否一致.最終得到原始特征之間的相關(guān)性即是用戶(hù)對(duì)物品的點(diǎn)擊概率.

(2) Logloss的公式為

(3)

式中:n是測(cè)試樣本個(gè)數(shù);yi為輸入實(shí)例xi的真實(shí)類(lèi)別;pi為預(yù)測(cè)輸入實(shí)例xi屬于類(lèi)別1的概率.對(duì)所有樣本的對(duì)數(shù)損失表示對(duì)每個(gè)樣本的對(duì)數(shù)損失的平均值.Logloss的結(jié)果越低越好.

2.4 實(shí)驗(yàn)結(jié)果

對(duì)提出的因子交互全連接網(wǎng)絡(luò)模型(FDC)進(jìn)行訓(xùn)練并將其與LR、DNN、PNN等模型進(jìn)行對(duì)比,實(shí)驗(yàn)結(jié)果見(jiàn)表1.

表1 實(shí)驗(yàn)結(jié)果

實(shí)驗(yàn)選取了當(dāng)前工業(yè)上比較常用的6種模型分別進(jìn)行訓(xùn)練,將得到的結(jié)果與筆者提出的因子交互全連接網(wǎng)絡(luò)點(diǎn)擊概率預(yù)估模型訓(xùn)練結(jié)果進(jìn)行對(duì)比,結(jié)果如圖6所示.由圖6可以看出:因子交互全連接網(wǎng)絡(luò)與其他點(diǎn)擊概率預(yù)估模型對(duì)比AUC值均有提升,Logloss均有降低;因子交互全連接網(wǎng)絡(luò)(FDC)模型的AUC值比原始的線(xiàn)性(LR)模型AUC值提高了近0.05,與采用線(xiàn)性模型與神經(jīng)網(wǎng)絡(luò)模型結(jié)合的模型(FM)對(duì)比AUC值提高了0.01左右,Logloss值與其對(duì)比分別降低了0.04以及0.01左右.由此可以說(shuō)明筆者設(shè)計(jì)并實(shí)現(xiàn)的點(diǎn)擊概率預(yù)估模型(FDC)在工業(yè)與學(xué)術(shù)中均有較好的實(shí)際意義.

圖6 不同點(diǎn)擊概率預(yù)估模型的實(shí)驗(yàn)結(jié)果

3 結(jié) 論

筆者提出了一種基于因子分解機(jī)(FM)、深度神經(jīng)網(wǎng)絡(luò)(DNN)與壓縮交互網(wǎng)絡(luò)(CIN)結(jié)合的因子交互全連接網(wǎng)絡(luò)(FDC),并將因子交互全連接網(wǎng)絡(luò)與工業(yè)上應(yīng)用較廣的6種模型進(jìn)行對(duì)比.通過(guò)對(duì)比發(fā)現(xiàn)因子交互全連接網(wǎng)絡(luò)的準(zhǔn)確率最高、效果最好.因子交互全連接網(wǎng)絡(luò)既能同時(shí)自動(dòng)地對(duì)數(shù)據(jù)中高階和低階的特征進(jìn)行提取和組合,又能同時(shí)以顯性和隱性?xún)煞N方式進(jìn)行高階特征交互的功能,使交互發(fā)生在向量級(jí)上.解決了推薦系統(tǒng)中的多種難題,如人工提取特征費(fèi)時(shí)費(fèi)力、獨(dú)熱編碼后數(shù)據(jù)稀疏、不能同時(shí)提取數(shù)據(jù)中的高低階特征、無(wú)法顯示的組合特征,等等.該算法的提出可以提高推薦系統(tǒng)對(duì)用戶(hù)推薦信息的準(zhǔn)確率,提升用戶(hù)體驗(yàn),對(duì)從業(yè)人員的工作效率也有一定的提升.