(電子商務(wù)研究中心訊)王答明：1號店IT資深經(jīng)理，負責個性化推薦/大數(shù)據(jù)挖掘
大數(shù)據(jù)這個詞為什么現(xiàn)在這么火，個人的理解是用一個新瓶裝了很多舊酒，也就是說之前的很多技術(shù)，概念或者應(yīng)用現(xiàn)在都可以往大數(shù)據(jù)這個詞里放，比如分布式處理，數(shù)據(jù)挖掘，機器學習，文本處理，語音/圖像處理，個性化推薦，知識圖譜，當然也包括傳統(tǒng)的一些BI分析系統(tǒng)等等，因為這些技術(shù)存在的時間已經(jīng)不短，而且之前在很多行業(yè)都或多或少得到了一些應(yīng)用。
但隨著互聯(lián)網(wǎng)的發(fā)展，數(shù)據(jù)采集能力和數(shù)據(jù)處理能力的飛快提升，這些相關(guān)的技術(shù)和應(yīng)用得到進一步發(fā)展和融合，進而進化出了更多更豐富的數(shù)據(jù)應(yīng)用。不管大數(shù)據(jù)的應(yīng)用是什么，一般的處理手段無外乎先收集到你可能收集的各種源數(shù)據(jù)，經(jīng)過數(shù)據(jù)清洗結(jié)構(gòu)化等進行存儲，在之上做特征工程，做機器學習數(shù)據(jù)挖掘算法，最后挖出一些基本的規(guī)律來，大多有事物之間的相似度，關(guān)聯(lián)度，事物之間的結(jié)構(gòu)關(guān)系比如層級，時序性等。然后，我們可以在這些規(guī)律的基礎(chǔ)上做大數(shù)據(jù)服務(wù)，比如用來預測，用來給人提供決策建議，決策支撐，甚至通過系統(tǒng)化來使得整個決策自動化和大規(guī)?；?，還可以使系統(tǒng)具有學習更新的能力來達到工業(yè)級的智能應(yīng)用。最終可以為企業(yè)，或者面向用戶的app提供真實的價值。
對電商行業(yè)來說，本身屬于互聯(lián)網(wǎng)領(lǐng)域內(nèi)，所以如何有效的挖掘數(shù)據(jù)，利用數(shù)據(jù)對自身而言是個非常重要的戰(zhàn)略方向。比較而言，個性化推薦/精準營銷是已經(jīng)在業(yè)界廣泛驗證和實現(xiàn)層相對成熟的應(yīng)用之一，但因為其架構(gòu)和算法的復雜度依舊相對較高，離真正的成熟還有很遠距離，比如我們能看到國外主要是亞馬遜幾年前公開過自己銷售靠推薦而來的占比，從國內(nèi)的實踐來看，大型電商也基本都是從11/12年開始啟動這方面的技術(shù)探索，而且不同的公司因為考慮對自身的價值從而所做的投入也不盡相同。
另外，大數(shù)據(jù)挖掘在電商的應(yīng)用還有銷量預測，品類管理和動態(tài)定價，這三個方面也有相互關(guān)聯(lián)，在電商時代，銷量預測可以突破僅僅靠歷史銷售數(shù)據(jù)來建模的限制，用戶的各種行為數(shù)據(jù)，比如瀏覽，搜索，收藏，購物車等等都可以輸入預測模型，可以利用的數(shù)據(jù)甚至還有競爭對手可以獲取的數(shù)據(jù)，當然建模系統(tǒng)要能夠規(guī)?；瘉硖幚泶罅慷鄻拥臄?shù)據(jù)源。類似比如自動化的品類管理，以及利用站內(nèi)站外數(shù)據(jù)進行系統(tǒng)化建模來自動定價。對于電商其他的核心系統(tǒng)，比如倉儲管理，物流，大數(shù)據(jù)同樣有著重要的意義，比如利用某個區(qū)域的用戶在網(wǎng)站上的實時行為數(shù)據(jù)，來對某個區(qū)域倉儲做商品需求預測，可以提前一步運貨到最后一公里，極大的提升物流效率。
接下來的部分著重闡述一下1號店在個性化方面的一些實踐，從個性化對電商意義來講，無疑要從用戶體驗和商業(yè)價值兩個角度來看，而且不少場景下因為兩者之間的矛盾，如何平衡是個相當復雜的問題。
1號店經(jīng)過將近兩年的研發(fā)，目前已經(jīng)建立起相對完善的個性化精準平臺，而且在用戶各種購物流程，各個觸點，以及對CRM,廣告，市場活動等業(yè)務(wù)產(chǎn)生了根本的重構(gòu)和變革。
目前為止，個性精準化平臺也為1號店業(yè)務(wù)在各個指標上有較大的提升
這里列舉一些基本的推薦欄位截圖示例
搭配推薦是我們主要的推薦產(chǎn)品之一，在13年5月份第一次上線就在各個指標上比之前人工維護獲得極大提升，值得一提的是不僅僅是覆蓋度，點擊率和轉(zhuǎn)化率也提升了將近一倍，充分證明了算法的有效性。但不可避免的是，算法和數(shù)據(jù)相互依賴，對于13年初的小品類因為當時數(shù)據(jù)量不夠，導致效果不明顯，但整體上來說都是成倍的提升。
對于搭配推薦這個case, 我們從多個角度來進一步闡述：比如：
最早上線了基本的關(guān)聯(lián)挖掘，只是利用了訂單數(shù)據(jù)，效果明顯；
然后在第二階段我們利用了更多的數(shù)據(jù)比如購物車，數(shù)據(jù)量暴增，促使我們利用更有效并且能處理更大數(shù)據(jù)量的分布式FPgrowth算法；
到了第三個階段，面對產(chǎn)品上繼續(xù)存在的問題，我們繼續(xù)利用更多數(shù)據(jù)比如同session瀏覽，并且為了解決時間序列和屬性搭配等問題，進一步把時序挖掘和改造的泛化關(guān)聯(lián)挖掘整合到fpgrowth里，進行算法的進一步創(chuàng)新，同時也解決了產(chǎn)品上的一些痛點，也使得業(yè)務(wù)指標得到進一步提升；通過這個例子，我們充分在實踐中理解了產(chǎn)品，算法，數(shù)據(jù)聯(lián)動的重要性，并獲得深刻的感性認識。
這里再列舉兩個通過個性化推薦使得業(yè)務(wù)明顯提升的例子，一個是首頁topN推薦列表和限時搶購的ctr比較，一個是我們團購個性化排序線上A/B測試相對非個性化轉(zhuǎn)化率提升的實踐。
正如前面所提到的，我們目前已經(jīng)建立起相對完善的用戶畫像平臺，這里跟傳統(tǒng)CRM的用戶視圖做一個對比，可以這么理解：傳統(tǒng)CRM主要通過分析用戶生命周期，客戶級別和RMF值等維度來了解自己的顧客，但最大的缺失是不知道下一步如何take action, 或者說無法設(shè)計出有效的action, 那么精準化正是解決了這個問題，通過我們描繪出用戶的興趣圖譜，購物類型等等維度，系統(tǒng)可以全面的了解每個顧客從而提供千人千面的服務(wù)，不管是主站首頁，app各個路徑，或者是EDM，短信/微信等觸點來充分的關(guān)懷用戶，給每個用戶VIP級別的1對1服務(wù)。目前1號店的用戶畫像系統(tǒng)利用實時大數(shù)據(jù)平臺已經(jīng)可以在毫秒級更新每一個人的興趣圖譜，最及時的捕捉每個顧客及時需求。
最近，我們又研發(fā)出了基于上下文的推薦產(chǎn)品，通過大數(shù)據(jù)挖掘的手段來分析不同商圈/小區(qū)，不同季節(jié)，用戶使用的不同場景（比如工作時段，上下班，晚上臨睡前等等）下的偏好特征，結(jié)合其個人用戶畫像來為顧客提供更加精準有效的個性化服務(wù)。并在一定程度上解決用戶數(shù)據(jù)稀疏，冷啟動等推薦領(lǐng)域一直比較頭痛的問題。
總的來說，雖然在1號店我們在個性化推薦方向已經(jīng)取得一定的進展，但毫無疑問未來需要探索嘗試的依舊很多，大數(shù)據(jù)挖掘是個值得長期投入并持續(xù)優(yōu)化的領(lǐng)域。到目前為止，1號店技術(shù)部已經(jīng)建立起將近30人的算法架構(gòu)團隊來負責個性化推薦核心系統(tǒng)的研發(fā)，如果加上相關(guān)的應(yīng)用團隊，整體會超過50人。（來源：CSDN大數(shù)據(jù)；編選：網(wǎng)經(jīng)社）
