全域數(shù)據(jù)采集，讓零散的數(shù)據(jù)有意義

　　今天在西溪園區(qū)舉行的生意參謀媒體溝通會上，阿里巴巴集團副總裁車品覺對阿里大數(shù)據(jù)策略作了系統(tǒng)解讀阿里巴巴產品采集助手。他首先談到“整合”對于數(shù)據(jù)的意義，“零散的數(shù)據(jù)沒有辦法產生價值，所以第一步，我們需要強大的系統(tǒng)對各類數(shù)據(jù)進行有效的采集和整合，然后才能享用大數(shù)據(jù)帶來的價值。”

　　據(jù)介紹，阿里巴巴數(shù)據(jù)技術及產品團隊已經建立起一套多來源、線上線下全渠道、多屏的數(shù)據(jù)采集體系，能夠實現(xiàn)阿里集團、阿里系乃至全域大數(shù)據(jù)資產的采集通路。以商家數(shù)據(jù)體系為例，現(xiàn)有數(shù)據(jù)包含商家售前、售中、售后三大環(huán)節(jié)的八項業(yè)務過程阿里巴巴信息采集器。千余個數(shù)據(jù)指標覆蓋商家開店裝修、選品、營銷運營、成交、倉儲、物流、評價、售后服務等多項經營行為，貫穿商家業(yè)務全鏈路。全域數(shù)據(jù)采集，是整合零散數(shù)據(jù)、使之產生價值的基礎，也是阿里數(shù)據(jù)團隊的基本“武功”之一。

　　建立數(shù)據(jù)公共層1688數(shù)據(jù)采集器，讓服務效能和質量雙重提升

　　多來源數(shù)據(jù)采集完成后，在數(shù)據(jù)產生價值前還有更深一層的要求，即如何打造口徑標準統(tǒng)一阿里巴巴采集軟件，計算全面精確的數(shù)據(jù)。對此，阿里巴巴建立了一套全集團的數(shù)據(jù)公共層，以OneData體系對多來源數(shù)據(jù)進行處理，進而以此為出口，對外提供標準化的(standard)、服務化的(service)、安全的(safe)、共享的(shared)數(shù)據(jù)。同時，通過OneID等計算標準和算法能力的升級1688商品關鍵詞采集工具，對原本獨立的個體數(shù)據(jù)進行有效歸一，看似不同的個體數(shù)據(jù)得到高效集成和最大程度豐富，離散數(shù)據(jù)計算和存儲帶來的信息冗余問題也隨之得到解決。

　　在實時和離線數(shù)據(jù)公共層之上，阿里巴巴還建立了實時和離線數(shù)據(jù)應用層，該層支持各類來源的個性化數(shù)據(jù)的計算、存儲和調用，與數(shù)據(jù)公共層配合服務業(yè)務。基于此，阿里巴巴大數(shù)據(jù)系統(tǒng)不僅能為客戶提供標準、統(tǒng)一、全面、精確的數(shù)據(jù)，同時還能滿足多樣化的數(shù)據(jù)服務需求，進而帶來數(shù)據(jù)價值的最大化發(fā)揮。基于兩個數(shù)據(jù)公共層及數(shù)據(jù)分發(fā)技術的應用阿里巴巴產品采集助手，數(shù)據(jù)的處理時效得到大大提升，單就實時來說，實時計算和實時推送的服務響應能力均可達到秒級。

　　目前，基于OneData體系下的阿里巴巴數(shù)據(jù)公共層已經支撐了淘寶、天貓、聚劃算、無線、搜索、阿里媽媽、航旅等20余個團隊超過30個產品和應用，日均調用約20億次，雙11當天更是超過75億次。