（資料來源，媒介360，2015廣告主投放數(shù)據(jù)報告）
要實現(xiàn)精準(zhǔn)廣告營銷，通常需要借助DSP來進行。由于DSP可大幅提升投放的精準(zhǔn)度，為廣告主提供跨媒介、跨平臺、跨終端的廣告投放平臺，通過數(shù)據(jù)整合、分析實現(xiàn)基于受眾的精準(zhǔn)投放，并且實時監(jiān)控不斷優(yōu)化，因此所有對廣告的真實效果有追求的行業(yè)都適合DSP。但隨著廣告主對精準(zhǔn)廣告的要求越來越高， 以及大數(shù)據(jù)技術(shù)對精準(zhǔn)廣告的巨大推動作用，DSP平臺對實時數(shù)據(jù)處理效率的要求和對大數(shù)據(jù)技術(shù)的引入成為了當(dāng)務(wù)之急。因此，選擇合適的大數(shù)據(jù)處理平臺成為了精準(zhǔn)廣告營銷用戶面臨的難題。
來自DSP的業(yè)務(wù)挑戰(zhàn)
眾成就數(shù)字傳媒集團是央視最大的廣告代理公司-三人行的母公司(以下簡稱“眾成就”)，集團下屬三人行、聞成就、在身邊三家子公司。業(yè)務(wù)覆蓋電視廣告、大內(nèi)容策劃、投資與代理、全媒體數(shù)字營銷以及大數(shù)據(jù)研究與移動產(chǎn)品開發(fā)服務(wù)。基于19年積累的豐富廣告服務(wù)經(jīng)驗，不斷延伸互聯(lián)網(wǎng)發(fā)展下數(shù)字營銷領(lǐng)域的觸角，致力于成為提供全媒體服務(wù)的綜合性傳媒集團。
從2012年至今，眾成就文娛內(nèi)容合作已超過220個IP；從2015年開始，獨立投資打造《黃金線路》、《車神駕到》、《全家好拍檔》、《魅力廚房》等熱門IP，并以聯(lián)合投資、內(nèi)容代理等方式共同打造數(shù)十檔IP內(nèi)容；而伴隨著大數(shù)據(jù)時代的來臨，2015年啟動以人為中心的IP文娛產(chǎn)業(yè)鏈布局，希望通過大數(shù)據(jù)分析產(chǎn)品開發(fā)，構(gòu)建精準(zhǔn)DSP平臺，打通線上與線下，鏈接用戶全媒體軌跡，獲取大內(nèi)容策劃與制作的內(nèi)容方向反哺與全平臺投放策略。眾成就DMP（數(shù)據(jù)管理平臺）提供數(shù)字廣告營銷從曝光到轉(zhuǎn)化全流程中集數(shù)據(jù)采集、存儲、分析的解決方案，對外提供統(tǒng)計結(jié)果的前端展示和報表輸出功能。眾成就DMP致力于幫助廣告主圍繞用戶受眾優(yōu)化媒體資源分配，輔助廣告投放創(chuàng)意和落地頁內(nèi)容制作，并使數(shù)字廣告投放策略實時調(diào)優(yōu)成為可能，從而提升最終的銷售轉(zhuǎn)化。通過積累廣告主歷史投放數(shù)據(jù)并提供深度的數(shù)據(jù)全景洞察，廣告公司和廣告主結(jié)成戰(zhàn)略伙伴關(guān)系。構(gòu)建眾成就的精準(zhǔn)DSP平臺，對數(shù)據(jù)的實時處理能力提出了很高的要求：
首先，眾成就DSP平臺由于具有接入用戶眾多，用戶數(shù)量級達到了十億量級，而頁面也達到了百萬量級，如此大規(guī)模的用戶和頁面處理對數(shù)據(jù)處理平臺的性能是一個巨大的考驗。
其次，眾成就DSP平臺具有高并發(fā)的特性，在線投放系統(tǒng)每天需要處理百億次廣告交易，這對數(shù)據(jù)處理平臺的并發(fā)性能又提出了很高的要求。
最后，AD Exchange要求競價在100ms內(nèi)完成，這就要求數(shù)據(jù)處理平臺具有低延時的特性，因此，網(wǎng)絡(luò)帶寬的質(zhì)量有較高的需求。
華為企業(yè)云應(yīng)對挑戰(zhàn)
為了找到滿足上述要求的數(shù)據(jù)處理解決方案，眾成就IT部門多方比較、仔細調(diào)研，最終選擇了華為企業(yè)云大數(shù)據(jù)解決方案搭建DSP的實時數(shù)據(jù)處理系統(tǒng)，該系統(tǒng)的架構(gòu)圖如下所示：
該系統(tǒng)主要包括前端投放集群和后端大數(shù)據(jù)計算集群兩部分，前端投放機業(yè)務(wù)集群使用物理機實現(xiàn)，后端計算集群部分使用彈性大數(shù)據(jù)服務(wù)(云服務(wù)器)，采用混合托管形式搭建。眾成就面向大數(shù)據(jù)后臺接入功能做了大量測試，屬于高級功能群的用戶，使用spark Client向大數(shù)據(jù)集群提交作業(yè)，后臺JDBC和Hbase client連接使用大數(shù)據(jù)。同時基于大數(shù)據(jù)+OBS的方案解決了客戶對于本地kafka和數(shù)據(jù)存儲的維護成本，壓力峰值滿足了眾成就的業(yè)務(wù)場景，最終獲得了眾成就的認(rèn)可。
該系統(tǒng)中，眾成就主要使用的業(yè)務(wù)包括hadoop client、spark client、hive+hbase，為此，華為企業(yè)云進一步完善了功能驗證、可擴展性和用戶資料，同時通過測試以及個性化的定制方案滿足了客戶運行態(tài)作業(yè)后臺監(jiān)控和多用戶使用場景功能需求，這些個性化的定制包括：
混合托管搭建：前端投放集群使用物理機，后端集群使用 大數(shù)據(jù)服務(wù)
使用多種大數(shù)據(jù)服務(wù)：hadoop 、spark 、hive+hbase
高質(zhì)量5線全動態(tài)BGP網(wǎng)絡(luò)保障
除此之外，華為企業(yè)云大數(shù)據(jù)解決方案還具有以下特點：
一，海量存儲，功能豐富，管理簡單
PB級存儲容量，云端無限擴容；全面支持采集、存儲、分析、挖掘、深度學(xué)習(xí)；一站式可視化管理，簡化部署及運維。
二，高度兼容開源，商用性保障
全面兼容開源技術(shù)；整合主流開源軟件，性能穩(wěn)定性提升30%以上；具有多種在線、離線分析工具。
三、企業(yè)級數(shù)據(jù)安全保護
VPC 私有網(wǎng)絡(luò)隔離、數(shù)據(jù)冗余保護，11個9存儲持久性、256位傳輸加密、永不進行數(shù)據(jù)變現(xiàn)。
客戶收益
通過華為企業(yè)云大數(shù)據(jù)解決方案，眾成就DSP平臺交出了每天17億條數(shù)據(jù)記錄處理，10分鐘完成2萬次TPS查詢，競價的延時在60ms以內(nèi)，充分滿足了眾成就的業(yè)務(wù)需求，贏得了用戶的高度贊譽和信任。
眾成就大數(shù)據(jù)產(chǎn)品副總監(jiān)馬益民表示：“華為企業(yè)云提供靈活的云計算資源選擇，按需的資源模式可以幫助我們在流量高峰時動態(tài)擴展系統(tǒng)前端投放機，并在高峰過后刪除以節(jié)省資費，達到資源的利用最大化。在大數(shù)據(jù)系統(tǒng)的搭建方面，Mapreduce服務(wù)和對象存儲服務(wù)幫助我們快速的實現(xiàn)了數(shù)據(jù)從流入、存儲、分析、展示的整個流程。其中對象存儲服務(wù)良好的數(shù)據(jù)高可用性，給了以數(shù)據(jù)為核心資產(chǎn)的團隊足夠的安全感，同時比起將數(shù)據(jù)存儲在本地云硬盤上又節(jié)省了很大一筆開支。而Mapreduce服務(wù)與對象存儲服務(wù)良好的兼容性使得我們在清洗和分析數(shù)據(jù)時體驗更加流暢，清洗處理后的數(shù)據(jù)可以第一時間存入RDS做后續(xù)分析。另外，Mapreduce服務(wù)天然支持Spark內(nèi)存運算，幫助我們在數(shù)據(jù)挖掘算法的應(yīng)用上提供了非常好的支持。通過深入的合作，華為企業(yè)云與眾成就達成了良好的合作模式與長期信賴。華為企業(yè)云迅速的服務(wù)反饋機制讓人佩服，眾多項目的高效及時上線為眾成就的客戶帶來切實有效的營銷服務(wù)與有價值的項目參考數(shù)據(jù)，成功為用戶、品牌與媒體搭建了廣告效果卓越且具有高度信任的服務(wù)平臺。希望與華為企業(yè)云的合作能繼續(xù)取得更大進展，雙方共同成長?！?/p>
