大數(shù)據(jù)引發(fā)工業(yè)革命

近年來(lái)，國(guó)內(nèi)外互聯(lián)網(wǎng)公司和傳統(tǒng)企業(yè)大都已經(jīng)意識(shí)到數(shù)據(jù)資產(chǎn)化和規(guī)?；瘞?lái)的潛在價(jià)

值，如何低成本且高效率地存儲(chǔ)和處理數(shù)百TB乃至EB量級(jí)的數(shù)據(jù)成為極大挑戰(zhàn)。“向數(shù)據(jù)要價(jià)值”使得幾乎每個(gè)行業(yè)都面臨著大數(shù)據(jù)問(wèn)題。“大數(shù)據(jù)”引發(fā)了新一輪IT“工業(yè)革命”。

2014年，大數(shù)據(jù)技術(shù)已經(jīng)在互聯(lián)網(wǎng)、運(yùn)營(yíng)商、IT服務(wù)提供商，以及眾多傳統(tǒng)企業(yè)中落地實(shí)踐。在全體大會(huì)主題演講環(huán)節(jié)，海內(nèi)外頂級(jí)專(zhuān)家學(xué)者深入探討了大數(shù)據(jù)技術(shù)生態(tài)系統(tǒng)的現(xiàn)狀和發(fā)展趨勢(shì)和落地實(shí)踐經(jīng)驗(yàn)。

其中，Hadoop之父、Cloudera首席架構(gòu)師Doug Cutting的“The Data Revolution”主題演講分享了新時(shí)代的數(shù)據(jù)革命;AWS大數(shù)據(jù)和高性能計(jì)算框架全球高級(jí)經(jīng)理Ben Butler，IBM大中華區(qū)系統(tǒng)與科技事業(yè)部杰出工程師李永輝，卡內(nèi)基梅隆大學(xué)計(jì)算機(jī)科學(xué)系教授Zhang Hui，University of Delaware電子與計(jì)算機(jī)工程系教授、計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)和并行系統(tǒng)實(shí)驗(yàn)室主任高光榮，卡耐基梅隆大學(xué)教授、ICML2014程序主席Eric P. Xing，Conviva聯(lián)合創(chuàng)始人兼CEO、Huawei EU Research Center研發(fā)架構(gòu)首席架構(gòu)師Sabri SKHIRI，HBase核心貢獻(xiàn)者Ted Yu帶來(lái)了國(guó)際最新技術(shù)思想和實(shí)踐經(jīng)驗(yàn)。

百度研究院副院長(zhǎng)、深度學(xué)習(xí)實(shí)驗(yàn)室主任、圖片搜索部高級(jí)總監(jiān)余凱分享“大數(shù)據(jù)人工智能”，星環(huán)科技CTO孫元浩解密“2015年大數(shù)據(jù)基礎(chǔ)技術(shù)的演進(jìn)趨勢(shì)”，浪潮集團(tuán)高級(jí)副總裁王恩東講述“大數(shù)據(jù)開(kāi)啟行業(yè)化應(yīng)用新浪潮”，中國(guó)移動(dòng)蘇州研發(fā)中心大數(shù)據(jù)產(chǎn)品部總經(jīng)理錢(qián)嶺剖析“電信運(yùn)營(yíng)商大數(shù)據(jù)商務(wù)模式研究 ”，則深入談?wù)摯髷?shù)據(jù)生態(tài)系統(tǒng)的現(xiàn)狀和發(fā)展趨勢(shì)，分享了主流實(shí)踐技術(shù)經(jīng)驗(yàn)。

百家企業(yè)分享大數(shù)據(jù)實(shí)戰(zhàn)經(jīng)驗(yàn)

圍繞“大數(shù)據(jù)生態(tài)系統(tǒng)、大數(shù)據(jù)技術(shù)、大數(shù)據(jù)應(yīng)用、大數(shù)據(jù)基礎(chǔ)設(shè)施”四大技術(shù)分論壇，來(lái)自Hadoop PMC、OpenStack基金會(huì)、Databricks、LinkedIn、Intel、eBay、Dropbox、VMWare、DELL、希捷、阿里巴巴、騰訊、百度、中國(guó)移動(dòng)、華為、浪潮、搜狐、網(wǎng)易、攜程、高德、沃爾瑪、亞信等海內(nèi)外一線(xiàn)IT公司的近百位工程師精英，從現(xiàn)實(shí)出發(fā)徹底剖析大數(shù)據(jù)技術(shù)實(shí)踐中的問(wèn)題和解決方案。

大數(shù)據(jù)生態(tài)系統(tǒng)繪制發(fā)展圖譜。匯聚Databricks、美國(guó)俄亥俄州立大學(xué)、華為、Hadoop/Tez PMC、Intel、OpenStack基金會(huì)、中國(guó)移動(dòng)、LinkedIn、阿里巴巴等十余個(gè)機(jī)構(gòu)的一線(xiàn)專(zhuān)家，研討如今大數(shù)據(jù)生態(tài)領(lǐng)域的熱門(mén)技術(shù)和實(shí)踐。其中，論壇上午，Databricks 軟件工程師、Apache Spark PMC成員孟祥瑞分享了“Apache Spark and Databricks Cloud”;美國(guó)俄亥俄州立大學(xué)計(jì)算機(jī)科學(xué)與工程系Senior Research Associate魯小億就“在現(xiàn)代集群上使用RDMA加速大數(shù)據(jù)處理”做了經(jīng)驗(yàn)分享;華為Universe大數(shù)據(jù)平臺(tái)架構(gòu)師徐健鵬講述了“基于DAG引擎的流式ETL”的實(shí)踐經(jīng)驗(yàn); Apache Hadoop和Tez項(xiàng)目PMC成員Bikas Saha帶來(lái)了名為“Apache Tez-A Framework to Model and Build Hadoop Data Processing Applications”的技術(shù)演講;Intel Senior Software Engineer、Apache Hadoop Committer、 Apache Hadoop PMC Member Uma Maheswara Rao G 與Intel Senior Software Engineer、Apache Hadoop Committer Yi Liu共同完成了技術(shù)演講“Apache Hadoop中的擴(kuò)展屬性和透明加密”。論壇下午，OpenStack基金會(huì)董事杜玉杰、中國(guó)移動(dòng)集團(tuán)公司業(yè)務(wù)支撐系統(tǒng)部項(xiàng)目經(jīng)理何鴻凌、LinkedIn 軟件工程師王國(guó)璋、柏睿數(shù)據(jù)科技有限公司董事長(zhǎng)兼CTO劉睿民、阿里巴巴資深技術(shù)專(zhuān)家蔣志勇、 云人科技聯(lián)合創(chuàng)始人兼CEO吳朱華等六位專(zhuān)家則會(huì)就OpenStack、數(shù)據(jù)庫(kù)、分布式消息系統(tǒng)、內(nèi)存技術(shù)等多個(gè)領(lǐng)域的進(jìn)行深入技術(shù)分享。

大數(shù)據(jù)技術(shù)分享實(shí)戰(zhàn)成果。搜狐移動(dòng)研發(fā)部經(jīng)理劉佳的“基于全網(wǎng)內(nèi)容的新聞客戶(hù)端推薦系統(tǒng)”，前通聯(lián)數(shù)據(jù)首席戰(zhàn)略官龍白滔的“金融投資大數(shù)據(jù)實(shí)踐分享”，VMware高級(jí)產(chǎn)品線(xiàn)經(jīng)理董波的“VMware為大數(shù)據(jù)應(yīng)用鋪平道路 ”，亞信科技大數(shù)據(jù)事業(yè)部數(shù)據(jù)資產(chǎn)管理部門(mén)產(chǎn)品總監(jiān)高偉的“數(shù)據(jù)資產(chǎn)管理——大數(shù)據(jù)時(shí)代的掘金術(shù)”從不同維度展示大數(shù)據(jù)技術(shù)應(yīng)用方向。網(wǎng)易NTSE/TNT引擎負(fù)責(zé)人胡煒的“網(wǎng)易數(shù)據(jù)庫(kù)壓縮技術(shù) ”，英特爾大數(shù)據(jù)首席架構(gòu)師戴金權(quán)的“基于Spark軟件棧的下一代大數(shù)據(jù)分析”，VMware 資深業(yè)務(wù)解決方案架構(gòu)師介文清 的“12306：改變傳統(tǒng)思路解決問(wèn)題的NoSQL實(shí)踐”，Admaster技術(shù)副總裁盧億雷的“Hadoop在廣告監(jiān)測(cè)技術(shù)的實(shí)踐”，阿里巴巴數(shù)據(jù)平臺(tái)事業(yè)部ODPS 技術(shù)專(zhuān)家徐冬的“ODPS MapReduce 對(duì)外開(kāi)放實(shí)踐”， 攜程資深軟件工程師廖曉格的“讓大數(shù)據(jù)更實(shí)時(shí)和可視化”，品友互動(dòng)聯(lián)合創(chuàng)始人兼CTO沈?qū)W華的“DSP 基于數(shù)據(jù)的實(shí)時(shí)競(jìng)價(jià)優(yōu)化”則在技術(shù)細(xì)節(jié)方面更加突出實(shí)戰(zhàn)處理。

大數(shù)據(jù)應(yīng)用聚焦行業(yè)落地。華盛頓大學(xué)終身教授、中國(guó)聯(lián)通研究院大數(shù)據(jù)/云計(jì)算首席科學(xué)家陳一昕，Co-Create of Apache Kylin、eBay高級(jí)產(chǎn)品經(jīng)理韓卿，中國(guó)移動(dòng)蘇州研發(fā)中心大數(shù)據(jù)項(xiàng)目總監(jiān)徐萌，百度研究院大數(shù)據(jù)實(shí)驗(yàn)室數(shù)據(jù)科學(xué)家沈志勇，騰訊數(shù)據(jù)平臺(tái)部精準(zhǔn)推薦中心深度學(xué)習(xí)方向負(fù)責(zé)人鄒永強(qiáng)，大會(huì)程序主席、Dropbox 研發(fā)經(jīng)理邵錚，騰訊廣點(diǎn)通高級(jí)研究員靳志輝，沃爾瑪實(shí)驗(yàn)室核心數(shù)據(jù)科學(xué)家Zhu Tao，螞蟻金服大安全安全智能部總監(jiān)/ 資深數(shù)據(jù)專(zhuān)家，CCF 大數(shù)據(jù)專(zhuān)家委員會(huì)委員陳繼東，宜信大數(shù)據(jù)創(chuàng)新中心研發(fā)總監(jiān)鄭華，高德軟件有限公司數(shù)據(jù)架構(gòu)師周琦等十一位技術(shù)專(zhuān)家攜手帶來(lái)一場(chǎng)大數(shù)據(jù)應(yīng)用的盛宴。

大數(shù)據(jù)基礎(chǔ)設(shè)施實(shí)現(xiàn)架構(gòu)融合。為了覆蓋大數(shù)據(jù)全產(chǎn)業(yè)鏈，本屆大會(huì)首次增設(shè)了“大數(shù)據(jù)基礎(chǔ)設(shè)施”分論壇，從硬件視角出發(fā)探討大數(shù)據(jù)的存儲(chǔ)、處理和軟硬件融合技術(shù)。其中，浪潮集團(tuán)副總裁胡雷鈞從數(shù)據(jù)中心層面講解了新時(shí)代的資源保障體系;Mellanox亞太區(qū)市場(chǎng)開(kāi)發(fā)總監(jiān)劉通，武漢綠色網(wǎng)絡(luò)信息服務(wù)有限責(zé)任公司副總經(jīng)理雷葆華，博科中國(guó)區(qū)技術(shù)總監(jiān)谷增云從網(wǎng)絡(luò)層次著手對(duì)大數(shù)據(jù)時(shí)代基礎(chǔ)設(shè)施進(jìn)行了分析;希捷資深架構(gòu)師郝繼玖，Memblaze技術(shù)顧問(wèn)劉愛(ài)在存儲(chǔ)方面做了相關(guān)分享;而百度基礎(chǔ)架構(gòu)部高級(jí)架構(gòu)師柴華，北京卓越訊通科技有限公司CEO賴(lài)兆紅，DELL資深解決方案經(jīng)理尹玉峰，阿里巴巴資深技術(shù)專(zhuān)家強(qiáng)琦，亞信大數(shù)據(jù)平臺(tái)研發(fā)部經(jīng)理田毅，AMD中國(guó)研究院研究員谷俊麗則帶大家暢游了大數(shù)據(jù)平臺(tái)打造之道。

除此以外，還有“全國(guó)大數(shù)據(jù)創(chuàng)新項(xiàng)目評(píng)選”活動(dòng)脫穎而出的8家大數(shù)據(jù)初創(chuàng)企業(yè)的成果展示;“第二屆中國(guó)大數(shù)據(jù)技術(shù)創(chuàng)新大賽”中獲獎(jiǎng)隊(duì)伍的深入技術(shù)分享;以及幫助企業(yè)快速實(shí)現(xiàn)“基于大數(shù)據(jù)的個(gè)性化系統(tǒng)構(gòu)建及其核心技術(shù)”的實(shí)戰(zhàn)培訓(xùn)。

2015大數(shù)據(jù)發(fā)展趨勢(shì)引領(lǐng)技術(shù)變革

2014年，在眾多實(shí)踐企業(yè)的推動(dòng)下，大數(shù)據(jù)生態(tài)系統(tǒng)得到了飛速發(fā)展，各種技術(shù)在“應(yīng)用為王”的大前提下飛速迭代，數(shù)據(jù)真正轉(zhuǎn)化為高價(jià)值。而高速發(fā)展的背后，是技術(shù)架構(gòu)的巨大改變。要以更低成本實(shí)現(xiàn)數(shù)據(jù)的最佳利用，企業(yè)需要緊隨技術(shù)變革，把握趨勢(shì)，才能更好地迎接挑戰(zhàn)。

大會(huì)現(xiàn)場(chǎng)正式發(fā)布的《中國(guó)大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)發(fā)展白皮書(shū)(2014)》和《2015大數(shù)據(jù)十大發(fā)展趨勢(shì)預(yù)測(cè)》，代表了百余位業(yè)內(nèi)專(zhuān)家在大數(shù)據(jù)典型應(yīng)用現(xiàn)狀、大數(shù)據(jù)技術(shù)體系現(xiàn)狀、大數(shù)據(jù)IT產(chǎn)業(yè)鏈與生態(tài)環(huán)境、大數(shù)據(jù)人才資源、大數(shù)據(jù)發(fā)展趨勢(shì)與建議等方面的深入思考，為未來(lái)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展奠定堅(jiān)實(shí)的理論基礎(chǔ)，為企業(yè)制定大數(shù)據(jù)戰(zhàn)略規(guī)劃提供了極具價(jià)值的參考建議。

2014大數(shù)據(jù)應(yīng)用現(xiàn)狀和技術(shù)體系現(xiàn)狀。大數(shù)據(jù)作為一種賦能性技術(shù)，如同電一樣，作用于經(jīng)濟(jì)社會(huì)的各個(gè)層面。任何一種技術(shù)的應(yīng)用都要經(jīng)歷從簡(jiǎn)到繁，由淺入深的過(guò)程，大數(shù)據(jù)的應(yīng)用路徑仍然遵從這一發(fā)展路徑。數(shù)十億用戶(hù)每日在互聯(lián)網(wǎng)上的處處留痕、時(shí)時(shí)留跡，使得其在網(wǎng)絡(luò)空間的畫(huà)像活動(dòng)日益豐滿(mǎn)，從而其需求很容易被準(zhǔn)確洞察，精準(zhǔn)營(yíng)銷(xiāo)仍為大數(shù)據(jù)最具產(chǎn)業(yè)規(guī)模的領(lǐng)域。圍繞大數(shù)據(jù)精準(zhǔn)營(yíng)銷(xiāo)產(chǎn)業(yè)鏈，互聯(lián)網(wǎng)、金融、電信、新媒體等領(lǐng)域的大數(shù)據(jù)技術(shù)產(chǎn)品創(chuàng)新此起彼伏，應(yīng)用廣度不斷拓寬，深度不斷加強(qiáng)。同時(shí)，電網(wǎng)、交通、醫(yī)衛(wèi)、地信、政府、農(nóng)業(yè)領(lǐng)域的大數(shù)據(jù)應(yīng)用也明顯提速。結(jié)合大數(shù)據(jù)典型應(yīng)用與案例，不難發(fā)現(xiàn)，大數(shù)據(jù)技術(shù)能夠?qū)⒋笠?guī)模數(shù)據(jù)中隱藏的信息和知識(shí)挖掘出來(lái)，為人類(lèi)社會(huì)經(jīng)濟(jì)活動(dòng)提供依據(jù)，提高各個(gè)領(lǐng)域的運(yùn)行效率，甚至整個(gè)社會(huì)經(jīng)濟(jì)的集約化程度。目前，大數(shù)據(jù)領(lǐng)域每年都會(huì)涌現(xiàn)出了大量新的技術(shù)，成為大數(shù)據(jù)獲取、存儲(chǔ)、處理分析或者可視化的有效手段;相關(guān)的平臺(tái)和工具也越來(lái)越多，給業(yè)界提供了更多的選擇，未來(lái)還會(huì)繼續(xù)出現(xiàn)新的技術(shù)和工具。由CCF大數(shù)據(jù)專(zhuān)家委員會(huì)和中關(guān)村大數(shù)據(jù)產(chǎn)業(yè)聯(lián)盟聯(lián)合主編的《中國(guó)大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)發(fā)展白皮書(shū)(2014)》將詳細(xì)解讀各種大數(shù)據(jù)技術(shù)的最新發(fā)展和動(dòng)態(tài)。

2015技術(shù)挑戰(zhàn)和技術(shù)發(fā)展趨勢(shì)預(yù)測(cè)。CCF大數(shù)據(jù)專(zhuān)家委員會(huì)每年都面向全體委員進(jìn)行年度趨勢(shì)預(yù)測(cè)調(diào)研。希望通過(guò)對(duì)于大數(shù)據(jù)發(fā)展趨勢(shì)的年度預(yù)測(cè)，將最受關(guān)注的科學(xué)、技術(shù)、產(chǎn)業(yè)、應(yīng)用、政策等相關(guān)變化趨勢(shì)發(fā)掘出來(lái)，以便大數(shù)據(jù)領(lǐng)域相關(guān)的各界人士能夠從中獲得啟迪，或順勢(shì)而為，或依勢(shì)而起，或引領(lǐng)潮頭?！?015大數(shù)據(jù)十大發(fā)展趨勢(shì)預(yù)測(cè)》將候選項(xiàng)分為大數(shù)據(jù)科學(xué)、大數(shù)據(jù)技術(shù)、大數(shù)據(jù)系統(tǒng)和工程、大數(shù)據(jù)應(yīng)用、數(shù)據(jù)資源、產(chǎn)業(yè)生態(tài)環(huán)境等共6個(gè)不同方面，總計(jì)54個(gè)候選項(xiàng)。最后根據(jù)投票數(shù)，選出10個(gè)主要的發(fā)展趨勢(shì)：大數(shù)據(jù)與人工智能的融合、跨學(xué)科領(lǐng)域交叉的數(shù)據(jù)分析應(yīng)用、數(shù)據(jù)科學(xué)帶動(dòng)多學(xué)科融合、深度學(xué)習(xí)成為大數(shù)據(jù)智能分析的核心技術(shù)、利用大數(shù)據(jù)構(gòu)建大規(guī)模、有序化開(kāi)放式的知識(shí)體系、大數(shù)據(jù)的安全持續(xù)令人擔(dān)憂(yōu)、開(kāi)源繼續(xù)成為大數(shù)據(jù)技術(shù)的主流、大數(shù)據(jù)與云計(jì)算、移動(dòng)互聯(lián)網(wǎng)等的綜合應(yīng)用、大數(shù)據(jù)提升政府治理能力、數(shù)據(jù)資源化、私有化、商品化成為持續(xù)的趨勢(shì)、大數(shù)據(jù)技術(shù)課程體系建設(shè)和人才培養(yǎng)快速發(fā)展。

2014中國(guó)大數(shù)據(jù)技術(shù)大會(huì)，百余場(chǎng)主題演講、技術(shù)論壇和專(zhuān)業(yè)培訓(xùn)，數(shù)千名業(yè)內(nèi)人士與會(huì)齊聚的深度實(shí)踐之旅。作為大數(shù)據(jù)技術(shù)與應(yīng)用深度結(jié)合的新起點(diǎn)，BDTC 2014已經(jīng)成為產(chǎn)業(yè)界、科技界與政府部門(mén)密切合作的新平臺(tái)，為推動(dòng)我國(guó)大數(shù)據(jù)的產(chǎn)學(xué)研用做出了重大貢獻(xiàn)。

shaohaihong