2013年10月30日，桂林。HPC China2013大會(huì)進(jìn)入到第二天。在第二天的會(huì)議中，來自華東師范大學(xué)云計(jì)算與大數(shù)據(jù)研究中心主任、海量計(jì)算研究所所長(zhǎng)周傲英教授做了主題為《高性能數(shù)據(jù)系統(tǒng)：回顧和展望》的主題演講。周傲英教授回顧了數(shù)據(jù)系統(tǒng)的發(fā)展歷史與發(fā)展，并對(duì)大數(shù)據(jù)、Hadoop等熱門概念與技術(shù)進(jìn)行了觀點(diǎn)分享。

圖一：華東師范大學(xué)云計(jì)算與大數(shù)據(jù)研究中心主任、海量計(jì)算研究所所長(zhǎng)周傲英教授發(fā)表演講。

周傲英表示數(shù)據(jù)系統(tǒng)往往應(yīng)用在關(guān)鍵應(yīng)用上，價(jià)格也較為昂貴。高性能數(shù)據(jù)系統(tǒng)主要可以分為四類：第一類是數(shù)據(jù)庫機(jī)器，典型代表就是Teradata、Exadata等機(jī)器；第二類是無共享并行系統(tǒng)，代表就是DB2/PE，Hadoop以及Aster；第三類則是內(nèi)存/事務(wù)型系統(tǒng)，代表有HANA、TimesTen以及OceanBase等；最后一類則是分析型系統(tǒng)，代表則是Hadoop、Aster以及Greenplum。

圖二：高性能數(shù)據(jù)系統(tǒng)的本質(zhì)。

圖三：并行數(shù)據(jù)處理歷史。

周傲英認(rèn)為數(shù)據(jù)系統(tǒng)或者大數(shù)據(jù)一個(gè)繞不開的話題就是Hadoop。他表示像Google和Amazon等互聯(lián)網(wǎng)公司具有大量的非結(jié)構(gòu)化數(shù)據(jù)，這些非結(jié)構(gòu)化數(shù)據(jù)的價(jià)值并不確定，如果采用購買商用機(jī)器的方式將會(huì)非常昂貴，所以這些用戶采用了Hadoop來構(gòu)建廉價(jià)的系統(tǒng)。

圖四：Hadoop是一個(gè)繞不開的話題。

根據(jù)介紹，在Hadoop誕生之前，Google公司在2003年發(fā)表了GFS（Google File System）系列論文，Jeffrey Dean等在2004年和2006年又分表發(fā)表了Mapreduce論文和BigTable論文。自此，奠定了Hadoop的發(fā)展基礎(chǔ)。

圖五：Hadoop的誕生。

周傲英教授認(rèn)為Hadoop是一個(gè)可以更容易開發(fā)和存儲(chǔ)大規(guī)模數(shù)據(jù)的軟件平臺(tái)，幫助用戶快速、低成本地實(shí)現(xiàn)大數(shù)據(jù)的存儲(chǔ)、管理及分析查詢。Hadoop的關(guān)鍵在于MapReduce和HDFS，MapReduce可以實(shí)現(xiàn)高性能分布式并行數(shù)據(jù)處理，HDFS則提供可靠數(shù)據(jù)存儲(chǔ)服務(wù)，低廉MPP，高容錯(cuò)，高通量以及可伸縮等特性功能。

圖六：Hadoop不等于大數(shù)據(jù)。

周傲英表示，Hadoo雖然有很多優(yōu)點(diǎn)，但并不等于大數(shù)據(jù)。Hadoop在MapReduce過程中仍然無法控制實(shí)時(shí)時(shí)間，所以在實(shí)時(shí)事務(wù)處理的時(shí)候還是沒有數(shù)據(jù)庫更強(qiáng)。

圖七：周傲英教授認(rèn)為大數(shù)據(jù)應(yīng)該進(jìn)行分類，他認(rèn)為大數(shù)據(jù)主要有Web數(shù)據(jù)、決策數(shù)據(jù)以及科學(xué)數(shù)據(jù)。

周教授表示在大數(shù)據(jù)時(shí)代下，應(yīng)用需求在變化、應(yīng)用環(huán)境的變化、硬件的變化、體系結(jié)構(gòu)的變化、計(jì)算環(huán)境的變化使得數(shù)據(jù)系統(tǒng)重新面對(duì)的。

圖八：SQL、NoSQL以及NewSQL的對(duì)比。

最后，周教授表示傳統(tǒng)數(shù)據(jù)庫的研究理念和方法在大數(shù)據(jù)環(huán)境下仍然有指導(dǎo)意義和參考價(jià)值，大數(shù)據(jù)研究是應(yīng)用驅(qū)動(dòng)的， 國內(nèi)在大數(shù)據(jù)時(shí)代中充滿機(jī)會(huì)。