華為的大數(shù)據(jù)宣言:智慧與融合
阿明 發(fā)表于:13年07月11日 16:57 [原創(chuàng)] DOIT.com.cn
DOSTOR存儲(chǔ)在線(xiàn) 原創(chuàng)報(bào)道:當(dāng)前,大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨,用戶(hù)面臨著來(lái)自大數(shù)據(jù)存儲(chǔ)等若干方面的問(wèn)題和挑戰(zhàn),為此,如何更有利地滿(mǎn)足用戶(hù)在大數(shù)據(jù)環(huán)境下的新需求,并更好地將廠(chǎng)商自身的技術(shù)、產(chǎn)品、方案包括服務(wù)融合在一起,以更為智慧的方式提供給不同的用戶(hù)。華為存儲(chǔ)產(chǎn)品線(xiàn)Marketing部長(zhǎng)經(jīng)寧在肯定大數(shù)據(jù)給IT帶來(lái)的新機(jī)會(huì)的同時(shí),也指出華為融合架構(gòu)以及相關(guān)解決方案給用戶(hù)帶來(lái)的新價(jià)值。
事實(shí)上,大數(shù)據(jù)已經(jīng)成為一個(gè)國(guó)家戰(zhàn)略,無(wú)論美國(guó)政府、還是英國(guó)政府還是聯(lián)合國(guó),大數(shù)據(jù)已經(jīng)成為一個(gè)重要戰(zhàn)略和重要的研究方向。中科院發(fā)布新的戰(zhàn)略報(bào)告,把大數(shù)據(jù)作為中國(guó)七個(gè)重要的研究領(lǐng)域。
可見(jiàn),一方面大數(shù)據(jù)已成國(guó)家戰(zhàn)略,另一方面,大數(shù)據(jù)已經(jīng)在各個(gè)行業(yè)、各個(gè)區(qū)域得到了廣泛應(yīng)用。在經(jīng)寧看來(lái),大數(shù)據(jù)不僅是信息挖掘,而且大數(shù)據(jù)存儲(chǔ)就是一個(gè)非常重要的應(yīng)用環(huán)境。比如在衛(wèi)星測(cè)繪、石油勘測(cè)、金融、互聯(lián)網(wǎng)等各個(gè)行業(yè),大數(shù)據(jù)獲得廣泛應(yīng)用。華為認(rèn)為,電信行業(yè)也在不斷驅(qū)動(dòng),大數(shù)據(jù)更多應(yīng)用在電信業(yè)務(wù)。當(dāng)前其應(yīng)用范圍比較窄,主要用于內(nèi)部系統(tǒng)、運(yùn)營(yíng)結(jié)構(gòu)化話(huà)單的分析。然而,這也在發(fā)生轉(zhuǎn)變,大數(shù)據(jù)已經(jīng)從電信內(nèi)部應(yīng)用開(kāi)始向更高系統(tǒng)轉(zhuǎn)變,從以往單一結(jié)構(gòu)化數(shù)據(jù),向多類(lèi)型數(shù)據(jù)分析轉(zhuǎn)變,從流量分析向內(nèi)容分析轉(zhuǎn)變。
現(xiàn)在,電信運(yùn)營(yíng)商正使用大數(shù)據(jù)分析,對(duì)既有業(yè)務(wù)進(jìn)行深層挖掘,如中國(guó)聯(lián)通提供智慧營(yíng)銷(xiāo)就是典型例子。藉此,運(yùn)營(yíng)商嘗試把自己掌握的數(shù)據(jù)作為新的資源開(kāi)放出去,以此創(chuàng)造新業(yè)務(wù),創(chuàng)造一個(gè)開(kāi)放系統(tǒng)。再者如中國(guó)移動(dòng)、江蘇移動(dòng)提供的定位廣告業(yè)務(wù),借助自身掌握的海量數(shù)據(jù),向企業(yè)客戶(hù)提供各種有價(jià)值的分析數(shù)據(jù)
另外,運(yùn)營(yíng)商也在對(duì)自己內(nèi)部的數(shù)據(jù)進(jìn)行整合,通過(guò)構(gòu)建大數(shù)據(jù)平臺(tái),一方面可以降低數(shù)據(jù)存儲(chǔ)的成本,另一方面也可以提高統(tǒng)一決策的效率和準(zhǔn)確度。因此,“在大數(shù)據(jù)時(shí)代,實(shí)際上為IT創(chuàng)造了一個(gè)新機(jī)會(huì),從一個(gè)IT的簡(jiǎn)單成本中心開(kāi)始向利潤(rùn)中心、運(yùn)營(yíng)中心轉(zhuǎn)移,非常明顯,大數(shù)據(jù)給IT在定位上帶來(lái)很大變化。”經(jīng)寧進(jìn)一步分析認(rèn)為,大數(shù)據(jù)在營(yíng)銷(xiāo)、定位、角色方面帶來(lái)了時(shí)代巨變。一是因數(shù)據(jù)增長(zhǎng)推進(jìn)IT從集中式架構(gòu)向分布式架構(gòu)演進(jìn);二是以計(jì)算為中心的架構(gòu)開(kāi)始逐步走向以數(shù)據(jù)為中心的架構(gòu);三是從典型水平式組成的層次化架構(gòu),開(kāi)始向上下整合、縱向拉動(dòng)的架構(gòu)轉(zhuǎn)化。
華為在與眾多客戶(hù)直接面對(duì)面交流過(guò)程中,發(fā)現(xiàn)了這三個(gè)巨大變化,從中也找到了自身在變化中的定位與發(fā)展方向。
首先,在大數(shù)據(jù)時(shí)代,用戶(hù)數(shù)據(jù)猛增,帶來(lái)最直接的結(jié)果就是:以往傳統(tǒng)集中式架構(gòu),已經(jīng)很難滿(mǎn)足用戶(hù)對(duì)大容量、高性能計(jì)算的要求。傳統(tǒng)架構(gòu)往往在性能、容量、擴(kuò)展性方面有限。道理很簡(jiǎn)單,因?yàn)樵谶@些方面的限制,用戶(hù)很有可能因現(xiàn)有一套系統(tǒng)不夠使用,會(huì)再建一套新系統(tǒng),在建立多套系統(tǒng)后,勢(shì)必會(huì)造成數(shù)據(jù)孤島,形成管理復(fù)雜性,多套系統(tǒng)負(fù)載、壓力不均衡,數(shù)據(jù)計(jì)算需要在不同系統(tǒng)之間做遷移,造成管理非常復(fù)雜,無(wú)論針對(duì)成本、復(fù)雜性、時(shí)間等,都顯得非常麻煩。但是,通過(guò)分布式的架構(gòu),用戶(hù)可以實(shí)現(xiàn)容量線(xiàn)性擴(kuò)展,這已經(jīng)逐漸成為一種主流趨勢(shì)。在分布式架構(gòu)中,用戶(hù)即以實(shí)現(xiàn)數(shù)據(jù)高效使用和管理的簡(jiǎn)化。
其次,從技術(shù)中心轉(zhuǎn)向以數(shù)據(jù)為中心過(guò)程中,數(shù)據(jù)需要被處理和加工。不過(guò),以往的處理和加工是什么樣子?從外界存儲(chǔ)取出來(lái)數(shù)據(jù),被應(yīng)用程序或其他系統(tǒng)程序所讀取并計(jì)算處理,處理完畢將其放入程序里面,整個(gè)業(yè)務(wù)流明顯有多個(gè)處理環(huán)節(jié),要不斷地存儲(chǔ)、讀取、計(jì)算、再存儲(chǔ),其系統(tǒng)的大量時(shí)間花費(fèi)在數(shù)據(jù)的遷移上,一旦數(shù)據(jù)量增加,從數(shù)據(jù)向計(jì)算遷移的環(huán)節(jié)就肯定“費(fèi)時(shí)費(fèi)力”。
但在大數(shù)據(jù)環(huán)境下,華為存儲(chǔ)以數(shù)據(jù)為中心,不再以存儲(chǔ)為中心,使得用戶(hù)清楚知道數(shù)據(jù)具體分布在哪里,就近使用需要部署計(jì)算單元的應(yīng)用程序。就如“將代碼推向我們的數(shù)據(jù),通過(guò)這種方式可以大大減少大容量數(shù)據(jù)遷移的麻煩。”但,這種方式也會(huì)帶來(lái)挑戰(zhàn),需要用戶(hù)要很清楚知道數(shù)據(jù)布局、分布怎樣,否則無(wú)法實(shí)現(xiàn)圍繞數(shù)據(jù)單元做文章。
最后,傳統(tǒng)架構(gòu)方式都是層次化的,采用封閉的硬件、封閉的操作系統(tǒng),底層是存儲(chǔ),再往上是網(wǎng)絡(luò),網(wǎng)絡(luò)上面部署服務(wù)器,服務(wù)器上面是操作系統(tǒng)、中間件,每層都是高度隔離。但是,華為現(xiàn)在強(qiáng)調(diào)將應(yīng)用程序推向數(shù)據(jù),推向存儲(chǔ),在這種情況之下必然要求大家非常清楚計(jì)算和存儲(chǔ)之間的關(guān)系。那確實(shí)不只是一個(gè)水平的、相互隔離的狀態(tài),必然需要清楚上下兩層之間的關(guān)系,從而就要求把上下兩層,甚至多層打通,打通后,華為將代碼就近部署。
對(duì)此,華為認(rèn)為這樣的發(fā)展趨勢(shì)會(huì)導(dǎo)致存儲(chǔ)行業(yè)從相對(duì)封閉的硬件走向通用的硬件,如X86硬件,或其他硬件,并采用標(biāo)準(zhǔn)化的操作系統(tǒng)。為此,華為將更多Hoodop 開(kāi)源的應(yīng)用縱向整合,形成多個(gè)因素包括開(kāi)發(fā)環(huán)境的整合。相關(guān)資料顯示,華為在印度建立了一個(gè)專(zhuān)門(mén)研究Hoodop的百人團(tuán)隊(duì),并且也給hoodp貢獻(xiàn)不小的成績(jī)。
與此同時(shí),華為在研發(fā)方面大力投入,并成立2012實(shí)驗(yàn)室,并對(duì)前端技術(shù)投入研發(fā)。在研發(fā)硬實(shí)力的奠定下,這些年華為在存儲(chǔ)得到了比較快的發(fā)展。2013年華為存儲(chǔ)產(chǎn)品線(xiàn)整體理念圍繞“存以致用,融以致遠(yuǎn)。”在架構(gòu)方面強(qiáng)調(diào)融合架構(gòu)作用,通過(guò)融合架構(gòu)實(shí)現(xiàn)計(jì)算與存儲(chǔ)融合,可以帶來(lái)更高管理效率、更高存儲(chǔ)效能,大大降低用戶(hù)在管理上的開(kāi)銷(xiāo)。
為此,華為在大數(shù)據(jù)領(lǐng)域推出兩個(gè)關(guān)鍵技術(shù):“三位一體”和全分布式技術(shù)。“三位一體”就是將存儲(chǔ)系統(tǒng)與存儲(chǔ)分析、數(shù)據(jù)挖掘分析、計(jì)算系統(tǒng)整合為一套產(chǎn)品,不再是多個(gè)產(chǎn)品的集合,從而實(shí)現(xiàn)存儲(chǔ)、分析、歸檔三個(gè)方面的自動(dòng)化,免除了三者之間的裝載與遷移麻煩,同時(shí)實(shí)現(xiàn)全生命周期的數(shù)據(jù)管理,用戶(hù)可以選擇部分活躍數(shù)據(jù)歸檔,根據(jù)計(jì)算需要自動(dòng)實(shí)現(xiàn)數(shù)據(jù)的調(diào)度。
華為在大數(shù)據(jù)領(lǐng)域有著突出的典型案例。比如歐洲的CERN和深圳大運(yùn)會(huì)解決方案。華為三位一體的大數(shù)據(jù)解決方案,輕松應(yīng)對(duì)數(shù)據(jù)的增長(zhǎng),在三位一體架構(gòu)下,提升用戶(hù)系統(tǒng)讀取性能,并做大量數(shù)據(jù)做分析服務(wù),實(shí)現(xiàn)端到端的可管理性,保證高標(biāo)準(zhǔn)嚴(yán)要求的處理手段,滿(mǎn)足這類(lèi)對(duì)大數(shù)據(jù)應(yīng)用廣泛的客戶(hù)對(duì)系統(tǒng)高效運(yùn)行的需求。(阿明)
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶(hù)寄語(yǔ) | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.