那么企業(yè)在選擇大數(shù)據(jù)平臺時究竟需要考慮哪些因素呢？什么樣的平臺才能滿足企業(yè)大數(shù)據(jù)整合的需要呢？在前不久舉行的主題為“大數(shù)據(jù)危機(jī) 大整合出擊”IBM ELS主機(jī)大數(shù)據(jù)策略發(fā)布會上，IBM和IDC的專家們給出了明確的答案。

大數(shù)據(jù)平臺的五大基因

業(yè)內(nèi)對于大數(shù)據(jù)基礎(chǔ)平臺的選擇有多種建議，都是“公說公有理，婆說婆有理”。不過，國際知名分析機(jī)構(gòu)IDC對于大數(shù)據(jù)平臺的5點(diǎn)建議在業(yè)內(nèi)最具代表性，最主要IDC的結(jié)論是建立在對企業(yè)的廣泛調(diào)研的基礎(chǔ)上。

IDC中國行業(yè)研究與咨詢服務(wù)部助理副總裁武連峰表示，IDC對支持大數(shù)據(jù)基礎(chǔ)設(shè)施包含了5點(diǎn)要求，也即該平臺必須易于數(shù)據(jù)的整合和集中，包括與現(xiàn)有的IT環(huán)境的整合，也包括未來可能的異構(gòu)環(huán)境；易于擴(kuò)展和伸縮，適應(yīng)未來巨大變化的需求；易于管理和維護(hù)，包括現(xiàn)有的異構(gòu)環(huán)境；具備極大的可靠性、可控性、安全性；降低總體擁有成本，不僅包括硬件，還有管理、電力、人力等。據(jù)IDC的統(tǒng)計(jì)分析，2012年企業(yè)在服務(wù)器管理方面的花費(fèi)將超過服務(wù)器硬件花費(fèi)，因而易管理的服務(wù)器平臺在大數(shù)據(jù)處理中更能節(jié)省人力和物力成本。

“企業(yè)實(shí)施大數(shù)據(jù)方案時對基礎(chǔ)設(shè)施的需求，要選擇適應(yīng)工作負(fù)載的架構(gòu)，這是基礎(chǔ)?？煽啃?、安全性、高性能是關(guān)鍵。易管理和綠色也是重要的考量因素。開放性和可擴(kuò)展性能夠適應(yīng)未來企業(yè)的發(fā)展。最后是大數(shù)據(jù)支持企業(yè)轉(zhuǎn)型創(chuàng)新，可以支撐企業(yè)實(shí)現(xiàn)差異化。”武連峰強(qiáng)調(diào)。

IDC還從基礎(chǔ)架構(gòu)、數(shù)據(jù)的組織和管理、決策支持和自動化接口四個角度將大數(shù)據(jù)解決方案供應(yīng)商分成了四個層次。武連峰表示，從廠商來看，只有IBM等極少數(shù)廠商能提供全方位的服務(wù)，服務(wù)范圍從基礎(chǔ)架構(gòu)到數(shù)據(jù)管理、決策支持、界面自動化。而其他企業(yè)則會結(jié)合自身的不同領(lǐng)域，在某一個方面或者某兩個方面來提供大數(shù)據(jù)的服務(wù)。

ELS：大數(shù)據(jù)的新思路

目前，市場上通常采用x86服務(wù)器和分布式結(jié)構(gòu)來處理大數(shù)據(jù)，這種方式對付非關(guān)鍵類應(yīng)用應(yīng)該說是可以適用。而一旦涉及到企業(yè)的關(guān)鍵應(yīng)用或者超大規(guī)模數(shù)據(jù)庫，企業(yè)往往不敢輕易冒險。在IBM ELS主機(jī)大數(shù)據(jù)策略發(fā)布會上，IBM建議用一種全新的思路來應(yīng)對關(guān)鍵應(yīng)用和大規(guī)模數(shù)據(jù)整合的挑戰(zhàn)。

具體來說，就是采用基于主機(jī)架構(gòu)的企業(yè)級Linux服務(wù)器（Enterprise Linux Server，縮寫為ELS）作為大數(shù)據(jù)處理的基礎(chǔ)平臺。IBM系統(tǒng)與科技部大中華區(qū)主機(jī)產(chǎn)品部總經(jīng)理施東峰表示，IBM ELS系統(tǒng)以其高效性能、靈活擴(kuò)展、運(yùn)行穩(wěn)定、支持異構(gòu)環(huán)境等優(yōu)勢，不僅在關(guān)鍵業(yè)務(wù)應(yīng)用領(lǐng)域發(fā)揮著無可替代的優(yōu)勢，同時能夠幫助用戶實(shí)現(xiàn)異構(gòu)環(huán)境大規(guī)模數(shù)據(jù)整合。

根據(jù)測試，ELS可以整合4倍于Unix平臺的工作負(fù)載，最多能夠整合3000臺x86服務(wù)器，憑借在性能、擴(kuò)展性、可靠性、安全性、虛擬化能力、綠色節(jié)能等全方位的優(yōu)勢，IBM ELS成為適合大數(shù)據(jù)整合的理想系統(tǒng)平臺。

“在用戶多平臺的環(huán)境中，ELS能夠跨平臺整合不同來源、結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)，這一獨(dú)一無二的優(yōu)勢使其成為數(shù)據(jù)整合的利器?！笔〇|峰表示。

開啟大數(shù)據(jù)整合之旅

數(shù)據(jù)的集中整合是目前眾多用戶大數(shù)據(jù)之旅首先需要面對的挑戰(zhàn)。隨著各行業(yè)用戶的數(shù)據(jù)激增，數(shù)據(jù)類型的多樣，如何進(jìn)行大數(shù)據(jù)的整合和管理得到更多關(guān)注。有統(tǒng)計(jì)顯示，有效地整合IT基礎(chǔ)設(shè)施的規(guī)劃和執(zhí)行，可實(shí)現(xiàn)持續(xù)的容量增長，有望使基礎(chǔ)設(shè)施容量加倍，或者使運(yùn)營費(fèi)用降低高達(dá)50%。

然而，早先一貫的做法是“頭疼醫(yī)頭，腳疼醫(yī)腳”，也就是企業(yè)過去總是隨著業(yè)務(wù)增長而一味增加服務(wù)器或存儲設(shè)備。當(dāng)整個數(shù)量達(dá)到一定量級的時候，無論是管理還是能耗等方面帶來的支出已經(jīng)讓企業(yè)不堪重負(fù)。目前，中國很多企業(yè)在運(yùn)維方面的支出超過了每年IT支出的一半，而用于IT和業(yè)務(wù)創(chuàng)新的經(jīng)費(fèi)則少得可憐。

“企業(yè)用戶需要通過部署合理的基礎(chǔ)架構(gòu)，集中整合更多服務(wù)器、更多工作負(fù)載、更多應(yīng)用程序和更多數(shù)據(jù)，以降低管理和能耗等方面的支出。而ELS在大規(guī)模數(shù)據(jù)整合方面的卓越優(yōu)勢，恰好為用戶整合大規(guī)模數(shù)據(jù)掃清了障礙?！盜BM系統(tǒng)與科技部中國主機(jī)產(chǎn)品部新興市場總經(jīng)理唐多表示。

當(dāng)前，多平臺是用戶IT基礎(chǔ)架構(gòu)的普遍現(xiàn)狀。企業(yè)往往將關(guān)鍵應(yīng)用部署在大型主機(jī)、Unix平臺上，Web應(yīng)用等一些非關(guān)鍵應(yīng)用部署在Unix、x86平臺上，將關(guān)鍵業(yè)務(wù)數(shù)據(jù)和非關(guān)鍵業(yè)務(wù)數(shù)據(jù)整合是有效利用大數(shù)據(jù)的基礎(chǔ)。例如對銀行來說，交易數(shù)據(jù)來自關(guān)鍵應(yīng)用，而電子商務(wù)數(shù)據(jù)、通話記錄，甚至社交媒體上的數(shù)據(jù)則來自非關(guān)鍵業(yè)務(wù)，有效地分析利用大數(shù)據(jù)需要整合不同架構(gòu)平臺的數(shù)據(jù)，這意味著工作量和成本的巨大的挑戰(zhàn)。

另外，從整合平臺的角度來看，x86服務(wù)器只支持Windows和Linux系統(tǒng)，顯然不能滿足銀行基礎(chǔ)平臺整合的要求；Unix服務(wù)器支持Linux、Unix等系統(tǒng)，但缺乏對z/OS的支持。反觀IBM zEnterprise，它能夠跨平臺統(tǒng)一管理運(yùn)行在主機(jī)、特定的Power 7和System x服務(wù)器上的工作負(fù)載，靈活地管理包括z/OS、AIX、Linux on System x及Windows on System x在內(nèi)的異構(gòu)平臺，從而大大簡化數(shù)據(jù)整合過程和減少整合成本。

IBM大型主機(jī)整合銀行大數(shù)據(jù)基礎(chǔ)設(shè)施的一個典型例子就是新西蘭銀行。新西蘭銀行在經(jīng)過測試和對比后，把200臺Sun服務(wù)器整合到一臺運(yùn)行紅帽Linux操作系統(tǒng)的z10服務(wù)器上。通過整合，新西蘭銀行機(jī)房空間減少30%，總能耗降低接近40%，一個管理員就可以管理200臺虛擬服務(wù)器，而整個部署也只需幾分鐘。

在交通領(lǐng)域，IBM大型主機(jī)同樣扮演著大數(shù)據(jù)整合利器的角色。某市智慧交通實(shí)現(xiàn)了120萬輛機(jī)動車電子卡、4萬輛機(jī)動車的實(shí)時GPS定位數(shù)據(jù)、200萬筆公交IC卡數(shù)據(jù)、518個高清卡口的大規(guī)模、不同類型數(shù)據(jù)的處理，IBM ELS系統(tǒng)的高效性能可以支撐1秒鐘內(nèi)調(diào)出一個月內(nèi)的卡口圖片。這樣的速度和效率在過去是無法想像的，IBM ELS系統(tǒng)在應(yīng)對大數(shù)據(jù)整合方面的效果也由此可見一斑。

四大特性打造大數(shù)據(jù)整合“航母”

ELS系統(tǒng)以久負(fù)盛名的IBM大型主機(jī)作為基礎(chǔ)平臺。IBM大型主機(jī)盡管已經(jīng)經(jīng)歷了數(shù)十年的輝煌，但依然是“老兵新傳”，繼續(xù)煥發(fā)著青春。在企業(yè)關(guān)鍵業(yè)務(wù)和核心領(lǐng)域，大型主機(jī)的霸主地位依然難以動搖，目前全球財(cái)富500強(qiáng)企業(yè)中有71%是IBM大型主機(jī)的用戶。

雖然如此，IBM還是不斷給大型主機(jī)賦予新的技術(shù)和角色，以滿足甚至超越時代發(fā)展的需要。2009年，IBM推出了基于主機(jī)架構(gòu)的ELS。ELS一經(jīng)推出就獲得了高成長型企業(yè)的青睞，拓展了大型主機(jī)的應(yīng)用領(lǐng)域和應(yīng)用行業(yè)。IBM系統(tǒng)與科技部大中華區(qū)System z技術(shù)支持總經(jīng)理蔣偉東介紹，如今的IBM大機(jī)不只是System z服務(wù)器，而是一個異構(gòu)整合的架構(gòu)，其前端是IBM專屬zBX（zEnterprise BladeCenter Extension），后端IBM傳統(tǒng)大機(jī)，中間則通過URM（zEnterprise Unified Resource Manager，統(tǒng)一資源管理器）管理整個系統(tǒng)。以ELS的基礎(chǔ)平臺——新一代主機(jī)z196為例，它具有靈活擴(kuò)展、高效性能、穩(wěn)定運(yùn)行和高安全保障四大特性，這也使得IBM ELS足以應(yīng)對企業(yè)關(guān)鍵應(yīng)用和超大規(guī)模數(shù)據(jù)整合的重任。

靈活擴(kuò)展??? 數(shù)據(jù)在以飛快的速度增長，大數(shù)據(jù)基礎(chǔ)平臺自然得水漲船高，能實(shí)現(xiàn)靈活擴(kuò)展。一般而言，系統(tǒng)平臺的擴(kuò)展分為縱向擴(kuò)展和橫向擴(kuò)展兩個方面，普通的平臺往往只具備其中某個方向的擴(kuò)展能力。而z196兼具了雙向擴(kuò)展的能力。

蔣偉東介紹，z196單機(jī)能提供最高96顆5.2GHz CPU，內(nèi)存高達(dá)3TB，最多支持60個邏輯分區(qū)和32個HiperSocket。它能管理4臺zBX，里面最高可以容納112個Power或者System x刀片。這些特性使得z196具有超強(qiáng)的縱向擴(kuò)展性。橫向擴(kuò)展方面，ELS可以通過Parallel Sysplex和zVM SSI集群進(jìn)行橫向擴(kuò)展。此外，ELS還可以進(jìn)行隨需容量升級，并且在升級過程中不需要宕機(jī)，這樣保證了業(yè)務(wù)的不間斷。

高效性能??? ELS的高效性能則體現(xiàn)在z196最多96個處理器，其中80個用戶可以根據(jù)需要進(jìn)行配置，60個完全隔離的邏輯分區(qū)足以滿足企業(yè)眾多應(yīng)用的需要。同時，專用I/O協(xié)處理器高效處理和卓越的批量處理能力保證了系統(tǒng)的高處理能力。

蔣偉東表示，ELS獨(dú)特的設(shè)計(jì)提升了整個系統(tǒng)的使用效率，CPU的使用率可以接近100%。這些得益于IBM對大型主機(jī)在I/O和操作系統(tǒng)上的專門設(shè)計(jì)。而相比于Unix系統(tǒng)，一般企業(yè)用戶只會讓CPU保持在50%的使用范圍，因?yàn)橐坏┏鲞@個范圍系統(tǒng)可能就會不穩(wěn)定。

穩(wěn)定運(yùn)行??? 由于z196是單一的主機(jī)系統(tǒng)，其內(nèi)置的冗余性、容量備份、熱插拔I/O等特性，使得其平均無故障時間大于30年，并且極少需要計(jì)劃停機(jī)。此外，z196自帶的動態(tài)負(fù)載管理工具、靈活的不中斷地?cái)U(kuò)展等特性，確保了ELS系統(tǒng)能夠長期穩(wěn)定地運(yùn)行。而這也正是關(guān)鍵應(yīng)用類大數(shù)據(jù)解決方案所亟需的。

蔣偉東表示，很多高端客戶比如銀行，他們看中主機(jī)的一點(diǎn)除了處理能力外，就是非常穩(wěn)定的運(yùn)行?！癐BM大型主機(jī)有幾方面的保證，才能夠讓達(dá)到穩(wěn)定運(yùn)行的目標(biāo)：單一系統(tǒng)的設(shè)計(jì)；內(nèi)置的冗余性，比如說風(fēng)扇、電源等都是N+1設(shè)計(jì)，所有元器件的選擇，IBM主機(jī)都是非常高質(zhì)量的。”以上特性，使得IBM大型主機(jī)可以達(dá)99.999%的高可用性。

高安全性    蔣偉東介紹，IBM ELS主機(jī)具有完整的、全面的安全性考量，ELS的高安全性保障體現(xiàn)在其邏輯分區(qū)實(shí)現(xiàn)硬件級別的物理隔離；全面內(nèi)置的安全功能；集中、簡化的安全管理；針對敏感數(shù)據(jù)的硬件加密；加密加速器和集中的密鑰管理；互聯(lián)網(wǎng)安全支持；協(xié)同軟件實(shí)現(xiàn)跨平臺、企業(yè)范圍的身份和授權(quán)管理；監(jiān)控、稽查和強(qiáng)制工具等等。

“邏輯分區(qū)之間相當(dāng)于進(jìn)行了物理隔離，能滿足美國國防部EAL5認(rèn)證要求；系統(tǒng)里面有加密的處理器，符合美國聯(lián)邦FIPS4+加密要求；另外還有很多安全監(jiān)控機(jī)制，包括最高安全級別的ISCF系統(tǒng)，能夠保證整個客戶在這個系統(tǒng)上帳號的管理。”蔣偉東說。

此外，ELS對異構(gòu)環(huán)境的支持和整合也是其最大的特色。IBM主機(jī)可以整合Power和x86負(fù)載，管理包括z/OS、AIX、Linux on System x及Windows on System x的異構(gòu)環(huán)境，這樣就減少了數(shù)據(jù)大整合的限制。“在每一個IBM主機(jī)外面可以另外接zBX的擴(kuò)展柜，里面可以放多個刀片，可以運(yùn)行各種各樣的系統(tǒng)，可以跑z/OS、TPF，企業(yè)可以將不同的數(shù)據(jù)管理和分析軟件運(yùn)行在上面，在一個主機(jī)環(huán)境中實(shí)現(xiàn)大數(shù)據(jù)處理的全過程。”蔣偉東說。

IBM ELS的諸多特性，可謂是很好地匹配了IDC關(guān)于支持大數(shù)據(jù)基礎(chǔ)設(shè)施的5點(diǎn)要求，很多性能指標(biāo)甚至遠(yuǎn)遠(yuǎn)超過了要求的范疇。ELS正是憑借著在高性能、穩(wěn)定性、安全性和擴(kuò)展性方面的優(yōu)異表現(xiàn)，成為了應(yīng)對大數(shù)據(jù)挑戰(zhàn)的最佳之選。

IBM系統(tǒng)與科技部中國主機(jī)產(chǎn)品部新興市場總經(jīng)理唐多表示，確保企業(yè)大數(shù)據(jù)成功應(yīng)用的重要開端，是具有支持靈活擴(kuò)展、異構(gòu)環(huán)境、高效性能和運(yùn)行穩(wěn)定的基礎(chǔ)架構(gòu)。目前來看，ELS完全具備了上述特征，已經(jīng)成為企業(yè)大數(shù)據(jù)整合的利器。

xuzhenxin