阿明 發(fā)表于:13年11月21日 13:00 [原創(chuàng)] DOIT.com.cn
2013年11月21日DOIT上海原創(chuàng)報道:IBM認(rèn)為在數(shù)據(jù)分析時代,數(shù)據(jù)已經(jīng)成為最新的資源,決策變得至關(guān)重要,因為數(shù)據(jù)的價值持續(xù)增長,現(xiàn)在的系統(tǒng)不能支撐,那么現(xiàn)在就需要行動,用戶需要在行業(yè)中居于領(lǐng)先地位,處理管理風(fēng)險,讓IT更能促進(jìn)企業(yè)發(fā)展。因此,需要更有策略的行動,IBM在POWER SYSTEMS上的大數(shù)據(jù)創(chuàng)新是領(lǐng)先的。通過互動,改善客戶的體驗,理解社交媒體平臺的影響,優(yōu)化網(wǎng)絡(luò)、GRID OPERATIONS,分析和預(yù)測未來,促進(jìn)商業(yè)發(fā)展。更為關(guān)鍵的是,POWER構(gòu)建高性能領(lǐng)先的大數(shù)據(jù)與分析平臺,欲智勝大數(shù)據(jù)。
POWER術(shù)業(yè)有專攻 欲智勝大數(shù)據(jù)
IBM大中華區(qū)副總裁,IBM系統(tǒng)與科技部大中華區(qū)PowerSystems總經(jīng)理侯淼表示,依據(jù)IDC的數(shù)據(jù)分析來看,中國大數(shù)據(jù)市場未來5年將以51.4%的速度增長。IDC預(yù)測中國大數(shù)據(jù)技術(shù)與服務(wù)市場將會從2011年的7760萬美元快速增長到2016年的6.16億美元。在行業(yè)方面,2012年,大數(shù)據(jù)應(yīng)用已經(jīng)從電子商務(wù)、互聯(lián)網(wǎng)、快消品等行業(yè)向金融、政府、公共事業(yè)、能源、交通等行業(yè)擴(kuò)展。從應(yīng)用場景來看,已經(jīng)從用戶上網(wǎng)行為分析拓展到電力安全監(jiān)控系統(tǒng)、輿情監(jiān)測等。
侯淼認(rèn)為大數(shù)據(jù)包括5V,Volume,Variety,Velocity,Veracity,以及在這四個V基礎(chǔ)上為企業(yè)帶來整體的價值Volume。在數(shù)據(jù)爆炸的大背景下,企業(yè)用戶所面臨的困境突出。
而當(dāng)今企業(yè)面臨著很多具有顛覆性的力量,來自控制力向消費者轉(zhuǎn)移,對企業(yè)運營實現(xiàn)多快好省的壓力,需要開發(fā)利用大數(shù)據(jù)能力。POWER構(gòu)建高性能領(lǐng)先的大數(shù)據(jù)與分析平臺,Watson樹立了大數(shù)據(jù)應(yīng)用標(biāo)桿。他進(jìn)一步指出,POWER數(shù)據(jù)分析解決方案架構(gòu)包括了智能分析和聯(lián)機(jī)處理、大數(shù)據(jù)分析、內(nèi)存數(shù)據(jù)庫。
目前IBM在全球建立了OPENPOWER聯(lián)盟,并且投入10億美元推動LINUX和POWER平臺研發(fā),同時推出BIGDATA STARTER新產(chǎn)品線,另外在中國成立了POWER SYSTEMS LINUX創(chuàng)新中心。
大數(shù)據(jù)解決方案四大金剛護(hù)法
IBM系統(tǒng)與科技部大中華區(qū)PowerSystems產(chǎn)品總監(jiān)李紅分析認(rèn)為,大數(shù)據(jù)需要充分的提煉才能真正服務(wù)于客戶,并實現(xiàn)其價值。因此,數(shù)據(jù)是新型的“石油”。不同的大數(shù)據(jù)需要不同的“提煉”方式,多樣性是大數(shù)據(jù)的一個典型特征,對于不同的大數(shù)據(jù)類型,需要不同的系統(tǒng)對其進(jìn)行提煉,但作為大數(shù)據(jù)及分析平臺必須要有整體的視角來對各類大數(shù)據(jù)進(jìn)行統(tǒng)一管理,避免掉入孤島陷阱,最終獲得完整數(shù)據(jù)價值,目前提煉方式有四種,包括了:靜態(tài)批量大數(shù)據(jù)處理、數(shù)據(jù)倉庫整合、實時大數(shù)據(jù)處理和數(shù)據(jù)集市構(gòu)建。
用戶需要完整的大數(shù)據(jù)與分析平臺實現(xiàn)大數(shù)據(jù)有效管理。隨著用戶數(shù)據(jù)量增長、數(shù)據(jù)類型變化,那么需要收集來自網(wǎng)絡(luò)、社交媒體等數(shù)據(jù),形成靜態(tài)數(shù)據(jù)分析區(qū),另外還有實時獲取和分析區(qū),當(dāng)然之前的數(shù)據(jù)倉庫區(qū)與分析和報告區(qū)已然存在,這些區(qū)域之間是相通的,互相鏈接,數(shù)據(jù)來源是多種多樣的。基于用戶的這種分析和考慮,POWER為用戶構(gòu)建最全面高效的企業(yè)級大數(shù)據(jù)與分析平臺,形成四大方案,POWER靜態(tài)大數(shù)據(jù)解決方案、POWER實時大數(shù)據(jù)解決方案、POWER數(shù)據(jù)倉庫解決方案、POWER數(shù)據(jù)集市解決方案,為此,POWER能為企業(yè)用戶所面臨的各種各樣大數(shù)據(jù)提供全面的方案,實現(xiàn)數(shù)據(jù)獲取、分析、展現(xiàn)無縫集成,包括靜態(tài)大數(shù)據(jù)處理、實時大數(shù)據(jù)處理、數(shù)據(jù)集市以及集中式或分布式數(shù)據(jù)倉庫。不僅如此,IBM還強(qiáng)調(diào)在傳統(tǒng)數(shù)據(jù)庫基礎(chǔ)上,為企業(yè)提供性能、企業(yè)級可靠性、安全、強(qiáng)大的擴(kuò)展能力的大數(shù)據(jù)與分析平臺。這里提及的擴(kuò)展能力包括SCALE UP和OUT兩個方面。
靜態(tài)大數(shù)據(jù)解決方案方面IBM包含了CAMP和天合應(yīng)用服務(wù)器、以及IBM的云平臺,以及并行文件系統(tǒng)GPFS-FPO OR HDFS,同時IBM還推出了PLATFORM SYMPHONY,可以在高可擴(kuò)展性、面向服務(wù)、異構(gòu)的網(wǎng)格上運行計算密集型低延遲應(yīng)用和數(shù)據(jù)密集型應(yīng)用的最強(qiáng)大的管理。IBM認(rèn)為,CAMP、GPFS-FPO、SYMPHONY可以構(gòu)建最高效靜態(tài)大數(shù)據(jù)平臺。另外,IBM推出的InfoSphere Biglnsights并在Watson中采用,它是基于HADOOP的開包即用解決方案,在HADOOP框架上增加IBM獨特的技術(shù)優(yōu)勢,如安全管理、工作流,并融入了IBM研究實驗室的獨特和領(lǐng)先的數(shù)據(jù)分析、機(jī)器學(xué)習(xí)技術(shù)以及文本數(shù)據(jù)分析挖掘,分析種類繁多的以大量的各種類型的數(shù)據(jù)。再者,IBM的OpenSource Hadoop采用了開源架構(gòu),通過計算節(jié)點集群分布式處理海量數(shù)據(jù),優(yōu)化更新后運行與POWER LINUX上,充分利用POWER7架構(gòu)優(yōu)勢。
實時大數(shù)據(jù)解決方案方面,IBM認(rèn)為已經(jīng)成為用戶迫切的需求,特別是在天氣預(yù)報氣象部門等領(lǐng)域表現(xiàn)突出。POWER流數(shù)據(jù)解決方案實時大數(shù)據(jù)分析,具有更高性能、更高效率、更多功能,支持更多企業(yè)應(yīng)用場景;更加成熟、更加可靠與更佳性能的GPFS-FPO企業(yè)級分布式文件系統(tǒng);最佳性能及價格平衡的新一代服務(wù)器CAMP天合應(yīng)用服務(wù)器。
數(shù)據(jù)倉庫解決方案方面POWER集中式架構(gòu)久經(jīng)考驗,一直是企業(yè)級數(shù)據(jù)倉庫首選,各行業(yè)獲得廣泛應(yīng)用,SCALE UP能力為OLTP\OLAP應(yīng)用提供性能保障,其數(shù)據(jù)庫層對可靠性有著苛刻的要求,POWER的RAS是保障業(yè)務(wù)不中斷的關(guān)鍵。隨著用戶業(yè)務(wù)不斷擴(kuò)展,DB2 pureScale實現(xiàn)對POWER集中式架構(gòu)的進(jìn)一步增強(qiáng),性能和可靠性大幅提高,應(yīng)用不需求任何更改即可使用,在線滾動式維護(hù)更新沒有計劃內(nèi)停機(jī)時間,同名的可擴(kuò)展性,擴(kuò)展超過100個節(jié)點。為此,POWER基于DB2 BCU構(gòu)建強(qiáng)大的Scale-Out架構(gòu)數(shù)據(jù)倉庫,其中也采用了V7000這樣強(qiáng)大的虛擬化中端存儲系統(tǒng)。
DB2 BLU帶來數(shù)據(jù)管理的革命性轉(zhuǎn)折,將傳統(tǒng)行式存儲轉(zhuǎn)換成列式存儲,提升效率,減少空間,加速查詢。DB2 BLU技術(shù)創(chuàng)新表現(xiàn)在:動態(tài)內(nèi)存計算、內(nèi)存列式計算互相結(jié)合,列式存儲數(shù)據(jù),動態(tài)移動無用數(shù)據(jù);無需解壓使用的數(shù)據(jù)壓縮,業(yè)界領(lǐng)先的保留順序的數(shù)據(jù)壓縮,使用數(shù)據(jù)可無需解壓;并行向量處理,多核處理和SIMD指令并行;數(shù)據(jù)忽略,忽略無需處理的無關(guān)數(shù)據(jù)。
由此,DB2 BLU on POWER構(gòu)建高效內(nèi)存數(shù)據(jù)集市,對于事務(wù)性數(shù)據(jù)庫,新建數(shù)據(jù)集市,直接從事務(wù)性數(shù)據(jù)庫創(chuàng)建,提供業(yè)務(wù)線使用,DB2 BLU讓業(yè)務(wù)線能夠?qū)崿F(xiàn)實時運行分析報告,并改進(jìn)業(yè)務(wù)決策,也可以從性能不佳的數(shù)據(jù)倉庫卸載分析數(shù)據(jù)集市,這讓業(yè)務(wù)線用戶可以充分利用其現(xiàn)有OLAP應(yīng)用,并通過DB2 BLU的內(nèi)存中按列組織的數(shù)據(jù)集市存儲,更快地獲得實時報告。對于性能低下的數(shù)據(jù)倉庫,COGNOS BI帶有BLU加速,輕松創(chuàng)建和加載BLU加速的內(nèi)存數(shù)據(jù)集市,充分利用OLAP應(yīng)用。
DOIT編輯點評:在大數(shù)據(jù)時代,更需要大智慧,什么才是大智慧,對于IBM來說,那就是POWER。就如IBM Power開啟大數(shù)據(jù)業(yè)務(wù)高峰論壇的上海現(xiàn)場,某媒體朋友簽名留言所指“IBM為大數(shù)據(jù)與分析帶來POWER(力量)”。IBM大數(shù)據(jù)解決方案四大金剛護(hù)法一出現(xiàn),就全面覆蓋了基于大數(shù)據(jù)應(yīng)用的主要場景,從靜態(tài)批量大數(shù)據(jù)處理、數(shù)據(jù)倉庫整合、實時大數(shù)據(jù)處理和數(shù)據(jù)集市構(gòu)建四個方面出發(fā),幫助用戶開發(fā)利用大數(shù)據(jù)能力,構(gòu)建高性能領(lǐng)先的大數(shù)據(jù)與分析平臺。(阿明)
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.