阿明 發(fā)表于:13年10月29日 11:21 [原創(chuàng)] DOIT.com.cn
2013年10月29日存儲在線原創(chuàng):一個公司的誕生對整個IT業(yè)界都是一次大大的刺激與促進,對于這樣一家定位下一代云計算和大數(shù)據應用相結合的公司,傾注了老喬(Joe Tucci)為首的EMC高層決策團的睿見與前瞻。
從當初成立伊始將VMware前任CEO、EMC首席戰(zhàn)略官Paul Maritz換將到Pivotal,EMC和VMware共同出資成立的公司(通用電氣也有1.05億美元左右的戰(zhàn)略投資)被國內媒體業(yè)界譽為EMC集團軍的三駕馬車之一。(另兩駕馬車:軟件定義數(shù)據中心的VMWare和信息基礎架構的原EMC)
“據Paul Maritz透露,2013年Pivotal的銷售收入預計為3億美元,2017年有望達到10億美元。同時2013~2014年Pivotal將獲得約4億美元的投資。” Pivotal在既定目標的推動下,近來也傳出“忙于打造大數(shù)據軟件組合”——組合數(shù)據挖掘和數(shù)據分析軟件產品。
作為下狠心要鍛造自己的業(yè)務智能PaaS(平臺即服務),Pivotal在大數(shù)據軟件方面也強調如何有助于數(shù)據分析。大家都熟知的,內存數(shù)據庫技術的應用,可以大大提高數(shù)據庫的速度,這對于需要高速反應的數(shù)據庫應用,如電信、金融等提供了有力支撐。因此,在內存數(shù)據庫的實時分析領域,就成為當前在配合Hadoop平臺數(shù)據處理方面帶來很大的方便。
我們可以簡單了解一下內存數(shù)據庫的價值所在,“內存數(shù)據庫的技術,一個很重要的特點,是可以對內存中的數(shù)據實現(xiàn)全事務處理,這是僅僅把數(shù)據以數(shù)組等形式放在內存中完全不同的。并且,內存數(shù)據庫是與應用無關的,顯然這種體系結構具有其合理性。內存引擎可以實現(xiàn)查詢與存檔功能使用的是完全相同的數(shù)據庫,同時內存表與磁盤表也使用的是完全相同的存取方法。存儲的選擇,對于應用開發(fā)者而言是完全透明的。”
相關資料顯示:對于內存數(shù)據庫而言,實現(xiàn)了數(shù)據在內存中的管理,而不僅僅是作為數(shù)據庫的緩存。不像其它將磁盤數(shù)據塊緩存到主存中的數(shù)據庫,內存數(shù)據庫的內存引擎使用了為隨機訪問內存而特別設計的數(shù)據結構和算法,這種設計使其避免了因使用排序命令而經常破壞緩存數(shù)據庫性能的問題。通過內存數(shù)據庫,減少了磁盤I/O,能夠達到了以磁盤I/O 為主的傳統(tǒng)數(shù)據庫無法與其相比擬的處理速度。
顯然,內存數(shù)據庫在解決實時處理和高并發(fā)問題上,其意義還是非常大的。
作為Hadoop發(fā)行版升級Pivotal HD 1.1的一部分,其中還包括內存交易庫GemFire HD(就是VMware在2010年收購的)。據其他媒體介紹,“GemFire實例完全是在服務器內存中運行的,這樣可以迅速詢問實時SQL操作數(shù)據,對于情況感知和其他形式的實時分析都是有用處的。”
另外,在新加坡的首屆Pivotal峰會上,Pivotal還在推出了幫助數(shù)據工作者發(fā)現(xiàn)和準備數(shù)據用于分析的工具——Pivotal Data Dispatch(Pivotal DD)。Pivotal DD是一款可擴展、經濟實惠的解決方案,可整合查看不同的數(shù)據源,為報告和數(shù)據分析提供自助式沙箱配置。企業(yè)現(xiàn)在可以快速、安全地提供任何數(shù)據源,無論是Hadoop、MPP、平面文件還是傳統(tǒng)數(shù)據庫的結構化和非結構化大數(shù)據,使數(shù)據工作者能夠實現(xiàn)前所未有的數(shù)據分析高產出。采用Pivotal DD,企業(yè)就有了一個全面的系統(tǒng),可以查看、管理和分析組織內部及外部數(shù)據,更快做出決策,為企業(yè)開發(fā)出關鍵的數(shù)據洞察。
不過,據介紹,Pivotal Data Dispatch軟件的基礎是由紐約證券交易所(New York Stock Exchange,NYSE)開發(fā)的,從2007年開始他們的數(shù)據分析師利用這款軟件更好地了解監(jiān)管要求帶來的影響,也旨在為滿足監(jiān)管要求而跨多種數(shù)據架構進行高級數(shù)據訪問和分析。經過與NYSE科技公司協(xié)調,Pivotal已經將這個先進的基礎軟件納入一個稱為Pivotal Data Dispatch的商業(yè)產品,以滿足Pivotal企業(yè)客戶群日益增長的數(shù)據需求。
有媒體對此評論道:“Pivotal DD為大數(shù)據和分析掃清了障礙,通過自助式數(shù)據發(fā)現(xiàn)和訪問提高速度。通過統(tǒng)一訪問控制、增強策略和審計功能提高安全性與合規(guī)性。通過減少IT參與穩(wěn)定成本,管控租用沙箱導致的數(shù)據增長,提高效率。”
查閱資料發(fā)現(xiàn),Pivotal DD還提供如下功能:
統(tǒng)一數(shù)據平臺:這是一個不同數(shù)據平臺的目錄,使IT部門能夠注冊數(shù)據平臺、定義業(yè)務元數(shù)據、建立安全和訪問規(guī)則并執(zhí)行各種政策。
面向Hadoop及其他系統(tǒng)的數(shù)據管理:快速訪問企業(yè)數(shù)據池——一種電子文件圖書館和數(shù)據庫系統(tǒng)。系統(tǒng)還可以包括基于Hadoop的平臺、數(shù)據網格和高速緩存服務、MPP專用設備、信息隊列以及內部或外部云。
自配置:建立按需分析沙箱和規(guī)定時間的數(shù)據租用,所規(guī)定時間由數(shù)據工作者和數(shù)據經理設置。
安全與訪問控制:單一元數(shù)據庫用于實現(xiàn)統(tǒng)一訪問、安全性、譜系追蹤以及IT管理員的可審計性。
再者,從另一個方面分析,“目前用Hadoop的企業(yè)為數(shù)不多。但我們可以感受到,有些企業(yè)已經先行。”Pivotal全球業(yè)務發(fā)展與策略副總裁David Menninger早已認識到這一點,實際上,在國內幾次有關Hadoop的大會現(xiàn)場與會者爆滿就可以看出國內企業(yè)用戶對于Hadoop技術的關心與專注度。
相關數(shù)據顯示,Pivotal現(xiàn)有1200人,700人都是工程師,在面臨下一代云計算和大數(shù)據應用相結合的道路上,Pivotal 已經在步步搶先,阿明相信它未來將會做得更好。
也如David Menninger 所言:“Pivotal 代表著轉變,新時代需要新平臺。” 因此,我們不得不看好未來的Pivotal。(阿明)