作為由VMware與EMC共同創(chuàng)立的后起之秀，Pivotal正努力面向未來(lái)打造應(yīng)用程序平臺(tái)，并在近日推出了其第一款基于Hadoop大數(shù)據(jù)處理工具的產(chǎn)品。
這款新產(chǎn)品被稱(chēng)為Pivotal HD，也就是Pivotal Hadoop發(fā)行版的縮寫(xiě)。這款1.0版本將以相對(duì)低廉的價(jià)格與輔助插件共同為用戶(hù)帶來(lái)合約支持，成為Hadoop陣營(yíng)的又一顆新星。
從技術(shù)角度講，這已經(jīng)不是磁盤(pán)陣列制造商與軟件供應(yīng)商EMC公司第一次推出Hadoop發(fā)行版了。隨著幾年前該公司完成了對(duì)Grrenplum并行數(shù)據(jù)庫(kù)與相關(guān)數(shù)據(jù)倉(cāng)儲(chǔ)設(shè)備的收購(gòu)，EMC成功將MapR技術(shù)與經(jīng)過(guò)重新設(shè)計(jì)及品牌包裝的Greenplum HD衍生方案相結(jié)合。
不過(guò)隨著Pivotal HD 1.0版本的發(fā)布，我們看到EMC與VMware將關(guān)注重點(diǎn)再次集中在Apache Hadoop身上，將其2.0代碼作為Pivotal HD 1.0的創(chuàng)建基礎(chǔ)。
具體說(shuō)來(lái)，Pivotal HD中包含著Hadoop 2.0.2軟件核心，即利用原有MapReduce 1.0算法與新增YARN 2.0算法共同負(fù)責(zé)服務(wù)器集群端的數(shù)據(jù)交付與處理任務(wù)，而這一切都以Hadoop分布式文件系統(tǒng)（簡(jiǎn)稱(chēng)HDFS）為基礎(chǔ)。
所謂YARN（也就是眾所周知的MapReduce 2.0）層允許Hadoop框架載入其它各類(lèi)算法，并對(duì)整套集群進(jìn)行分散與收集處理。
Pivotal HD的社區(qū)版作為免費(fèi)發(fā)行并擁有社區(qū)支持的版本，包含有HBase 0.94.2列式數(shù)據(jù)庫(kù)、Hive 0.9.1 SQL查詢(xún)引擎、Mahout 0.8.0機(jī)器學(xué)習(xí)層以及Pig 0.10.0腳本語(yǔ)言等組件。Flume 1.3.1日志收集工具與Sqoop 1.4.2數(shù)據(jù)交換工具也是該社區(qū)版本的重要組成部分。
Pivotal HD企業(yè)版則加入了Spring Java框架（由VMware提供）以及名為Serengeti的Hadoop虛擬化擴(kuò)展項(xiàng)目。企業(yè)版還擁有一套用于從其它來(lái)源將數(shù)據(jù)導(dǎo)入HDFS的數(shù)據(jù)載入器及一項(xiàng)基于HDFS的統(tǒng)一化存儲(chǔ)服務(wù)。Pivotal Command Center也是企業(yè)版中的一員，且與之前提到的各組件一樣由Pivotal自家開(kāi)發(fā)。
HAWQ分布式SQL查詢(xún)引擎通過(guò)HDFS與Greenplum并行數(shù)據(jù)庫(kù)的結(jié)合實(shí)現(xiàn)智能化特性，因此能夠流暢地與SQL進(jìn)行交互并充當(dāng)企業(yè)版的一款在售插件。（我們意識(shí)到El Reg網(wǎng)站對(duì)于HAWQ的定義過(guò)于單純化。）
Pivotal HD Hadoop堆棧的不同版本與插件
HAWQ是一種實(shí)時(shí)查詢(xún)語(yǔ)言并被用于代替Hive，它使用類(lèi)SQL查詢(xún)并將其劃入MapReduce批量任務(wù)。HAWQ與Cloudera CDH4發(fā)行版中的Impala數(shù)據(jù)庫(kù)層也存在競(jìng)爭(zhēng)關(guān)系，而經(jīng)過(guò)加速的HBase功能也是MapR M7發(fā)行版中的組成部分。
在針對(duì)Pivotal HD 1.0發(fā)布撰寫(xiě)的博文中，Pivotal公司Hadoop堆棧產(chǎn)品戰(zhàn)略與前景部門(mén)負(fù)責(zé)人Saravana Krishnamurthy解釋稱(chēng)，目前有三套Hadoop代碼軟件包可供選擇：前面提到的社區(qū)版、企業(yè)版以及名為Pivotal單節(jié)點(diǎn)（Single Node）的版本。
社區(qū)版提供免費(fèi)下載，大家可以將其融入產(chǎn)品并利用社區(qū)網(wǎng)絡(luò)支持構(gòu)建起最多擁有50個(gè)節(jié)點(diǎn)的集群。（目前我們還不清楚用戶(hù)是否需要購(gòu)買(mǎi)技術(shù)支持合約或者進(jìn)行付費(fèi)升級(jí)。）
企業(yè)版則集萬(wàn)千寵愛(ài)于一身，不過(guò)用戶(hù)需要支付費(fèi)用——每個(gè)服務(wù)器節(jié)點(diǎn)每年的社區(qū)支持費(fèi)用為1000美元。相比之下，Hortonworks開(kāi)出的每個(gè)集群（至少由十個(gè)節(jié)點(diǎn)構(gòu)成）要價(jià)12000美元顯得不夠厚道，Cloudera與MapR在各自版本中開(kāi)出的單節(jié)點(diǎn)4000美元到5000美元的價(jià)格更是有些夸張。（兩者的定價(jià)都有些模糊，且各個(gè)版本之間的功能集也并不一致。）當(dāng)然，大家也可以直接購(gòu)買(mǎi)企業(yè)版終身使用權(quán)，但Pivotal并未披露其具體售價(jià)。
HAWQ為HDFS提供的SQL數(shù)據(jù)庫(kù)查詢(xún)層與Pivotal HD企業(yè)版一樣以節(jié)點(diǎn)為基礎(chǔ)進(jìn)行計(jì)費(fèi)，不過(guò)Pivotal同樣沒(méi)有泄露具體價(jià)格。我們很難估量Pivotal將如何為這項(xiàng)功能制定計(jì)費(fèi)標(biāo)準(zhǔn)，但同類(lèi)關(guān)系型數(shù)據(jù)庫(kù)往往每個(gè)計(jì)算核心都要求用戶(hù)支付數(shù)萬(wàn)美元。如果確定以每臺(tái)服務(wù)器節(jié)點(diǎn)作為基礎(chǔ)，則盈利空間也將至少達(dá)到數(shù)千乃至數(shù)萬(wàn)美元。
如果硬要El Reg網(wǎng)站存儲(chǔ)頻道做出判斷，我們認(rèn)為如果數(shù)據(jù)倉(cāng)儲(chǔ)的價(jià)格為每TB 20000美元而僅搭配HDFS與HBase的原始Hadoop集群每TB要價(jià)500美元，則Pivotal可能會(huì)以HAWQ作為計(jì)費(fèi)分界線，并為此開(kāi)出10000美元每TB的價(jià)位。
如果大家采用搭配12塊3TB磁盤(pán)驅(qū)動(dòng)器的惠普DL380e Gen8服務(wù)器節(jié)點(diǎn)，那么整體數(shù)據(jù)容量將達(dá)到36TB。根據(jù)前面得到的結(jié)論，每TB 10000美元的定價(jià)意味著用戶(hù)將需要在這臺(tái)節(jié)點(diǎn)設(shè)備身上花掉360000美元。這樣的要價(jià)聽(tīng)起來(lái)好像是窮瘋了，但如果與IBM及甲骨文在關(guān)系類(lèi)數(shù)據(jù)庫(kù)的企業(yè)版本中開(kāi)出的價(jià)格相比較，以上數(shù)字還算可以接受。不過(guò)在雙插槽服務(wù)器方面，其實(shí)際支出又會(huì)大幅提升。
問(wèn)題的關(guān)鍵是，排除價(jià)格因素，Pivotal真正出售的并非Hadoop支持而是HAWQ數(shù)據(jù)庫(kù)層。這家年輕的企業(yè)顯然不希望走上低調(diào)上市、后期漲價(jià)的道路。
相反，Pivotal公司希望將HAWQ定位為特定領(lǐng)域的關(guān)系類(lèi)數(shù)據(jù)庫(kù)替代方案，并希望以競(jìng)爭(zhēng)對(duì)手的售價(jià)以及市場(chǎng)承受能力作為基礎(chǔ)參考。不過(guò)最后的結(jié)果很可能是主流客戶(hù)根本不會(huì)為任何其它方案掏出與關(guān)系類(lèi)數(shù)據(jù)庫(kù)同級(jí)別的資金投入，甚至連打個(gè)對(duì)折都不會(huì)考慮。HAWQ最終將不得不嘗試按量計(jì)費(fèi)的方針，正如Linux與MySQl一樣。
而且如果Pivotal對(duì)于HAWQ的定價(jià)過(guò)高，企業(yè)用戶(hù)將很可能轉(zhuǎn)而投向Impala項(xiàng)目懷抱甚至選擇自主研發(fā)方案（這要看Cloudera給Impala開(kāi)出怎樣的社區(qū)支持價(jià)碼）�？梢哉f(shuō)目前Hadoop的類(lèi)SQL或SQL查詢(xún)層方面進(jìn)入了價(jià)格競(jìng)低的時(shí)代，哪家廠商敢于開(kāi)出業(yè)界最低的價(jià)位、他們就將掌握該領(lǐng)域的階段性定價(jià)權(quán)。
不過(guò)目前還沒(méi)人急于探詢(xún)價(jià)格底限——除了Hadoop客戶(hù)自己。
