Interstage Big Data Parallel Processing Server V1.0采用Hadoop MapReduce算法,并與富士通專有的分布式文件系統(tǒng)結(jié)合,最終企業(yè)系統(tǒng)和Hadoop集群可以互相配合。該文件系統(tǒng)運(yùn)行在主機(jī)上,利用富士通的 Eternus磁盤陣列,有針對企業(yè)系統(tǒng)的標(biāo)準(zhǔn)Linux界面,以及用于Hadoop集群的兼容HDFS界面。

富士通沒有對其專有的分布式文件系統(tǒng)命名,但是它可能屬于富士通Fujitsu Exabyte File System(FEFS)的變體,這個產(chǎn)品是在去年公布的,并將目標(biāo)客戶鎖定在公司的超級計(jì)算機(jī)用戶。(FEFS本身就是開源Lustre文件系統(tǒng)的變體。)

另一個創(chuàng)新就是富士通引進(jìn)Interstage Hadoop發(fā)行版,聚集Hadoop主控節(jié)點(diǎn),由控制器告知哪個服務(wù)器節(jié)點(diǎn)處理哪個數(shù)據(jù),單節(jié)點(diǎn)故障和Hadoop集群的性能瓶頸,以便于得到高可用性。

最大的好處是Hadoop和企業(yè)系統(tǒng)都可以處理位于Eternus陣列的數(shù)據(jù),這樣相當(dāng)程度的加大了Hadoop的效率,因?yàn)槟悴槐卦俚却髽I(yè)數(shù)據(jù)上傳到Hadoop集群。如果假設(shè)你沒有其它想要進(jìn)入MapReduce的外部數(shù)據(jù),這種問題對于現(xiàn)在做大數(shù)據(jù)的很多公司來說是不成立的。

Interstage Big Data Parallel Processing Server V1.0將要在四月底開始出貨。每個服務(wù)器處理器的許可費(fèi)用為7465美元。富士通表示,在日本以外的銷售價格可能有所不同。

分享到

wangzhen

相關(guān)推薦