DataDirect Networks(以下簡稱DDN)公司總裁兼聯(lián)合創(chuàng)始人Paul Bloch
DDN的產(chǎn)品一直以性能和高帶寬為主要賣點,主要服務(wù)于大容量和高帶寬應(yīng)用,選擇此時進入中國可謂是恰逢其時,坐擁天時地利人和。
大數(shù)據(jù)的熱潮在中國市場的發(fā)酵與膨脹如今已經(jīng)能夠預(yù)期,媒體、視頻網(wǎng)站、IPTV、制造業(yè)、能源行業(yè)與醫(yī)療行業(yè)呈現(xiàn)的較強的增長勢頭,對高帶寬、大容量、高性能的存儲系統(tǒng)“情有獨鐘”。
同時,國內(nèi)用戶的采購需求又開始朝向?qū)I(yè)化、集中化發(fā)展,2010年既有平安城市、文化共享、電子政務(wù)等原有項目的持續(xù)分省采購,上海世博會的激烈競標,又有超算中心、異地災(zāi)備中心、金稅工程、數(shù)字化城市等大型項目的相繼啟動。
戴爾也是DDN的分銷商之一,在某些HPC項目中,傳統(tǒng)的存儲系統(tǒng)確實無法滿足巨大的IO需求,需要類似DDN的產(chǎn)品。
向“規(guī)模”要效益:S2A平臺仍是中流砥柱
高性能計算HPC歷來是石油、生物、氣象、科研等計算密集型應(yīng)用中的首要技術(shù)問題,隨著近幾年并行集群系統(tǒng)的發(fā)展,中國的HPC產(chǎn)業(yè)突飛猛進,像天河一號這樣的HPC系統(tǒng),甚至坐上了全球高性能計算TOP500排行榜的榜首。
但隨著HPC系統(tǒng)的發(fā)展,其后端的存儲系統(tǒng)卻“越來越不給力”:在一個32計算節(jié)點的疊前處理系統(tǒng)中,如果需要使每個計算節(jié)點得到15~20MB/s的帶寬,那么集群對后端存儲的總體帶寬(即聚合帶寬)要求大約為500~650MB/s。目前的中端磁盤陣列產(chǎn)品基本都可以達到這一性能指標。如果考慮64個或更多計算節(jié)點,后端帶寬要求需要達到1~1.3GB/s甚至更大,這一性能是目前單一中端磁盤陣列系統(tǒng)難以達到的。然而通過引入多臺存儲設(shè)備,這一問題也不難解決。
與高性能計算領(lǐng)域同樣遇到存儲問題的,還有媒體娛樂——主要是新興的視頻網(wǎng)站、高清視頻制作等領(lǐng)域——媒體行業(yè)時時刻刻都要進行大量信息的搜集、整理和制作,因此對存儲的需求在不斷增長。由于內(nèi)容的數(shù)量巨大,還要滿足隨時查詢和調(diào)閱,因此對存儲設(shè)備提出了更高的要求。
媒體行業(yè)需要大量的信息輸入輸出操作,其讀寫通常是以順序的、大數(shù)據(jù)包的、視頻文件為單位進行,而每個單一的視頻文件的碼流通常要求具有較高的傳輸帶寬和帶寬加載粒度,而多個視頻文件碼流的同時并發(fā)轉(zhuǎn)送就更加使得單一普通的存儲端口速率受到極大的挑戰(zhàn)。
市場高性能、高帶寬、大容量數(shù)據(jù)的需求,尤其是高性能計算和視頻相關(guān)行業(yè)(像OEM業(yè)務(wù)為主的LSI在出售其存儲系統(tǒng)部門前,視頻行業(yè)一直是其重點),像DDN這樣定位的存儲廠商就開始有了用武之地,其提供的存儲系統(tǒng)主要服務(wù)于大容量和高帶寬應(yīng)用。
因此,在2010年11月發(fā)布的TOP500榜單中,排名前100名的系統(tǒng),有超過50套使用了DDN的存儲系統(tǒng),而HPC的主要用戶:美國國家超級電腦應(yīng)用中心、美國國家海洋和大氣局預(yù)測系統(tǒng)實驗室、美國白沙導(dǎo)彈基地、美國國家大氣研究中心、圣地亞哥超級計算機中心、美國陸軍研究實驗室等也都在DDN的客戶名單上。
而在中國,中央電視臺以及大量的省市級電視臺都使用DDN存儲,包括2008年的奧運會轉(zhuǎn)播也用的是DDN存儲。
DDN的主要產(chǎn)品平臺
DDN的主要產(chǎn)品是硅存儲架構(gòu)S2A平臺,目前提供三種常規(guī)系列產(chǎn)品:S2A6620,S2A9900和SFA10000,IOPS和帶寬是DDN的S2A平臺的重要賣點,以S2A6620為例,它的最大容量可達360TB,讀寫帶寬可達2GB/s。
S2A6620的規(guī)格表,最大的Cache IOPS能夠達到335000,帶寬達到2GB/s,這一數(shù)據(jù)是目前采用3.5寸盤的結(jié)果,如果采用2.5寸盤以及加入SSD,可能性能會更好。
S2A9900 擁有極高的性能和極大的容量,該系統(tǒng)只有兩層設(shè)計,卻能夠存儲高達 2.4 PB的內(nèi)容,并提供穩(wěn)定、實時的吞吐量,使每臺設(shè)備的讀取和寫入速度均能達到6GB/s,并且他可保證固定帶寬(QoS),在媒體行業(yè),特別是電視臺,媒體制作得到了大量應(yīng)用。
DDN方面,宣稱S2A9900是“實時的,0延遲的數(shù)據(jù)的訪問(Real-time, ZERO-latency data access)”,提供高性能的DirectRAID 6的能力。不過,過去三年S2A9900并未提供任何升級,仍然采用120TB 4U(2機柜1200塊盤)在單盤2TB的情況下2.4PB的配置,但據(jù)DDN的總裁兼聯(lián)合創(chuàng)始人Paul Bloch講,S2A9900和SFA10000,在今年年底可能會有一次較大的升級。
SFA10000是專為高性能計算而設(shè)計的高性能大容量存儲單個機柜可提供3.6PB的容量,且讀或?qū)懣蛇_12GB/s。為了滿足帶寬需要,S2A9900和SFA10000都不僅支持4GB、8GB FC和10GbE,也都支持Infiniband DDR連接。
2A存儲系統(tǒng)具有對應(yīng)用性能沒有影響的實時后臺校驗檢查功能,在使用這一功能時,S2A的實際使用性能不會有任何下降。S2A通過超過20個以上處理器的并行處理能力和高達7200MB/秒的校驗引擎解決了CPU資源爭奪問題。這正是S2A在跑滿主機端口的性能(1600MB/秒)的同時還能有足夠的CPU資源(5600MB/秒)去做高速的實時后臺校驗檢查和高速的磁盤數(shù)據(jù)重建。
S2A平臺除了其IOPS和帶寬外,D-MAID是DDN很重要的一項技術(shù),據(jù)DDN方面表示,其“可以動態(tài)降低某個LUN所在盤的轉(zhuǎn)速”:與實施靜態(tài)的“on/off”MAID相比,D-MAID使所有磁盤積極地服務(wù)數(shù)據(jù);或使所有磁盤處于節(jié)能睡眠模式;或介于這兩者之間—可透明訪問存儲平臺中所有數(shù)據(jù)集。為了優(yōu)化大型復(fù)雜備份、虛擬磁帶庫和歸檔應(yīng)用,D-MAID支持用戶設(shè)定的磁盤冗余周期以及自動管理磁盤陣列以達到最佳能源效率。
D-MAID的應(yīng)用在DDN的高密度的產(chǎn)品中具有明顯的作用,DDN產(chǎn)品的密度最高時,每平方英尺容量可高達74TB,其數(shù)據(jù)密度是其它數(shù)據(jù)存儲產(chǎn)品的5倍—相當于業(yè)界最小空間具有最高的容量擴展性,如果沒有D-MAID技術(shù)——可動態(tài)降低LUN轉(zhuǎn)速,并按照客戶具體參數(shù)使系統(tǒng)進入節(jié)能模式——那么DDN產(chǎn)品的功耗將是十分巨大的。
去年,DataDiret Networks S2A9900正是惠普在高性能集群(HPC)產(chǎn)品組合中增加的第三個向外擴展系統(tǒng)產(chǎn)品,實際上,在惠普之前,IBM已經(jīng)在其SONAS產(chǎn)品中納入了這個存儲系統(tǒng)。IBM同DDN有各種各樣的OEM(貼牌生產(chǎn))存儲協(xié)議。不過,在今年4月,DDN開始慢慢的進入新的市場。
DDN正悄悄地進入原來由BlueArc、Isilon和Panasas掌控的針對媒體密集型和HPC應(yīng)用程序的向外擴展NAS文件系統(tǒng)市場——文件訪問、大數(shù)據(jù)存儲將是DDN在未來一段時間的發(fā)展方向,當然,也少不了云計算。
進軍文件存儲市場:同展大數(shù)據(jù)旗幟
DDN在云存儲方面也是先驅(qū),2009年既開始為用戶提供基于對象的云存儲裝置-Web Object Scaler(WOS),這款產(chǎn)品被大量用于云計算和分布式視頻監(jiān)控。今年,DDN又發(fā)布了專為非結(jié)構(gòu)大數(shù)據(jù)而開發(fā)的NAS產(chǎn)品 – NAS Scaler,又為DDN云存儲又增添了新的成員。
細看DDN的官方網(wǎng)站,你會發(fā)現(xiàn)其實DDN的文件訪問存儲系統(tǒng)家族其實以前就非常豐富,其中包括NAS Scaler、GRID Scaler、EXA Scaler、xSTREAM VTL和xSTREAM Sacler,但只有NAS Scaler是今年剛剛推出的,據(jù)Paul Bloch介紹,這將是DDN新的增長點。
“利用基本的硬件平臺可以搭建不同的文件系統(tǒng),根據(jù)用戶的需求和應(yīng)用的不同,我可以搭建不同的文件系統(tǒng)。因為我們知道存儲不光是一個硬盤,文件系統(tǒng)也是非常重要的,我的不同的文件系統(tǒng)就可以滿足用戶不同的需要。我們通過硬件和文件系統(tǒng)的搭配完全滿足用戶的各種需求,包括生成數(shù)據(jù)的存儲、分析和數(shù)據(jù)挖掘等等都可以滿足。”
NAS Scaler是DDN的NAS網(wǎng)關(guān)設(shè)備,支持NFS(網(wǎng)絡(luò)文件系統(tǒng))、CIFS(通用互聯(lián)網(wǎng)文件系統(tǒng))、HTTP和FTP客戶端。NAS Scaler可以擴展到16個1U單元集群,它可以管理總數(shù)高達600個磁盤驅(qū)動器的存儲池,為2PB的可用容量提供多租賃訪問服務(wù)。這個存儲池的構(gòu)建使用DDN現(xiàn)有的S2A6620和SFA10000機箱。
每個存儲卷的數(shù)據(jù)傳輸速率可以達到15GB/秒,同時每秒鐘可以進行數(shù)十萬次文件操作。DDN表示該系統(tǒng)可以支持數(shù)百個文件系統(tǒng),在每個文件系統(tǒng)上支持2億個文件和256TB可用空間。
該系統(tǒng)擁有自動數(shù)據(jù)分層功能。數(shù)據(jù)分層可以在固態(tài)驅(qū)動器(SSD)、SAS和SATA硬盤驅(qū)動器之間進行,分層模式可以采用數(shù)據(jù)訪問和數(shù)據(jù)活躍度模式。NAS Scaler同樣支持D-MAID技術(shù)。DDN表示,客戶可以分別提升系統(tǒng)的IO性能、容量和吞吐量。系統(tǒng)的數(shù)據(jù)保護功能包括整合的同步卷鏡像、異步復(fù)制、快照以及整合的備份與帶內(nèi)病毒掃描。
DDN有三個版本的NAS Scaler:FAS-1596-GB,F(xiàn)SA-1506-10G和FSA-3192。FAS-1596-GB有六個處理器核和6個Gb級以太網(wǎng)連接。FSA-1506-10G有同樣數(shù)量的處理器核,有2個Gb級以太網(wǎng)連接和2個10Gb/秒以太網(wǎng)端口。高端的FSA-3192擁有和1596-10G同樣的以太網(wǎng)連接,不過有12個處理器核和48GB內(nèi)存,比前兩種型號要高出一倍。
中國市場推廣WOS:搭上云計算快車
除了SAN和NAS產(chǎn)品之外,Paul Bloch還向與會者介紹了DDN的WOS系統(tǒng)——這一產(chǎn)品自2009年6月推出,就一直較少在國內(nèi)看到相關(guān)報道,而隨著云計算在國內(nèi)的熱潮掀起,以及DDN正式進入中國,WOS也再次出現(xiàn)在了媒體面前。
WOS全稱是Web Object Scaler,是一款基于對象的擴展性云數(shù)據(jù)存儲系統(tǒng),其主要競爭對手是EMC的Atmos。與EMC的Atmos一樣,Object Scaler也擴展到了PB層級——在一個100節(jié)點的系統(tǒng)中最高支持6PB的容量。然而,兩個10.6TB節(jié)點的最低容量要比Atmos的初始架構(gòu)容量為120TB更容易讓用戶接受。
Web Object Scaler節(jié)點有多種架構(gòu)。3U WOS 1600分為針對性能優(yōu)化的10.6TB SAS節(jié)點和針對性能優(yōu)化的32TB SATA節(jié)點。4U WOS 6000可以分別針對性能和容量優(yōu)化,或者兩者兼有,最高支持120TB最低是39TB。
針對WOS在全球部署的網(wǎng)絡(luò)傳輸問題,Paul Bloch表示,DDN會尋求有關(guān)廣域網(wǎng)加速廠商的合作。