更多詳情請(qǐng)關(guān)注專題直播

下午的“中國(guó)閃存高峰論壇” 中,"高端存儲(chǔ)知識(shí)"微信自媒體作者西瓜哥,帶來(lái)《是友是敵,閃存 VS. 高端存儲(chǔ)》的主題演講。在演講里,西瓜哥表示,現(xiàn)在閃存的芯片供應(yīng)能力比不上數(shù)據(jù)更新的速度。假如,未來(lái)增長(zhǎng)的數(shù)據(jù)全部用閃存來(lái)滿足,閃存的芯片工廠根本生產(chǎn)不過(guò)來(lái),生態(tài)鏈上也不太可能。我個(gè)人的觀點(diǎn)是,以后閃存與高端存儲(chǔ)混合的情況,可能還會(huì)長(zhǎng)期存在,而不是全閃存的數(shù)據(jù)中心。


"高端存儲(chǔ)知識(shí)" 微信自媒體作者 西瓜哥

以下是西瓜哥精彩演講的內(nèi)容:

我喜歡研究高端存儲(chǔ)。大家都知道存儲(chǔ)是比較窄的領(lǐng)域,存儲(chǔ)媒體就兩三家,也不是特別多。存儲(chǔ)用量是客戶后臺(tái),原來(lái)沒(méi)有專門(mén)管存儲(chǔ)的,現(xiàn)在有管存儲(chǔ)的,一般都不是專業(yè)的東西,在后臺(tái)里面。而且我只講存儲(chǔ)里面的高端存儲(chǔ),這個(gè)就更篇了。一般中小企業(yè)用不到高端存儲(chǔ),大企業(yè)可能會(huì)用到。為什么我要研究高端存儲(chǔ)呢?主要有一個(gè)小小的想法,因?yàn)槲以诤M夤ぷ鞯臅r(shí)間,我看了一個(gè)報(bào)告。

雖然高端存儲(chǔ)占的比例很少,但是研究的人太少了,所以大家花了很多冤枉錢(qián),你可能不需要買(mǎi)高端存儲(chǔ),但是你買(mǎi)了高端存儲(chǔ),你為了面子就買(mǎi)了。其實(shí)你相當(dāng)于送給廠商很多錢(qián),并沒(méi)有達(dá)到你的目的。高端存儲(chǔ)比中端存儲(chǔ)好在哪里也說(shuō)不出所以然來(lái)。普通的工程師很難有機(jī)會(huì)接觸到高端存儲(chǔ),如果企業(yè)不大根本見(jiàn)不到,大企業(yè)能見(jiàn)到的就是管理那幾個(gè)人。我想把這個(gè)東西寫(xiě)一寫(xiě)。雖然比例很少,大家也有人想了解的,而且有一些技術(shù)是相通的。高端的東西中低端的可能也有,但是高端能做的東西的話,也是業(yè)界比較高的技術(shù)。

我講一下我自己人為的高端存儲(chǔ)的領(lǐng)域。這是Ban的報(bào)告,以前講高端存儲(chǔ)是多控的,支持駕機(jī)的,存互聯(lián)網(wǎng)狀態(tài)變化很大,小機(jī)已經(jīng)用的很少了,大機(jī)也在用。云出來(lái)了以后就有高端存儲(chǔ)的作用了?,F(xiàn)在已經(jīng)定義不出來(lái)高端存儲(chǔ)了,干脆拿錢(qián)說(shuō)話。平均每套的成本,出廠價(jià)大于10萬(wàn)美金,這樣的存儲(chǔ)就是高端存儲(chǔ)。大家看一下比例,只占不到四分之一的份額,而且這里面還包含了很多別的東西,我還不研究那些東西,我研究里面多控那部分,就是說(shuō)我研究的范圍更窄。高端存儲(chǔ)SAN里面的一點(diǎn)東西。

高端存儲(chǔ)的范圍就是幾款產(chǎn)品,大概六個(gè)廠商,七款產(chǎn)品是我目前跟蹤研究的范圍,每更新一個(gè)版本我都會(huì)去看的。為什么只研究這些東西呢?因?yàn)橄裨坪痛髷?shù)據(jù)都很火了,很多人都已經(jīng)研究了,包括企業(yè)都會(huì)用得上,而且講起來(lái)都很有噱頭,高端存儲(chǔ)沒(méi)有什么可講的,代表古老、死板、專業(yè)形象,沒(méi)有什么太多可以?shī)蕵?lè)的東西,也不像云大數(shù)據(jù)0很多都是娛樂(lè),而且有很多人已經(jīng)研究了。

在一個(gè)企業(yè)里面,你會(huì)發(fā)現(xiàn)你最有價(jià)值的數(shù)據(jù)是放在這些設(shè)備上的,比如說(shuō)金融里面的,信用卡的余額會(huì)放在大數(shù)據(jù)系統(tǒng)里面嗎?不會(huì)的。數(shù)量不是很大,但是它代表了我們中國(guó)國(guó)產(chǎn)化的最后,最難的一個(gè)地方。因?yàn)樗蟹浅8叩目煽啃?,?dāng)然性能也是很重要的。大數(shù)據(jù)100T的數(shù)據(jù),丟了一個(gè)月的數(shù)據(jù)也沒(méi)有關(guān)系,因?yàn)橼厔?shì)不會(huì)變的,沒(méi)有什么大問(wèn)題,但是高端存儲(chǔ)丟了一部分,可能就丟了好幾億的美金,所以理論上來(lái)都不一樣的。

我們簡(jiǎn)單回顧一下高端存儲(chǔ)的歷史。高端存儲(chǔ)的發(fā)展不如閃存長(zhǎng)。你看TMS說(shuō)有35年歷史了。高端存儲(chǔ)到現(xiàn)在也就20多年的歷史,沒(méi)有閃存歷史長(zhǎng)。大家怎么看呢?因?yàn)楦叨舜鎯?chǔ)剛開(kāi)始跟大機(jī)配套的,剛才IBM發(fā)明大機(jī)的時(shí)候就有存儲(chǔ)的介質(zhì),但是當(dāng)時(shí)這種存儲(chǔ)只是IBM自己做的,包括日立會(huì)做一些兼容IBM存儲(chǔ)的存儲(chǔ),市場(chǎng)份額80%都是在IBM手里。直到90年代,EMC推出了一個(gè)坦克軍官(音譯)這個(gè)推出來(lái)以后,才真正開(kāi)創(chuàng)了高端存儲(chǔ)的市場(chǎng),所以也就20多年的歷史。也就是說(shuō)我們這個(gè)行業(yè)先有高端才有中端的,現(xiàn)在勢(shì)頭反是了,因?yàn)楹芏嗉夹g(shù)高端不敢用,中端先用,中端用了以后高端才用。

我們回顧一下歷史就是這樣的。從EMC發(fā)布第一代產(chǎn)品以外,后來(lái)日立看到了這個(gè)機(jī)會(huì),日立就發(fā)布了采用EMC的架構(gòu)用ketch技術(shù)做的真正意義的高端存儲(chǔ)。IBM用的硬盤(pán),用的是自己的大硬盤(pán),都沒(méi)有用傳統(tǒng)的PC硬盤(pán),所以說(shuō)從EMC產(chǎn)品開(kāi)始,才真正用了普通的硬盤(pán),是現(xiàn)在真正意義上的高端存儲(chǔ)。日立加進(jìn)來(lái)就是兩個(gè)了。最后日立把EMC的份額搶的差不多了,IBM沒(méi)辦法就拋棄了原來(lái)的技術(shù),推出了列的方式的技術(shù),重回殺會(huì)高端存儲(chǔ)的領(lǐng)域,現(xiàn)在形成是三足鼎立的格局,現(xiàn)在這個(gè)領(lǐng)域也就這三個(gè)廠家。這三個(gè)廠商各自往來(lái)外國(guó)發(fā)展了,一代一代往前發(fā)展,日立也是一代一代往前發(fā)展。這些廠家都在發(fā)展,到后來(lái)的有一個(gè)施德怕(音譯)高端價(jià)格也是10萬(wàn)美金以上,也是我們研究的范疇。06年的時(shí)候,富通(音譯)也發(fā)布了高端存儲(chǔ),2012年華為在上海CC大會(huì)也發(fā)布了中國(guó)人自己造的國(guó)產(chǎn)的存儲(chǔ)。我研究的領(lǐng)域就是這6個(gè)廠商,7款產(chǎn)品。因?yàn)镮BM有兩款產(chǎn)品,DS8000和SSIB(音譯)。因?yàn)榻裉觳皇歉叨舜鎯?chǔ)的沙龍,我就不講高端存儲(chǔ)了。我想講高端存儲(chǔ)和閃存競(jìng)爭(zhēng)合作的關(guān)系。

這是我自己統(tǒng)計(jì)的數(shù)據(jù)。我們看高端存儲(chǔ)的分布,中國(guó)只占了5%,也就是說(shuō)這是我每天有動(dòng)力寫(xiě)微信跟大家分享的原因。我想把蛋糕做大,把中國(guó)高端存儲(chǔ)的市場(chǎng)做,美國(guó)占了45%,我們是美國(guó)的零頭。我們的經(jīng)濟(jì)地位已經(jīng)是第二位了,但是從高端存儲(chǔ)來(lái)看,我們定位上還是差很多的,高端存儲(chǔ)主要用在金融里。

我從這個(gè)數(shù)據(jù)里面我也分析出來(lái)。高端存儲(chǔ)里面金融占43%,所以說(shuō)這個(gè)市場(chǎng)是最難做的市場(chǎng),金融對(duì)可靠性、穩(wěn)定性、性能的要求,所以說(shuō)我關(guān)注這些方面的話,也是普及一下這方面的知識(shí),大家不要覺(jué)得太神秘了,看一下自己的企業(yè)是不是需要高端存儲(chǔ)的東西。

現(xiàn)在問(wèn)題來(lái)了。我應(yīng)該回去賣西瓜了,因?yàn)楦叨舜鎯?chǔ)要滅亡了,因?yàn)槲沂俏鞴细缏铩R驗(yàn)閺S商推了很多閃存戰(zhàn)略,高端存儲(chǔ)不是性能高嘛,用不著了。EMC這么多柜,現(xiàn)在這么小的盒子搞定,性能和你一樣,體積小多少倍。英國(guó)register的網(wǎng)站也登了很多信息。大家都覺(jué)得高端存儲(chǔ)是不是沒(méi)了?快沒(méi)了,沒(méi)必要存在了,性價(jià)比太差。為什么叫高端存儲(chǔ)?一個(gè)是貴,貴就叫高端存儲(chǔ)。有人說(shuō)我沒(méi)必要了。我不光是貴,我性能也好,閃存性能也好。

現(xiàn)在還需不需要高端存儲(chǔ)?我想分享一下我自己的觀點(diǎn)?,F(xiàn)在我們先看一下閃存適用的負(fù)載,剛才前面的許先生已經(jīng)說(shuō)過(guò)了,到底哪些負(fù)載比較適合閃存,索引是比較適合。索引的趨勢(shì)現(xiàn)在是峰值,以后占的比例會(huì)小一點(diǎn)。閃存發(fā)揮得特性就是讀,特別是隨機(jī)讀。只要是隨機(jī)讀很高的地方就是閃存的應(yīng)用之地。這些讀,這些應(yīng)用排在哪些位置。這些位置就是用的比較多的地方。我們看到有一些很奇怪的地方。比如說(shuō)綠顏色VDI,其實(shí)很多閃存公司都把它當(dāng)成是最主要的場(chǎng)景,但是在IO負(fù)載模式里面,其實(shí)很多都是順序的,也不是隨機(jī)的,讀寫(xiě)也不是最高的。閃存還有另外一個(gè)問(wèn)題就是時(shí)延。VDI最大的痛苦就是啟動(dòng)風(fēng)暴,這個(gè)模式?jīng)]有體現(xiàn)時(shí)延的要求。

用戶的數(shù)據(jù)存在閃存上可能受不了,但是啟動(dòng)數(shù)據(jù)可以存在閃存上。從行業(yè)來(lái)看,行業(yè)也很多,高端存儲(chǔ)是金融和電信應(yīng)用比較多。前面我講了很多膠片都是來(lái)自于互聯(lián)網(wǎng)的,我沒(méi)有任何版權(quán)。政府健康和教育是閃存應(yīng)用最大的領(lǐng)域,目前應(yīng)用重合不太完全重合,這方面有什么問(wèn)題嗎?金融不需要性能嗎?不是,金融里面太謹(jǐn)慎了。前段時(shí)間一個(gè)日立朋友給我打電話說(shuō)他有一個(gè)金融用戶問(wèn)他是不是可以用閃存?可以用,但是也有擔(dān)心。

一個(gè)產(chǎn)品出來(lái)三年才會(huì)考慮的,我們閃存也就三五年才出來(lái)的。雖然閃存比較可靠,但是你有一個(gè)一直用閃存五年以上的案例很難拿出來(lái),這樣的案例有,但是很難拿得出來(lái),這就是金融客戶擔(dān)心的。

Purp Storage在跟EMC打官司,因?yàn)樗锩婧芏嗟娜藛T都是從EMC挖過(guò)來(lái)的。所以現(xiàn)在EMC跟它打官司,用它的客戶信息,搶它的市場(chǎng)。我們看它的定位,它自己定位是VIVEL和VDI和數(shù)據(jù)庫(kù)加速(音譯)。我看了他們的成功案例,大概有16個(gè)主要的客戶。我看了一下這些客戶,應(yīng)該說(shuō)大的客戶還不說(shuō),就是說(shuō)世界五百?gòu)?qiáng)的客戶不是特別多,有一半以上都是用VDI的場(chǎng)合,數(shù)據(jù)庫(kù)的場(chǎng)合大概有9個(gè),十幾個(gè)用VDI的場(chǎng)合。不跟高端存儲(chǔ)的定位還是有一點(diǎn)點(diǎn)的區(qū)別的。

我再回答一下剛才前面金融朋友問(wèn)我的朋友,到底閃存的可靠性怎么樣?我用了一個(gè)美國(guó)企業(yè)調(diào)查數(shù)據(jù)。從目前使用閃存的企業(yè)經(jīng)驗(yàn)來(lái)講,閃存的可靠性比傳統(tǒng)的硬盤(pán)要強(qiáng)的。這是用戶自己的感覺(jué),這是第三方獨(dú)立公司調(diào)查的數(shù)據(jù)??煽啃曰旧辖鉀Q的差不多了,因?yàn)橛泻芏鄡?yōu)化的算法。第二我們看一下分析師,我們以后的數(shù)據(jù)中心是不是全部用閃存呢?我們看一下有兩個(gè)問(wèn)題。

一個(gè)是成本問(wèn)題。這是gartner的預(yù)測(cè),我們看得見(jiàn)的這四五年,閃存的成本跟大容量硬盤(pán),成本差距保持在20倍以上,就是每GB的差距。如果光從容量來(lái)考慮你用閃存確實(shí)是不合適的。數(shù)據(jù)中心真正的數(shù)據(jù)是多少,我覺(jué)得二八原則,20%是熱的就不錯(cuò)了很多是老數(shù)據(jù),但是老數(shù)據(jù)不能仍,還得用磁帶保留它,全閃存的數(shù)據(jù)中心是不太現(xiàn)實(shí)的。

第二個(gè)現(xiàn)在閃存的芯片供應(yīng)能力比不上數(shù)據(jù)更新的速度。如果2017年增長(zhǎng)的數(shù)據(jù)全部用閃存滿足的,閃存的芯片工廠根本生產(chǎn)不過(guò)來(lái),生態(tài)鏈上也不太可能。趨勢(shì)會(huì)增長(zhǎng),但是我個(gè)人的觀點(diǎn),以后這種長(zhǎng)期混合的情況,可能還是長(zhǎng)期存在的,而不是全閃存的數(shù)據(jù)中心。

我再給大家分享一下美國(guó)閃存峰會(huì)的關(guān)鍵詞,代表我對(duì)閃存的思考。首先從介質(zhì)來(lái)講,現(xiàn)在是芯片兩維布局的,現(xiàn)在已經(jīng)到了極限,容量再增長(zhǎng),再這么布局的話,硬盤(pán)容量就上去了,就往3D,三維里面走,各個(gè)芯片廠商都在往這上面做。預(yù)計(jì)2017年有可能代替目前閃存技術(shù)的是RERAM,這個(gè)趨勢(shì)是大家比較認(rèn)可的。第二個(gè)是前面講的NVM和SCSI,NVM走的更快一些。還有一個(gè)是flash-aware,現(xiàn)在閃存用起來(lái)還不是很順的,現(xiàn)在我們的文件系統(tǒng)不能很好的利用閃存的特性。它不是flash-aware。因?yàn)槲覀儙资暌詠?lái),我們的軟件都是按照傳統(tǒng)的機(jī)械硬盤(pán)設(shè)計(jì)的。閃存是盡量少寫(xiě),盡量不去寫(xiě),盡量在內(nèi)存里面把數(shù)據(jù)整合好,但是現(xiàn)在的系統(tǒng)不懂這個(gè)東西,閃存有這個(gè)特性,如果操作系統(tǒng)不能很好的配合這個(gè)介質(zhì)的話是沒(méi)有很好的達(dá)到性能。還有Faceboo:cold flash(worm),要求速度很快。還有一個(gè)是endurance和retention。一個(gè)是壽命,一個(gè)是保存的時(shí)間。停電以后保存的時(shí)間是有限的。比如說(shuō)企業(yè)閃存標(biāo)準(zhǔn)是3個(gè)月,三個(gè)月不加電數(shù)據(jù)就丟了。

最后是安全的題。現(xiàn)在閃存標(biāo)準(zhǔn)比較缺乏,雖然技術(shù)比較老了,但是比較缺乏標(biāo)準(zhǔn)。普通的硬盤(pán)在到高端存儲(chǔ)可以做三重操作。我的硬盤(pán)歸給廠商,為了防止信息泄露,我要對(duì)信息寫(xiě)零,物理刪除,再返修,但是閃存做不到。因?yàn)殚W存有一個(gè)特性,比如說(shuō)200G的閃存就布了200G或者300G,你刪的時(shí)候,超控的快你不知道怎么控制,你不知道怎么刪除,由于有置換器,或者垃圾收集,里面可能有用戶的數(shù)據(jù),這些都是沒(méi)有標(biāo)準(zhǔn)的。

下來(lái)看一下閃存的三個(gè)位置,一個(gè)是服務(wù)器,全閃存陣列,還有混合陣列,越靠近CPU的地方性能越好,但是共享是一個(gè)挑戰(zhàn)。

混合陣列和全閃存貞烈的趨勢(shì)。我們看到混合陣列剛開(kāi)始的時(shí)候,可能感覺(jué)沒(méi)有全閃存陣列快,但是慢慢的,當(dāng)一個(gè)全閃存陣列把企業(yè)加上的話,企業(yè)性能就拉平了,功能和性能要一起考慮。

我們?cè)谄髽I(yè)購(gòu)買(mǎi)的時(shí)候,20%是硬件的成本,很多的都是管理人力消耗,這塊需要大家考慮。

總結(jié)一下閃存大潮是無(wú)法阻擋,歲了全閃存陣列很小眾,但是成長(zhǎng)很快,對(duì)高端存儲(chǔ)形成威脅,第二虛擬化給閃存帶來(lái)了機(jī)會(huì)。雖然歷史很久,但是閃存還有很多標(biāo)準(zhǔn)正在完善之中,閃存跟大容量HDD會(huì)長(zhǎng)期共存,高系統(tǒng)硬盤(pán)可能沒(méi)有了。

EMC,VMAX怎么應(yīng)對(duì)挑戰(zhàn)。EMC認(rèn)為閃存無(wú)處不在,根本應(yīng)用場(chǎng)景去區(qū)分,比如說(shuō)全閃存陣列喜歡用VDI和虛擬化這塊,還有數(shù)據(jù)庫(kù)的測(cè)試,把數(shù)據(jù)庫(kù)的應(yīng)用放在了全閃存陣列上,因?yàn)槿W存陣列測(cè)試,開(kāi)發(fā)的時(shí)候用可能更方便一些。因?yàn)槠髽I(yè)級(jí)的特性少一些。它的策略是收購(gòu)等于創(chuàng)新,高端VMAX支持全閃存配置,但是優(yōu)化不多,不主推,還是傳統(tǒng)的思路。按照應(yīng)用場(chǎng)景來(lái)區(qū)分產(chǎn)品的關(guān)系。

第二我們看一下IBM的全閃存,它也收購(gòu)了一個(gè)公司,生產(chǎn)出來(lái)了flashsystem。IBM的紅皮書(shū)里面有一個(gè)很奇怪的東西,講的很清楚,當(dāng)你需要5個(gè)SSD硬盤(pán)的時(shí)候,他認(rèn)為這個(gè)時(shí)候,配它的全閃存陣列是性價(jià)比最高的,如果要和大機(jī)配合,總雙機(jī)還是得用XD800接混合陣列(音譯)推SVC跟閃存陣列配合起來(lái),滿足場(chǎng)景的虛擬。全閃存陣列不存儲(chǔ)的時(shí)候,要把熱的數(shù)據(jù)放在上面去,外面有一些SVC的部件能把冷熱數(shù)據(jù)拿出來(lái)搬過(guò)去發(fā)揮它的特性。收購(gòu)+優(yōu)化,收購(gòu)TMS,但是SVC只做了catch(音譯)。

日立也是高端里面最重要的廠商。日立閃存陣列,也是有點(diǎn)像EMC,也認(rèn)為閃存無(wú)處不在,從控制器到服務(wù)器,包括應(yīng)用都在做,在高端和中端里面推出全閃存陣列了,這是日立的策略。它做了很多軟件的優(yōu)化,比如說(shuō)做了30多基本軟件的優(yōu)化,專門(mén)適合閃存這樣的應(yīng)用場(chǎng)景,硬件也做了優(yōu)化。推了三個(gè)版本講優(yōu)化,技術(shù)三個(gè)版本通過(guò)流程優(yōu)化和外部數(shù)據(jù)DXBF的應(yīng)用,時(shí)延很好。觀點(diǎn)是再造等于新建。很多summary公司打擊他們?nèi)W存公司一定要優(yōu)化,不優(yōu)化是不行的。日立是自研加reenging,這是它的思路。(音譯)

惠普有自己的芯片,有自己的介質(zhì)。但是在高端里面沒(méi)有推出全閃存的版本,只是在中端推出了試水全閃存的版本。收購(gòu)改造,中端先行。

富士通轉(zhuǎn)售VIOLIN,高端也沒(méi)有全閃存的配置。

華為認(rèn)為閃存是第一位的。他們也做閃存硬盤(pán),也在閃存cache進(jìn)行了優(yōu)化,也把RAID2.0和閃存做了配合。提出全局磨損均衡和反磨損均衡。閃存磨損均衡,閃存同一天同時(shí)壞了,整個(gè)數(shù)據(jù)就沒(méi)了,后期就有反磨損均衡,閃存是一塊一塊的。因?yàn)槲覀冎荒芡瑫r(shí)換兩塊盤(pán),有反磨損均衡,讓閃存一塊一塊的壞。華為的觀點(diǎn)是自研+融合+獨(dú)立,推出全系列全閃存陣列。

閃存跟云是融合的,閃存在云的狀態(tài)下,閃存有很大的機(jī)會(huì)沖入高端市場(chǎng),但是也有避雷針,支持SSD。對(duì)高端存儲(chǔ)廠商推全閃存是一個(gè)噱頭,以后高端存儲(chǔ)廠商推閃存優(yōu)化的混合陣列是高端主流形態(tài)。我買(mǎi)一個(gè)車以后我爬山有爬山模式,雪地有雪地模式,不能買(mǎi)一個(gè)雪地車,買(mǎi)一個(gè)爬山車。陣列工作模式自動(dòng)或手動(dòng)切換,全閃存閃存優(yōu)化傳統(tǒng)分層。

閃存的必經(jīng)之路,我們通過(guò)試用閃存了解這項(xiàng)技術(shù)評(píng)估給企業(yè)帶來(lái)的價(jià)值。綜合評(píng)估性能和功能,目前階段魚(yú)和熊掌較難兼得,全閃存陣列需要外部智能部件對(duì)熱點(diǎn)數(shù)據(jù)識(shí)別和遷移,真正閃存優(yōu)化的混合陣列可以簡(jiǎn)化管理。

我的分享就這么多謝謝。

分享到

lihongliang

相關(guān)推薦