存儲是實現(xiàn)智慧運算的關(guān)鍵
在IBM新興市場區(qū)域存儲產(chǎn)品部副總裁Jeff Barber看來,2012年的數(shù)字?jǐn)?shù)據(jù)量達(dá)到2.7澤比特,比2011年增長率近48%;90%的公司預(yù)計將在今后3年采用或部署云模式;大數(shù)據(jù)可將數(shù)據(jù)量增加2-3倍;主流公司的磁盤利用率比平均水平高出25%。針對大數(shù)據(jù)時代的到來,IBM如何應(yīng)對其中的諸多挑戰(zhàn)?
IBM研究院大數(shù)據(jù)系統(tǒng)首席架構(gòu)師李劍博士說:“數(shù)據(jù)挖掘現(xiàn)在還不是非常成熟的領(lǐng)域,所以數(shù)據(jù)挖掘還有很多值得優(yōu)化的地方,無論是數(shù)據(jù)的真實性,還是方案的真實性、精確性都有很多很多值得去研究的地方。”關(guān)鍵要從大數(shù)據(jù)里挖掘信息,因而用戶對存儲高效率也要求越來越高,最終要求存儲智能化。
對于存儲智能化方面,Jeff Barber也強調(diào)IBM存儲系統(tǒng)是實現(xiàn)智慧運算的關(guān)鍵:一是,存儲效率是輕松處理數(shù)據(jù)增長的關(guān)鍵;二是,存儲系統(tǒng)虛擬化可實現(xiàn)強韌的云部署;三是,存儲系統(tǒng)必須能夠適應(yīng)信息模式的變化。
不過,為什么智慧的存儲系統(tǒng)是為效率而生的系統(tǒng)?以Storwize V7000為例,提供企業(yè)級特性的中端磁盤系統(tǒng),精簡調(diào)配、在線遷移和虛擬化技術(shù),最多可將存儲資源利用率提高50%,業(yè)界最高級的GUI可簡化存儲系統(tǒng)管理工作,輕松遷移能夠加快全新存儲系統(tǒng)的部署速度。據(jù)Jeff Barber透露,目前已經(jīng)在過去的18個月當(dāng)中售出了15000套Storwize V7000的產(chǎn)品,它可以提供精簡調(diào)配功能。但是很多友商都聲稱可以有精簡調(diào)配,但是IBM提供的該功能不一樣的是可以讓用戶的機(jī)架實現(xiàn)一個更加有效的操作。它在不影響用戶IT應(yīng)用、運行的情況下,對用戶的存儲進(jìn)行一個智能分級,這也是為什么V7000能夠在市場獲得好評的原因。
實際上,“如果你要去提高自己的效率,必須要提高自己的數(shù)據(jù)利用率,這個也是為什么我們向市場推出了智能存儲的理念。” Jeff Barber認(rèn)為“效率源自設(shè)計”,就像它的名稱一樣,意味著存儲用戶要去解決效率的問題,另外一個設(shè)計效率的問題就是說存儲用戶員工當(dāng)中有多少人究竟把多少時間解決存儲的問題,最后一個要解決的問題,就是隨著各位硬件功能不斷的強大,我們的存儲能力也要能夠跟得上,對于用戶來說,首先可以降低前期的資本成本,然后還可以降低后期的運營成本,或者可以提高用戶投資業(yè)務(wù)的增長。
另外,他提到IBM Pureflex System和IBM SmartCloud Virtual Storage Center,前者里面有服務(wù)器、網(wǎng)絡(luò)還有存儲功能,而后者就是云的虛擬存儲中心,一旦用戶數(shù)據(jù)存儲要達(dá)到了TB級,那么最終用戶就具備了云運用的能力,有了這個產(chǎn)品后,用戶也具有了調(diào)配的能力。
與眾不同的實時壓縮技術(shù)
IBM新興市場區(qū)域存儲產(chǎn)品部副總裁Jeff Barber也提到最新的面向活躍數(shù)據(jù)的實時壓縮技術(shù):能夠壓縮活躍主數(shù)據(jù)的l唯一存儲系統(tǒng),可將每TB的存儲成本降低高達(dá)40%;可直接集成到IBM存儲系統(tǒng)中。
據(jù)IBM存儲產(chǎn)品經(jīng)理金微介紹V7000采用的實時壓縮技術(shù)對提高空間利用率帶來最大的幫助。它壓縮空間,而不壓縮性能。
當(dāng)前,對于用戶的數(shù)據(jù)中心空間越來越狹窄,電費成本飆升,硬盤故障迭起,數(shù)據(jù)存儲安全感實在低下。 IBM實時壓縮技術(shù)IBM Real-time Compression是與眾不同的數(shù)據(jù)壓縮技術(shù)。以前的壓縮技術(shù),會產(chǎn)生很多碎片化的存儲空間,因此會造成存儲空間的浪費,如果整理和回收碎片空間,也會額外占用CPU資源。而RtC采取先壓縮后分割的算法,極大限度地降低了碎片空間出現(xiàn)的可能,從而節(jié)省更多存儲空間。
RtC與V7000或SVC的存儲虛擬化技術(shù)結(jié)合,使舊的設(shè)備也具有了壓縮功能。RtC可減少物理存儲購買成本。 RtC可減少設(shè)備占地空間;RtC可減少電源和冷卻系統(tǒng)能耗;RtC可降低按物理容量收費的軟件許可證成本;RtC可減少因磁盤損壞而帶來的數(shù)據(jù)丟失風(fēng)險。
RACE 使用了與以前算法不同的方式。壓縮前并不分割成固定長度,但壓縮后數(shù)據(jù)以固定大小的塊存儲。每個塊是單獨執(zhí)行壓縮的;對原有塊的更新寫入數(shù)據(jù)將不直接打開原壓縮塊,而是寫入后續(xù)壓縮塊并留下指針記錄;在持續(xù)的IO操作中算法以最小代價不斷整合新IO和出現(xiàn)碎片的壓縮塊,以保持幾乎無長時間有碎片的壓縮塊;需要壓縮和解壓縮的數(shù)據(jù)量大大少于傳統(tǒng)壓縮;因為壓縮額外增加的IO很少;因此,可實時執(zhí)行壓縮。
EasyTier帶來獨有的性能自我優(yōu)化
IBM存儲產(chǎn)品經(jīng)理龐文崢指出,在信息爆炸時代,存儲正在成為企業(yè)應(yīng)對市場挑戰(zhàn)的首選方案。IBM基于存儲的工作負(fù)載優(yōu)化,最突出的便是EasyTier,它使得存儲在性能上具有明顯的優(yōu)勢,它僅將最熱的數(shù)據(jù)遷移到SSD上,以確??蛻魺o需投資過多的SSD;同時自動操作,減少了管理員的工作;另外,它能夠?qū)崿F(xiàn)了更加綠色的數(shù)據(jù)中心,僅用原來50%的占地、40%的功耗,就可實現(xiàn)更高的性能,并且3~4倍地提高了CPU的利用率。
據(jù)龐文崢分析,IBM EasyTier能夠把一個大的邏輯卷劃分成為很多小的子卷(系統(tǒng)默認(rèn)大小為1GB),并判斷這些小的子卷,哪些訪問頻次過高,屬于“熱點子卷”,需要遷移到FC、SSD等性能更好的磁盤上去。哪些子卷的訪問頻次不那么高,可以保留在現(xiàn)有的磁盤上,或者遷移到性能一般的磁盤上去,例如SATA磁盤。而且這種遷移完全是自動化基于策略的,用戶完全不需要任何手工干預(yù)。總的來說,IBM高效存儲技術(shù)依然從三個方面為用戶提高存儲效率——存得更精、放得合適、用得更省。
IBM EasyTier可以為用戶實現(xiàn)性能的自我優(yōu)化,合理規(guī)劃存儲環(huán)境的部署規(guī)模,無需為了處理高峰期工作,優(yōu)化性能和成本;自動管理性能優(yōu)調(diào),存儲系統(tǒng)能夠持續(xù)分析數(shù)據(jù)接入模式并且將數(shù)據(jù)自動轉(zhuǎn)移到適當(dāng)?shù)拇鎯又?,在存儲系統(tǒng)內(nèi)部和之間轉(zhuǎn)移,提高管理員生產(chǎn)率;輕松增長您的虛擬服務(wù)器基礎(chǔ)架構(gòu),自動優(yōu)化整個基礎(chǔ)架構(gòu)上的I/O吞吐量,從而充分利用您的服務(wù)器和存儲器,虛擬化更多的基礎(chǔ)架構(gòu)組件。
現(xiàn)在,用戶可以將Easy Tier擴(kuò)展到服務(wù),基于服務(wù)器的存儲可滿足極為苛刻的存儲需求。并且,它具有層級存儲優(yōu)化功能,基于管理員設(shè)置的策略來轉(zhuǎn)移數(shù)據(jù)卷。
IBM智慧存儲風(fēng)操理論發(fā)布會現(xiàn)場,采取了二維碼的創(chuàng)新,將無數(shù)軟盤堆疊成一個二維碼,與會者可以直接通過手機(jī)掃描并進(jìn)行二維碼應(yīng)用。