新存儲(chǔ)技術(shù)革命性處理數(shù)據(jù)泛濫問題
wangfei 發(fā)表于:13年05月28日 10:28 [編譯] DOIT.com.cn
軟件加商品硬盤
在線營(yíng)銷SaaS供應(yīng)商Constant Contact也打算由所有權(quán)硬件和軟件解決方案轉(zhuǎn)向軟件控制的商品硬盤。
公司首席技術(shù)官斯特凡皮舍(Stefan Piesche)稱:“當(dāng)我在3年半之前加入公司的時(shí)候,我們擴(kuò)展存儲(chǔ)容量的主要方法是購買數(shù)量更多、速度更快的存儲(chǔ)設(shè)備和數(shù)據(jù)庫服務(wù)器。”雖然存儲(chǔ)需求仍以每年15%到25%的速度遞增,但是為了降低成本,他打算從基于3PAR的SAN設(shè)備的IBM DB2數(shù)據(jù)庫轉(zhuǎn)向基于戴爾服務(wù)器、商品磁盤和Fusion-io閃存卡的開源MySQL和Cassandra NoSQL數(shù)據(jù)庫。
他說,這個(gè)新的平臺(tái)不但在速度上比之前的存儲(chǔ)平臺(tái)快了不止一個(gè)數(shù)量級(jí),而且在性能、可用率和災(zāi)難恢復(fù)上也有明顯地提升,而且不會(huì)增加管理難度和成本。新平臺(tái)可以將數(shù)據(jù)寫入六個(gè)存儲(chǔ)節(jié)點(diǎn),從而提高存儲(chǔ)性能,這意味著同樣的數(shù)據(jù)會(huì)保留多份副本。 然而皮舍同時(shí)也說,商品硬盤和服務(wù)器在價(jià)格上具有非常顯著的優(yōu)勢(shì)。
他還指出,他的客戶不會(huì)因?yàn)閮?chǔ)存在那些副本中的營(yíng)銷數(shù)據(jù)在存取上出現(xiàn)幾毫秒的延時(shí)而蒙受損失,但是對(duì)于價(jià)格一直處于變化之中的財(cái)務(wù)交易系統(tǒng)來說,情況可能并不是那樣。
他說,分拆數(shù)據(jù)庫也有助于Constant Contact輕松實(shí)現(xiàn)擴(kuò)容。他說:“我們可以將客戶分組分批地放在不同的數(shù)據(jù)庫上,而那些數(shù)據(jù)庫通常是具有相同縮略圖的同一數(shù)據(jù)庫的多個(gè)實(shí)例。 我們希望那些數(shù)據(jù)庫是吻合的,而且可以在商品硬件上運(yùn)行,以降低我們的經(jīng)營(yíng)成本,因此再弄一個(gè)新的數(shù)據(jù)庫其實(shí)是毫無實(shí)際意義的。公司現(xiàn)有5萬多客戶,我們?cè)黾恿藘膳_(tái)基于MySQL的商品數(shù)據(jù)庫服務(wù)器,結(jié)果用戶們的性能不會(huì)受到其他用戶的影響。”
這個(gè)領(lǐng)域的另一家廠商CommVault稱,它的Simpana軟件平臺(tái)可以將存儲(chǔ)成本最多削減50%,將管理間接費(fèi)最多削減80%,將每年的支持服務(wù)費(fèi)用最多削減35%,因?yàn)樾枰獌?chǔ)存的數(shù)據(jù)副本總數(shù)以及需要購買和維護(hù)的存儲(chǔ)應(yīng)用程序的數(shù)量都比以前減少了。
Sanbolic聲稱,它的Melio 5數(shù)據(jù)管理平臺(tái)可以提供高可用率、基于共享數(shù)據(jù)服務(wù)器群集的應(yīng)用擴(kuò)展性、支持各種工作負(fù)載中的任何大小尺寸的文件的快速存取等功能,而且可以擴(kuò)展成超過2000個(gè)物理或虛擬結(jié)點(diǎn)以及最多6.5萬臺(tái)存儲(chǔ)設(shè)備的規(guī)模。它的Latency Targeted Allocator軟件允許Melio平臺(tái)在存儲(chǔ)陣列內(nèi)部共享服務(wù)器一端的閃存資源和固態(tài)硬盤,還可以跨結(jié)點(diǎn)共享傳統(tǒng)硬盤。 公司首席執(zhí)行官、聯(lián)合創(chuàng)始人Momchil Michailov稱,這就避免了單一故障點(diǎn)和數(shù)據(jù)及應(yīng)用倉庫數(shù)據(jù)存取難的問題。
有些新廠商將它們的軟件與配備硬盤和處理器的物理硬件包裝在一起。Gridstore的存儲(chǔ)設(shè)備可以將存儲(chǔ)控制器和數(shù)據(jù)虛擬化,以消除單一故障點(diǎn)的問題,并且讓系統(tǒng)可以更快地從許多服務(wù)器中讀取并行數(shù)據(jù)。 這會(huì)令控制器的數(shù)量增加,使用那些沒有被用到的計(jì)算能力來提高性能和容量。 然而,它現(xiàn)在不僅支持Windows,而且還支持基于文件的存儲(chǔ)方案。
另一種基于軟件的擴(kuò)展方案是將數(shù)據(jù)分割成無數(shù)的小塊,分布在許多物理數(shù)據(jù)庫上。Cleversafe的dsNet技術(shù)與PB級(jí)容量的存儲(chǔ)設(shè)備配套使用最好,而且那些存儲(chǔ)數(shù)據(jù)全部是由50到100KB的對(duì)象組成的。 公司總裁兼首席執(zhí)行官克里斯格萊德溫(Chris Gladwin)稱,這個(gè)解決方案最適用于在線照片共享等應(yīng)用。
下一個(gè)是什么
隨著硬盤的容量越來越大速度越來越快,閃存硬盤的容量和可靠性也在增加,加上開源存儲(chǔ)技術(shù)日漸成熟,某些業(yè)內(nèi)觀察員發(fā)現(xiàn)企業(yè)組織處理數(shù)據(jù)增長(zhǎng)的方法也發(fā)生了根本性的變化。
隨著新的非易失性存儲(chǔ)技術(shù)得到推廣采用,在固態(tài)硬盤和傳統(tǒng)硬盤之間對(duì)數(shù)據(jù)進(jìn)行分級(jí)的需求也沒有以前那么強(qiáng)烈了,因?yàn)樾录夹g(shù)在成本上的競(jìng)爭(zhēng)力已經(jīng)勝過了更為高端的光纖通道和SAS硬盤。但是謝蒂認(rèn)為,容量相對(duì)較大、價(jià)格相對(duì)較低的SATA硬盤仍有用武之地,但是裝配上的復(fù)雜性和不同的軟件接口會(huì)導(dǎo)致用戶不想在同一個(gè)系統(tǒng)中使用混合存儲(chǔ)設(shè)備。
Hitachi Data Systems的首席技術(shù)官Hu Yoshida稱,閃存硬盤的價(jià)格將在3到5年內(nèi)降低到與高性能硬盤相當(dāng)?shù)膬r(jià)位水平上。他說,它們的競(jìng)爭(zhēng)力已經(jīng)相當(dāng)了,傳統(tǒng)硬盤的容量因?yàn)槎绦谐蹋╯hort-stroking)和在RAID數(shù)據(jù)保護(hù)配置下跨多磁盤寫入數(shù)據(jù)而減少了一些。
但是即便是商品硬盤的存取速度也會(huì)增加,因?yàn)閺S商們?cè)谀切┊a(chǎn)品上添加了更多的高速緩存。希捷預(yù)計(jì)這種混合硬盤將在2015年之前被應(yīng)用到它的大多數(shù)產(chǎn)品線中。
云存儲(chǔ)服務(wù)將提供速度較慢但價(jià)格極其低廉的歸檔服務(wù),以降低內(nèi)部存儲(chǔ)設(shè)備的存儲(chǔ)負(fù)荷。例如,Amazon Glacier服務(wù)的價(jià)格低至每月每GB 1美分。 顧問公司StorageIO的創(chuàng)始人Greg Schulz稱,雖然檢索數(shù)據(jù)可能要花3到5個(gè)小時(shí)的時(shí)間,但那可能并不會(huì)比從磁帶存儲(chǔ)器中恢復(fù)數(shù)據(jù)所花的時(shí)間更長(zhǎng)。從價(jià)格方面來說,Glacier的競(jìng)爭(zhēng)力不會(huì)比磁帶差。
格萊德溫稱:“對(duì)象存儲(chǔ)技術(shù)可以通過消除分級(jí)文件系統(tǒng)的需求來降低存儲(chǔ)成本和復(fù)雜性。在一個(gè)非常龐大的數(shù)據(jù)存儲(chǔ)系統(tǒng)中,運(yùn)行文件系統(tǒng)需要增加服務(wù)器的數(shù)量,而那會(huì)增加能源成本、占地空間和直接成本。 他說,利用對(duì)象存儲(chǔ)技術(shù),象社交媒體網(wǎng)站那樣的應(yīng)用不用使用文件系統(tǒng)也能搜索好友。
與此同時(shí),IT商店將繼續(xù)青睞具有成本效益、由廉價(jià)硬件和廉價(jià)開源軟件的云解決方案。
例如,Constant Contact認(rèn)為私有存儲(chǔ)云也許會(huì)使用開源軟件來降低成本和提供無限的可擴(kuò)展性。皮舍說,使用Cassandra,他愿意將存儲(chǔ)群集分散到很多分布式數(shù)據(jù)中心以實(shí)現(xiàn)災(zāi)難恢復(fù)的功能,這樣就不會(huì)產(chǎn)生任何的許可證費(fèi)用,而且不需要任何復(fù)雜的設(shè)置和人工干預(yù)。
他需要的復(fù)制功能還沒有實(shí)現(xiàn),但是他必須不斷去尋找,因?yàn)檎缡鏍柎乃f的,對(duì)于絕大多數(shù)人來說,絕對(duì)不會(huì)出現(xiàn)數(shù)據(jù)減少的情況。
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.