凱翔科技產(chǎn)品總監(jiān)曹敬濤

當(dāng)前業(yè)界處于數(shù)據(jù)大爆炸的時(shí)代,數(shù)據(jù)產(chǎn)生量越來(lái)越多,數(shù)據(jù)存儲(chǔ)占用很多應(yīng)用資源,也在消耗著諸多能源。如何讓存儲(chǔ)做到綠色環(huán)保?這是存儲(chǔ)行業(yè)需要考慮的問(wèn)題。

近幾年大數(shù)據(jù)、互聯(lián)網(wǎng)+、以及云計(jì)算領(lǐng)域飛速發(fā)展,國(guó)家相應(yīng)出臺(tái)了很多針對(duì)性的政策。各個(gè)企業(yè)在自己內(nèi)部構(gòu)建私有云,還有混合云。數(shù)據(jù)作為云計(jì)算根基,需要更好的方式來(lái)保存。其中,軟件定義存儲(chǔ)和超融合存儲(chǔ)得到了大家的廣泛關(guān)注,凱翔科技就是其中重要的一員。

在數(shù)據(jù)中心里,計(jì)算資源和存儲(chǔ)資源消耗能源排在前兩位,數(shù)據(jù)產(chǎn)生后如何安全存儲(chǔ),方便日后查詢、分析,這是用戶對(duì)于存儲(chǔ)的首要要求。隨著數(shù)據(jù)量的不斷增長(zhǎng),存儲(chǔ)的穩(wěn)定性是用戶更為關(guān)注的,數(shù)據(jù)量夠大,硬件資源直線攀升,存儲(chǔ)集群復(fù)雜度越來(lái)越高。無(wú)論是硬盤、機(jī)器還是數(shù)據(jù)中心節(jié)點(diǎn)出現(xiàn)故障,都要保證業(yè)務(wù)的完整性。

用戶存儲(chǔ)需求:安全、穩(wěn)定、高效、低成本

數(shù)據(jù)的真正價(jià)值最主要的是被用戶訪問(wèn)、分析,對(duì)于存儲(chǔ)需更加高效,主要體現(xiàn)在對(duì)于存儲(chǔ)的讀、寫和分析層面,高存儲(chǔ)、低延遲是標(biāo)尺。為用戶提供業(yè)務(wù)數(shù)據(jù)時(shí),用戶更關(guān)注數(shù)據(jù)成本,包括軟件定義存儲(chǔ)的橫向擴(kuò)展能力與增量,用戶希望數(shù)據(jù)保存更久,來(lái)分析后期業(yè)務(wù)的發(fā)展,因此,數(shù)據(jù)屬性分為三類:冷數(shù)據(jù)、熱數(shù)據(jù)還有溫?cái)?shù)據(jù)。

冷數(shù)據(jù):這部分?jǐn)?shù)據(jù)對(duì)于存儲(chǔ)要求就是我可以保存數(shù)據(jù),但是對(duì)于存儲(chǔ)性能要求不高,所以這部分?jǐn)?shù)據(jù)我們可以保存在低成本,低性能的存儲(chǔ)里面。比如像磁帶庫(kù),光盤庫(kù)等等,這樣可以降低存儲(chǔ)成本。

熱數(shù)據(jù):在需要時(shí)能夠隨時(shí)查閱的內(nèi)容,但不像數(shù)據(jù)庫(kù)存儲(chǔ)等需要較高的性能,如安防監(jiān)控視頻、影視內(nèi)容、圖片、評(píng)論、日志等。

溫?cái)?shù)據(jù):有相當(dāng)大的一部分?jǐn)?shù)據(jù),平時(shí)很少被訪問(wèn),但是在需要訪問(wèn)的時(shí)候,能夠在約定的時(shí)效內(nèi)提供服務(wù),不可能像冷數(shù)據(jù)一樣需要幾個(gè)小時(shí)才能返回?cái)?shù)據(jù)。數(shù)據(jù)訪問(wèn)時(shí),可能出現(xiàn)高并發(fā)和高存儲(chǔ),這是溫?cái)?shù)據(jù)的特點(diǎn)。

那么,擁有巨量溫?cái)?shù)據(jù)的行業(yè)有哪些?

曹敬濤說(shuō):“典型的溫?cái)?shù)據(jù)科技企業(yè)包括微博、微信,比如說(shuō)兩年前的微信朋友圈的數(shù)據(jù)和兩年前發(fā)微博的這些信息大家肯定是很少訪問(wèn)的,但當(dāng)這些數(shù)據(jù)被訪問(wèn)時(shí),我們還是需要及時(shí)為用戶呈現(xiàn)出來(lái)。這些數(shù)據(jù)占據(jù)相當(dāng)大的比例,約80%左右。還有交通行業(yè),每天卡口產(chǎn)生巨量的數(shù)據(jù),包括拍到違法圖片、視頻等等,這部分?jǐn)?shù)據(jù)只有當(dāng)發(fā)生交通事故或案件時(shí)大家才能真正訪問(wèn)到。再有一部分的溫?cái)?shù)據(jù)來(lái)自廣電行業(yè),對(duì)于新上線的電影、電視劇,大家都會(huì)訪問(wèn)。但兩年前電影、電視劇很少被訪問(wèn),偶爾訪問(wèn)只是說(shuō)能夠快速給用戶提供服務(wù)就可以了?!?/p>

傳統(tǒng)降低存儲(chǔ)成本的主要方法:

第一是數(shù)據(jù)分層,將熱數(shù)據(jù)保存在比較高性能,高成本的存儲(chǔ)介質(zhì)上面,包括SSD、SAS、SATA。包括低的數(shù)據(jù)可以存在SATA盤上,這樣可以有效降低數(shù)據(jù)存儲(chǔ)成本;

其次,提高出盤率,通過(guò)軟件技術(shù),包括精簡(jiǎn)培殖,擦除編碼等等,使磁盤達(dá)到最高的出盤率,從而降低數(shù)據(jù)的存儲(chǔ)成本;

數(shù)據(jù)歸檔,如社保數(shù)據(jù)可能保存幾十年,保存到每個(gè)人去世以后這些數(shù)據(jù)才會(huì)被銷毀。這部分?jǐn)?shù)據(jù)可以采用低成本的存儲(chǔ)介質(zhì),如磁盤庫(kù)、磁帶庫(kù)的方式保存這些數(shù)據(jù),從而降低存儲(chǔ)成本;

另外,可以提高硬件效率,這一塊主要通過(guò)各種虛擬化,包括計(jì)算虛擬化,存儲(chǔ)虛擬化和網(wǎng)絡(luò)虛擬化,從而提高硬件使用效率,采用更少的硬件資源,來(lái)滿足業(yè)務(wù)要求。比如電力成本在存儲(chǔ)整體成本中,占據(jù)了相當(dāng)大的比重,只有降低能耗,才能為客戶帶來(lái)最高的投資回報(bào)率。

凱翔MegaBric一改傳統(tǒng),有效降低長(zhǎng)期存儲(chǔ)成本

MegaBric是一個(gè)分布式集群存儲(chǔ),利用MegaBric分享一些資源,對(duì)外形成統(tǒng)一存儲(chǔ)服務(wù)。對(duì)外提供服務(wù)實(shí)現(xiàn)了包括iSCSI、NFS、CIFS等等。全對(duì)等的分支架構(gòu)沒(méi)有單聯(lián)故障。MegaBric有幾個(gè)功能點(diǎn),還有全局負(fù)載均衡,多重?cái)?shù)據(jù)保護(hù),包括像快照、副本、擦除編碼等等。還有按需服務(wù)和精簡(jiǎn)配置,另外有簡(jiǎn)單高效的管理平臺(tái)。在橫向擴(kuò)展方面以及容量和性能上都可以做到線性擴(kuò)展、在線擴(kuò)展。

qq%e6%88%aa%e5%9b%be20161215173623凱翔MegaBric系統(tǒng)架構(gòu)

MegaBric既可以降低一次性成本,也可以降低長(zhǎng)期的存儲(chǔ)成本,在電源管理策略模塊,主要管理存儲(chǔ)的每一個(gè)磁盤,每個(gè)磁盤配一個(gè)電源,當(dāng)磁盤上的數(shù)據(jù)沒(méi)有被讀寫時(shí),可以將磁盤進(jìn)行斷電。管理平臺(tái)主要從運(yùn)維成本上來(lái)降低整體成本,包括比較豐富的告警管理、通知管理、報(bào)表性能等等,可以在線升級(jí)。

MegaBric從硬件上做到高密度,高密度是降低成本的一個(gè)手段,既降低能源消耗又降低制冷要求。此外,MegaBric節(jié)省空間和開(kāi)支。對(duì)于硬件還有降低操作成本,降低長(zhǎng)期運(yùn)維成本等優(yōu)勢(shì)。從MegaBric的特性可以看出凱翔別具匠心的技術(shù)研發(fā)實(shí)力以及其產(chǎn)品的價(jià)值。

關(guān)于凱翔

凱翔科技成立于2012年,總部在上海,在美國(guó)硅谷設(shè)有研發(fā)中心,核心團(tuán)隊(duì)主要來(lái)自于各大存儲(chǔ)廠商,客戶群主要分布在廣電運(yùn)營(yíng)商、電信運(yùn)營(yíng)商、電商、交通、教育以及各大企業(yè)。

分享到

zhangnn

相關(guān)推薦