華為 發(fā)表于:14年11月26日 14:11 [來稿] DOIT.com.cn
—— 深度體驗華為云對象存儲服務
毫無疑問,云是數(shù)據(jù)中心的未來,隨著數(shù)據(jù)中心以及物聯(lián)網(wǎng)和移動設備的快速發(fā)展,我們已經(jīng)來到一個信息爆炸的時代,據(jù)IDC報告,當下數(shù)據(jù)以每年50%左右的速度快速增長,截至2020年全球數(shù)據(jù)規(guī)模將達44ZB。
那么,問題來了——如此天量的數(shù)據(jù)如何進行存儲和備份?尤其是對于那些每天會產(chǎn)生海量圖片、視頻以及文件的公司或者政府機構(gòu)而言,這顯然是一件痛苦的事情。如果購買傳統(tǒng)的存儲設備,高昂的存儲初期投資很可能會讓不少企業(yè)望而生畏。當然,現(xiàn)在你有一個更加好的解決方案,那就是選擇云存儲服務。
云存儲已經(jīng)成為業(yè)界最為火熱的概念之一,大家都眾說紛“云”,而且慢慢開始相信這樣一個互聯(lián)網(wǎng)的未來:未來是云時代,沒有存儲設備,一切都存儲在云里。我們已經(jīng)對Dropbox、Box等國外初創(chuàng)企業(yè)在云存儲市場取得的成績耳熟能詳,在國內(nèi),亦涌現(xiàn)出了不少值得關(guān)注的云存儲公司。相信大家對云存儲的優(yōu)點都已經(jīng)有所了解:按需使用、按需付費,不必承擔多余的開銷,也無需增加額外的硬件設施或配備專人負責維護。面對種類繁多的云存儲服務,企業(yè)用戶可能會眼花繚亂,無從選擇。不過別著急,在國內(nèi)真正能提供企業(yè)級云存儲服務的公司是少之又少的,今天我們就為大家介紹一下華為云對象存儲服務,看看它是不是你最好的選擇。
什么是對象存儲?
首先我們來看一看什么是對象存儲?目前,獨立的存儲形態(tài)有三種:塊存儲、文件存儲,以及新出現(xiàn)的對象存儲。
塊存儲我們簡單的理解就是一塊一塊的硬盤,直接掛載在主機上,在主機上我們能夠看到的就是一塊塊的硬盤以及硬盤分區(qū)。從存儲架構(gòu)的角度而言,塊存儲又分為DAS存儲(Direct-Attached Storage,直連式存儲)和SAN存儲(Storage Area Network,存儲區(qū)域網(wǎng)絡)。
文件存儲,我們指的是在文件系統(tǒng)上的存儲,也就是主機操作系統(tǒng)中的文件系統(tǒng)。我們知道,文件系統(tǒng)中有分區(qū),有文件夾,子文件夾,形成一個自上而下的文件結(jié)構(gòu);文件系統(tǒng)下的文件,用戶可以通過操作系統(tǒng)中的應用程序進行打開、修改等操作,如打開word、編輯word。從架構(gòu)上來說,文件存儲提供一種NAS(Network Attached Storage,網(wǎng)絡附屬存儲)架構(gòu),使得主機的文件系統(tǒng)不僅限于本地的文件系統(tǒng),還可以連接基于局域網(wǎng)的共享文件系統(tǒng)。
而新的對象存儲是面向?qū)ο?文件的、海量的互聯(lián)網(wǎng)存儲,它也可以直接被稱為“云存儲”。對象盡管是文件,它是已被封裝的文件(編程中的對象就有封裝性的特點),也就是說,在對象存儲系統(tǒng)里,你不能直接打開/修改文件,但可以像ftp一樣上傳文件,下載文件等。另外對象存儲沒有像文件系統(tǒng)那樣有一個很多層級的文件結(jié)構(gòu),而是只有一個“桶”的概念(也就是存儲空間),“桶”里面全部都是對象,是一種非常扁平化的存儲方式。其最大的特點就是它的對象名稱就是一個域名地址,一旦對象被設置為“公開”,所有網(wǎng)民都可以訪問到它;它的擁有者還可以通過REST API的方式訪問其中的對象。因此,對象存儲最主流的使用場景,就是存儲網(wǎng)站、移動app等互聯(lián)網(wǎng)/移動互聯(lián)網(wǎng)應用的靜態(tài)內(nèi)容(視頻、圖片、文件、軟件安裝包等等)。
以下是對三種存儲形態(tài)和存儲架構(gòu)的示意圖。
華為云對象存儲服務來了
華為云對象存儲服務(Massive Object Service,簡稱MOS)就是云服務化的、海量的對象存儲。MOS可用于存取任何格式、海量的對象/文件數(shù)據(jù);因為它是互聯(lián)網(wǎng)存儲,可以在互聯(lián)網(wǎng)的任何位置隨時執(zhí)行對MOS的存取操作。對任何基于互聯(lián)網(wǎng)的應用程序而言,包括web網(wǎng)站、視頻應用、SaaS應用、網(wǎng)盤、移動APP等,開發(fā)人員均可以將其作為數(shù)據(jù)存儲的理想選擇。此外,對于備份、大數(shù)據(jù)存儲、歸檔等近線、離線存儲場景,MOS也是節(jié)省投資的好的存儲方式。
MOS提供基礎(chǔ)的對象存儲和管理控制功能,包括桶創(chuàng)建/刪除、對象上傳/下載/復制/刪除、用戶訪問授權(quán)(AK/SK)、桶和對象訪問控制、對象元數(shù)據(jù)管理等,同時還基于各種應用場景,提供了很多增值的功能特性,如靜態(tài)網(wǎng)站托管(網(wǎng)站增值功能)、對象多版本管理(數(shù)據(jù)保護增值功能)、對象生命周期管理(數(shù)據(jù)管理增值功能)、用戶訪問日志自動保存到指定桶中(這樣做大數(shù)據(jù)分析的基礎(chǔ)——日志都自動保存在MOS中;做日志分析時,就可以直接從MOS獲取原始的日志文件了)等。
華為云服務業(yè)務運營支撐平臺為MOS提供了業(yè)務運營保證以及運維支撐,能夠充分保障服務的質(zhì)量和服務的安全性。大家知道,棱鏡門后,各國政府警惕信息安全,據(jù)說華為云服務的MOS和云主機均已經(jīng)通過了工信部組織的“可信云”認證測試,解決了用戶安全性方面的顧慮。
五大優(yōu)勢保駕護航
據(jù)華為云服務官方網(wǎng)站中介紹,MOS具有海量(容量巨大、線性擴展、5TB超大文件存儲)、省錢(零初始投資,用多少算多少,用得越多越經(jīng)濟)、可靠(數(shù)據(jù)持久性11個9)、安全(訪問、傳輸、保存端到端安全)等特點。使用MOS后,開發(fā)人員可以無需關(guān)注底層存儲技術(shù),而是專注于業(yè)務創(chuàng)新,因為無論業(yè)務如何發(fā)展,開發(fā)人員都無需規(guī)劃存儲容量,數(shù)據(jù)可以快速訪問、線性擴容,且具有高可靠性和高安全性。最重要的是業(yè)務使用IT的成本可以大大降低。
下面我們具體來看看MOS的五大優(yōu)勢。
第一,MOS提供海量的存儲服務。近乎無限的存儲資源供調(diào)用,使企業(yè)用戶無需事先規(guī)劃存儲容量;線性的存儲資源擴展,使企業(yè)用戶無需擔心存儲資源擴容減容問題;它還支持最大5TB的超大文件存儲,可以輕松搞定大數(shù)據(jù)的存儲;另外它的并發(fā)請求處理能力可以線性無限擴展。
MOS具有極佳的在線擴展能力。在不中斷業(yè)務的情況下,實現(xiàn)存儲空間的大規(guī)模在線擴展,存儲空間可以從幾十TB線性擴展到幾十PB甚至更多。據(jù)了解,華為云內(nèi)部有科學嚴格的資源管理制度,當MOS中總的存儲容量達到一定閾值時(如使用量已經(jīng)達到總存儲資源的80%以上),華為云內(nèi)部會啟動資源擴容機制,后端通過增加存儲節(jié)點的方式擴充容量,而企業(yè)用戶則做無需任何工作。后端擴容后,MOS的云存儲系統(tǒng)能自動識別云存儲節(jié)點,并使該節(jié)點加入到海量的存儲資源中。
第二是MOS巨省錢。企業(yè)可以實現(xiàn)零初始投資, IT開支真正用在刀刃上。同時,MOS按使用量付費,用多少算多少;并采用階梯價格,用得越多越經(jīng)濟。
費用和開支無疑是大家最為關(guān)心的問題之一。MOS采用的基本計費模型為階梯定價、按需付費。通過階梯定價和按需付費的計價方式既滿足了資源使用量小的客戶的資源需求,也降低了資源使用量大的客戶的資源使用成本。目前,MOS采用了三個維度的計費,三個維度包括:流量、容量、API調(diào)用。據(jù)介紹,最近,MOS經(jīng)歷了一次大幅度降價,單價同比下降了66%。MOS的現(xiàn)有價格如下:
第三是MOS具有高可靠性。MOS提供冗余校驗碼的數(shù)據(jù)冗余存儲技術(shù),將數(shù)據(jù)存儲在多塊磁盤中。一旦某塊磁盤發(fā)生故障,系統(tǒng)將利用冗余校驗碼自動地、快速地恢復壞盤中的數(shù)據(jù)。只有在同一時間內(nèi)有四塊盤壞,才有可能丟失數(shù)據(jù),這種可能性是微乎其微的。MOS還定期使用校驗碼和來驗證數(shù)據(jù)完整性;谝陨纤龅母叨思夹g(shù),MOS的數(shù)據(jù)持久性高達99.999999999%(11個9)。
第四是MOS安全值得信賴。MOS的用戶訪問自己的桶和對象時,需要采用AK/SK密鑰進行用戶鑒權(quán)。用戶還可以設置桶和對象的ACL訪問控制權(quán)限以及對桶的精細化存取控制策略,用戶自己可以控制哪些對象不允許別人訪問,或只允許一部分人訪問,或完全公開。在數(shù)據(jù)傳輸方面,MOS支持HTTPS/SSL,可使對象在上傳/下載的過程中不會被泄密。在數(shù)據(jù)加密方面,MOS支持用戶自行對數(shù)據(jù)加密后上傳保存。另外MOS將對象切片保存,每個分塊都分散到不同的磁盤中,這也保障了對象保存的安全性,即使華為云服務的運維人員即使能夠把存儲的磁盤拔下來,也會因為無法確認切片之間的關(guān)系而無法識別用戶上傳的對象,從技術(shù)上就杜絕了安全堡壘從內(nèi)部攻破的可能性。
第五,MOS易用性強。MOS提供多種途徑供用戶/開發(fā)者使用:
(1)通過華為云服務官網(wǎng)(www.hwclouds.com)
直接利用華為云服務官網(wǎng)可以使用MOS服務。先注冊為云服務官網(wǎng)用戶,并“開通對象存儲服務”,登錄后即可進入官網(wǎng)的管理控制臺,具體的使用指南,可參考《華為云對象存儲服務用戶使用手冊》。下圖是進入MOS管理控制臺后,MOS的容量使用情況、流量使用情況、請求數(shù)統(tǒng)計等展示界面。
(2)通過REST API
一些開發(fā)者需要有靈活的對象上傳、下載等操作,就可以通過代碼的方式來調(diào)用MOS服務的REST API,具體可參考《華為云對象存儲服務API接口說明書》。
(3)通過各種語言的SDK開發(fā)包
華為云服務開發(fā)了一些針對各種語言的SDK,開發(fā)者可以直接拿來用,或稍作修改嵌入到自己的應用中。
(4)通過第三方客戶端
業(yè)界有很多公司開發(fā)了對對象存儲服務進行管理的第三方客戶端軟件,如CloudBerry、DragonDisk、S3Browser等等。MOS與這些軟件都是可以兼容的,用戶可以自行酌情甄別使用這些第三方的客戶端軟件,上傳/下載文件、設置權(quán)限、同步備份等,實現(xiàn)對MOS中桶和對象的管理。
五類用戶最佳選擇
那么,什么類型的企業(yè)用戶適合選擇MOS呢?我們認為,以下需求的企業(yè)用戶最適合使用MOS:需要構(gòu)建海量存儲資源池;提供云盤、網(wǎng)盤的供應商;需要進行靜態(tài)網(wǎng)站托管;需要進行云備份和容災以及視頻監(jiān)控的存儲用戶。
我們來看看幾個具體的應用場景。
首先,最為典型的是網(wǎng)盤供應商。目前個人網(wǎng)盤市場和企業(yè)網(wǎng)盤市場競爭均非常激烈。傳統(tǒng)的網(wǎng)盤技術(shù)使得網(wǎng)盤服務提供商力不從心,IT投資規(guī)模大、維護運營成本高、文件傳輸速度慢、冗災備份及恢復能力低、安全性低等瓶頸開始困擾著眾多網(wǎng)盤服務商;贛OS打造企業(yè)網(wǎng)盤服務,不僅大大降低網(wǎng)盤服務商的初始投資以及投資風險,節(jié)省長期投資成本,還可以利用華為云服務提供的網(wǎng)盤服務端引擎,為企業(yè)提供統(tǒng)一的文檔存儲和一站式數(shù)據(jù)保險箱服務,并能立即擁有支持PC/移動多終端、海量和5TB超大文件上傳、秒傳、數(shù)據(jù)同步備份、端到端數(shù)據(jù)安全等企業(yè)用戶亟需的功能特性。
其次,是對互聯(lián)網(wǎng)海量數(shù)據(jù)存儲有迫切需要的互聯(lián)網(wǎng)/移動互聯(lián)網(wǎng)應用;ヂ(lián)網(wǎng)/移動互聯(lián)網(wǎng)企業(yè)面對海量信息內(nèi)容(視頻、照片、圖片、雜志、音樂、數(shù)據(jù)等)的爆炸性增長,其存儲成本和技術(shù)投入方面面臨巨大挑戰(zhàn)。如果使用MOS,就無需一次性投入購買大容量存儲設備,前期數(shù)據(jù)量小時,投入也很小;隨業(yè)務增長,因為MOS可以自動動態(tài)擴容,企業(yè)用戶可以無需關(guān)心擴容問題;企業(yè)用戶也不需要對存儲進行24小時監(jiān)控和管理,省去更換損壞存儲設備等運維成本;按需付費的商業(yè)模式,使得企業(yè)用戶不需要同傳統(tǒng)存儲一樣始終保證一定的空閑存儲空間;同時,MOS中的所有數(shù)據(jù)可直接利用CDN來將數(shù)據(jù)加速、分發(fā)。
最后是需要做云備份的企業(yè)用戶。眾所周知,企業(yè)業(yè)務高速發(fā)展,企業(yè)的數(shù)據(jù)也將急劇膨脹。與此同時,數(shù)據(jù)安全性正遭受著前所未有的威脅,自然災害、系統(tǒng)故障、員工誤操作和病毒感染都有可能導致數(shù)據(jù)的破壞和丟失。而企業(yè)已經(jīng)把關(guān)鍵數(shù)據(jù)視為正常運營的基礎(chǔ),一旦遭遇數(shù)據(jù)災難,運營必然陷入癱瘓,帶來的損失難以估量。因此,企業(yè)中的數(shù)據(jù)不僅要有足夠的容量空間去存儲,還需要實現(xiàn)數(shù)據(jù)的安全備份和遠程容災。不僅要保證本地數(shù)據(jù)的安全性,還要保證當本地發(fā)生重大的災難時,可通過遠程備份進行快速恢復。海量存儲、高安全可靠的MOS結(jié)合專業(yè)的遠程數(shù)據(jù)備份軟件,可以為企業(yè)提供放心的遠程數(shù)據(jù)備份,或輕松將本地以及分支機構(gòu)的重要數(shù)據(jù)進行統(tǒng)一歸檔/備份。
總結(jié):從Bigger than bigger到Better than better
總結(jié)而言,華為云對象存儲服務(MOS)可以用四個詞概括:海量、省錢、可靠、安全。據(jù)了解,相信MOS借助于大平臺,能夠精益求精,不斷增加實用的功能特性并不斷提升產(chǎn)品性能,竭誠服務廣大企業(yè)用戶,給企業(yè)用戶帶來更多驚喜。