這張公有云存儲(chǔ)的全景示意圖,主要圍繞中心公有云拓展介紹、傳統(tǒng)數(shù)據(jù)中心、混合云等周邊場景,公有云平臺(tái)主要從IaaS、PaaS、SaaS三層來看。
在IaaS層,通常提供品類豐富的存儲(chǔ)服務(wù),如典型的塊、文件、對(duì)象存儲(chǔ),同時(shí)也會(huì)提供HDFS、日志存儲(chǔ)、備份等產(chǎn)品,其中每種存儲(chǔ)通常提供三種以上的不同服務(wù)等級(jí)的子產(chǎn)品,如塊存儲(chǔ)分為重量型、均衡型、高性能型和超高性能型,滿足不同性能的要求,存儲(chǔ)呈現(xiàn)出從IaaS型服務(wù)項(xiàng)PaaS型服務(wù)的轉(zhuǎn)型趨勢,大量的云存儲(chǔ)將作為PaaS一部分被間接消費(fèi),對(duì)存儲(chǔ)的管理已經(jīng)被PaaS平臺(tái)內(nèi)部負(fù)責(zé),因此會(huì)降低對(duì)存儲(chǔ)的管理需求。
PaaS層最普遍的是品類豐富的數(shù)據(jù)庫服務(wù),相比PaaS型存儲(chǔ),SaaS服務(wù)進(jìn)一步弱化了用戶對(duì)存儲(chǔ)的感知,從全球SaaS市場占比來看,國外SaaS市場超過IaaS加PaaS之合,未來可能成為最重要的消費(fèi)方式。
在傳統(tǒng)數(shù)據(jù)中心,客戶越來越多的希望將具備超大規(guī)模、低成本特點(diǎn)的公有云存儲(chǔ)作為災(zāi)備歸檔良好的選擇,用于替代老舊的磁帶存儲(chǔ),通過云存儲(chǔ)網(wǎng)關(guān)或者數(shù)據(jù)傳輸服務(wù)實(shí)現(xiàn)這一要求,進(jìn)一步公有云廠商直接為客戶提供全套定制的私有云服務(wù),并連通公有云,形成混合云方案,典型的如混合云備份,混合云災(zāi)備,實(shí)現(xiàn)數(shù)據(jù)的跨區(qū)域存儲(chǔ),混合云存儲(chǔ)陣列提供了一種遠(yuǎn)程訪問中心公有云存儲(chǔ)的方式,通過本地緩存、壓縮、加密,配合云專線,能夠?qū)崿F(xiàn)一定性能下的超大訪問需求。
有時(shí)候我們會(huì)聽說數(shù)據(jù)引力這一概念,如果數(shù)據(jù)在靠近用戶或者數(shù)據(jù)產(chǎn)生的地方進(jìn)行存儲(chǔ)和處理,能夠滿足低時(shí)延、大帶寬的需要,則催生了邊緣云存儲(chǔ)。很多時(shí)候數(shù)據(jù)是不能刪除的,需要保存較長時(shí)間甚至是永久存儲(chǔ),但是計(jì)算資源存在突發(fā)的需要,傳統(tǒng)數(shù)據(jù)中心、混合云、邊緣云三種場景均可以在需要時(shí)利用公有云的超的規(guī)模和多種類型的算例滿足突發(fā)的需求,自身只需提供一定量的日常需要。
因?yàn)閿?shù)據(jù)分散在本地、邊緣運(yùn)、公有云等多處,甚至是多家公有云廠商數(shù)據(jù)的統(tǒng)一管理需求在增加,即面向管理面的軟件定義存儲(chǔ)也迎來了新的機(jī)會(huì)。
面向應(yīng)用是云計(jì)算3.0云原生階段的基本要求,以對(duì)象存儲(chǔ)為例說明軟件定義存儲(chǔ)是如何面向應(yīng)用進(jìn)行優(yōu)化,以提供綜合解決方案,簡化應(yīng)用的開發(fā),助力業(yè)務(wù)敏捷。
作為非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的理想方式,對(duì)象存儲(chǔ)提供了多樣的數(shù)據(jù)處理功能,如圖片水印、壓縮和轉(zhuǎn)換等等,視頻禎截取,各種類型的文檔預(yù)覽和流媒體等等,另外結(jié)合CDN、SD-WAN可以實(shí)現(xiàn)訪問的加速,通過臨時(shí)授權(quán)認(rèn)證可以支持大量移動(dòng)端訪問的需求,如短視頻、直播等場景。
談?wù)摯鎯?chǔ),性能是無法避開的話題,隨著高速存儲(chǔ)介質(zhì)和高速網(wǎng)絡(luò)的發(fā)展,軟件定義存儲(chǔ)實(shí)現(xiàn)高性能已經(jīng)是水到渠成的事情,內(nèi)存及存儲(chǔ)有效拉近了DRAM和SSD的差距,NVMeSSD實(shí)現(xiàn)了高性能的同時(shí),成本也在不斷降低,OpenChannel SSD給開發(fā)者提供了更多的想象空間,尤其在性能方面,NVMe-OF技術(shù)實(shí)現(xiàn)了高速存儲(chǔ)遠(yuǎn)程訪問的低延時(shí),當(dāng)然這些技術(shù)的應(yīng)用需要對(duì)現(xiàn)有的操作系統(tǒng)和軟件站進(jìn)行大量的優(yōu)化和甚至改寫,我們相信未來三到五年,各公有云提供商將會(huì)實(shí)現(xiàn)端到端的高性能存儲(chǔ)解決方案,支持壓縮、加密的指令集CPU,網(wǎng)絡(luò),SSD等等也在提升軟件定義存儲(chǔ)性能方面的能力。智能網(wǎng)卡在實(shí)現(xiàn)網(wǎng)絡(luò)卸載的同時(shí),也在實(shí)現(xiàn)存儲(chǔ)虛擬化的卸載,解決了性能、安全等問題。
從成本角度來看公有云的存儲(chǔ)設(shè)計(jì),大多數(shù)企業(yè)將價(jià)格作為選擇公有云的主要考慮因素之一,面向成本優(yōu)化是公有云存儲(chǔ)設(shè)計(jì)的基本要求,根據(jù)存儲(chǔ)使用報(bào)告,節(jié)省費(fèi)用的行動(dòng)為可刪除的無用資源中90%以上是不大使用的數(shù)據(jù)快照,55%到90%是選擇合適的存儲(chǔ)大小,綜上,數(shù)據(jù)遷移合適的大小的存儲(chǔ),消除冗余是實(shí)現(xiàn)成本節(jié)省的關(guān)鍵。
從技術(shù)上看,主要有以下途徑:IT企業(yè)傾向于使用公有云廉價(jià)的存儲(chǔ)替代磁帶,實(shí)現(xiàn)備份、容災(zāi)和歸檔存儲(chǔ),源端數(shù)據(jù)驅(qū)重、壓縮可以有效節(jié)省帶寬成本和存儲(chǔ)空間。MSDS,也就是面向管理面的SDS,實(shí)現(xiàn)公有云、邊緣運(yùn)、自有數(shù)據(jù)中心數(shù)據(jù)的統(tǒng)一管理,降低管理成本的同時(shí),通過數(shù)據(jù)分析和可視化手段,可以給出合理的使用建議,有效降低數(shù)據(jù)的冗余度。
價(jià)格總是與性能掛鉤,相同的硬件成本提供更好的存儲(chǔ)性能是實(shí)現(xiàn)成本壓降的關(guān)鍵手段。通過生命周期機(jī)制,結(jié)合數(shù)據(jù)訪問特點(diǎn),實(shí)現(xiàn)數(shù)據(jù)從標(biāo)準(zhǔn)存儲(chǔ)向低頻或歸檔存儲(chǔ)的流動(dòng),可有效降低存儲(chǔ)成本,有趣的是有些存儲(chǔ)廠商實(shí)現(xiàn)對(duì)象存儲(chǔ)和文件存儲(chǔ)的統(tǒng)一,兩者互轉(zhuǎn)時(shí)僅需要修改源數(shù)據(jù),無需數(shù)據(jù)搬遷,也有效節(jié)省了計(jì)算和帶寬資源,一定程度節(jié)省了成本。
通過引AR技術(shù)實(shí)現(xiàn)自動(dòng)化智能運(yùn)維和運(yùn)營,可有效降低運(yùn)維和運(yùn)營成本,常見的方式有進(jìn)行磁盤的故障預(yù)測,存儲(chǔ)擴(kuò)容的分析,業(yè)務(wù)負(fù)載和內(nèi)部負(fù)載的自動(dòng)化優(yōu)化調(diào)整。
軟件定義存儲(chǔ)是公有云的關(guān)鍵基石
SDS需要具備支撐綜合解決方案的能力,而SDS正是以其軟件定義的靈活性,滿足各種場景,位置,性能,成本的需求。以AR場景為例,典型的AR場景有提取、預(yù)處理、模型訓(xùn)練、推理等關(guān)鍵步驟,不同的階段有著不同的需求特點(diǎn),通過對(duì)象存儲(chǔ),文件存儲(chǔ),數(shù)據(jù)庫存儲(chǔ)三者結(jié)合,可以有效的支撐AR場景工作流,如通過歸檔存儲(chǔ)滿足大規(guī)模、低成本樣本數(shù)據(jù)的存儲(chǔ),通過變形文件系統(tǒng),滿足高帶寬低時(shí)延的數(shù)據(jù)存儲(chǔ)與訪問,通過數(shù)據(jù)庫實(shí)現(xiàn)關(guān)鍵結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)。
以混合云為例,通過消息存儲(chǔ)和通知服務(wù)提供設(shè)備互聯(lián)服務(wù),通過存儲(chǔ)網(wǎng)關(guān)混合云陣列實(shí)現(xiàn)數(shù)據(jù)流動(dòng),通過去重壓縮節(jié)省帶寬,通過加密保證傳輸安全,通過專線SD-WAN實(shí)現(xiàn)傳輸加速,中心公有云滿足企業(yè)超大規(guī)模存儲(chǔ)和臨時(shí)激增多算力的需求,最后可通過公有云實(shí)現(xiàn)數(shù)據(jù)的全球分發(fā)。
—— END ——
原生應(yīng)用改造的時(shí)機(jī)已經(jīng)到來!4月28日,行業(yè)云原生技術(shù)論壇將在線上舉行,此次DOIT聯(lián)合中國計(jì)算機(jī)學(xué)會(huì)存儲(chǔ)專委會(huì)、中國電子學(xué)會(huì),特邀國內(nèi)外云原生應(yīng)用的領(lǐng)導(dǎo)企業(yè),共同發(fā)起和推動(dòng)傳統(tǒng)行業(yè)/企業(yè)云原生應(yīng)用水平提高,加速完成產(chǎn)業(yè)轉(zhuǎn)型。
點(diǎn)擊官網(wǎng)了解詳情:http://www.gensurebio.cn/subject/cloudNative/