而Amazon S3存儲(chǔ)了超過(guò)329萬(wàn)億個(gè)對(duì)象,平均每秒要處理一億次請(qǐng)求,全球請(qǐng)求流量峰值超過(guò)950 TB/秒。
在2022年,每周處理的Amazon S3 Glacier數(shù)據(jù)恢復(fù)請(qǐng)求超過(guò)20億次。
數(shù)據(jù)嚇人,成績(jī)矚目。在8月份的AWS存儲(chǔ)日上,AWS存儲(chǔ)上又有了一點(diǎn)新動(dòng)態(tài),但不算多。
Amazon FSx for Lustre新增了文件釋放功能
Amazon FSx for Lustre 是托管了 Lustre 并行文件系統(tǒng)的存儲(chǔ)服務(wù),利用 Lustre 在可擴(kuò)展性和性能方面的優(yōu)勢(shì),在高性能存儲(chǔ)、AI、金融模型等對(duì)于存儲(chǔ)性能和吞吐量要求比較高的場(chǎng)景中表現(xiàn)出色。
FSx for Lustre 與 S3 無(wú)縫集成,兩者間可以雙向同步數(shù)據(jù)。這種集成使Amazon FSx for Lustre用戶能夠快速訪問(wèn)基于 S3 的數(shù)據(jù)湖,從而簡(jiǎn)化數(shù)據(jù)管理。
在 AWS 存儲(chǔ)日上,AWS為 FSx for Lustre 新增了一個(gè)叫 “文件釋放(File Release)”的功能,允許用戶通過(guò)釋放與 S3 同步的文件所占用的存儲(chǔ)空間,來(lái)高效管理數(shù)據(jù)。
通過(guò)文件釋放功能,用戶可以繼續(xù)向FSx for Lustre文件系統(tǒng)里寫入新數(shù)據(jù),同時(shí)保留通過(guò)訪問(wèn)這些數(shù)據(jù)的能力,這些數(shù)據(jù)可以從S3里恢復(fù)到 FSx for Lustre ,然后被訪問(wèn)。
使用該功能時(shí),用戶需要先指定一個(gè)要釋放文件的目錄,同時(shí),還需要設(shè)定一個(gè)最短時(shí)間,超過(guò)這個(gè)時(shí)間沒(méi)有被訪問(wèn)的文件就需要被釋放。
文件釋放功能對(duì)于數(shù)據(jù)生命周期管理會(huì)有價(jià)值,它可以將低頻訪問(wèn)的數(shù)據(jù)更高效地遷移到S3里,利用S3的分層存儲(chǔ)功能來(lái)降低成本。目前,所有落地了FSx for Lustre的Region的用戶都可以使用這一功能。
AWS Backup新增邏輯氣隙保險(xiǎn)柜,防勒索軟件
AWS Backup是一個(gè)全托管的備份服務(wù),它面向AWS的多種服務(wù)和資源,可以為這些服務(wù)和資源創(chuàng)建備份,管理備份,監(jiān)控備份。
AWS Backup引入了一項(xiàng)新的特性——邏輯氣隙(Logical Air-Gapped),主要是為了解決勒索軟件或數(shù)據(jù)泄露問(wèn)題。
邏輯氣隙的保險(xiǎn)柜(Vault)里存儲(chǔ)著不可變備份的副本,并使用AWS拿著的密鑰進(jìn)行加密保護(hù),以此增強(qiáng)數(shù)據(jù)安全性,以應(yīng)對(duì)勒索軟件。
AWS Backup邏輯氣隙有這幾個(gè)關(guān)鍵點(diǎn):
1,安全:備份的副本默認(rèn)會(huì)被AWS拿著的密鑰鎖定和加密,以減少意外或者誤刪除數(shù)據(jù)的風(fēng)險(xiǎn)。
2,共享:用戶可以用AWS RAM(資源訪問(wèn)管理器)來(lái)共享保險(xiǎn)柜(Vault)里的數(shù)據(jù)。這樣一來(lái),就可以更快、直接地進(jìn)行數(shù)據(jù)恢復(fù),而無(wú)需先將備份復(fù)制到目標(biāo)帳戶中。
3,效率:共享和直接恢復(fù)的特性減少了操作負(fù)擔(dān),在發(fā)生數(shù)據(jù)丟失事件時(shí),可以最大限度地縮短恢復(fù)時(shí)間,同時(shí)也減少了創(chuàng)建額外副本的成本。
AWS Backup的邏輯氣隙提高了數(shù)據(jù)安全性,簡(jiǎn)化了共享數(shù)據(jù)的操作,提供更快的恢復(fù),對(duì)于數(shù)據(jù)保護(hù)和數(shù)據(jù)恢復(fù)戰(zhàn)略很有幫助。
其實(shí)Air-Gap氣隙方案在應(yīng)對(duì)勒索軟件方面已經(jīng)有很多實(shí)踐了,從戴爾的CyberRecovery,到IBM的Cyber Vault ,以及Pure Storage和Commvault都有類似的方案。
AWS DataSync支持與其它公有云同步數(shù)據(jù)
多云是很多云用戶的必然選擇,所以,在多個(gè)云之間遷移數(shù)據(jù)就顯得越來(lái)越重要了。AWS的數(shù)據(jù)同步服務(wù)DataSync就為用戶提供了這一能力。
AWS擴(kuò)展了DataSync的功能,支持用戶在更多云平臺(tái)上進(jìn)行數(shù)據(jù)遷移,只要云平臺(tái)上的是兼容S3標(biāo)準(zhǔn)的,就能與AmazonS3進(jìn)行大規(guī)模數(shù)據(jù)傳輸遷移。
AWS 的DataSync原本支持谷歌云存儲(chǔ)、Azure文件和Azure Blob存儲(chǔ),現(xiàn)在還支持DigitalOcean Spaces、Wasabi云存儲(chǔ)、Backblaze B2云存儲(chǔ)、Cloudflare R2存儲(chǔ)和Oracle云存儲(chǔ)。
AWS DataSync它簡(jiǎn)化并加速了從其他云向AWS遷移數(shù)據(jù)的操作,簡(jiǎn)化了再AWS上做數(shù)據(jù)歸檔的操作,也簡(jiǎn)化了再多個(gè)云之間傳輸數(shù)據(jù)的操作,這次更新將簡(jiǎn)輕很多IT管理員的工作負(fù)擔(dān)。
IT組織有許多責(zé)任,最重要的一項(xiàng)工作是保護(hù)企業(yè)數(shù)據(jù)的完整性。關(guān)鍵業(yè)務(wù)應(yīng)用處理數(shù)據(jù)的速度和靈活性,直接影響著企業(yè)的競(jìng)爭(zhēng)力,所以,數(shù)據(jù)的存儲(chǔ)、管理和保護(hù)數(shù)據(jù)都非常重要。
小結(jié)
AWS S3存儲(chǔ)經(jīng)歷了多年發(fā)展,存儲(chǔ)服務(wù)類型也在不斷豐富,如今提供包括文件存儲(chǔ),塊存儲(chǔ)和對(duì)象存儲(chǔ)三大類多種服務(wù),還有了數(shù)據(jù)保護(hù)和災(zāi)難恢復(fù)功能,基本可以滿足企業(yè)對(duì)于存儲(chǔ)方方面面的要求。
此次更新中,Amazon DataSync支持向友商直接開放數(shù)據(jù)同步服務(wù),這一操作并不多見。
邏輯氣隙滿足了數(shù)據(jù)安全的最佳實(shí)踐,與戴爾和IBM這種主流的存儲(chǔ)廠商對(duì)齊。
Amazon FSx for Lustre對(duì)于高性能計(jì)算和AI負(fù)載也非常重要,對(duì)現(xiàn)在非?;鸬纳墒紸I也是有幫助的。
作為規(guī)模最大的公有云服務(wù)商,AWS本可以讓合作伙伴來(lái)提供一些高級(jí)的存儲(chǔ)產(chǎn)品,但AWS主要靠自己親力親為。
或許,正是因?yàn)檫@種不斷創(chuàng)新的做法,才使其保持領(lǐng)先地位的。在可見的未來(lái),這一做法應(yīng)該還會(huì)繼續(xù)下去。
原文地址:
https://www.forbes.com/sites/stevemcdowell/?sh=2ff2163e16a9