Dedupe 技術(shù)目前大量應(yīng)用于數(shù)據(jù)備份與歸檔系統(tǒng)，因為對數(shù)據(jù)進行多次備份后，存在大量重復(fù)數(shù)據(jù)，非常適合這種技術(shù)。事實上，Dedupe技術(shù)可以用于很多場合，包括在線數(shù)據(jù)、近線數(shù)據(jù)、離線數(shù)據(jù)存儲系統(tǒng)，可以在文件系統(tǒng)、卷管理器、NAS、SAN中實施。Dedupe也可以用于數(shù)據(jù)容災(zāi)、數(shù)據(jù)傳輸與同步，作為一種數(shù)據(jù)壓縮技術(shù)可用于數(shù)據(jù)打包。Dedupe技術(shù)可以幫助眾多應(yīng)用降低數(shù)據(jù)存儲量，節(jié)省網(wǎng)絡(luò)帶寬，提高存儲效率、減小備份窗口，節(jié)省成本。

在實際應(yīng)用中，想象一個很長的PowerPoint銷售介紹結(jié)合詳細(xì)的圖形和視頻。如果銷售組織中每個人保存該演示文稿，將會占用你主存儲設(shè)備的很多磁盤空間，并且為每個保存的實例備份，創(chuàng)建更多的冗余文件。而這僅僅是一個銷售的介紹，企業(yè)中所有其它的以多種格式出現(xiàn)的非結(jié)構(gòu)化的數(shù)據(jù)會怎么樣呢?你真的想要把錢花在磁盤驅(qū)動器來保存冗余數(shù)據(jù)嗎，你真的想不需要的數(shù)據(jù)降低你的存儲性能?

重復(fù)數(shù)據(jù)刪除技術(shù)使用算法搜索重復(fù)數(shù)據(jù)，用“指針”取代重復(fù)的數(shù)據(jù)，指向存儲在網(wǎng)絡(luò)的唯一主副本。重復(fù)數(shù)據(jù)刪除可以在文件級或數(shù)據(jù)塊級工作：

文 件級重復(fù)數(shù)據(jù)刪除：在這個級別，重復(fù)數(shù)據(jù)刪除在網(wǎng)絡(luò)搜索冗余文件，并保存該文件只有一個副本。在網(wǎng)絡(luò)中，當(dāng)一個文件發(fā)生一個變化時，文件的另一個副本就會 被保存。這種較少用的方法不如塊級重復(fù)數(shù)據(jù)刪除效率高，因為它事實上不用尋找文件重復(fù)的內(nèi)容。因此，上面引用到的PowerPoint銷售的介紹，如果不 同的人用不同的名字保存文件，那么重復(fù)的副本會被保存和備份。

塊級重復(fù)數(shù)據(jù)刪除：對塊級別的數(shù)據(jù)復(fù)制，軟件查找文件和存儲里面的唯一文件部分(塊)，這些部分還沒有被備份。當(dāng)文件被改變，只有被改變數(shù)據(jù)再次被存儲，從而使它在存儲的數(shù)據(jù)量方面遠(yuǎn)遠(yuǎn)超過文件級重復(fù)數(shù)據(jù)刪除的效率。它創(chuàng)建了一個主副本，無縫地合并了所有的的變化。

在線重復(fù)數(shù)據(jù)刪除：數(shù)據(jù)寫入存儲系統(tǒng)同時執(zhí)行刪除，因此實際傳輸或?qū)懭氲臄?shù)據(jù)量較少。適合通過LAN或WAN進行數(shù)據(jù)處理的存儲系統(tǒng)，如網(wǎng)絡(luò)備份歸檔和云備份。

離線重復(fù)數(shù)據(jù)刪除：先將數(shù)據(jù)寫入存儲系統(tǒng)，然后利用適當(dāng)?shù)臅r間再進行重復(fù)數(shù)據(jù)刪除處理。由于寫入包含了重復(fù)的數(shù)據(jù)，需要更多的額外存儲空間來預(yù)先存儲刪除前數(shù)據(jù)。且需要有足夠的時間窗口來進行重復(fù)數(shù)據(jù)刪除操作。

NETGEAR 基于塊級別的在線重復(fù)數(shù)據(jù)刪除解決方案

基于重復(fù)數(shù)據(jù)刪除的粒度可以分為文件級和數(shù)據(jù)塊級。文件級重復(fù)數(shù)據(jù)刪除技術(shù)的劣勢在于精細(xì)度不夠，并且不能提供次文件級的重復(fù)數(shù)據(jù)刪除功能。這意味著一個文件中即便有很小的一處改動也會被認(rèn)為是一個全新的文件而另外儲存。

為 了解決文件級重復(fù)數(shù)據(jù)刪除技術(shù)缺乏精細(xì)度的問題，NETGEAR存儲以固定的長度將數(shù)據(jù)分割成更小的“數(shù)據(jù)塊”。只存儲唯一的數(shù)據(jù)塊并將識別出重復(fù)的其它 數(shù)據(jù)塊用指針方式代替，顯然，數(shù)據(jù)塊級可以提供更高的重復(fù)數(shù)據(jù)刪除率。因此目前NETGEAR主推基于塊級別的在線重復(fù)數(shù)據(jù)刪除解決方案。

NETGEAR ReadyDATA5200采用塊級別(128K)的在線重復(fù)數(shù)據(jù)刪除技術(shù)，數(shù)據(jù)寫入存儲系統(tǒng)同時執(zhí)行重復(fù)數(shù)據(jù)刪除，因此實際傳輸或?qū)懭氲臄?shù)據(jù)量較少。備 份數(shù)據(jù)通過刪除寫入ReadyDATA 5200的相同的數(shù)據(jù)塊，大大減少存儲容量需求。該技術(shù)對于定期創(chuàng)建完整備份而言是理想的備份解決方案，因為多個備份作業(yè)很常見，而任何數(shù)據(jù)寫入只有一 次，這樣可以節(jié)省容量。適合通過LAN或WAN進行數(shù)據(jù)處理的存儲系統(tǒng)，如網(wǎng)絡(luò)備份歸檔和云備份。

ReadyDATA 5200通過塊級別的在線重復(fù)數(shù)據(jù)刪除技術(shù)為企業(yè)數(shù)據(jù)備份提供了一個符合成本效益的，易于部署的、功能豐富的資源庫。

重復(fù)數(shù)據(jù)刪除技術(shù)給企業(yè)帶來的好處

NETGEAR ReadyDATA5200通過塊級別的在線重復(fù)數(shù)據(jù)刪除技術(shù)可以幫助企業(yè)解決備份信息存儲的問題。該技術(shù)可刪除冗余數(shù)據(jù)，以便更經(jīng)濟地滿足數(shù)據(jù)的存儲和 災(zāi)難恢復(fù)需求。如上文所述，備份環(huán)境中存在數(shù)量驚人的冗余數(shù)據(jù)。通過有效地部署重復(fù)數(shù)據(jù)刪除，企業(yè)只需利用當(dāng)前備份存儲基礎(chǔ)架構(gòu)的一小部分空間面積和運營 開支，即可保護和恢復(fù)信息。在重復(fù)數(shù)據(jù)刪除方面的投入可以帶來極大的業(yè)務(wù)好處。重復(fù)數(shù)據(jù)刪除可實現(xiàn)的業(yè)務(wù)好處包括：

降低基礎(chǔ)架構(gòu)成本。通過刪除備份中的冗余數(shù)據(jù)，大大減少了保存?zhèn)浞萦诚袼璧幕A(chǔ)架構(gòu)。重復(fù)數(shù)據(jù)消除的直接結(jié)果是減少了保存?zhèn)浞萦诚袼璧拇鎯θ萘?。容量需求的減少意味著購置成本以及電源和冷卻成本的降低。

延長保留時間。由于重復(fù)數(shù)據(jù)刪除可減少每日備份的內(nèi)容量，因此用戶可以延長他們的保留時間策略。如果用戶目前需要較長的保留時間，但卻因當(dāng)前流程和策略的限制而無法實現(xiàn)，這可以為用戶帶來巨大的好處。

改進數(shù)據(jù)保護。重復(fù)數(shù)據(jù)刪除使許多企業(yè)能夠創(chuàng)建每日完整備份映像。在這些企業(yè)當(dāng)中，很多都曾經(jīng)因為備份時間段的限制而只能被迫執(zhí)行每周完整備份和每日增量備份。重復(fù)數(shù)據(jù)刪除可減少存儲容量的需求，從而允許企業(yè)采取更積極的備份策略，以減少恢復(fù)時間。

減少數(shù)量，提高性能。通過減少總的備份映像大小，公司將更有能力負(fù)擔(dān)磁盤備份替代傳統(tǒng)磁帶存儲的支出。磁盤備份支持高速、高度可靠的備份映像，從而可滿足對更短備份時間段和更快恢復(fù)時間的需要。

大 大降低備份帶寬需求。重復(fù)數(shù)據(jù)刪除可減少備份映像中的內(nèi)容量，因此會減少對該內(nèi)容進行遠(yuǎn)程復(fù)制時的開支，從而支持遠(yuǎn)程復(fù)制的備份。此外，NETGEAR通 過利用塊級別的在線重復(fù)數(shù)據(jù)刪除，可在備份過程中對任何數(shù)據(jù)進行存儲之前將冗余數(shù)據(jù)從備份過程中提取出來。這意味著完成備份的方式是僅移動那些尚未存在于 備份數(shù)據(jù)庫中的子文件數(shù)據(jù)元素。

什么樣的重復(fù)數(shù)據(jù)刪除解決方案可用?

要選擇最佳的解決方案，你需要對你的 存儲基礎(chǔ)設(shè)施和要求制定評估計劃。有許多組織面對顯著增長的數(shù)據(jù)不堪重負(fù)，因為他們之前沒有恰當(dāng)?shù)挠媱?。與NETGEAR和他們的存儲專家團隊一起工作將 幫助您了解如何設(shè)計您的存儲基礎(chǔ)設(shè)施使其與您的業(yè)務(wù)目標(biāo)相一致，包括如何以及在哪里部署重復(fù)數(shù)據(jù)刪除解決方案以節(jié)省資金和提高業(yè)務(wù)靈活性。重復(fù)數(shù)據(jù)刪除技 術(shù)是一項成熟的技術(shù)，為業(yè)務(wù)提供了實實在在的利益–隨著您的數(shù)據(jù)存儲需求的持續(xù)增長而變得更有價值?，F(xiàn)在是與NETGEAR一起工作的時候了，為您的組 織選擇正確的解決方案。

總結(jié)：重復(fù)數(shù)據(jù)刪除的合理性

許多企業(yè)都在通過部署磁盤備份來增強，或者，甚至是取代基于磁帶的備份和恢復(fù)基礎(chǔ)架構(gòu)。為什么對磁盤備份內(nèi)容進行重復(fù)數(shù)據(jù)刪除如此具有吸引力?重復(fù)數(shù)據(jù)刪除可降低備份成本并在以下領(lǐng)域提供更多的好處：

降低磁盤容量需求

縮短備份時間

與磁帶相比，加快數(shù)據(jù)恢復(fù)速度

降低異地復(fù)制成本

降低備份對磁帶庫的依賴性

讓 NETGEAR 和全球范圍內(nèi)的NETGEAR 合作伙伴幫助您所在的企業(yè)擁有世界一流的磁盤備份和重復(fù)數(shù)據(jù)刪除產(chǎn)品。NETGEAR 的創(chuàng)新型產(chǎn)品組合、廣泛的信息管理經(jīng)驗以及經(jīng)驗證的最佳做法可確保您以最高的效率和最低的成本從信息基礎(chǔ)架構(gòu)中獲得最大的價值。

zhaohang