企業(yè)節(jié)能技術(shù)之重復(fù)數(shù)據(jù)刪除技術(shù)

申請免費試用、咨詢電話：400-8352-114

對于整個數(shù)據(jù)中心而言，需要我們關(guān)注的不僅僅涉及到服務(wù)器層面的節(jié)能問題，存儲中心也同樣涉及到節(jié)能、環(huán)保、降低存儲成本以及實現(xiàn)綠色存儲的舉措。而本期我們將給大家介紹的重復(fù)數(shù)據(jù)刪除技術(shù)能夠有效的減少數(shù)據(jù)存儲容量，從而實現(xiàn)數(shù)據(jù)中心節(jié)能，降低散熱需，實現(xiàn)“綠色”意義。

由于磁盤技術(shù)近年來的快速發(fā)展，一些企業(yè)和用戶越來越傾向于采用磁盤進行備份或者歸檔，由此帶來的能耗問題也是突出的。傳統(tǒng)的備份策略往往會在用戶的磁盤空間里面產(chǎn)生大量的冗余數(shù)據(jù)，由此消耗了大量不必要的磁盤空間，帶來一系列的能耗和冷卻的問題。有什么辦法能夠消除掉這些多余的數(shù)據(jù)，從而避免不必要的能源消耗呢？

重復(fù)數(shù)據(jù)刪除的節(jié)能意義

重復(fù)數(shù)據(jù)刪除最大的優(yōu)勢在于節(jié)約用戶數(shù)據(jù)存儲所需要的存儲空間，因而能夠節(jié)約數(shù)據(jù)存儲所需要的能源損耗?；诖疟P的備份歸檔方案與傳統(tǒng)磁帶庫相比在性能、穩(wěn)定性方面都有很多優(yōu)勢，但是一個突出的不足之處就是，磁盤介質(zhì)是在線存儲，需要一定的能耗，而磁帶則是離線存儲，本身不需要耗能。

您的IT系統(tǒng)電費支出是不是越來越大？您是否在為如何降低功耗、節(jié)約能源煞費苦心？近期，我們將推出“企業(yè)IT節(jié)能系列文章”專題策劃，我們將從芯片、組件、系統(tǒng)、軟件乃至數(shù)據(jù)中心等多個層面、多個角度出發(fā)，整理出一系列實用的IT節(jié)能妙招，相信總有一招適合你！我們今天先來講一下存儲中炙手可熱的技術(shù)，重復(fù)數(shù)據(jù)刪除。

重復(fù)數(shù)據(jù)刪除

對于整個數(shù)據(jù)中心而言，需要我們關(guān)注的不僅僅涉及到服務(wù)器層面的節(jié)能問題，存儲中心也同樣涉及到節(jié)能、環(huán)保、降低存儲成本以及實現(xiàn)綠色存儲的舉措。而本期我們將給大家介紹的重復(fù)數(shù)據(jù)刪除技術(shù)能夠有效的減少數(shù)據(jù)存儲容量，從而實現(xiàn)數(shù)據(jù)中心節(jié)能，降低散熱需，實現(xiàn)“綠色”意義。

由于磁盤技術(shù)近年來的快速發(fā)展，一些企業(yè)和用戶越來越傾向于采用磁盤進行備份或者歸檔，由此帶來的能耗問題也是突出的。傳統(tǒng)的備份策略往往會在用戶的磁盤空間里面產(chǎn)生大量的冗余數(shù)據(jù)，由此消耗了大量不必要的磁盤空間，帶來一系列的能耗和冷卻的問題。有什么辦法能夠消除掉這些多余的數(shù)據(jù)，從而避免不必要的能源消耗呢？

重復(fù)數(shù)據(jù)刪除的節(jié)能意義

重復(fù)數(shù)據(jù)刪除最大的優(yōu)勢在于節(jié)約用戶數(shù)據(jù)存儲所需要的存儲空間，因而能夠節(jié)約數(shù)據(jù)存儲所需要的能源損耗?；诖疟P的備份歸檔方案與傳統(tǒng)磁帶庫相比在性能、穩(wěn)定性方面都有很多優(yōu)勢，但是一個突出的不足之處就是，磁盤介質(zhì)是在線存儲，需要一定的能耗，而磁帶則是離線存儲，本身不需要耗能。

重復(fù)數(shù)據(jù)刪除能夠大大減少數(shù)據(jù)存儲與備份所需要的空間，因而減少存儲與備份的能耗。大家知道廠商宣稱的重復(fù)數(shù)據(jù)刪除比根據(jù)不同的數(shù)據(jù)能夠達到1:30或者1:20，無論對存儲空間的節(jié)約方面和能耗節(jié)省方面都是有著突出意義的。

一般人往往容易混淆重復(fù)數(shù)據(jù)刪除與數(shù)據(jù)壓縮的概念，二者看起來的確有一些相似之處。但實際上，數(shù)據(jù)壓縮技術(shù)通過對數(shù)據(jù)重新編碼來降低其冗余度 (redundancy)；而重復(fù)數(shù)據(jù)刪除技術(shù)則著眼于刪除重復(fù)出現(xiàn)的數(shù)據(jù)塊。前者屬于文件級別，后者根據(jù)不同廠商的技術(shù)特點，既可以是文件級別的，也可以是數(shù)據(jù)塊級別的。

應(yīng)用重復(fù)數(shù)據(jù)刪除需要注意什么

重復(fù)數(shù)據(jù)刪除的產(chǎn)品最早在2005年推出，到了2006年底和2007年初幾乎所有的備份系統(tǒng)上都開始廣泛引用，現(xiàn)在已經(jīng)成為備份產(chǎn)品的必備選項之一。那么用戶在選擇重復(fù)數(shù)據(jù)刪除的產(chǎn)品時需要注意哪些因素呢？

一些業(yè)內(nèi)專家提出了如下幾條原則：

1. 重復(fù)數(shù)據(jù)刪除技術(shù)在具體的備份應(yīng)用中，不應(yīng)該對備份性能有任何影響。由于重復(fù)數(shù)據(jù)刪除不同的實現(xiàn)模式，一些重復(fù)數(shù)據(jù)刪除的實現(xiàn)方式本身需要耗用大量的 CPU資源，在整個備份進程中增加大量的處理進程，這樣盡管用戶獲得了一定比率的重復(fù)刪除比率，但在客觀上降低了備份性能。實際上，采用基于磁盤的備份方案相比磁帶庫的突出優(yōu)勢就體現(xiàn)在降低備份窗口獲得高性能備份與恢復(fù)，而如果采用的重復(fù)數(shù)據(jù)刪除技術(shù)不合理，則有可能因為獲得數(shù)據(jù)壓縮比率而損失掉一定的備份性能。

2. 高端一些的用戶需要注意，當采用重復(fù)數(shù)據(jù)刪除等等一些VTL增值技術(shù)之后，還需要考慮與未來技術(shù)發(fā)展方向的兼容問題。例如，我們需要用VTL技術(shù)來建立一個災(zāi)備體系，需要使用異地復(fù)制技術(shù)，那么如果我們前期在使用重復(fù)數(shù)據(jù)刪除技術(shù)的時候沒有考慮未來需求的變化，則會制約系統(tǒng)的發(fā)展。

3. 此外還有面向磁帶庫的出庫技術(shù)，盡管在數(shù)據(jù)量小的時候我們可以不考慮采用磁帶作為離線介質(zhì)，但是用戶的數(shù)據(jù)量始終在增長，未來如果有這樣的需求，則需要在構(gòu)建系統(tǒng)的開始考慮到未來需求的發(fā)展。

總結(jié)一下，以上的觀點，對于備份性能的影響是第一位的，也就是說在使用重復(fù)數(shù)據(jù)刪除技術(shù)獲得壓縮比的同時不能以犧牲備份性能為代價，其次，用戶在使用重復(fù)數(shù)據(jù)刪除的同時必須考慮未來技術(shù)發(fā)展方向的問題，必須與未來的需求以及發(fā)展相兼容。（CBISMB）