備受矚目的重複資料刪除技術於近年內迅速竄起,並受各家儲存廠商青睞,許多廠商在去年紛紛透過併購等方式獲得重複資料刪除技術,並將此技術視為今年的力推重點。

重複資料刪除(Data De-duplication)技術是將資料以演算法切割分段處理,經過比對分析後,將重複的資料剔除,因此可壓縮資料量,且由於重複資料刪除技術是和所有已經儲存的資料進行比對,所以理論上,隨著時間越長,重複的資料比例也越高,得到的壓縮效果也越好。

在應用方面,重複資料刪除技術除了用於磁碟備份外,遠端複製和歸檔也是主要的應用,但現階段廠商所推出的產品,都是以縮減磁碟備份空間為主要訴求。

國內已有企業採用,壓縮比達9.4倍
一家金融業者在去年第四季便採用重複資料刪除技術產品,以應用在磁碟備份上。此金融業者備份政策為每周進行全備份、每天進行差異備份,從去年12月至今,備份累積的資料量約為1.6TB,但經過壓縮後容量約170GB,壓縮比約 9.4倍。

該企業原本僅用磁帶備份,因此採用磁碟備份後,備份架構也從D2T轉為D2D2T(Disk to Disk to Tape)架構,其線上、近線和離線儲存設備分別為NetApp FAS250、Data Domain DD410和Tandberg Autoloader LTO2,採用備份軟體CA ArcServ 11.5R。

麟瑞科技產品經理楊偉智表示,理論上,隨著資料越多,壓縮比會更高,長期來說,壓縮比可達20倍以上。

然而,一般廠商雖都宣稱壓縮比例平均為10~50:1,但必須注意的是,壓縮比會受備份政策、資料類型影響,因此究竟可達到多少壓縮率,仍要視不同情況而定。以備份政策為例,若企業全備份的頻率越高,資料重疊性越多,因此壓縮比也會越高,在資料類型方面,文件、電子郵件比起圖檔、影音檔,則可得到比較高的壓縮比。

儲存廠商競相跨入,產品今年陸續到位
目前許多廠商已透過自行開發或併購方式進入此市場,包括Data Domain、NetApp都已推出基於重複資料刪除技術的產品,飛康國際(FalconStor)也預計在第二季推出採用該技術的設備,而賽門鐵克(Symantec)收購DTC、Quantum收購ADIC,以及EMC去年年底買下重複資料刪除技術廠商Avamar後,產品都將於今年陸續到位。

EMC資深產品行銷經理李百飛表示,資訊量的成長速度只會越來越快,而同一份資料會有多份副本,或者被儲存在不同設備上,因此造成儲存空間浪費,但重複資料刪除技術能有效解決儲存浪費的情況,根據研究機構Taneja Group日前所做的報告也指出,重複資料刪除技術將會是未來3年引領儲存市場變革的重要技術。

楊偉智表示,除了硬體成本的節省之外,採用重複資料刪除技術更大的效益是在於管理的成本,原本可能需要十幾臺甚至數十臺的設備才能承載的容量,經過壓縮後則僅要一臺設備就可解決,不僅管理方便、占用空間少,且硬碟數量少,相對來說損壞的機率也較低。

另一方面,若將重複資料刪除技術用於遠端複製,除了能減少儲存容量外,還能降低網路頻寬的使用,以Symantec的重複資料刪除產品NetBackup PureDisk來說,便是鎖定遠端複製應用。Symantec技術顧問陳力維表示,有進行異地備份的企業便可能有這樣的需求。

重複資料刪除技術結合VTL,需求有待觀察
值得一提的是,許多廠商也計畫將重複資料刪除技術應用在虛擬磁帶櫃(Virtual Tape Library,VTL)上,目前Data Domain就可提供企業將該儲存系統虛擬成磁帶櫃的方案;飛康國際的SIR,是將軟體整合在一臺專屬硬體設備上,做為自家VTL的延伸方案;EMC除了將推出單獨做為磁碟備份的方案外,還會推出結合VTL的方案;NetApp也預計在下半年將重複資料刪除技術也應用至該公司的VTL上。

必須注意的是,若要採用重複資料刪除技術,可能會影響到現有作業的效能。NetApp去年年底將重複資料刪除技術內建於FAS3000系列,並於日前再將此技術應用至FAS6000、NearStor R200產品上。NetApp臺灣系統工程師姜群表示,採用重複資料刪除技術,由於必須進行比對和刪除的作業,因此線上儲存效能會稍有影響,所以這樣的方案適合以空間為第一優先考量的客戶選用,但他認為目前國內企業的資訊量還不夠大,因此需求尚少。

FalconStor行銷經理張智鴻則表示,由於該公司的SIR是以先備份後刪除的方式進行,因此不會影響作業效能,而先備份後刪除,雖然備份時間差異不大,但還原的速度會加快許多。文⊙許雅婷



主要儲存廠商紛紛跨足重複資料刪除技術

廠商 廠商動態
DataDomain 於2005年年底將基於COS(Capacity Optimized Storage) 技術的DD400系列儲存伺服器進入臺灣市場,並委由麟瑞科 技代理,現階段已有國內企業採用。
EMC 去年年底收購Avamar獲得該技術,今年將開始在臺銷售, 除了將以磁碟備份方案銷售外,還將搭配自家的VTL銷售。
FalconStor 預計在第二季前發表一款基於重複資料刪除技術的Single Instance Repository(SIR)設備,是與自家VTL搭配銷售。
NetApp 去年年底先將重複資料刪除技術用於FAS3000系列儲存系統 上,並於日前將此技術再應用至FAS6000、NearStor產品 上,為免費內建工具,計畫於今年下半年會將該技術與自家 VTL產品結合。
Quantum 去年收購ADIC獲得該技術,日前新增DXi產品線,推出 DXi300、DXi500兩款設備,國內由零壹科技代理,預計第 二季前引進臺灣。
Symantec 前年年底收購DTC獲得該技術,去年年終發表NetBackup PureDisk 6.0 軟體,並於日前正式在臺發表,預計今年開始 在臺推廣。



相關閱讀:
節省10~20倍儲存空間的重複資料刪除技術
重複資料刪除技術竄起,廠商積極引進臺灣

熱門新聞

Advertisement