本系列文章的第一部分我們介紹了什么時候應該使用重復數(shù)據(jù)刪除技術，第二部分我們繼續(xù)介紹如何使用重復數(shù)據(jù)刪除技術節(jié)約存儲空間。

在主存儲上應用的特殊要求

因此，雖然后處理重復數(shù)據(jù)刪除有它的優(yōu)勢，但其需要拋開所謂的著陸區(qū)——在數(shù)據(jù)去重前需要額外的空間寫入數(shù)據(jù)。“要使用后處理技術，就必須配置滿足正常使用所需的磁盤空間，” Russell說。這樣可能與使用數(shù)據(jù)去重有所相悖，尤其是面對高價位的存儲容量，特別是閃存時。

這并不奇怪，主要存儲供應商，特別是全閃存陣列產商，一直都是推動在線重復數(shù)據(jù)刪除的第一集團軍。

對在線重復數(shù)據(jù)的支持正逐漸成為全閃存和混合閃存陣列市場的入門指南。所以考慮每GB閃存成本是十分有意義的，Storage Switzerland的Crump說?！叭绻脖P驅動器的成本低于1美元/GB，那么數(shù)據(jù)去重技術的價值相對較低，” Crump說，“但是，閃存成本在8-9美元/GB，遠高出重復數(shù)據(jù)刪除5到10倍，這時候數(shù)據(jù)去重相當有意義?！?

重復數(shù)據(jù)刪除的相關數(shù)據(jù)

<5％：目前市面支持在線數(shù)據(jù)去重的磁盤陣列份額

75％：預測未來三年市面上將支持數(shù)據(jù)去重和壓縮的磁盤陣列份額

6：1：重復數(shù)據(jù)刪除的平均比例

40：1：重復數(shù)據(jù)刪除在VDI和文本文件環(huán)境下的刪除率

10：1：處理圖片去重是的刪除率

$ 1：普通硬盤的每GB成本

$8~$9：閃存驅動器的每GB成本

新一代提供在線重復數(shù)據(jù)刪除閃存陣列的廠商被Crump稱做“ankle-biters”，緊跟在第一級存儲供應商的后面。它們包括Pure Storage、Nimble和Tegile等等。

目前還不支持在線數(shù)據(jù)去重的閃存供應商也很快采納此功能。 同時，Violin Memory預計今年晚些時候在其Concerto 7000全閃存陣列中提供在線數(shù)據(jù)去重與壓縮功能。

重復數(shù)據(jù)刪除技術不僅能夠更好地利用昂貴的閃存資源，而且也比較容易實現(xiàn)。與大多數(shù)存儲供應商相比，“數(shù)據(jù)去重技術在閃存上的表現(xiàn)更好，因為每秒的輸入/輸出操作對閃存來說幾乎無須任何代價，”超級融合基礎設施提供商SimpliVity公司的產品戰(zhàn)略副總裁Jesse St. Laurent說。

SimpliVity基于其產品定制的嵌入式芯片提供重復數(shù)據(jù)刪除與壓縮技術。City of Arvada, Colo.是SimpliVity的一名用戶， CIO Ron Czarnecki表示其存儲效率率為13.5:1，而性能和Cisco UCS服務器或Dell Compellent存儲不相仲伯，甚至還更好。

最后的前線

傳統(tǒng)存儲供應商已經開始添加在線數(shù)據(jù)去重功能。NetAPP于2007年針對其FAS陣列推出了在線數(shù)據(jù)刪除ASIS標準。盡管如此，NetAPP陣列的主存儲數(shù)據(jù)刪除附帶非常重要的注意事項，Taneja說，使用在線去重“將嚴重降低存儲性能到最低點” ，而且只支持后處理模式。NetAPP的16位數(shù)據(jù)去重算法同樣“沒有辦法達到非常低的碰撞概率，”同樣還是可能出現(xiàn)兩個不同組塊出現(xiàn)相同哈希值的情況。

NetApp的競爭者正迎頭趕上。EMC在其VNX系列產品上提供塊數(shù)據(jù)去重，并在其Isilon橫向擴展存儲提供后處理去重功能。Dell Compellent與EqualLogic陣列都支持主存儲去重功能，同樣還有HP 3PAR StoreServ 陣列。 Hitachi Data Systems的網絡訪問服務器(NAS)和Permabit設備制造商的統(tǒng)一存儲陣列都支持去重功能，IBM在其Storwize陣列與SAN卷組控制器上都提供了去重功能。

但是這些產品并沒令人滿意，無法讓數(shù)據(jù)去重技術去支持現(xiàn)有的存儲陣列。Gartner的Russell說。理論上，推廣這項技術可以延長已經在用的存儲的服務周期，他說?！坝腥藭热唤邮堋?，這取決于他們如何開放這項新技術。

Permabit的新款SANblox，是基于Albireo Index Engine技術的在線數(shù)據(jù)刪除設備，可以配置在用戶的傳統(tǒng)光纖SAN陣列前。SANblox為需要在線數(shù)據(jù)去重功能的傳統(tǒng)存儲陣列帶來了新的選項。

SANblox為第一級存儲陣列用戶提供了一種在現(xiàn)有存儲設備上實現(xiàn)在線數(shù)據(jù)去重的快速方法，Storage Switzerland的Crump說。

“有趣的是，閃存產商正在從這些傳統(tǒng)存儲大戶手里爭搶市場份額。要解決這個問題，只靠贈送存儲是遠遠不夠的，”他說。

不僅如此，Intel芯片也即將在軟件中提供在線數(shù)據(jù)去重所需的馬力，Taneja預測，而且無須專有的設備或芯片。

“下階段，Intel芯片不僅有足夠的能力支持數(shù)據(jù)去重，” Taneja說，而且其還將“集成在每個主存儲陣列與融合系統(tǒng)中的功能?！睋Q句話說，“從現(xiàn)在開始的三年后，我們就不需要再討論這個問題了。”

河南億恩科技股份有限公司(mszdt.com)始創(chuàng)于2000年，專注服務器托管租用，是國家工信部認定的綜合電信服務運營商。億恩為近五十萬的用戶提供服務器托管、服務器租用、機柜租用、云服務器、網站建設、網站托管等網絡基礎服務，另有網總管、名片俠網絡推廣服務，使得客戶不斷的獲得更大的收益。
服務器/云主機 24小時售后服務電話：0371-60135900
虛擬主機/智能建站 24小時售后服務電話：0371-55621053
網絡版權侵權舉報電話：0371-60135995
服務熱線：0371-60135900