據國外媒體報道,根據近期中立的比較評測,目前最快的去重操作是采用了飛康重復數據刪除軟件的Sun 8-node cluster。
備份專家W Curtis Preston比較了不同廠商的重復數據刪除產品。他使用了供應商自己的性能數字,且在每個node都有自己的獨立指針的情況下忽略了多node的重復執行情況。
Preston說,一個儲存在單一重復數據刪除產品上的新文件將不會被去重,而儲存在多套產品上的同一文件則會被重復去重。每套產品都是獨立的。
采用了Data Domain產品的陣列就不會分享其global指針。Preston說:"NetApp,昆騰,EMC和戴爾,(也)只針對自己的數據進行重復刪除。Diligent,飛康和Sepaton都有多node/global刪除。 "
比如5-node的Sepaton重復陣列就會共享global指針和節點來增加刪除比率。在這種情況下,一個多node的重復數據刪除就好像一個單一的global刪除系統。
Preston以8個小時的備份為基礎,比較速率、數據采集率和去重率。一些廠商采用在線去重,一些則在數據攝取后進行重復數據刪除,這也被稱為后處理,因此這兩個領域的數字很可能會有所不同。
廠商 | 數據攝取速率(MB/s) | 去重速率 (MB/s) | 備注 |
EMC | 1100 | 400 | 2 node,數據各半 (沒有global dedupe) |
Data Domain | 750 | 750 | 只有在OST下發揮最大性能, NFS/CIFS/VTL性能削減四分之一 |
Exagrid | 188 | 無 | 只有1 node(沒有globale dedupe) |
Falconstor/Sun | 11000 | 3200 | 8 node cluster,需要FC磁盤支持 |
IBM/Diligent | 900 | 900 | 2 node cluster,需要FC磁盤支持 |
NetApp | 600 | 無 | 2 node,數據各半(沒有global dedupe) |
Quantum/Dell | 880 | 500 | 攝取速率在后處理模式下進行 (否則可能會在500MB/s) |
SEPATON/HP | 3000 | 1500 | 5 nodes的global去重 |
8小時備份和去重比較結果
他比較了EMC(Disk Library),Data Domain,飛康/Sun,IBM/Diligent,NetApp,昆騰/戴爾和Sepaton/HP(HP OEM了Sepaton的產品)的去重速度。
飛康/Sun的組合使用了8-node cluster和FC驅動器,數據攝取量在11000MB/s。其次是Sepaton/惠普的3000MB/s以及EMC的1100MB/s。昆騰/戴爾采用了后處理而非在線,分數為800MB/s。
NetApp是最慢的,分數為600MB/s。其配置為2-node,但每個node的去重都是獨立運行。昆騰/戴爾如果在在線情況下的去重速率可能會在500MB/s左右。
最快的重復數據刪除引擎是飛康/Sun,去重速率為3200MB/s。其次是Sepaton/惠普的1500MB/s,然后是IBM/Diligent的900MB/s,Data Domain的750MB/s以及EMC的400MB/s。Preston沒有找到NetApp的重復數據刪除速度資料。
Preston也在尋找12小時的備份數據。如果供應商的數據攝取比率是重復刪除比率的兩倍,那么他們需要24小時以上來攝取數據,然后用12小時去重。這意味著其12小時備份的數據攝取效率只能去重率的兩倍。
他還對重復數據刪除的恢復速度做了比較。他的數據來源和使用的產品列在了其博客上。
這是首次全面和中立的進行重復數據刪除速度比較,非常值得一看。