秀一下我們生產(chǎn)環(huán)境數(shù)據(jù)備份情況。

princeduan

生產(chǎn)環(huán)境中數(shù)據(jù)的存儲(chǔ)情況（使用帶有重復(fù)數(shù)據(jù)刪除、壓縮功能的磁盤備份）。
請看紅色部分

容量    24TB  
系統(tǒng)空間    4.2TB (17.5%)  
數(shù)據(jù)空間    178.5GB (0.7%)
奇偶校驗(yàn)&Meta數(shù)據(jù)空間   97.4GB (0.4%)  
剩余空間    19.5TB (81.4%)  
存儲(chǔ)數(shù)據(jù)量    7.3TB  
壓縮率    40.7:1

如果沒有重復(fù)數(shù)據(jù)刪除功能，需要空間——存儲(chǔ)數(shù)據(jù)量 7.3TB；
因?yàn)橹貜?fù)數(shù)據(jù)刪除功能實(shí)際占用空間——數(shù)據(jù)空間 178.5GB。
壓縮率為7.3TB/178.5GB=40.7

感覺很爽！

hachikoopenres

行外人，沒看懂

princeduan

回復(fù) 2# hachikoopenres


原理很簡單，就是磁盤集成了軟件功能。
在數(shù)據(jù)寫入磁盤之前，進(jìn)行分析并刪除重復(fù)數(shù)據(jù)塊（只保留不重復(fù)的數(shù)據(jù)塊），
并進(jìn)行物理壓縮后再寫入。從而達(dá)到節(jié)省磁盤空間的目的。

hachikoopenres

princeduan 發(fā)表于 2013-12-17 11:03
回復(fù) 2# hachikoopenres

嗯，這樣應(yīng)該可以減少很多數(shù)據(jù)冗余了

princeduan

回復(fù) 4# hachikoopenres

是的，就我現(xiàn)在這個(gè)情況，相當(dāng)于給我節(jié)省了7TB多的存儲(chǔ)空間。
太適合我們了，心情那叫一個(gè)爽啊！

dengbao2001

重復(fù)數(shù)據(jù)刪除是比較有用，不過是軟件的，對(duì)電腦要求蠻高的

princeduan

回復(fù) 6# dengbao2001

你說的是采用在業(yè)務(wù)服務(wù)器端進(jìn)行重復(fù)數(shù)據(jù)刪除技術(shù)的情況，
我說的這個(gè)是在數(shù)據(jù)傳輸?shù)酱疟P存儲(chǔ)端，寫入磁盤前進(jìn)行重復(fù)數(shù)據(jù)刪除。
所以，沒有你說的顧慮。同時(shí)，因?yàn)樵趯懭肭斑M(jìn)行重復(fù)數(shù)據(jù)刪除，可以更有效的節(jié)省磁盤空間。

dengbao2001

重復(fù)數(shù)據(jù)刪除可以用在客戶端做，不過這樣對(duì)客戶端壓力蠻大的，所以沒考慮這種方案

dengbao2001

重復(fù)數(shù)據(jù)刪除可以用在客戶端做，不過這樣對(duì)客戶端壓力蠻大的，所以沒考慮這種方案

princeduan

不太明白你說的方式。你說的是以下哪種方式？
我感覺Inline還是比較好的。

InLine方式：在數(shù)據(jù)要寫入的時(shí)候進(jìn)行重復(fù)刪除。（上面我提到的）
缺點(diǎn)：備份的時(shí)候負(fù)荷集中在存儲(chǔ)器端

PreProcess方式：在業(yè)務(wù)系統(tǒng)安裝Agent，對(duì)數(shù)據(jù)進(jìn)行重復(fù)刪除后，把數(shù)據(jù)傳輸?shù)酱鎯?chǔ)端。
缺點(diǎn)：需要答復(fù)改動(dòng)現(xiàn)有備份環(huán)境，需要考慮對(duì)業(yè)務(wù)系統(tǒng)的負(fù)荷。

PostProcess方式：數(shù)據(jù)不經(jīng)過任何重復(fù)刪除或者壓縮，保存到存儲(chǔ)器后，再進(jìn)行重復(fù)刪除。
缺點(diǎn)：需要很多不必要的磁盤空間。需要考慮備份時(shí)間和重復(fù)數(shù)據(jù)刪除時(shí)間。