針對(duì)虛擬機(jī)備份的分布式重復(fù)數(shù)據(jù)刪除系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、典型云計(jì)算服務(wù)需要支持?jǐn)?shù)十萬(wàn)用戶(hù)通過(guò)虛擬化共享硬件平臺(tái)，然而這些虛擬機(jī)運(yùn)行環(huán)境和鏡像之間具有高度的相似性，許多用戶(hù)使用版本相同的虛擬機(jī)。大量重復(fù)數(shù)據(jù)的多次傳輸和存儲(chǔ)將會(huì)消耗大量硬件資源，極大地增加了云平臺(tái)成本。基于云環(huán)境下虛擬機(jī)鏡像備份的場(chǎng)景，針對(duì)海量數(shù)據(jù)重復(fù)數(shù)據(jù)刪除過(guò)程中存在的性能和擴(kuò)展性較差的問(wèn)題，研究云環(huán)境下高性能重復(fù)數(shù)據(jù)刪除技術(shù)具有重要意義。
　　針對(duì)上述問(wèn)題，首先設(shè)計(jì)了一種高性能的分布式重復(fù)數(shù)據(jù)刪除系統(tǒng)，該系統(tǒng)由命名節(jié)點(diǎn)

2、服務(wù)器維護(hù)全局地址映射表等全局?jǐn)?shù)據(jù)結(jié)構(gòu)，并進(jìn)行元數(shù)據(jù)管理和負(fù)載均衡調(diào)度，多臺(tái)數(shù)據(jù)節(jié)點(diǎn)采用一致性哈希的方案存放指紋和數(shù)據(jù)，支持多臺(tái)客戶(hù)端并發(fā)備份和恢復(fù)操作，協(xié)同完成重復(fù)數(shù)據(jù)刪除功能的同時(shí)，保證系統(tǒng)的讀寫(xiě)性能和擴(kuò)展性。其次，設(shè)計(jì)了一種部署在客戶(hù)端的指紋過(guò)濾器，能夠以較小的內(nèi)存開(kāi)銷(xiāo)，快速檢測(cè)相鄰的多個(gè)備份版本之間的大部分冗余數(shù)據(jù)，從而減少了元數(shù)據(jù)和數(shù)據(jù)塊的傳輸，節(jié)省了網(wǎng)絡(luò)帶寬，提高了備份效率。最后，系統(tǒng)采用將指紋和相應(yīng)數(shù)據(jù)塊散列存放到多個(gè)數(shù)據(jù)