高效云存儲緩存調(diào)度系統(tǒng)設(shè)計與實現(xiàn).pdf

1、隨著大數(shù)據(jù)時代的來臨，云存儲也迎來了前所未有的發(fā)展。
　　當前國內(nèi)云存儲行業(yè)迅速發(fā)展的同時也遇到了比較大的問題。阻礙國內(nèi)的云存儲行業(yè)發(fā)展的首先就是慢速網(wǎng)絡(luò)問題。國內(nèi)的網(wǎng)絡(luò)連接速度遠低于國際平均水平，慢速的網(wǎng)絡(luò)讓云存儲服務(wù)的質(zhì)量很難滿足用戶要求。除了慢速網(wǎng)絡(luò)，云環(huán)境下大量的重復(fù)數(shù)據(jù)也使得云存儲服務(wù)提供商們的存儲硬件以及網(wǎng)絡(luò)帶寬的利用率比較低，這也無形中增加了云存儲服務(wù)的成本、降低用戶體驗。
　　針對慢速網(wǎng)絡(luò)和重復(fù)數(shù)據(jù)問題，當前

2、云存儲服務(wù)提供商們已有一些優(yōu)化方案。例如，在用戶上傳文件時采用md5比對的方法進行文件級重刪，進而優(yōu)化帶寬利用率。該種優(yōu)化措施存在重刪粒度太粗并且會消耗云存儲客戶端的計算資源的問題。
　　考慮到云存儲系統(tǒng)中一般都會使用緩存，由于訪問緩存的高效，客戶端可以直接和緩存節(jié)點進行完整的數(shù)據(jù)交互。針對慢速網(wǎng)絡(luò)和重復(fù)數(shù)據(jù)問題，可以對緩存調(diào)度過程做更細致的優(yōu)化。優(yōu)化措施包括在調(diào)度過程中的相似文件搜索和相似文件差分同步。
　　采用按文件內(nèi)容