優(yōu)化性能的分布式存儲子系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、現(xiàn)今,人們趕上了互聯(lián)網(wǎng)的大潮,進(jìn)入了互聯(lián)網(wǎng)爆炸的時代。數(shù)據(jù)以超乎過去幾十甚至幾百倍的速度在不斷增長,這導(dǎo)致了人們處理的信息量較之過去呈現(xiàn)指數(shù)級上升。當(dāng)面臨問題時,已經(jīng)不再是幾臺個人計(jì)算機(jī)能夠搞定的范疇?；ヂ?lián)網(wǎng)將全世界人類的大腦集中在一起的同時,也拋出了一個難題:如何處理海量爆炸式增長的數(shù)據(jù)。為了解決這一難題,人們提出了云的概念,由此衍生出了分布式理論的雛形。
　　另外,各大公司的不同應(yīng)用對云端數(shù)據(jù)存儲的要求越來越高,尤其是針對不同

2、場景提出了不同的要求,都使得傳統(tǒng)的分布式框架在處理問題的時候有氣無力。為了豐富用戶不斷增加的需求的變化以及為了提高更好的用戶體驗(yàn),現(xiàn)有的分布式文件系統(tǒng)做了其相應(yīng)的改變。實(shí)驗(yàn)室也本著科研的目的,借鑒國內(nèi)外經(jīng)典的分布式系統(tǒng)框架,設(shè)計(jì)了我們自己的分布式文件系統(tǒng)C_STORE。本文首先介紹了國內(nèi)外集中主流的分布式文件系統(tǒng),并對它們進(jìn)行了研究,繼而給出本系統(tǒng)數(shù)據(jù)管理模塊的設(shè)計(jì)方案,之后提出性能瓶頸,并進(jìn)行了改進(jìn)。
　　C_STORE采用了負(fù)

3、載均衡和恢復(fù)策略,具有良好的可擴(kuò)展性和可靠性。它將數(shù)據(jù)與元數(shù)據(jù)分離管理,這使客戶端對服務(wù)器的訪問高效化,同時也使資源的管理方便化,既充分利用了資源,又減輕了服務(wù)端的壓力。在客戶端方面,我們分別實(shí)現(xiàn)了基于不同平臺的客戶端軟件,如UNIX、ANDROID以及WIN平臺下都有其可用的客戶端。同時實(shí)現(xiàn)了用戶認(rèn)證模塊,方便了用戶登錄以及用戶存儲配額的分配,保證了用戶賬戶的安全。
　　數(shù)據(jù)存儲模塊主要為用戶提供良好的數(shù)據(jù)存儲功能,為了保證用戶