面向云存儲(chǔ)的分布式文件系統(tǒng)關(guān)鍵技術(shù)研究.pdf

1、云計(jì)算是當(dāng)前研究與應(yīng)用的熱點(diǎn)問(wèn)題。云存儲(chǔ)作為云計(jì)算的底層服務(wù),對(duì)上層服務(wù)提供重要的支持；同時(shí),云存儲(chǔ)可以有效的存儲(chǔ)和管理海量數(shù)據(jù),所以更是成為專(zhuān)家學(xué)者們關(guān)注的焦點(diǎn)。
　　 云存儲(chǔ)是一種架構(gòu)復(fù)雜的分布式文件系統(tǒng),一是其建立在云計(jì)算系統(tǒng)的基礎(chǔ)設(shè)施之上,這樣的基礎(chǔ)實(shí)施是基于廉價(jià)的或虛擬化了的不可信物理硬件；二是其必須支持超大節(jié)點(diǎn)規(guī)模和海量數(shù)據(jù)的高效存儲(chǔ),這對(duì)于系統(tǒng)架構(gòu)和模塊設(shè)計(jì)的關(guān)鍵技術(shù)提出了巨大的挑戰(zhàn)。
　　 本文首先研究了

2、面向云存儲(chǔ)的分布式文件系統(tǒng)中關(guān)鍵的架構(gòu)技術(shù)?；谥鲝氖浇Y(jié)構(gòu)的分布式文件系統(tǒng),提出了通過(guò)元數(shù)據(jù)服務(wù)器的多個(gè)代理機(jī)來(lái)構(gòu)建對(duì)等式的元數(shù)據(jù)服務(wù)層的通用云存儲(chǔ)架構(gòu)方案,分析與評(píng)估表明其具有較高的可用性和可靠性。
　　 針對(duì)文件系統(tǒng)中元數(shù)據(jù)和文件數(shù)據(jù)存儲(chǔ)和訪問(wèn)的不同特點(diǎn),面向云存儲(chǔ)的分布式文件系統(tǒng)架構(gòu)主要分為元數(shù)據(jù)服務(wù)層和塊數(shù)據(jù)服務(wù)層。本文隨后研究了這兩層的關(guān)鍵技術(shù)。
　　 對(duì)于前者,主要研究了基于所提架構(gòu)中的元數(shù)據(jù)復(fù)制技術(shù)。Pax

3、os是眾多云存儲(chǔ)系統(tǒng)中采用的數(shù)據(jù)一致性算法。本文通過(guò)工程實(shí)現(xiàn)上節(jié)點(diǎn)監(jiān)控機(jī)制的采用和通信協(xié)議的優(yōu)化,改進(jìn)了基本的paxos算法,并用其較好的解決了該架構(gòu)下的元數(shù)據(jù)復(fù)制問(wèn)題。實(shí)驗(yàn)證明了優(yōu)化后的算法由于減少了數(shù)據(jù)提交過(guò)程中的消息數(shù)和網(wǎng)絡(luò)帶寬的使用,性能得到了一定的提升。
　　 對(duì)于后者,主要研究了其高效的存儲(chǔ)技術(shù)。在指出目前云存儲(chǔ)系統(tǒng)中固定文件分塊策略的弊端后,本文提出了一種動(dòng)態(tài)的大小可變的文件分塊存儲(chǔ)算法,分析和仿真表明,該算法能有