分布式文件系統(tǒng)FastDFS的研究與應(yīng)用.pdf

1、隨著互聯(lián)網(wǎng)的發(fā)展，互聯(lián)網(wǎng)信息呈指數(shù)級別增長。以圖片，視頻，音頻等形式出現(xiàn)的信息增長更為迅速，因此如何來存儲和管理這些信息變得越來越難。傳統(tǒng)的存儲架構(gòu)已經(jīng)不能滿足要求，通過調(diào)查研究發(fā)現(xiàn)，可以采用分布式文件存儲系統(tǒng)來解決這些問題。
　　本文在分析比較了國內(nèi)外的分布式文件存儲系統(tǒng)之后，選定了FastDFS作為底層存儲系統(tǒng)。該系統(tǒng)可以提供文件存儲，訪問和管理。本文改進(jìn)了FastDFS分布式文件系統(tǒng)的負(fù)載均衡算法，將考慮的因子由總存儲空間變

2、為存儲空間利用率，連接數(shù)和性能三個因子。實(shí)驗(yàn)分三種情況進(jìn)行，一種是僅考慮存儲空間利用率的情況，第二種是考慮存儲空間利用率和連接數(shù)的情況，第三種是考慮存儲空間利用率，連接數(shù)和性能的情況。通過實(shí)驗(yàn)結(jié)果發(fā)現(xiàn)三種情況的負(fù)載不均衡度分別為0.0010，0.0096和0.01147。改進(jìn)的負(fù)載均衡算法比原算法負(fù)載均衡效果更加明顯。雖然僅考慮存儲空間利用率的算法負(fù)載均衡效果最好，但是加入連接數(shù)和性能因子之后更符合實(shí)際的應(yīng)用場景。最后針對新的算法做了優(yōu)

3、化，將首要考慮的因子由存儲空間利用率變?yōu)樾阅?，雖然負(fù)載均衡效果差一些，但是性能得到了保障，符合實(shí)際的情況。
　　本文第二個工作將FastDFS應(yīng)用于圖片處理系統(tǒng)中，使得系統(tǒng)對海量小文件的處理更加的高效，消除了原有圖片文件系統(tǒng)中的單點(diǎn)故障問題，而且也提高了訪問速度。文章從系統(tǒng)結(jié)構(gòu)設(shè)計到關(guān)鍵技術(shù)的實(shí)現(xiàn)等三個方面介紹了這個圖片處理系統(tǒng)。通過模擬實(shí)際環(huán)境測試，該系統(tǒng)能夠很好地滿足圖片處理系統(tǒng)對接收能力、并發(fā)處理能力和實(shí)時響應(yīng)能力、高擴(kuò)展能