基于FastDFS的大并發(fā)問題的研究與應(yīng)用.pdf

1、隨著時(shí)代的發(fā)展，數(shù)據(jù)的信息量出現(xiàn)了爆炸式的增長，單純的分布式文件系統(tǒng)已經(jīng)很難滿足海量數(shù)據(jù)的處理請求。目前，針對文件系統(tǒng)所面臨的海量小文件大并發(fā)請求問題，許多學(xué)者都對其展開了研究，但是已有的研究成果依然存在一些不足之處。因此本論文主要研究如何進(jìn)一步提高FastDFS的文件處理能力，以便更好的解決海量小文件存儲(chǔ)所面臨的大并發(fā)問題。本論文的主要工作如下:
　　(1)簡單概述本課題的研究背景及意義，同時(shí)對分布式文件系統(tǒng)、非關(guān)系型數(shù)據(jù)庫、服

2、務(wù)器集群等的國內(nèi)外研究現(xiàn)狀進(jìn)行了重點(diǎn)介紹，為接下來本文的相關(guān)技術(shù)理論知識研究做了很好的鋪墊。
　　(2)首先分別對FastDFS、Redis數(shù)據(jù)庫、Nginx集群進(jìn)行了深入的研究與分析，總結(jié)出它們各自的優(yōu)勢與不足;其次針對它們在應(yīng)對大并發(fā)問題所表現(xiàn)出的不足，提出將FastDFS、Redis數(shù)據(jù)庫以及Nginx服務(wù)器集群同時(shí)應(yīng)用于實(shí)際研發(fā)項(xiàng)目中，在綜合它們優(yōu)點(diǎn)的同時(shí)彌補(bǔ)各自的不足之處，從而更好的應(yīng)對大并發(fā)問題;最后通過模擬實(shí)驗(yàn)及實(shí)驗(yàn)

3、數(shù)據(jù)結(jié)果的分析對比，驗(yàn)證了本文提出的組合架構(gòu)FastDFS+Redis+Nginx集群與原有的FastDFS+Redis架構(gòu)相比，在處理海量用戶的大并發(fā)請求時(shí)，無論是文件上傳還是文件下載所需要的處理時(shí)間都會(huì)明顯減少。
　　(3)通過引入Piece機(jī)制，重新利用了FastDFS文件存儲(chǔ)結(jié)構(gòu)中大量的閑置空間，不僅提高了文件的存儲(chǔ)空間利用率，而且優(yōu)化了FastDFS本身的性能。通過模擬實(shí)驗(yàn)及對相關(guān)實(shí)驗(yàn)數(shù)據(jù)的分析，驗(yàn)證了本文提出的引入Pi