基于用戶行為分析的分布式文件系統(tǒng)動態(tài)備份機(jī)制.pdf

1、目前大多數(shù)分布式文件系統(tǒng)采用靜態(tài)備份機(jī)制保證系統(tǒng)的高可靠性，其要求文件的訪問模式和存取節(jié)點(diǎn)范圍在其生命周期中保持一致，由于用來備份的文件副本數(shù)量全局統(tǒng)一，忽略了文件重要程度對可靠性要求的影響，使得備份機(jī)制靈活性差，無法應(yīng)對系統(tǒng)規(guī)模及被訪問量的變化；另外靜態(tài)備份機(jī)制要求文件的備份位置固定采用一種存儲方案，無法應(yīng)對多變的應(yīng)用環(huán)境。因此本課題以科技部網(wǎng)絡(luò)視頻評審為依托，針對靜態(tài)備份機(jī)制靈活性差及如何提高系統(tǒng)可靠性的問題展開研究。本文的主要工作

2、和貢獻(xiàn)如下：
　?。?）針對靜態(tài)備份機(jī)制靈活性差的問題，提出了一種基于用戶行為分析的動態(tài)備份機(jī)制，一定程度上提高了系統(tǒng)的可靠性。
　　首先，利用具體實(shí)例來闡述用戶行為的特點(diǎn)，通過對用戶行為特點(diǎn)的提取與歸納，建立了用戶行為分析模型；其次，針對靜態(tài)備份機(jī)制靈活性差的問題，提出了動態(tài)備份策略，結(jié)合用戶行為分析建立一種動態(tài)備份機(jī)制。隨著系統(tǒng)規(guī)模及訪問量的變化，系統(tǒng)各節(jié)點(diǎn)及各文件的可靠性要求也在發(fā)生改變，通過分析用戶行為獲得相關(guān)信息來

3、動態(tài)的改變備份數(shù)量及確定備份位置，將文件重要程度這一指標(biāo)有效地納入可靠性保障體系中，應(yīng)對系統(tǒng)規(guī)模和訪問量的變化，具有較強(qiáng)的靈活性，從而提高了系統(tǒng)的可靠性，適合大規(guī)模的分布式存儲系統(tǒng)。
　?。?）為了證明動態(tài)備份機(jī)制可以提高系統(tǒng)的可靠性，同時(shí)可以解決靜態(tài)備份分布式文件系統(tǒng)靈活性差的缺點(diǎn)，本文將動態(tài)備份機(jī)制與 HDFS建立基于 HDFS之上的備份系統(tǒng)，并應(yīng)用于“網(wǎng)絡(luò)視頻評審數(shù)據(jù)分布式存儲系統(tǒng)”。
　　HDFS是開源的分布式文件系

4、統(tǒng)，通過靜態(tài)備份機(jī)制保障系統(tǒng)的高可靠性，作為實(shí)現(xiàn)海量數(shù)據(jù)存儲的系統(tǒng)被普遍使用，但其備份事前指定的策略具有靈活性差的弊端，導(dǎo)致無法應(yīng)對外界環(huán)境的變化，本文結(jié)合HDFS靜態(tài)備份機(jī)制的優(yōu)點(diǎn)，解決其靈活性差的缺點(diǎn)設(shè)計(jì)并實(shí)現(xiàn)了基于HDFS之上的備份系統(tǒng)，并將該系統(tǒng)應(yīng)用于為科技部建立的“網(wǎng)絡(luò)視頻評審數(shù)據(jù)分布式存儲系統(tǒng)”中。
　　（3）為了量化評價(jià)靜態(tài)備份機(jī)制和動態(tài)備份機(jī)制的可靠性優(yōu)劣，本文建立一套可靠性評價(jià)體系，從抗毀性和生存性兩方面來設(shè)計(jì)指