云存儲(chǔ)技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動(dòng)系統(tǒng)中的研究與應(yīng)用.pdf

1、隨著數(shù)據(jù)存儲(chǔ)的高速增長(zhǎng)，傳統(tǒng)的數(shù)據(jù)庫已經(jīng)無法滿足人們處理大規(guī)模數(shù)據(jù)的需求，有關(guān)海量數(shù)據(jù)的處理與存儲(chǔ)成為當(dāng)前的研究熱點(diǎn)。Hadoop文件系統(tǒng)HDFS成為研究云存儲(chǔ)應(yīng)用的參考模型。但現(xiàn)有的HDFS架構(gòu)對(duì)小文件的存儲(chǔ)支持不足，而且默認(rèn)的副本放置策略會(huì)影響存儲(chǔ)性能。本文深入研究了HDFS的副本放置策略以及小文件存儲(chǔ)問題。
　　本文從課題的研究背景和意義出發(fā)，分析了云存儲(chǔ)系統(tǒng)及聯(lián)動(dòng)系統(tǒng)的研究現(xiàn)狀，明確了云存儲(chǔ)對(duì)于網(wǎng)絡(luò)安全設(shè)備聯(lián)動(dòng)系統(tǒng)日志文件

2、存儲(chǔ)的必要性和現(xiàn)實(shí)意義。主要解決了以下兩個(gè)問題：第一，改進(jìn)了HDFS中的默認(rèn)副本放置策略，采用基于信息熵的TOPSIS多屬性決策方法，為數(shù)據(jù)塊的副本選擇數(shù)據(jù)節(jié)點(diǎn)，利用具體實(shí)例對(duì)改進(jìn)方案進(jìn)行了驗(yàn)證，實(shí)驗(yàn)表明改進(jìn)方案提高了系統(tǒng)的整體性能；第二，優(yōu)化了小文件存儲(chǔ)方案，對(duì)整個(gè)優(yōu)化方案進(jìn)行了設(shè)計(jì)，包括數(shù)據(jù)預(yù)存儲(chǔ)節(jié)點(diǎn)的設(shè)計(jì)，小文件合并算法的設(shè)計(jì)，小文件索引結(jié)構(gòu)的設(shè)計(jì)，小文件合并過程的設(shè)計(jì)，并通過實(shí)驗(yàn)進(jìn)行了驗(yàn)證，實(shí)驗(yàn)表明在存儲(chǔ)海量小文件時(shí)，小文件的存