基于MongoDB的分布式日志管理系統(tǒng)設(shè)計.pdf

1、現(xiàn)代計算機(jī)和互聯(lián)網(wǎng)的應(yīng)用規(guī)模急劇擴(kuò)大,各種操作系統(tǒng)、應(yīng)用程序、設(shè)備和安全產(chǎn)品產(chǎn)生了大量分布的日志數(shù)據(jù),在很多情況下日志分析工作的對象不再是單點(diǎn)、單類型日志,而需要綜合處理在物理上分布的不同類型的日志數(shù)據(jù)。考慮到日志分析工作的重要性,對分布式日志數(shù)據(jù)的統(tǒng)一處理和管理成為一個有價值的研究課題,而采用高性能的分布式數(shù)據(jù)庫對這些日志數(shù)據(jù)進(jìn)行保存和操作是目前的主要趨勢之一。
　　 在此背景下,本論文針對網(wǎng)宿CATM內(nèi)容與流量管理平臺系統(tǒng)實

2、際運(yùn)行中的需要,分析其日志特點(diǎn)和用戶需求,對其管理系統(tǒng)的設(shè)計和應(yīng)用進(jìn)行了研究。在研究中,考察了當(dāng)前流行的NOSQL運(yùn)動和各種NOSQL產(chǎn)品,進(jìn)行了全面對比分析,選擇了MongoDB數(shù)據(jù)庫作為繼續(xù)研究的重點(diǎn)。在進(jìn)一步考察了MongoDB的技術(shù)特性、各種優(yōu)缺點(diǎn)和應(yīng)用案例之后,結(jié)合實際情況,選定它作為存儲和管理日志的載體。
　　 此后,論文按照軟件工程的流程,在約定系統(tǒng)規(guī)模的前提下,進(jìn)行了用戶需求的收集和分析工作。作為這個階段的工作成

3、果,列舉了用戶的功能性和非功能性需求,將系統(tǒng)的負(fù)載數(shù)據(jù)納入本系統(tǒng),并規(guī)定了系統(tǒng)的主要功能和性能。
　　 隨后,論文根據(jù)需求分析結(jié)果和軟硬件、系統(tǒng)資源限制,以MongoDB2.0.4版本和Mongo-C-Driver0.4版本為基礎(chǔ),進(jìn)行了系統(tǒng)的概要設(shè)計和詳細(xì)設(shè)計工作,先后描述了系統(tǒng)的靜態(tài)結(jié)構(gòu)、動態(tài)結(jié)構(gòu)、程序構(gòu)架,并進(jìn)行了數(shù)據(jù)庫的設(shè)計。
　　 論文按照設(shè)計方案最終實現(xiàn)了分布式日志管理系統(tǒng),完成了CATM日志和系統(tǒng)負(fù)載數(shù)據(jù)的