版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、隨著計(jì)算機(jī)網(wǎng)絡(luò)的普及、設(shè)備終端的多樣化以及數(shù)據(jù)收集技術(shù)的不斷進(jìn)步,網(wǎng)絡(luò)信息量呈現(xiàn)爆炸式增長(zhǎng)的趨勢(shì)。傳統(tǒng)基于關(guān)系數(shù)據(jù)庫(kù)的網(wǎng)絡(luò)管理軟件,存在著網(wǎng)絡(luò)帶寬消耗大、管理平臺(tái)負(fù)荷高、可靠性差等許多問(wèn)題。本文基于云計(jì)算環(huán)境,重點(diǎn)圍繞網(wǎng)絡(luò)告警數(shù)據(jù)的聯(lián)機(jī)分析處理和關(guān)聯(lián)規(guī)則的挖掘展開(kāi)研究。
首先,面向下一代網(wǎng)絡(luò)管理應(yīng)用,針對(duì)現(xiàn)有的網(wǎng)絡(luò)告警分析方法存在的維度單一、效率低下、系統(tǒng)內(nèi)存溢出甚至系統(tǒng)崩潰等問(wèn)題,提出了一種基于Hive的網(wǎng)絡(luò)告警信息聯(lián)機(jī)分析
2、處理(On-Line Analytical Processing,OLAP)方法。該方法基于Hive數(shù)據(jù)倉(cāng)庫(kù)體系,首先通過(guò)實(shí)時(shí)采集的海量網(wǎng)絡(luò)告警數(shù)據(jù)進(jìn)行預(yù)處理后映射到 Hive中,再分別構(gòu)建 N-D方體模型與星型模型進(jìn)而實(shí)現(xiàn)Rollup與Cube操作。該方法在域間設(shè)備存在和不存在這兩種情況下都適用。實(shí)驗(yàn)結(jié)果表明,該方法不僅可以實(shí)現(xiàn)數(shù)據(jù)的大批量上傳,還能從多個(gè)維度揭示隱藏的告警定位知識(shí)以及一些有意義的用戶和系統(tǒng)信息,從而為網(wǎng)絡(luò)管理人員提供
3、決策支持。
其次,考慮到下一代網(wǎng)絡(luò)管理應(yīng)用中告警數(shù)據(jù)本身具有的海量、冗余、關(guān)聯(lián)等特點(diǎn),以及現(xiàn)有的PFP算法(基于MapReduce的Frequent-Pattern Growth)存在的內(nèi)存與計(jì)算時(shí)間的雙瓶頸問(wèn)題,提出了一種新的基于MapReduce的快速挖掘算法。該算法采用結(jié)構(gòu)化存儲(chǔ)的告警數(shù)據(jù)模型,通過(guò)簡(jiǎn)單掃描數(shù)據(jù)立方體以減少對(duì)整個(gè)數(shù)據(jù)庫(kù)的重復(fù)掃描,在求取條件模式基時(shí)采用了共享路徑的方式以減少對(duì)樹(shù)的遍歷次數(shù),并應(yīng)用MapRe
4、duce框架以實(shí)現(xiàn)并行計(jì)算。實(shí)驗(yàn)結(jié)果證明,該算法運(yùn)行效率高、擴(kuò)展性好且可靠性強(qiáng)。該改進(jìn)算法能找出各設(shè)備檢測(cè)狀態(tài)告警之間的關(guān)聯(lián)關(guān)系,減少重復(fù)告警,為設(shè)備維護(hù)和網(wǎng)絡(luò)管理提供依據(jù)。
最后,綜合上述基于Hive的告警信息聯(lián)機(jī)分析處理方法和基于MapReduce的快速挖掘算法,設(shè)計(jì)了一個(gè)面向云計(jì)算環(huán)境的告警管理系統(tǒng),并對(duì)網(wǎng)絡(luò)告警管理系統(tǒng)的各個(gè)模塊進(jìn)行了詳細(xì)的設(shè)計(jì)與實(shí)現(xiàn),具體包括告警的采集、存儲(chǔ)、刷新、分析、挖掘與數(shù)據(jù)交互等。該系統(tǒng)的特點(diǎn)
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 云環(huán)境下網(wǎng)管數(shù)據(jù)查詢系統(tǒng)設(shè)計(jì).pdf
- Intranet環(huán)境下網(wǎng)絡(luò)管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 云物流環(huán)境下網(wǎng)絡(luò)優(yōu)化關(guān)鍵問(wèn)題研究.pdf
- 網(wǎng)絡(luò)環(huán)境下網(wǎng)絡(luò)課程的設(shè)計(jì)與開(kāi)發(fā).pdf
- 云平臺(tái)上資源告警系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 數(shù)字媒體環(huán)境下網(wǎng)絡(luò)互動(dòng)廣告系統(tǒng)的分析與設(shè)計(jì).pdf
- 網(wǎng)絡(luò)安全管理系統(tǒng)中告警融合技術(shù)的研究設(shè)計(jì).pdf
- 知識(shí)管理視角下網(wǎng)絡(luò)協(xié)作學(xué)習(xí)系統(tǒng)的設(shè)計(jì)研究.pdf
- Internet-Internet環(huán)境下網(wǎng)絡(luò)管理系統(tǒng)的二次開(kāi)發(fā).pdf
- WEB環(huán)境下網(wǎng)絡(luò)考試系統(tǒng)的研究與實(shí)現(xiàn).pdf
- 綜合網(wǎng)絡(luò)管理告警系統(tǒng)的研究與實(shí)現(xiàn).pdf
- Linux環(huán)境下網(wǎng)絡(luò)教學(xué)系統(tǒng)的應(yīng)用研究.pdf
- Windows環(huán)境下網(wǎng)絡(luò)安全防護(hù)系統(tǒng)研究.pdf
- 高速網(wǎng)環(huán)境下網(wǎng)絡(luò)信息內(nèi)容審計(jì)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 分布式環(huán)境下網(wǎng)絡(luò)服務(wù)管理的研究.pdf
- erp環(huán)境下網(wǎng)絡(luò)財(cái)務(wù)管理模式的探討
- 噪聲環(huán)境下網(wǎng)絡(luò)化時(shí)滯系統(tǒng)的最優(yōu)控制.pdf
- IP網(wǎng)絡(luò)監(jiān)控系統(tǒng)設(shè)計(jì)及告警事件關(guān)聯(lián)研究.pdf
- TD-LTE網(wǎng)絡(luò)告警監(jiān)控管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 綜合網(wǎng)絡(luò)管理系統(tǒng)研究及配置和告警管理子系統(tǒng)采集模塊的設(shè)計(jì)實(shí)現(xiàn).pdf
評(píng)論
0/150
提交評(píng)論