骨干通道上的網(wǎng)絡(luò)論壇通信信息監(jiān)測和分析的關(guān)鍵技術(shù)研究.pdf

1、經(jīng)過近二十年的飛速發(fā)展,互聯(lián)網(wǎng)已經(jīng)從一種便捷的通信工具,逐漸演變成為一個虛擬社會。網(wǎng)絡(luò)論壇是這個虛擬社會的重要組成部分,論壇中的言論傳播面廣、傳播速度快,在一定程度上引導(dǎo)了輿論傾向。因此對網(wǎng)絡(luò)論壇的通信信息進(jìn)行監(jiān)測和分析是了解當(dāng)前輿情態(tài)勢的有效渠道,對于網(wǎng)絡(luò)虛擬社會的有序治理具有重要意義。本論文針對骨干通道上的網(wǎng)絡(luò)論壇通信信息的監(jiān)測和分析的關(guān)鍵技術(shù)進(jìn)行了研究,主要包括以下內(nèi)容:
　　1.提出了一個“分層分布的高速骨干通信信息監(jiān)測分

2、析系統(tǒng)結(jié)構(gòu)模型”。該模型橫向根據(jù)功能和技術(shù)特性分層,縱向遵循骨干網(wǎng)通道的屬地化管理原則構(gòu)建分布式監(jiān)測節(jié)點。對網(wǎng)絡(luò)通信數(shù)據(jù)捕獲、信息抽取、信息存儲、深度分析、協(xié)同監(jiān)測業(yè)務(wù)等重要環(huán)節(jié)的處理過程進(jìn)行了歸納和抽象。其中的數(shù)據(jù)捕獲、信息抽取、深度分析技術(shù)作為后續(xù)章節(jié)展開的重點。
　　2.提出了一個“基于邏輯輸出端口分組的過濾分流器設(shè)備”的設(shè)計方案?？梢赃M(jìn)行靈活的數(shù)據(jù)包復(fù)制和過濾,實現(xiàn)組內(nèi)不同邏輯端口分流負(fù)載的靈活分配以及外接交換機(jī)二級分流。

3、并在此基礎(chǔ)上,提出了“動態(tài)反饋式前向緩存的過濾分流機(jī)制”的過濾分流優(yōu)化機(jī)制,可以實現(xiàn)會話級別基于數(shù)據(jù)內(nèi)容的過濾,以及靈活的關(guān)聯(lián)數(shù)據(jù)完整截獲。可以顯著降低信息還原抽取層設(shè)備的規(guī)模。
　　3.提出了一個“基于SVM和層次CRF的旁路截獲數(shù)據(jù)的網(wǎng)絡(luò)論壇信息抽取方法”。采用SVM技術(shù)通過對截獲數(shù)據(jù)的宏觀特征分析,自動識別論壇網(wǎng)站;采用層次CRF技術(shù),對網(wǎng)絡(luò)論壇會話的行為類型進(jìn)行判斷,并對相關(guān)信息元素進(jìn)行類型標(biāo)注,在此基礎(chǔ)上形成信息抽取所用

4、的wtapper;采用wrapper技術(shù)對骨干網(wǎng)通道上的網(wǎng)絡(luò)論壇信息進(jìn)行自動抽取。
　　4.提出了“基于旁路截獲數(shù)據(jù)的網(wǎng)絡(luò)言論特征參量體系”,以及“基于網(wǎng)絡(luò)言論特征參量的深度分析方法”。充分考慮了論壇網(wǎng)站、版面、網(wǎng)民和帖子實體間的相互關(guān)系,將如網(wǎng)民對言論的興趣、網(wǎng)民參與議論的程度、言論的擴(kuò)散速度、網(wǎng)站關(guān)注程度等要素融合在一起;能夠充分利用旁路截獲數(shù)據(jù)的特性,通過對旁路截獲數(shù)據(jù)中抽取的重要元素進(jìn)行分析而獲取網(wǎng)絡(luò)言論規(guī)律特性,進(jìn)行網(wǎng)絡(luò)