網絡輿情發(fā)現與分析系統(tǒng)設計與實現.pdf

1、互聯網的高速發(fā)展使網絡信息越來越難以處理,傳統(tǒng)的以人工分類為基礎的處理方式已完全不能夠適應如此規(guī)模的網絡信息量得處理工作,為此,很有必要依靠信息通訊技術,建立網絡輿情監(jiān)控分析系統(tǒng),及時應對網絡輿情,由被動防堵化為主動梳理、引導。作為一個新的研究課題,對網絡輿情的監(jiān)控和分析,已需要建立在高科技的現代信息技術當中,從而能夠及時面對網絡輿情突發(fā)事項并在第一時間對其進行主動控制。
　　網絡輿情發(fā)現與分析系統(tǒng)的目的是開發(fā)出用于業(yè)務單位實際工

2、作的工具性產品,能夠快速地針對所關注的話題檢索關注范圍內的網站上的言論,做出統(tǒng)計分析和預測預警。特別是針對一些網站和論壇及以微博為代表的自媒體,通過對互聯網海量相關信息自動獲取、提取、分類、聚類、主題監(jiān)測、專題聚焦,自定義監(jiān)測等,實現將用戶所需信息及時匯集,大幅減少人工在各個論壇收集數據的工作量,并將網頁提供的信息按規(guī)范的格式進行顯示,有簡單的統(tǒng)計分析。繼而擴充采集的形式,并進行多角度的統(tǒng)計分析和圖形化顯示。進一步地,增加深度分析和網絡

3、輿情治理建議。
　　該系統(tǒng)包括數據采集、數據處理、輿情分析三個模塊,需要實現數據采集、網頁數據提取、數據統(tǒng)計分析、輿情數據處理和系統(tǒng)管理等功能。通過用戶給出關鍵詞的組合規(guī)則,通過搜索引擎和對關注網站版面使用專用爬蟲全爬過濾這兩種方式對數據進行采集。即對特定種類的以網絡為載體的新聞和消息在收集后通過網頁凈化、詞頻統(tǒng)計等手段對信息進行有效的預處理活動,并將預處理的所得結果入庫,并通過數據挖掘算法對信息進行分析,最后得到一定時期內網絡所