基于垂直搜索引擎的輿情預(yù)警分析平臺(tái).pdf

1、隨著網(wǎng)絡(luò)信息化以及手機(jī)移動(dòng)端的飛速發(fā)展，互聯(lián)網(wǎng)已逐漸代替?zhèn)鹘y(tǒng)媒體成為人們獲取信息和共享信息的主要方式，以網(wǎng)絡(luò)新聞為代表的網(wǎng)絡(luò)輿情成為社會(huì)輿情的重要的組成部分。互聯(lián)網(wǎng)的開(kāi)放性、匿名性使得人們能夠自由的發(fā)表言論，但其中一些片面的觀點(diǎn)、不負(fù)責(zé)任的言論也會(huì)通過(guò)互聯(lián)網(wǎng)快速傳播，很容易引發(fā)輿情事件造成不良影響。目前，很多中小型的企業(yè)公司和地方政府單位的輿情監(jiān)控工作還處在起步階段，主要依靠人工進(jìn)行輿情監(jiān)控。因此迫切需求一種可靠高效的網(wǎng)絡(luò)輿情監(jiān)控工具，

2、輔助完成輿情監(jiān)控工作。目前存在的一些輿情監(jiān)控系統(tǒng)，但對(duì)中小型企業(yè)公司來(lái)說(shuō)，存在成本過(guò)高、適用性差等問(wèn)題。
　　針對(duì)以上情況，本文將使用爬蟲(chóng)技術(shù)和搜索引擎構(gòu)建一個(gè)適用于多數(shù)中小型企業(yè)公司、地方政府需要的的輿情預(yù)警分析平臺(tái)。本文對(duì)輿情預(yù)警分析平臺(tái)進(jìn)行了詳細(xì)的需求分析，對(duì)其中的關(guān)鍵問(wèn)題提供了解決辦法，并給出了具體的設(shè)計(jì)方案和實(shí)現(xiàn)過(guò)程。本文首先針對(duì)不同輿情信息來(lái)源網(wǎng)站的不同結(jié)構(gòu)設(shè)計(jì)不同的抓取策略，設(shè)計(jì)通用的網(wǎng)絡(luò)爬蟲(chóng)完成數(shù)據(jù)采集網(wǎng)絡(luò)輿情信息

3、。在研究了當(dāng)前主要的幾種中文分詞算法的基礎(chǔ)上結(jié)合實(shí)際測(cè)試選用合適的分詞算法，并為輿情信息在搜索引擎中的存儲(chǔ)設(shè)計(jì)了合理的映射結(jié)構(gòu)，將輿情信息或檢索內(nèi)容進(jìn)行分詞后，使用全文檢索引擎完成輿情信息索引和搜索;最后通過(guò)運(yùn)用行業(yè)領(lǐng)域的概念，設(shè)計(jì)了一種垂直搜索方法，并完成網(wǎng)絡(luò)輿情管理系統(tǒng)的開(kāi)發(fā)，實(shí)現(xiàn)了通用輿情監(jiān)控功能和專題監(jiān)控功能，適用于多數(shù)中小企業(yè)、政府單位對(duì)輿情監(jiān)控的需求。本平臺(tái)的爬蟲(chóng)任務(wù)和輿情預(yù)警規(guī)則、專題監(jiān)控規(guī)則使用網(wǎng)絡(luò)輿情管理系統(tǒng)進(jìn)行統(tǒng)一管