一種輿情數(shù)據(jù)挖掘平臺(tái)的研究.pdf

1、隨著計(jì)算機(jī)及網(wǎng)絡(luò)技術(shù)發(fā)展的日新月異，互聯(lián)網(wǎng)成為消息傳播的重要媒體，然而這種媒體具有直接性、突發(fā)性、偏差性、自由性等特點(diǎn)，需要有關(guān)部門通過高效的輿情分析系統(tǒng)予以適當(dāng)?shù)谋O(jiān)督和管控。傳統(tǒng)的輿情數(shù)據(jù)挖掘系統(tǒng)處理效率低，實(shí)時(shí)性差，建設(shè)周期長(zhǎng)，維護(hù)困難，擴(kuò)展性差且建設(shè)維護(hù)成本高。對(duì)于互聯(lián)網(wǎng)上具有實(shí)時(shí)性強(qiáng)、數(shù)據(jù)維度高、語義不確定等特點(diǎn)的海量輿情數(shù)據(jù)已不能夠滿足需求。
　　 為此本文提出將云計(jì)算與數(shù)據(jù)挖掘平臺(tái)結(jié)合。文中分析了輿情數(shù)據(jù)挖掘平臺(tái)的需

2、求，不僅利用云計(jì)算平臺(tái)理論上無限的擴(kuò)展能力解決了計(jì)算能力不足的制約，并且將整個(gè)平臺(tái)設(shè)計(jì)為面向服務(wù)的模式，引入了SOA的架構(gòu)來管理云計(jì)算平臺(tái)中的大量基礎(chǔ)操作及其相關(guān)調(diào)用，解決了云計(jì)算平臺(tái)中大量應(yīng)用管理混亂耦合性高的問題。并通過SOA架構(gòu)，實(shí)現(xiàn)快速、高效、低成本的應(yīng)對(duì)系統(tǒng)功能需求的變更。本系統(tǒng)采用服務(wù)注冊(cè)表與企業(yè)服務(wù)總線結(jié)合的模式進(jìn)行設(shè)計(jì)，基于web服務(wù)實(shí)現(xiàn)SOA更加加強(qiáng)了云計(jì)算平臺(tái)虛擬化和面向服務(wù)這兩個(gè)方面的特性。
　　 本文首先

3、比較了現(xiàn)有的分布式數(shù)據(jù)挖掘平臺(tái)架構(gòu)，以及各自的優(yōu)勢(shì)，隨后吸取各家的長(zhǎng)處，提出了基于云計(jì)算的輿情數(shù)據(jù)挖掘平臺(tái)的設(shè)計(jì)方案，并從平臺(tái)的特點(diǎn)及需求、整體方案、輿情數(shù)據(jù)存儲(chǔ)層、輿情挖掘任務(wù)調(diào)配層、輿情挖掘應(yīng)用層和SOA應(yīng)用的方面進(jìn)行了闡述。系統(tǒng)還設(shè)計(jì)了輿情挖掘算法植入的插件結(jié)構(gòu)，使得系統(tǒng)更加具有靈活性。用戶可以根據(jù)自身的需要和系統(tǒng)的權(quán)限，上傳算法到系統(tǒng)平臺(tái)。本文設(shè)計(jì)了一種插件注冊(cè)查詢體系及其與系統(tǒng)對(duì)接的接口。使得系統(tǒng)中的輿情挖掘算法以插件的形式動(dòng)