基于改進Single-Pass算法的熱點話題發(fā)現(xiàn)系統(tǒng)的設計與實現(xiàn).pdf

1、互聯(lián)網(wǎng)從出現(xiàn)到蓬勃發(fā)展至今在人們的經(jīng)濟社會生活中發(fā)揮著越來越重要的作用與影響，這是一個前所未有的時代，我們可以在這里享受到海量的信息。然而，在當前情況下，一方面我們能在這種大數(shù)據(jù)的情況下獲取到更多的信息，而另一方面正是因為這種大數(shù)據(jù)的背景使得網(wǎng)絡上的信息多而繁雜，不僅使得信息難以管理，更加大了我們管理和發(fā)現(xiàn)有價值的信息的難度。因此，擁有一種能讓用戶迅速獲取自己所需信息的工具已成為了人們的急切需求。
　　近幾年來搜索引擎的快速發(fā)展，

2、減輕了信息過載的壓力，在此項技術中我們一般通過輸入一些關鍵字來獲取到對自己有用的信息，但是正因為他采用的是關鍵字匹配的技術，并且沒有對結果進行過濾，所以返回的信息必將有很高的信息冗余度，一般只要包含有部分關鍵字的網(wǎng)頁就作為結果被進行了返回，這使得結果中會包含很多實際不相關的網(wǎng)頁，最后我們還不得不人工去篩選自己所需的信息造成人力時間的浪費。而對于熱點問題，搜索引擎就變的更無能為力，現(xiàn)在的熱點話題或事件一般通過網(wǎng)上投票或者一些業(yè)界人士的人工

3、篩選產(chǎn)生，因此具有一定的主觀性。
　　針對以上的問題，通過分析現(xiàn)有的技術和成果，本文設計和實現(xiàn)了以下內容:
　　(1)本文通過對熱點話題發(fā)現(xiàn)的需求分析，結合相關知識構建了熱點話題發(fā)現(xiàn)系統(tǒng)的整體系統(tǒng)框架，對系統(tǒng)在結構設計及處理流程方面遇到的問題進行了有效的解決。
　　(2)在熱點話題發(fā)現(xiàn)系統(tǒng)的構建實現(xiàn)過程中本文結合了國內外的相關技術和研究，分別對信息采集、信息預處理、話題發(fā)現(xiàn)、熱點話題熱度計算以及用戶管理等模塊進行了設計