基于云計算的分布式搜索技術(shù)研究.pdf

1、隨著Internet的迅猛發(fā)展,搜索引擎技術(shù)也在一天天發(fā)生著翻天覆地的變化。從最初的由蒙特利爾大學(xué)學(xué)生Alan Emtage發(fā)明的在各個分散的FTP主機中搜索文件的Archie,到引入蜘蛛程序的Lycos,再到現(xiàn)在的Yahoo、百度和Google,無不聚集了軟件行業(yè)中的尖端技術(shù)及先進思想。
　　 雖然搜索引擎技術(shù)在快速發(fā)展,但依然很難滿足網(wǎng)絡(luò)用戶越來越高的應(yīng)用需求。網(wǎng)絡(luò)信息近年來在急速增長,目前,互聯(lián)網(wǎng)上的搜索引擎已達數(shù)百家,其

2、檢索的信息量也與從前不可同日而語,比如Google,其數(shù)據(jù)庫中存放的網(wǎng)頁已達30億之巨。即使如此,仍會有70％到80％的網(wǎng)頁內(nèi)容不能被有效查閱。網(wǎng)絡(luò)用戶要想在廣闊的信息海洋中快速的搜尋出自己想要的信息已經(jīng)越來越難。云計算技術(shù)在最近幾年里發(fā)展勢頭迅猛,應(yīng)用面也越來越廣泛。云計算技術(shù)的出現(xiàn),可以很好解決以往集中式服務(wù)的弊端,也為搜索引擎技術(shù)的發(fā)展與突破帶來了福音。云計算提供了更可靠、更安全的數(shù)據(jù)存儲中心,用戶不用再擔(dān)心數(shù)據(jù)丟失、病毒入侵等麻

3、煩;其次,云計算對用戶端的設(shè)備要求更低,使用起來也更方便;此外,云計算可以輕松實現(xiàn)不同設(shè)備間的數(shù)據(jù)與應(yīng)用共享?？梢院敛豢鋸埖卣f云計算為使用網(wǎng)絡(luò)提供了幾乎無限多的可能。
　　 本文利用Microsoft Visual Studio2008,在云計算技術(shù)的基礎(chǔ)上,研究分布式技術(shù)并用MFC實現(xiàn)了分布式搜索引擎的模擬,并針對以往集中式搜索引擎的弊端,提出改良方案,最終提出一種分布式計算模型,該模型可適用用于其它實際應(yīng)用,以達到節(jié)約資源,