基于校園網(wǎng)絡(luò)信息導(dǎo)航系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、進(jìn)入二十一世紀(jì),伴隨著電子信息技術(shù)的飛速發(fā)展,網(wǎng)絡(luò)信息化的普及使得互聯(lián)網(wǎng)技術(shù)迎來(lái)了一個(gè)前所未有的發(fā)展機(jī)遇。網(wǎng)絡(luò)信息資源的不斷增長(zhǎng)不僅為人們提供了更多獲取豐富的知識(shí)的便捷途徑,加快了信息的傳播和交流,還為人們的工作和日常生活帶來(lái)了無(wú)限的便利。通過(guò)互聯(lián)網(wǎng)人們幾乎可以查找到自己需求的任何信息。然而,面對(duì)如此浩瀚的網(wǎng)絡(luò)資源,如何能夠快速準(zhǔn)確的找到每個(gè)用戶(hù)需求的準(zhǔn)確信息變得尤為重要。針對(duì)以上問(wèn)題,搜索服務(wù)技術(shù)的出現(xiàn)和發(fā)展為用戶(hù)提供了最佳的解決方案

2、。用戶(hù)通過(guò)訪問(wèn)搜索服務(wù)提供的網(wǎng)絡(luò)接口頁(yè)面,輸入自己想要查詢(xún)的關(guān)鍵詞,即可快速準(zhǔn)確的得到相關(guān)網(wǎng)頁(yè)集合的檢索排序結(jié)果。
　　然而針對(duì)校園網(wǎng)絡(luò)這個(gè)特殊的網(wǎng)絡(luò)環(huán)境,由于網(wǎng)絡(luò)進(jìn)出口帶寬的限制,網(wǎng)絡(luò)更新匹配周期的差異,通用的搜索服務(wù)無(wú)法覆蓋到校園網(wǎng)絡(luò)的每一個(gè)網(wǎng)頁(yè)。因此校園網(wǎng)用戶(hù)在使用通用的搜索服務(wù)檢索自己需求的校園網(wǎng)絡(luò)資源時(shí),很難得到自己滿(mǎn)意的結(jié)果。隨著各院校辦學(xué)資源和招生規(guī)模的不斷擴(kuò)大,越來(lái)越多的用戶(hù)訪問(wèn)校園網(wǎng)資源。提供一種快速解決當(dāng)前校園

3、網(wǎng)絡(luò)便捷訪問(wèn)的方法變得尤為迫切。本系統(tǒng)基于本校校園網(wǎng)絡(luò)數(shù)據(jù)資源進(jìn)行開(kāi)發(fā),實(shí)現(xiàn)校園網(wǎng)絡(luò)下不同網(wǎng)頁(yè)站點(diǎn)搜索頁(yè)面的接口整合。系統(tǒng)提供了一個(gè)統(tǒng)一的用戶(hù)檢索接口,減少了以往不同站點(diǎn)配備不同的檢索接口的繁瑣。校園網(wǎng)絡(luò)用戶(hù)只需訪問(wèn)初始的搜索頁(yè)面,輸入任意需求的查詢(xún)關(guān)鍵詞,即可快速定位得到校園網(wǎng)絡(luò)相關(guān)匹配網(wǎng)頁(yè)鏈接的排序結(jié)果。
　　本文首先介紹了網(wǎng)絡(luò)信息導(dǎo)航系統(tǒng)的基本原理和主要技術(shù),根據(jù)提出的設(shè)計(jì)目標(biāo)和開(kāi)發(fā)原則,將整個(gè)系統(tǒng)劃分為數(shù)據(jù)抓取、鏈接分析、

4、索引建立和檢索排序四個(gè)主要的功能模塊進(jìn)行設(shè)計(jì)研究。系統(tǒng)使用以Lucene為核心的開(kāi)源網(wǎng)絡(luò)數(shù)據(jù)抓取程序Nutch作為系統(tǒng)引擎架構(gòu),同時(shí)結(jié)合IK-Analyzer中文分詞組件對(duì)文本信息進(jìn)行分析處理,使用Lucene內(nèi)部的索引機(jī)制為網(wǎng)頁(yè)鏈接建立索引,為用戶(hù)提供快速準(zhǔn)確的檢索服務(wù)。同時(shí)系統(tǒng)采用Hadoop框架應(yīng)用MapReduce技術(shù)實(shí)現(xiàn)數(shù)據(jù)的分布式存儲(chǔ)和并行計(jì)算,增強(qiáng)了整個(gè)系統(tǒng)數(shù)據(jù)處理的能力,并降低了系統(tǒng)對(duì)硬件配置的要求。本系統(tǒng)基本實(shí)現(xiàn)了在設(shè)