面向汽車行業(yè)的主題爬蟲研究與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展以及網(wǎng)絡(luò)信息多元化的發(fā)展，傳統(tǒng)搜索引擎已經(jīng)不能滿足人們對于特定行業(yè)領(lǐng)域的個性化檢索需求，因此針對各行業(yè)主題信息的搜索引擎應(yīng)運(yùn)而生。而主題爬蟲是主題搜索引擎的核心部分，為保證其返回查詢信息的準(zhǔn)確性和及時性，對主題爬蟲展開研究具有重要意義。本文設(shè)計實(shí)現(xiàn)的汽車主題爬蟲就是在這樣的背景下產(chǎn)生的。
　　 本文首先闡述了主題爬蟲的發(fā)展現(xiàn)狀，然后對目前主流爬蟲在主題基準(zhǔn)模型、網(wǎng)頁信息提取和網(wǎng)頁搜索策略等關(guān)鍵模塊的各種實(shí)

2、現(xiàn)方案進(jìn)行比較分析，提出了適合汽車主題爬蟲建立的一套完整的設(shè)計方案，并對主題爬蟲的各主要模塊進(jìn)行功能實(shí)現(xiàn)。最后對設(shè)計的主題爬蟲展開性能測試，并進(jìn)行相應(yīng)的總結(jié)分析。
　　 具體地說，本文對汽車主題爬蟲的研究工作主要體現(xiàn)在以下幾點(diǎn)：
　　 1、分析主流主題爬蟲實(shí)現(xiàn)流程，提出適合汽車主題爬蟲的設(shè)計方案，并設(shè)計出汽車主題爬蟲的總體結(jié)構(gòu)框架。
　　 2、通過比較主題基準(zhǔn)模型實(shí)現(xiàn)方案，采用向量空間模型的方法構(gòu)建汽車主題關(guān)鍵詞