基于概念語義空間的語義查詢擴展技術(shù)研究.pdf

1、隨著互聯(lián)網(wǎng)的發(fā)展及社會信息化的發(fā)展，信息呈爆炸式增長，人們對信息獲取的要求越來越高，不斷推動信息檢索技術(shù)的發(fā)展。當前主流商用搜索引擎仍然采用基于關(guān)鍵詞查找的方式。這種查找方式在給用戶提供一種簡便查詢平臺的同時，也給人們返回了大量與查詢意愿無關(guān)的垃圾結(jié)果。因此，有學者提出使用查詢擴展的方法來解決這個問題。
　　查詢擴展是在原查詢詞的基礎(chǔ)上加入相似或相關(guān)的詞以克服自然語言的“二義性”問題，改進查詢意愿的描述。傳統(tǒng)的查詢擴展技術(shù)雖然在技

2、術(shù)上有不斷的改進，但是仍然以單個查詢詞為中心進行擴展，忽略了查詢概念語義之間的關(guān)聯(lián)擴展，因而沒有充分表達和擴展出用戶查詢意圖。近年來，語義概念查詢擴展成為新的熱點，就是在語義詞典/領(lǐng)域本體的基礎(chǔ)上構(gòu)建概念語義空間，從概念語義空間中提取查詢語義及其語義關(guān)聯(lián)，實現(xiàn)語義概念擴展。這種擴展在一定意義上實現(xiàn)了語義層次的擴展，但過于依賴完備的語義體系，導致許多與用戶查詢意愿不相關(guān)的詞的加入，從而容易出現(xiàn)查詢漂移的問題。針對現(xiàn)有查詢擴展存在擴展詞質(zhì)量

3、不高的問題，本課題在前人研究成果的基礎(chǔ)上，利用語義詞典和文檔集兩種擴展源，在語義空間的基礎(chǔ)上引入統(tǒng)計模型對查詢詞進行擴展。本文的研究工作主要包括以下幾個方面：
　　1.語義詞典、領(lǐng)域本體等知識體系已經(jīng)成為智能化信息檢索不可或缺的支撐工具。在傳統(tǒng)構(gòu)建語義森林的基礎(chǔ)上，提出了向上溯源查找最近公共祖先結(jié)點的方法，構(gòu)建出覆蓋面全、冗余度低，結(jié)構(gòu)合理的概念語義空間；
　　2.在對查詢擴展進行范圍控制的過程中，本課題提出了動態(tài)觀察窗口加

4、權(quán)模型，用于強化共現(xiàn)詞之間的關(guān)聯(lián)度。在大規(guī)模文檔集中使用動態(tài)觀察窗口加權(quán)模型對初始查詢擴展詞進行訓練，動態(tài)設(shè)定顯著性閾值，篩選出最終的查詢擴展詞；
　　3.最后，本課題利用文本檢索會議TREC（Text REtrieval Conference）提供的測試數(shù)據(jù)集設(shè)計并實現(xiàn)了實驗系統(tǒng)，將實驗結(jié)果轉(zhuǎn)化為相應(yīng)的算法測評指標MRR（平均倒數(shù)排名），通過對比可得，本課題提出的結(jié)合概念語義空間與動態(tài)觀察窗口加權(quán)模型的擴展算法比傳統(tǒng)偽相關(guān)反饋法