分布式全文檢索中緩存系統(tǒng)研究與實現(xiàn).pdf

1、緩存技術(shù)是提高響應(yīng)速度、處理效率及系統(tǒng)性能的關(guān)鍵性技術(shù)，在分布式全文檢索過程中，具有重要的應(yīng)用價值。研究分布式全文檢索中的緩存技術(shù)，具有很高的理論價值和應(yīng)用基礎(chǔ)。本課題通過分析用戶查詢行為，設(shè)計了基于用戶查詢?nèi)罩镜木彺嫦到y(tǒng)，經(jīng)實驗測試，此系統(tǒng)在提高輿情采集系統(tǒng)查詢響應(yīng)時間和處理效率，以及改善輿情采集系統(tǒng)搜索引擎性能上，具有良好效果。
　　根據(jù)輿情采集系統(tǒng)實際情況和具體需求，設(shè)計了分布式緩存系統(tǒng)的體系結(jié)構(gòu)，重點包括分布式緩存系統(tǒng)協(xié)作

2、機制、數(shù)據(jù)同步、緩存結(jié)構(gòu)和替換算法等關(guān)鍵環(huán)節(jié)。
　　在本論文中，設(shè)計了雙級緩存結(jié)構(gòu)。在此結(jié)構(gòu)中采用了靜態(tài)和動態(tài)兩種不同類型緩存，通過統(tǒng)計用戶查詢行為規(guī)律，提取查詢熱度最高的一部分查詢，對緩存數(shù)據(jù)進行初始化分配。處理用戶查詢時，檢索次序為靜態(tài)緩存、動態(tài)緩存和底層索引庫。由于靜態(tài)緩存中存放熱度最高的查詢，并采取動態(tài)緩存輔助，結(jié)合行之有效的緩存替換算法，在命中率、緩存效率和時間開銷等指標上，與采用其它緩存結(jié)構(gòu)的分布式緩存系統(tǒng)相比，理論和