分布式全文檢索中緩存系統(tǒng)研究與實現(xiàn).pdf

1、緩存技術是提高響應速度、處理效率及系統(tǒng)性能的關鍵性技術，在分布式全文檢索過程中，具有重要的應用價值。研究分布式全文檢索中的緩存技術，具有很高的理論價值和應用基礎。本課題通過分析用戶查詢行為，設計了基于用戶查詢日志的緩存系統(tǒng)，經實驗測試，此系統(tǒng)在提高輿情采集系統(tǒng)查詢響應時間和處理效率，以及改善輿情采集系統(tǒng)搜索引擎性能上，具有良好效果。
　　根據(jù)輿情采集系統(tǒng)實際情況和具體需求，設計了分布式緩存系統(tǒng)的體系結構，重點包括分布式緩存系統(tǒng)協(xié)作

2、機制、數(shù)據(jù)同步、緩存結構和替換算法等關鍵環(huán)節(jié)。
　　在本論文中，設計了雙級緩存結構。在此結構中采用了靜態(tài)和動態(tài)兩種不同類型緩存，通過統(tǒng)計用戶查詢行為規(guī)律，提取查詢熱度最高的一部分查詢，對緩存數(shù)據(jù)進行初始化分配。處理用戶查詢時，檢索次序為靜態(tài)緩存、動態(tài)緩存和底層索引庫。由于靜態(tài)緩存中存放熱度最高的查詢，并采取動態(tài)緩存輔助，結合行之有效的緩存替換算法，在命中率、緩存效率和時間開銷等指標上，與采用其它緩存結構的分布式緩存系統(tǒng)相比，理論和