基于元數(shù)據(jù)關(guān)聯(lián)特征的分布式查詢方法研究.pdf

1、信息技術(shù)的不斷發(fā)展對信息存儲(chǔ)高容量,高性能提出更高的要求,云存儲(chǔ)應(yīng)運(yùn)而生。大規(guī)模存儲(chǔ)系統(tǒng)的應(yīng)用越來越廣泛,存儲(chǔ)容量從以前的TB(Terabyte)級上升到PB(Petabyte)級甚至EB(Exabyte)級。用戶在使用海量存儲(chǔ)空間的同時(shí),也發(fā)現(xiàn)數(shù)據(jù)的查找和管理變得越來越困難?，F(xiàn)有的元數(shù)據(jù)管理方法存在可擴(kuò)展性弱、查詢效率低、實(shí)時(shí)性差等缺點(diǎn)。
　　針對上述缺點(diǎn),提出了一種基于關(guān)聯(lián)特征的元數(shù)據(jù)查詢方法,可以充分利用多維元數(shù)據(jù)的關(guān)聯(lián)特征

2、來提高查詢效率。系統(tǒng)在局部靈敏哈希(LSH)聚集數(shù)據(jù)的基礎(chǔ)上建立分布式索引。全局索引劃分采用LSH哈希表桶內(nèi)劃分的方式來提升系統(tǒng)的擴(kuò)展性,可以避免大量的數(shù)據(jù)遷移。索引的維護(hù)采用分層架構(gòu),每層獨(dú)立配置,同時(shí)具有較好的可擴(kuò)展性,方便系統(tǒng)管理。為了快速更新分布式索引,系統(tǒng)的索引采用文件存儲(chǔ),并基于版本批量更新。在這種架構(gòu)下,查詢請求采用基于代理的處理模式,每個(gè)請求都會(huì)分配一臺(tái)查詢服務(wù)器作為代理,代理節(jié)點(diǎn)負(fù)責(zé)轉(zhuǎn)發(fā)查詢請求、收集查詢結(jié)果并返回給客