海量存儲系統(tǒng)中元數(shù)據(jù)管理機(jī)制的研究.pdf

1、海量存儲系統(tǒng)中需要保存Terabyte、Petabyte級別甚至更大規(guī)模的數(shù)據(jù)。數(shù)據(jù)的元數(shù)據(jù)如文件的名字、屬性、保存地址和訪問授權(quán)等信息一般由元數(shù)據(jù)服務(wù)器進(jìn)行管理。在訪問海量存儲系統(tǒng)的數(shù)據(jù)前，需要首先查找和獲得元數(shù)據(jù)。因此元數(shù)據(jù)管理機(jī)制將直接關(guān)系到海量存儲系統(tǒng)的I/O性能。
　　 現(xiàn)有的海量存儲系統(tǒng)一般采用目錄層次結(jié)構(gòu)和哈希算法管理元數(shù)據(jù)，存在修改元數(shù)據(jù)和查詢目錄等操作所需時(shí)間和空間開銷大等問題，也沒有針對海量存儲系統(tǒng)中元數(shù)據(jù)訪

2、問特性的優(yōu)化機(jī)制，嚴(yán)重制約了海量存儲系統(tǒng)的I/O性能。
　　 本文在分析海量存儲系統(tǒng)中元數(shù)據(jù)管理特性的基礎(chǔ)上，引入DBMS技術(shù)以及數(shù)據(jù)分級的方法，提高管理元數(shù)據(jù)的效率。論文的具體工作包括：
　　 首先引入二維表保存系統(tǒng)中的元數(shù)據(jù)信息，提出了基于DBMS的新型元數(shù)據(jù)管理策略，給出了各類元數(shù)據(jù)操作的流程；分析了在海量存儲系統(tǒng)中用于管理元數(shù)據(jù)信息時(shí)所需的時(shí)間和空間開銷以及適應(yīng)不同運(yùn)行環(huán)境的能力；實(shí)現(xiàn)了基于DBMS元數(shù)據(jù)管理策略

3、的原型系統(tǒng)，采集實(shí)際文件系統(tǒng)中的元數(shù)據(jù)，構(gòu)建多種測試環(huán)境進(jìn)行測試與分析，結(jié)果表明基于DBMS的元數(shù)據(jù)管理策略能有效地減少管理元數(shù)據(jù)所需的時(shí)間和空間開銷，提高管理元數(shù)據(jù)的靈活性，增強(qiáng)適應(yīng)能力。
　　 在分析海量存儲系統(tǒng)中元數(shù)據(jù)時(shí)間特性的基礎(chǔ)上，依據(jù)元數(shù)據(jù)的生命周期，設(shè)計(jì)了元數(shù)據(jù)分級算法，將元數(shù)據(jù)分為活躍元數(shù)據(jù)和非活躍元數(shù)據(jù)；設(shè)計(jì)了分區(qū)索引算法，提高查詢活躍元數(shù)據(jù)的性能；改進(jìn)了基于哈希函數(shù)的索引方法，設(shè)計(jì)了非活躍元數(shù)據(jù)的索引算法，減