存儲系統(tǒng)中測試數(shù)據(jù)集的構(gòu)建方法研究.pdf

1、隨著大數(shù)據(jù)(BigData)的應(yīng)用越來越廣泛,社會對信息存儲的需求在不斷地增大;而且隨著存儲技術(shù)的發(fā)展,存儲系統(tǒng)架構(gòu)和存儲系統(tǒng)軟件都變得復(fù)雜多樣;此外,應(yīng)用環(huán)境,存儲的數(shù)據(jù)也越來越復(fù)雜多變;因此,存儲系統(tǒng)的管理測試,性能優(yōu)化等工作變得異常困難和重要。存儲系統(tǒng)的性能測試,文件系統(tǒng)元數(shù)據(jù)管理等方面的研究,都需要大量的負載數(shù)據(jù),但數(shù)據(jù)來源多是以前的trace數(shù)據(jù)集,這些數(shù)據(jù)集通常存在數(shù)據(jù)信息不完整,各種操作混合的問題;而且,現(xiàn)公開的trace

2、數(shù)據(jù)集缺少相應(yīng)的文件系統(tǒng)元數(shù)據(jù)的鏡像數(shù)據(jù)。另外,目前還沒有針對大數(shù)據(jù)應(yīng)用環(huán)境下的可用trace數(shù)據(jù)集。
　　針對以上問題,提出了一種基于統(tǒng)計分析的采用自相似性模型的trace數(shù)據(jù)集構(gòu)建方法。該方法能夠生成精確的可重現(xiàn)的文件系統(tǒng)鏡像,并能合成相應(yīng)的大規(guī)模的,可定制的文件系統(tǒng)動態(tài)負載數(shù)據(jù)集。文件系統(tǒng)trace負載合成系統(tǒng)通過對實際trace數(shù)據(jù)集的統(tǒng)計分析,得出動態(tài)屬性的負載模型并加以評估,用文件系統(tǒng)鏡像生成引擎生成文件系統(tǒng)的鏡像,用