基于藍(lán)光存儲的異構(gòu)云存儲平臺設(shè)計與研究.pdf

1、隨著互聯(lián)網(wǎng)在生活中的廣泛應(yīng)用，網(wǎng)絡(luò)中的數(shù)據(jù)量呈指數(shù)級增長，IT行業(yè)已經(jīng)從計算時代進(jìn)入到存儲時代。目前，許多數(shù)據(jù)中心都面臨著系統(tǒng)能耗開銷巨大、存儲資源利用率較低以及存儲成本不斷上升等問題。有數(shù)據(jù)表明，存儲的各種開支已經(jīng)占數(shù)據(jù)中心總成本的30％-70%。而日常產(chǎn)生的數(shù)據(jù)中，經(jīng)常使用的數(shù)據(jù)（熱數(shù)據(jù)）只占到整體數(shù)據(jù)量的20%而極少使用或幾乎不用的數(shù)據(jù)（冷數(shù)據(jù)）高達(dá)80%。在這種情況下，根據(jù)數(shù)據(jù)冷熱特征進(jìn)行分級存儲，發(fā)揮各種存儲設(shè)備優(yōu)點，降低總存

2、儲成本，有十分廣闊的研究和應(yīng)用前景。對比目前存儲介質(zhì)技術(shù)的發(fā)展，光盤的單位容量價格遠(yuǎn)遠(yuǎn)低于磁盤，而其讀寫速度又優(yōu)于磁帶。因此，將光盤作為分級存儲系統(tǒng)中的近線或離線存儲設(shè)備具有現(xiàn)實意義。本文在分布式文件系統(tǒng)基礎(chǔ)上，引入藍(lán)光光盤庫作為近線存儲設(shè)備，建立一個“在線——近線”分級存儲的云存儲平臺。在平臺設(shè)計和實現(xiàn)的過程中主要工作包括如下內(nèi)容：
　?。?）對當(dāng)前的數(shù)據(jù)區(qū)分技術(shù)進(jìn)行研究與分析，在此基礎(chǔ)上，通過對用戶行為日志的分析，提取用戶行為

3、關(guān)鍵特征，建立數(shù)據(jù)價值模型。該模型采用指數(shù)平滑法充分考慮各個時刻的數(shù)據(jù)價值，并根據(jù)數(shù)據(jù)價值的高低區(qū)分冷熱數(shù)據(jù)集，該模型能有效地提高云平臺中用戶訪問數(shù)據(jù)時命中在線存儲設(shè)備的概率。
　?。?）研究數(shù)據(jù)遷移過程控制策略，實現(xiàn)數(shù)據(jù)在磁盤陣列和藍(lán)光存儲兩種不同存儲層次的設(shè)備之前自動的、不間斷的遷移。重點分析基于藍(lán)光光盤庫的數(shù)據(jù)遷移過程，有效地保證數(shù)據(jù)在遷移過程中的一致性。
　?。?）采用元數(shù)據(jù)服務(wù)器與應(yīng)用服務(wù)器分離，前臺頁面與后臺服務(wù)