面向鍵值數(shù)據(jù)庫應(yīng)用的混合存儲(chǔ)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著大規(guī)?；ヂ?lián)網(wǎng)應(yīng)用的高速發(fā)展,給存儲(chǔ)系統(tǒng)的可擴(kuò)展性提出了更高的要求,鍵值數(shù)據(jù)庫由于其簡單高效的數(shù)據(jù)模型在可擴(kuò)展性方面較傳統(tǒng)的數(shù)據(jù)庫系統(tǒng)有很大的優(yōu)勢(shì)。另一方面,隨著硬件的發(fā)展,固態(tài)盤的性價(jià)比逐步提高,已經(jīng)成為越來越多系統(tǒng)的首選,其隨機(jī)讀的優(yōu)勢(shì)與互聯(lián)網(wǎng)應(yīng)用的特征高度符合,但是其寫性能的相對(duì)低下以及擦除次數(shù)的限制影響了它的應(yīng)用場景,于是將固態(tài)盤與磁盤相結(jié)合的融合存儲(chǔ)系統(tǒng)得到了大家的廣泛關(guān)注。因此針對(duì)鍵值數(shù)據(jù)庫而設(shè)計(jì)的融合存儲(chǔ)系統(tǒng)是一個(gè)有價(jià)值

2、的結(jié)合點(diǎn)。
　　針對(duì)Web應(yīng)用的負(fù)載特點(diǎn),通過日志的方式順序的記錄對(duì)鍵值數(shù)據(jù)庫的操作,所有的操作都僅僅是順序的寫入內(nèi)存,當(dāng)內(nèi)存中的數(shù)據(jù)達(dá)到了一定閾值以后一次刷寫到后端存儲(chǔ)上,日志的方式一定程度上是通過犧牲讀性能來優(yōu)化寫性能,所以和固態(tài)盤有天然的互補(bǔ)關(guān)系。由于后端固態(tài)盤與磁盤的不同特性,使用層次化的方法將寫的特點(diǎn)進(jìn)行分類后寫入不同的設(shè)備上,并設(shè)計(jì)實(shí)現(xiàn)了一個(gè)可定制文件放置與遷移策略的文件系統(tǒng)HybridFS,通過監(jiān)控分析腳本可以對(duì)同一

3、文件系統(tǒng)中不同特點(diǎn)的文件選擇不同的放置與遷移策略。針對(duì)鍵值數(shù)據(jù)庫的文件訪問特點(diǎn),日志類文件多是一次寫很少讀,所以直接寫入磁盤。元數(shù)據(jù)類文件讀寫都很頻繁但是文件大小和數(shù)量偏少,因此寫入固態(tài)盤。對(duì)數(shù)據(jù)文件由于其海量、定長、一次寫多次讀的特點(diǎn),根據(jù)負(fù)載特點(diǎn)選擇性的寫入磁盤或者固態(tài)盤。針對(duì)純寫入型負(fù)載使用概率選擇的方式比Flashcache提升了5％-56％,而對(duì)于讀寫混合行負(fù)載使用LRU的遷移方式相比Flashcache有4％-14％的性能提