面向車聯(lián)網(wǎng)密集型數(shù)據(jù)的分布式存儲優(yōu)化技術(shù).pdf

1、中國已經(jīng)連續(xù)5年成為全球最大的汽車市場，年銷售規(guī)模突破2000萬輛，汽車保有量超過1億輛，伴隨汽車智能化、車聯(lián)網(wǎng)以及4G網(wǎng)絡(luò)的發(fā)展，預(yù)計汽車有望成為繼電視、電腦、手機、平板電腦之后，下一個快速增長的移動終端。車聯(lián)網(wǎng)系統(tǒng)中的在線車輛會產(chǎn)生大量監(jiān)測數(shù)據(jù)，這些數(shù)據(jù)都需要實時存儲到數(shù)據(jù)庫中。車聯(lián)網(wǎng)數(shù)據(jù)具有類型多、字段短小、周期性、數(shù)據(jù)范圍及數(shù)據(jù)波動性可預(yù)測、時空敏感等特征。隨著上線車輛的日益增多，若使用傳統(tǒng)的磁盤數(shù)據(jù)庫，大量監(jiān)測數(shù)據(jù)實時存儲會產(chǎn)

2、生密集的磁盤I/O，使得磁盤吞吐量成為主要的性能瓶頸；同時，大部分車輛狀態(tài)數(shù)據(jù)比較穩(wěn)定或有規(guī)律，這會導(dǎo)致監(jiān)測數(shù)據(jù)中出現(xiàn)大量冗余；最后，存儲系統(tǒng)需具有動態(tài)擴展能力以應(yīng)對接入車輛的快速增長。
　　本研究針對車聯(lián)網(wǎng)監(jiān)測數(shù)據(jù)存儲中的這三個典型問題，設(shè)計了一種緩存系統(tǒng)，通過將密集的小尺寸數(shù)據(jù)緩存在內(nèi)存中，然后在內(nèi)存中壓縮冗余數(shù)據(jù)，最后以較慢的速率寫入磁盤數(shù)據(jù)庫，可有效緩解磁盤I/O壓力、提高吞吐量；設(shè)計了一種數(shù)據(jù)壓縮算法，對車聯(lián)網(wǎng)狀態(tài)數(shù)據(jù)中