面向智能電網(wǎng)云存儲的副本技術(shù)研究.pdf

1、近年來隨著國家智能電網(wǎng)的發(fā)展，智能電網(wǎng)采集到的數(shù)據(jù)成倍增長，不僅包括結(jié)構(gòu)化數(shù)據(jù)，而且包括一些半結(jié)構(gòu)化、非結(jié)構(gòu)化的音頻視頻數(shù)據(jù)。如何安全的存儲和高效的處理這些數(shù)據(jù)，成為智能電網(wǎng)發(fā)展亟待解決的問題。云存儲系統(tǒng)具有安全性高、數(shù)據(jù)存儲量大、易擴展等特點，能夠有效的存儲智能電網(wǎng)采集的海量數(shù)據(jù)。云存儲副本技術(shù)，可以有效的保證數(shù)據(jù)存儲的安全性與處理任務(wù)的并發(fā)性，然而副本技術(shù)又帶來了諸如副本一致性，負載均衡，副本訪問代價等一系列問題。而良好的數(shù)據(jù)放置策

2、略可以解決負載均衡問題，數(shù)據(jù)選擇策略可以選擇代價最小的數(shù)據(jù)副本。智能電網(wǎng)云存儲系統(tǒng)中的數(shù)據(jù)放置策略以及數(shù)據(jù)選擇策略是本文研究的重點。
　　首先，給出了基于相對存儲能力的副本放置策略與基于訪問熱度的調(diào)整策略。由于智能電網(wǎng)云存儲系統(tǒng)數(shù)據(jù)副本放置的不規(guī)范性，根據(jù)異構(gòu)節(jié)點的相對存儲能力進行數(shù)據(jù)存儲，保證了負載均衡；并且根據(jù)智能電網(wǎng)采集數(shù)據(jù)的相關(guān)性，通過設(shè)置相關(guān)系數(shù)，將相關(guān)聯(lián)數(shù)據(jù)進行集中存放，確保了關(guān)聯(lián)查詢速度；根據(jù)智能電網(wǎng)數(shù)據(jù)處理任務(wù)對副

3、本數(shù)目的動態(tài)需求性，通過自適應(yīng)反饋機制，根據(jù)數(shù)據(jù)的訪問熱度，對數(shù)據(jù)副本進行增減，平衡了讀取負載以及節(jié)約了存儲空間。
　　其次，給出了基于局部最小化代價數(shù)據(jù)選擇算法，由于智能電網(wǎng)數(shù)據(jù)處理任務(wù)在選擇數(shù)據(jù)副本時，隨機選擇副本，而不考慮副本訪問代價問題。該算法根據(jù)數(shù)據(jù)副本訪問代價的不同，在數(shù)據(jù)的不同副本中選擇代價最小的作為處理任務(wù)數(shù)據(jù)輸入；并且優(yōu)化了MapReduce并行編程模型，根據(jù)前文中相關(guān)聯(lián)數(shù)據(jù)集中存放，將數(shù)據(jù)連接操作在Map階段進