面向智能電網(wǎng)云存儲(chǔ)的副本技術(shù)研究.pdf

1、近年來隨著國(guó)家智能電網(wǎng)的發(fā)展，智能電網(wǎng)采集到的數(shù)據(jù)成倍增長(zhǎng)，不僅包括結(jié)構(gòu)化數(shù)據(jù)，而且包括一些半結(jié)構(gòu)化、非結(jié)構(gòu)化的音頻視頻數(shù)據(jù)。如何安全的存儲(chǔ)和高效的處理這些數(shù)據(jù)，成為智能電網(wǎng)發(fā)展亟待解決的問題。云存儲(chǔ)系統(tǒng)具有安全性高、數(shù)據(jù)存儲(chǔ)量大、易擴(kuò)展等特點(diǎn)，能夠有效的存儲(chǔ)智能電網(wǎng)采集的海量數(shù)據(jù)。云存儲(chǔ)副本技術(shù)，可以有效的保證數(shù)據(jù)存儲(chǔ)的安全性與處理任務(wù)的并發(fā)性，然而副本技術(shù)又帶來了諸如副本一致性，負(fù)載均衡，副本訪問代價(jià)等一系列問題。而良好的數(shù)據(jù)放置策

2、略可以解決負(fù)載均衡問題，數(shù)據(jù)選擇策略可以選擇代價(jià)最小的數(shù)據(jù)副本。智能電網(wǎng)云存儲(chǔ)系統(tǒng)中的數(shù)據(jù)放置策略以及數(shù)據(jù)選擇策略是本文研究的重點(diǎn)。
　　首先，給出了基于相對(duì)存儲(chǔ)能力的副本放置策略與基于訪問熱度的調(diào)整策略。由于智能電網(wǎng)云存儲(chǔ)系統(tǒng)數(shù)據(jù)副本放置的不規(guī)范性，根據(jù)異構(gòu)節(jié)點(diǎn)的相對(duì)存儲(chǔ)能力進(jìn)行數(shù)據(jù)存儲(chǔ)，保證了負(fù)載均衡；并且根據(jù)智能電網(wǎng)采集數(shù)據(jù)的相關(guān)性，通過設(shè)置相關(guān)系數(shù)，將相關(guān)聯(lián)數(shù)據(jù)進(jìn)行集中存放，確保了關(guān)聯(lián)查詢速度；根據(jù)智能電網(wǎng)數(shù)據(jù)處理任務(wù)對(duì)副

3、本數(shù)目的動(dòng)態(tài)需求性，通過自適應(yīng)反饋機(jī)制，根據(jù)數(shù)據(jù)的訪問熱度，對(duì)數(shù)據(jù)副本進(jìn)行增減，平衡了讀取負(fù)載以及節(jié)約了存儲(chǔ)空間。
　　其次，給出了基于局部最小化代價(jià)數(shù)據(jù)選擇算法，由于智能電網(wǎng)數(shù)據(jù)處理任務(wù)在選擇數(shù)據(jù)副本時(shí)，隨機(jī)選擇副本，而不考慮副本訪問代價(jià)問題。該算法根據(jù)數(shù)據(jù)副本訪問代價(jià)的不同，在數(shù)據(jù)的不同副本中選擇代價(jià)最小的作為處理任務(wù)數(shù)據(jù)輸入；并且優(yōu)化了MapReduce并行編程模型，根據(jù)前文中相關(guān)聯(lián)數(shù)據(jù)集中存放，將數(shù)據(jù)連接操作在Map階段進(jìn)