私有云存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著信息技術(shù)的不斷發(fā)展和普及,數(shù)據(jù)量迅猛增長(zhǎng),數(shù)據(jù)之間的聯(lián)系也越來(lái)越緊密,這使得高能性能計(jì)算[23,24]和大數(shù)據(jù)處理[25-27]日益成為人們關(guān)注的焦點(diǎn)。
　　如今,云存儲(chǔ)技術(shù)因其高效的管理方式,高可靠性,高安全性等特點(diǎn)成為企業(yè)存儲(chǔ)數(shù)據(jù)的首選解決方案。而在云存儲(chǔ)系統(tǒng)設(shè)計(jì)之中,其高效性、可擴(kuò)展性和安全性成為設(shè)計(jì)的難點(diǎn)和重點(diǎn)。
　　在云計(jì)算業(yè)界,云存儲(chǔ)系統(tǒng)的元數(shù)據(jù)管理單元和數(shù)據(jù)存儲(chǔ)單元的設(shè)計(jì)和實(shí)現(xiàn)一直是整個(gè)難點(diǎn)問(wèn)題。由于文章篇

2、幅和時(shí)間的限制,本文重點(diǎn)研究數(shù)據(jù)存儲(chǔ)單元的設(shè)計(jì)和實(shí)現(xiàn)。本文根據(jù)當(dāng)前的存儲(chǔ)系統(tǒng)和分布式文件系統(tǒng)的特點(diǎn)和應(yīng)用,并結(jié)合企業(yè)存儲(chǔ)服務(wù)的實(shí)際需求,提出并實(shí)現(xiàn)了一種具有高可擴(kuò)展性和高可用性的云存儲(chǔ)系統(tǒng)C-Store。
　　本文先介紹已有的幾種分布式存儲(chǔ)系統(tǒng)和與云存儲(chǔ)相關(guān)技術(shù)理論基礎(chǔ),接著介紹本云存儲(chǔ)系統(tǒng)的總體設(shè)計(jì)思路和方法,重點(diǎn)介紹數(shù)據(jù)存儲(chǔ)系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn),最后通過(guò)對(duì)系統(tǒng)的測(cè)試來(lái)驗(yàn)證之前的設(shè)計(jì)思路。
　　云存儲(chǔ)系統(tǒng)C-Store的總體架

3、構(gòu)采用分布式構(gòu)架,元數(shù)據(jù)部分和數(shù)據(jù)部分的數(shù)據(jù)采用分別存儲(chǔ)方式,并分別用不同的、各自的資源管理單元(桶)來(lái)存儲(chǔ),這樣有利于元數(shù)據(jù)和數(shù)據(jù)分別管理和進(jìn)行性能優(yōu)化,避免單個(gè)節(jié)點(diǎn)失效帶來(lái)的風(fēng)險(xiǎn);同時(shí)采用負(fù)載均衡技術(shù)使之各個(gè)節(jié)點(diǎn)負(fù)載均衡,使用數(shù)據(jù)恢復(fù)策略等來(lái)提高系統(tǒng)的可靠性和可擴(kuò)展。
　　本文實(shí)現(xiàn)了數(shù)據(jù)存儲(chǔ)單元中的設(shè)計(jì)思路和設(shè)計(jì)要點(diǎn)。整個(gè)數(shù)據(jù)存儲(chǔ)子系統(tǒng)實(shí)現(xiàn)是在 Linux環(huán)境下使用 C++來(lái)實(shí)現(xiàn)的;實(shí)現(xiàn)之后系統(tǒng),用戶可以通過(guò)客服端來(lái)上傳、下載