版權說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權,請進行舉報或認領
文檔簡介
1、自互聯(lián)網(wǎng)誕生以來,尤其是最近幾年移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)和云計算的發(fā)展,催生了網(wǎng)絡數(shù)據(jù)的指數(shù)級增長。這給存儲系統(tǒng)造成了極大的壓力。為保證數(shù)據(jù)的可靠性,存儲系統(tǒng)通常采用多副本的方式進行存儲,造成了大量的數(shù)據(jù)冗余。使用糾刪碼做數(shù)據(jù)容錯可以有效降低數(shù)據(jù)冗余,但是數(shù)據(jù)可用性會有一定程度的降低。這就造成了某種程度上的矛盾。
對存儲系統(tǒng)內(nèi)部的數(shù)據(jù)按照使用頻度進行分類,劃分為冷數(shù)據(jù)和熱數(shù)據(jù),然后對冷數(shù)據(jù)通過糾刪碼的方式進行存儲。這在保證了數(shù)據(jù)可用
2、性的同時,極大的降低了系統(tǒng)的數(shù)據(jù)冗余。系統(tǒng)設計上,將數(shù)據(jù)節(jié)點按照存儲空間和計算能力,劃分為多個虛擬節(jié)點,然后將虛擬節(jié)點通過一致性哈希分散到一個哈希環(huán)上,構(gòu)造一個全對稱、去中心的哈希環(huán),以此達到數(shù)據(jù)分布和任務調(diào)度的均勻。編碼、解碼過程中,通過使用Bit-Matrix技術,降低了編碼矩陣中1的個數(shù),有效的減少了編碼、解碼過程中的XOR運算次數(shù)。同時,解碼隊列技術的引進,通過對編碼、解碼過程中的執(zhí)行步驟進行有效的規(guī)劃,尤其是解碼過程中后續(xù)解碼
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于網(wǎng)絡編碼的分布式存儲技術研究.pdf
- 面向多數(shù)據(jù)中心的分布式塊存儲技術研究.pdf
- 分布式數(shù)據(jù)存儲關鍵技術研究.pdf
- 面向Internet的大規(guī)模分布式存儲技術研究.pdf
- 面向WMSNs應用的分布式視頻編碼技術研究.pdf
- 面向分布式環(huán)境的數(shù)據(jù)存儲布局與查詢優(yōu)化技術.pdf
- 面向大數(shù)據(jù)的分布式存儲關鍵技術的研究.pdf
- 分布式存儲系統(tǒng)中的資源定位與數(shù)據(jù)存儲技術研究.pdf
- 分布式數(shù)據(jù)存儲和處理的若干技術研究.pdf
- 分布式數(shù)據(jù)存儲與備份的研究與實現(xiàn).pdf
- 面向IMT-Advanced的分布式預編碼技術研究.pdf
- 基于Ceph的分布式存儲節(jié)能技術研究與實現(xiàn).pdf
- 面向分布式數(shù)據(jù)存儲系統(tǒng)可靠性的評估與增強技術研究.pdf
- 面向高并發(fā)小包數(shù)據(jù)分布式存儲系統(tǒng)的設計與實現(xiàn).pdf
- 基于對等網(wǎng)絡的分布式存儲技術研究與實現(xiàn).pdf
- 高考數(shù)據(jù)分布式存儲優(yōu)化的設計與實現(xiàn).pdf
- 面向分布式存儲的數(shù)據(jù)可靠性評價系統(tǒng)的研究與實現(xiàn).pdf
- 面向Ad hoc網(wǎng)絡的分布式空時編碼技術研究.pdf
- 分布式塊存儲系統(tǒng)負載均衡技術研究與實現(xiàn).pdf
- mba論文面向分布式數(shù)據(jù)存儲系統(tǒng)可靠性的評估與增強技術研究pdf
評論
0/150
提交評論