分布式視頻流存儲(chǔ)容錯(cuò)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、當(dāng)今，視頻監(jiān)控系統(tǒng)越來越多地應(yīng)用于日常生活中，它帶來便捷的同時(shí)，也引出了海量視頻流數(shù)據(jù)的存儲(chǔ)需求。分布式存儲(chǔ)系統(tǒng)能夠很好的滿足這一需求，而且由于故障發(fā)生的可能性，容錯(cuò)必須體現(xiàn)在系統(tǒng)的設(shè)計(jì)中。對比國內(nèi)外典型的分布式存儲(chǔ)系統(tǒng)架構(gòu)，不難發(fā)現(xiàn)系統(tǒng)可用性、數(shù)據(jù)可靠性與一致性、系統(tǒng)高效性，往往是此類系統(tǒng)所要解決的問題。因此，本文以此為背景，通過相關(guān)知識(shí)點(diǎn)與理論的學(xué)習(xí)，設(shè)計(jì)并開發(fā)出了分布式視頻流存儲(chǔ)容錯(cuò)系統(tǒng)，其特點(diǎn)主要有：
　　1.應(yīng)用 RS糾

2、刪碼；系統(tǒng)在整個(gè)存儲(chǔ)空間扁平化的基礎(chǔ)上，提出了數(shù)據(jù)塊與卷的語義，將流式存儲(chǔ)轉(zhuǎn)換為塊式存儲(chǔ)，并通過具體的糾刪碼方案決定數(shù)據(jù)塊的放置方式，從而使得數(shù)據(jù)的糾刪碼容錯(cuò)得以實(shí)現(xiàn)。
　　2.提出混合冗余容錯(cuò)策略；系統(tǒng)將被頻繁訪問的元數(shù)據(jù)視為“熱”數(shù)據(jù)，采用副本形式存儲(chǔ)；將視頻流數(shù)據(jù)視為“冷”數(shù)據(jù)，采用糾刪碼方式存儲(chǔ)。從而在加速元數(shù)據(jù)訪問的同時(shí)，提高了存儲(chǔ)空間的利用率。
　　3.采用時(shí)間戳對比機(jī)制；不僅保證了系統(tǒng)各個(gè)模塊間數(shù)據(jù)操作的一致性

3、，由于對訪問數(shù)據(jù)量與次數(shù)的減少，因而避免了單點(diǎn)效應(yīng)。
　　4.實(shí)行基于最終一致性的操作方案；系統(tǒng)將多步驟指令視為事務(wù)，以非阻塞式方式執(zhí)行指令隊(duì)列，使得系統(tǒng)可用性與一致性之間達(dá)到了平衡。
　　5.提出文件塊版本號恢復(fù)機(jī)制與最優(yōu)數(shù)據(jù)恢復(fù)模型；通過減少不必要的數(shù)據(jù)恢復(fù)和確定最優(yōu)數(shù)據(jù)恢復(fù)的順序，使得在很一定程度上提高了數(shù)據(jù)恢復(fù)的效率。
　　另外，為了更好地實(shí)現(xiàn)可擴(kuò)展性，系統(tǒng)采用了分層次的設(shè)計(jì)架構(gòu)，實(shí)現(xiàn)了從網(wǎng)絡(luò)到業(yè)務(wù)處理，再到文