基于Hadoop的海量視頻的分布式存儲(chǔ)與檢索研究.pdf

1、隨著近年來監(jiān)控設(shè)備在各類安防領(lǐng)域的廣泛應(yīng)用，監(jiān)控視頻的數(shù)據(jù)量得以快速增長(zhǎng)，如何對(duì)海量的監(jiān)控視頻數(shù)據(jù)進(jìn)行有效的存儲(chǔ)和檢索成為了監(jiān)控視頻領(lǐng)域研究的熱點(diǎn)問題之一。本文從監(jiān)控視頻數(shù)據(jù)的需求出發(fā)，在對(duì)基于內(nèi)容的監(jiān)控視頻檢索技術(shù)以及分布式處理平臺(tái)的研究基礎(chǔ)上，設(shè)計(jì)并實(shí)現(xiàn)了一種基于 Hadoop的海量監(jiān)控視頻的存儲(chǔ)與檢索系統(tǒng)，主要針對(duì)以下兩方面的問題進(jìn)行了研究：
　　一方面，本文從海量視頻基于內(nèi)容檢索的處理過程出發(fā)，分析了檢索過程中需要存儲(chǔ)的各

2、種數(shù)據(jù)以及存儲(chǔ)需求，并針對(duì)視頻存儲(chǔ)模塊、視頻摘要存儲(chǔ)模塊、目標(biāo)圖像存儲(chǔ)模塊這三個(gè)模塊分別進(jìn)行了詳細(xì)設(shè)計(jì)與實(shí)現(xiàn)。在各個(gè)模塊中，對(duì)需要大吞吐量的數(shù)據(jù)如視頻等采用HDFS分布式存儲(chǔ)系統(tǒng)進(jìn)行存儲(chǔ)，對(duì)需要分類存儲(chǔ)且實(shí)時(shí)讀取的數(shù)據(jù)采用HBase面向列的數(shù)據(jù)庫(kù)。對(duì)于存儲(chǔ)和處理模塊間的數(shù)據(jù)交換采用 XML文件解決平臺(tái)和應(yīng)用間的差異，最后通過數(shù)據(jù)的讀寫實(shí)驗(yàn)證明了本系統(tǒng)存儲(chǔ)模塊在讀寫性能方面的高效性。
　　另一方面，對(duì)于用戶而言，在海量數(shù)據(jù)檢索時(shí)除了