云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的研究與應用.pdf

1、隨著數(shù)據(jù)存儲的高速增長，傳統(tǒng)的數(shù)據(jù)庫已經(jīng)無法滿足人們處理大規(guī)模數(shù)據(jù)的需求，有關(guān)海量數(shù)據(jù)的處理與存儲成為當前的研究熱點。Hadoop文件系統(tǒng)HDFS成為研究云存儲應用的參考模型。但現(xiàn)有的HDFS架構(gòu)對小文件的存儲支持不足，而且默認的副本放置策略會影響存儲性能。本文深入研究了HDFS的副本放置策略以及小文件存儲問題。
　　本文從課題的研究背景和意義出發(fā)，分析了云存儲系統(tǒng)及聯(lián)動系統(tǒng)的研究現(xiàn)狀，明確了云存儲對于網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)日志文件

2、存儲的必要性和現(xiàn)實意義。主要解決了以下兩個問題：第一，改進了HDFS中的默認副本放置策略，采用基于信息熵的TOPSIS多屬性決策方法，為數(shù)據(jù)塊的副本選擇數(shù)據(jù)節(jié)點，利用具體實例對改進方案進行了驗證，實驗表明改進方案提高了系統(tǒng)的整體性能；第二，優(yōu)化了小文件存儲方案，對整個優(yōu)化方案進行了設(shè)計，包括數(shù)據(jù)預存儲節(jié)點的設(shè)計，小文件合并算法的設(shè)計，小文件索引結(jié)構(gòu)的設(shè)計，小文件合并過程的設(shè)計，并通過實驗進行了驗證，實驗表明在存儲海量小文件時，小文件的存