基于Hadoop的安全云存儲系統(tǒng)研究與實現(xiàn).pdf

1、隨著信息時代的數(shù)據(jù)量以PB級飛速增長，傳統(tǒng)存儲模式在大數(shù)據(jù)存儲方面的局限性逐漸暴露出來，單一存儲很容易使用戶數(shù)據(jù)丟失，造成巨大損失，越來越多的企業(yè)和研究機構認識到必須有一種新的存儲機制去改變存儲行業(yè)現(xiàn)狀。云存儲技術的引入為存儲模式的改變帶來了契機，國內外機構和企業(yè)在云存儲熱潮下紛紛推出自己的云存儲產(chǎn)品和解決方案，但由于對產(chǎn)品的安全性不夠重視，各類安全事故頻繁發(fā)生，給用戶造成了巨大損失。在此背景下，云存儲系統(tǒng)的安全性問題逐漸成為業(yè)界關注的

2、熱點。
　　本文在假設云計算提供商可信的前提下，從應用安全的角度出發(fā)，通過大量關鍵技術的研究，構建了一種基于Hadoop的安全云存儲系統(tǒng)。本文首先調研了國內外機構對云存儲系統(tǒng)和云存儲安全性的研究現(xiàn)狀，在此基礎上對構建云存儲系統(tǒng)涉及到的關鍵技術進行了深入研究，主要包括 HDFS數(shù)據(jù)讀寫原理、虛擬磁盤原理、文件系統(tǒng)過濾驅動原理、HTTPS安全傳輸原理、多線程傳輸原理。隨后結合實際情況，對安全云存儲系統(tǒng)從功能和性能兩個方面進行了需求分析

3、，并提出了系統(tǒng)的總體架構，然后根據(jù)總體架構從安全客戶端、安全可靠傳輸和服務器端三個大的模塊出發(fā)進行了詳細設計，主要包括虛擬磁盤和文件系統(tǒng)過濾驅動的兩級加密機制設計、多線程斷點續(xù)傳設計、服務端的存儲架構及數(shù)據(jù)處理模塊設計。接下來從代碼實現(xiàn)的角度對系統(tǒng)各個模塊的實現(xiàn)過程進行了詳細闡述，并對某些重要功能進行了效果展示。最后對系統(tǒng)從功能上和性能上進行了測試，經(jīng)測試構建的系統(tǒng)達到了預定的功能需求，滿足響應性、可靠性、可用性三個方面的性能指標。