云文件同步系統(tǒng)關鍵技術研究與實現(xiàn).pdf

1、隨著金山快盤、Dropbox、EverNote等云存儲應用快速興起，云計算開始真正融入人們的日常生活。實現(xiàn)高可用的云存儲應用的關鍵技術之一，是如何解決用戶數(shù)據(jù)在多個設備之間的同步問題。隨著用戶規(guī)模的逐漸擴大，并發(fā)訪問量遞增，存儲容量需求爆炸式增長，云存儲系統(tǒng)勢必面臨極其嚴峻的考驗。開發(fā)與合作是當今互聯(lián)網的主題之一，云存儲系統(tǒng)對外開放亦是大勢所趨。
　　本文設計并實現(xiàn)了一個安全可靠、可擴展的云存儲子系統(tǒng)，稱為云文件同步系統(tǒng)。并為該系

2、統(tǒng)開發(fā)了云網盤客戶端程序和設計了REST架構風格的開放API。此外，還對云環(huán)境下的文件同步算法這一關鍵技術做了深入的研究，提出了一種基于文件元數(shù)據(jù)集合的多設備文件同步算法。本文主要工作包含以下四部分。
　　云文件同步系統(tǒng)的整體設計。通過引入負載均衡技術和MongoDB分布式集群技術，提高了該系統(tǒng)并發(fā)處理能力和帶故障正常運行能力。整體設計能夠滿足安全可靠、可擴展的基本要求。
　　多設備文件同步算法實現(xiàn)。在云環(huán)境下，文件同步參與

3、者之間呈現(xiàn)星形的拓撲結構，中央節(jié)點是提供文件存儲服務的云端，連接中央節(jié)點的是各種客戶端。假設僅有一個客戶端，那么通過比對該客戶端或云端上次同步完成和本次同步開始這兩個時間點的文件元數(shù)據(jù)集合，可以得到云端和客戶端的文件變化，進而合并云端和客戶端文件變化得到最終的文件變化，最后應用文件變化即可實現(xiàn)該客戶端與云端的文件同步。此處的獲取文件變化的過程描述起來很簡單，實際情況處理起來卻是異常棘手。不過，經過一些巧妙的抽象和反抽象后，整個獲取文件變

4、化的過程變得非常簡便。進一步將情景抽象為同步時間獨占、客戶端與客戶端關系確定為松耦合，使得每個客戶端和云端的同步操作看起來都是獨立的，從而可以將多個客戶端與云端的文件同步問題都看成是之前假設的單個客戶端與云端的文件同步問題。
　　云文件同步系統(tǒng)的工程實現(xiàn)。主要工作包括基于Jersey框架的REST架構風格Web服務程序的開發(fā)和供用戶使用的的云網盤Windows客戶端程序的開發(fā)。
　　云文件同步系統(tǒng)的部署與測試。部署指的是將該