云存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)的開發(fā)研究.pdf

1、隨著時(shí)代的發(fā)展和科技的不斷進(jìn)步，最近十年中，全球文件資源總量呈現(xiàn)爆發(fā)式的增長(zhǎng)。為了解決海量用戶文件的存儲(chǔ)問(wèn)題，以網(wǎng)盤為代表的云存儲(chǔ)技術(shù)應(yīng)運(yùn)而生。目前互聯(lián)網(wǎng)上有許多網(wǎng)盤，而各類網(wǎng)盤由于當(dāng)初設(shè)計(jì)存在問(wèn)題，因此普遍面臨著系統(tǒng)資源浪費(fèi)、可靠性低、文件上傳與下載效率不高、缺乏區(qū)分度的窘?jīng)r。
　　筆者通過(guò)在實(shí)習(xí)公司參與云存儲(chǔ)開發(fā)項(xiàng)目，采用技術(shù)手段替換掉公司原有的FTP存儲(chǔ)方式，以期實(shí)現(xiàn)更快速率、更安全、更貼近用戶的云存儲(chǔ)系統(tǒng)。為此本文完成了基

2、于FastDFS分布式文件系統(tǒng)的總體框架設(shè)計(jì)，對(duì)該系統(tǒng)中的各個(gè)核心功能模塊進(jìn)行了設(shè)計(jì)和實(shí)現(xiàn)，最終完成了整個(gè)系統(tǒng)的整合與優(yōu)化。
　　本文研究的主要工作有:
　　1.實(shí)現(xiàn)龐大規(guī)模數(shù)據(jù)文件的管理:采取分布式文件系統(tǒng)FastDFS來(lái)解決海量數(shù)據(jù)文件的管理難題。
　　2.完整的業(yè)務(wù)邏輯的實(shí)現(xiàn):構(gòu)建出web service server層，以實(shí)現(xiàn)用戶的私人賬戶安全、虛擬目錄映射管理、前后臺(tái)數(shù)據(jù)交互等功能。
　　3.確保用戶上

3、傳和下載文件的正確性:采用文件校驗(yàn)策略來(lái)解決這個(gè)問(wèn)題。
　　4.系統(tǒng)性能優(yōu)化:采用文件去重技術(shù)、文件秒傳機(jī)制、文件分塊上傳和合并下載技術(shù)來(lái)攻克這一難關(guān)。同時(shí)本文中對(duì)文件去重技術(shù)和文件上傳和下載進(jìn)行了優(yōu)化。
　　本文研究的成果經(jīng)過(guò)驗(yàn)證符合項(xiàng)目預(yù)期的要求，對(duì)云存儲(chǔ)文件上傳、下載效率的優(yōu)化可以有效的提升用戶體驗(yàn)。大文件去重機(jī)制可以有效的節(jié)約存儲(chǔ)資源，同時(shí)由此引出的文件秒傳機(jī)制極大的縮短了用戶上傳文件的時(shí)間。提升了用戶的良好體驗(yàn)度的