基于FastDFS的大并發(fā)問(wèn)題的研究與應(yīng)用.pdf

1、隨著時(shí)代的發(fā)展，數(shù)據(jù)的信息量出現(xiàn)了爆炸式的增長(zhǎng)，單純的分布式文件系統(tǒng)已經(jīng)很難滿足海量數(shù)據(jù)的處理請(qǐng)求。目前，針對(duì)文件系統(tǒng)所面臨的海量小文件大并發(fā)請(qǐng)求問(wèn)題，許多學(xué)者都對(duì)其展開(kāi)了研究，但是已有的研究成果依然存在一些不足之處。因此本論文主要研究如何進(jìn)一步提高FastDFS的文件處理能力，以便更好的解決海量小文件存儲(chǔ)所面臨的大并發(fā)問(wèn)題。本論文的主要工作如下:
　　(1)簡(jiǎn)單概述本課題的研究背景及意義，同時(shí)對(duì)分布式文件系統(tǒng)、非關(guān)系型數(shù)據(jù)庫(kù)、服

2、務(wù)器集群等的國(guó)內(nèi)外研究現(xiàn)狀進(jìn)行了重點(diǎn)介紹，為接下來(lái)本文的相關(guān)技術(shù)理論知識(shí)研究做了很好的鋪墊。
　　(2)首先分別對(duì)FastDFS、Redis數(shù)據(jù)庫(kù)、Nginx集群進(jìn)行了深入的研究與分析，總結(jié)出它們各自的優(yōu)勢(shì)與不足;其次針對(duì)它們?cè)趹?yīng)對(duì)大并發(fā)問(wèn)題所表現(xiàn)出的不足，提出將FastDFS、Redis數(shù)據(jù)庫(kù)以及Nginx服務(wù)器集群同時(shí)應(yīng)用于實(shí)際研發(fā)項(xiàng)目中，在綜合它們優(yōu)點(diǎn)的同時(shí)彌補(bǔ)各自的不足之處，從而更好的應(yīng)對(duì)大并發(fā)問(wèn)題;最后通過(guò)模擬實(shí)驗(yàn)及實(shí)驗(yàn)

3、數(shù)據(jù)結(jié)果的分析對(duì)比，驗(yàn)證了本文提出的組合架構(gòu)FastDFS+Redis+Nginx集群與原有的FastDFS+Redis架構(gòu)相比，在處理海量用戶的大并發(fā)請(qǐng)求時(shí)，無(wú)論是文件上傳還是文件下載所需要的處理時(shí)間都會(huì)明顯減少。
　　(3)通過(guò)引入Piece機(jī)制，重新利用了FastDFS文件存儲(chǔ)結(jié)構(gòu)中大量的閑置空間，不僅提高了文件的存儲(chǔ)空間利用率，而且優(yōu)化了FastDFS本身的性能。通過(guò)模擬實(shí)驗(yàn)及對(duì)相關(guān)實(shí)驗(yàn)數(shù)據(jù)的分析，驗(yàn)證了本文提出的引入Pi