云存儲(chǔ)中數(shù)據(jù)吞吐量?jī)?yōu)化及完整性驗(yàn)證的研究.pdf

1、隨著大數(shù)據(jù)時(shí)代的到來(lái)，基于Software-as-a-service平臺(tái)的云數(shù)據(jù)存儲(chǔ)技術(shù)得到飛速發(fā)展，云服務(wù)商為用戶(hù)的數(shù)據(jù)提供彈性計(jì)算以及存儲(chǔ)空間的服務(wù)越來(lái)越受到歡迎。當(dāng)前大數(shù)據(jù)的發(fā)展趨勢(shì)主要圍繞實(shí)用性、性能以及可恢復(fù)性為目的。首先，一些光纖網(wǎng)絡(luò)采用XSEDE，ESnet，以及Internet2等方式為用戶(hù)提供高速鏈接。然而，由于各種限制因素的存在，比如次優(yōu)協(xié)議優(yōu)化，低效的端到端路由，發(fā)送/接收端磁盤(pán)性能瓶頸以及服務(wù)器處理器性能局限等因

2、素，制約了用戶(hù)無(wú)法獲取理論上的高速網(wǎng)絡(luò)。其次，用戶(hù)通過(guò)數(shù)據(jù)外包，可以減輕數(shù)據(jù)在本地存儲(chǔ)以及維護(hù)的負(fù)擔(dān)。但由于數(shù)據(jù)脫離了用戶(hù)的掌控范圍，使用戶(hù)數(shù)據(jù)的安全性也受到了極大的挑戰(zhàn)。因此，本文從數(shù)據(jù)傳輸吞吐量?jī)?yōu)化以及共享數(shù)據(jù)完整性驗(yàn)證兩方面出發(fā)進(jìn)行研究：
　　針對(duì)傳統(tǒng)大數(shù)據(jù)密集型可擴(kuò)展的計(jì)算系統(tǒng)在數(shù)據(jù)源利用和數(shù)據(jù)傳輸方面效率不高的問(wèn)題，提出一種基于全級(jí)C階矩并行流數(shù)模型預(yù)測(cè)廣域大數(shù)據(jù)吞吐量?jī)?yōu)化方案。首先，為提高并行流數(shù)的預(yù)測(cè)精度，以提高瓶頸

3、鏈路的利用效率為目的，設(shè)計(jì)等效并行流數(shù)選取方式；然后，借鑒部分C階矩模型和完全二階矩模型，構(gòu)建全級(jí)C階矩模型，并且設(shè)計(jì)低采樣吞吐量?jī)?yōu)化算法框架，降低計(jì)算復(fù)雜度；最后，通過(guò)在不同大小數(shù)據(jù)集上的實(shí)驗(yàn)表明，全級(jí)C階矩并行流數(shù)的預(yù)測(cè)模型更適合于大數(shù)據(jù)傳輸，并且效率更高。
　　隨著云數(shù)據(jù)存儲(chǔ)以及共享服務(wù)的發(fā)展，人們通過(guò)團(tuán)隊(duì)合作的工作模式越來(lái)越普遍，團(tuán)隊(duì)成員不僅可以訪(fǎng)問(wèn)和更新數(shù)據(jù)，而且可以相互共享數(shù)據(jù)的最新信息。然而存儲(chǔ)在云上數(shù)據(jù)是在開(kāi)放式的