版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、地理信息服務(wù)具有數(shù)據(jù)量大、文件數(shù)多、大量用戶并發(fā)訪問等特點(diǎn),傳統(tǒng)文件系統(tǒng)和以Hadoop分布式文件系統(tǒng)HDFS(Hadoop Distributed File System)為代表的分布式文件系統(tǒng)無法滿足海量地理空間數(shù)據(jù)的存儲(chǔ)與訪問要求。為了滿足千億規(guī)模海量小文件的存儲(chǔ)和訪問需求,本人所在項(xiàng)目組基于HDFS實(shí)現(xiàn)了海量小文件支持分布文件系統(tǒng)(SMDFS)。測(cè)繪信息系統(tǒng)的地圖瓦片數(shù)據(jù)通常以金字塔組織,數(shù)據(jù)訪問具有空間局部性的特點(diǎn),因此如果能
2、夠?qū)崿F(xiàn)文件預(yù)取將有效改善文件訪問性能。然而SMDFS文件系統(tǒng)將成千上萬小文件聚合成一個(gè)聚合文件進(jìn)行存儲(chǔ),很難將地理相鄰的若干文件通過一次I/O就反饋給用戶。
本文針對(duì)測(cè)繪數(shù)據(jù)訪問的空間局部性特點(diǎn)和單個(gè)瓦片文件訪問效率低的問題,提出基于地理位置的周邊圖片預(yù)取技術(shù),目的是減少SMDFS的I/O訪問次數(shù),提高文件系統(tǒng)的訪問性能。實(shí)現(xiàn)預(yù)取的一個(gè)前提條件是金字塔內(nèi)瓦片文件存儲(chǔ)是有序的。本文提出遞歸四分排序方法的全球剖分編碼海量瓦片文件順
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 海量圖片文件存儲(chǔ)關(guān)鍵技術(shù)研究.pdf
- 層次混合存儲(chǔ)系統(tǒng)中緩存和預(yù)取技術(shù)研究.pdf
- 數(shù)據(jù)值預(yù)測(cè)與存儲(chǔ)器預(yù)取技術(shù)研究.pdf
- 基于預(yù)取的磁盤存儲(chǔ)系統(tǒng)節(jié)能技術(shù)研究.pdf
- 基于Hadoop集群的海量數(shù)據(jù)計(jì)算和存儲(chǔ)技術(shù)研究.pdf
- 基于STL文件的有限差分非均勻網(wǎng)格剖分技術(shù)研究.pdf
- 通信車電磁兼容分析模型的網(wǎng)格預(yù)剖分技術(shù)研究.pdf
- 基于Hadoop的海量Web數(shù)據(jù)存儲(chǔ)和推薦技術(shù)研究.pdf
- 海量小文件系統(tǒng)的大空間聚合存儲(chǔ)技術(shù)研究與實(shí)現(xiàn).pdf
- 基于IP的海量存儲(chǔ)技術(shù)研究與實(shí)現(xiàn).pdf
- 基于矢量瓦片的地理數(shù)據(jù)存儲(chǔ)訪問技術(shù)研究與實(shí)現(xiàn).pdf
- 一種新的海量遙感瓦片影像數(shù)據(jù)存儲(chǔ)檢索策略.pdf
- 云環(huán)境下海量小文件存儲(chǔ)技術(shù)的研究與應(yīng)用.pdf
- 基于Swift的海量小文件對(duì)象存儲(chǔ)研究.pdf
- 海量旅游數(shù)據(jù)存儲(chǔ)與查詢技術(shù)研究.pdf
- 基于Hadoop的海量小文件處理技術(shù)研究.pdf
- 海量存儲(chǔ)資源管理關(guān)鍵技術(shù)研究.pdf
- 海量存儲(chǔ)類USB HOST的關(guān)鍵技術(shù)研究.pdf
- 固定內(nèi)容海量存儲(chǔ)技術(shù)的研究.pdf
- 基于Hadoop的海量小文件存儲(chǔ)性能優(yōu)化研究.pdf
評(píng)論
0/150
提交評(píng)論