基于網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理技術(shù)研究.pdf

1、由于信息技術(shù)的飛速發(fā)展,數(shù)據(jù)爆炸已成為一個(gè)突出的問(wèn)題,因而海量數(shù)據(jù)管理技術(shù)成為人們關(guān)心的熱點(diǎn)研究課題。本文以數(shù)字化虛擬人為背景,基于數(shù)據(jù)網(wǎng)格技術(shù),對(duì)海量數(shù)據(jù)管理技術(shù)做了一定程度的探索研究。數(shù)據(jù)網(wǎng)格技術(shù)是網(wǎng)格的研究方向之一,側(cè)重于數(shù)據(jù)的存儲(chǔ)和管理。以現(xiàn)有的分布式、并行式等數(shù)據(jù)管理技術(shù)為基礎(chǔ),數(shù)據(jù)網(wǎng)格致力于集成網(wǎng)絡(luò)中的存儲(chǔ)資源、數(shù)據(jù)資源、計(jì)算資源等,建立分布海量數(shù)據(jù)的一體化數(shù)據(jù)訪問(wèn)、存儲(chǔ)、傳輸、管理與服務(wù)架構(gòu),為海量數(shù)據(jù)的管理提供了一種新的

2、解決方案。本文研究了基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理,以數(shù)字化虛擬人為背景,結(jié)合數(shù)字人數(shù)據(jù)集的特點(diǎn),對(duì)元數(shù)據(jù)管理、副本管理、高速數(shù)據(jù)傳輸、快速數(shù)據(jù)訪問(wèn)等關(guān)鍵技術(shù)進(jìn)行了探索,并在局域網(wǎng)內(nèi)建立了一個(gè)基于數(shù)據(jù)網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理原型系統(tǒng)。該系統(tǒng)將網(wǎng)絡(luò)上分布異構(gòu)的各種資源集成在一起,形成虛擬的存儲(chǔ)環(huán)境,為上層應(yīng)用提供統(tǒng)一的訪問(wèn)接口,達(dá)到了數(shù)據(jù)的高度共享。主要的工作和成果如下:①元數(shù)據(jù)管理策略研究元數(shù)據(jù)是數(shù)據(jù)管理技術(shù)中一個(gè)重要的組成部分。目前

3、大多數(shù)據(jù)網(wǎng)格元數(shù)據(jù)研究只關(guān)注了文件系統(tǒng)中的數(shù)據(jù),而對(duì)數(shù)據(jù)庫(kù)系統(tǒng)中的數(shù)據(jù)卻很少涉及。針對(duì)這一現(xiàn)象,本文提出并建立了一個(gè)數(shù)據(jù)網(wǎng)格環(huán)境下的元數(shù)據(jù)管理策略。該策略采用了語(yǔ)義相關(guān)層次模式,可以提高數(shù)據(jù)查詢效率,并獲得資源的負(fù)載均衡性。②數(shù)據(jù)副本管理策略研究為提高數(shù)據(jù)的可靠性和數(shù)據(jù)的訪問(wèn)效率,通常采取副本技術(shù)。本文主要針對(duì)副本創(chuàng)建的時(shí)間和粒度進(jìn)行了研究,提出基于排隊(duì)系統(tǒng)的副本創(chuàng)建時(shí)間策略和基于流行度的副本粒度選擇策略,可以獲得副本創(chuàng)建的良機(jī),節(jié)約存