基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理若干關(guān)鍵技術(shù)研究.pdf

1、由于信息技術(shù)的飛速發(fā)展，數(shù)據(jù)爆炸己成為一個突出的問題，因而海量數(shù)據(jù)管理技術(shù)成為人們關(guān)心的熱點研究課題。本文以數(shù)字化虛擬人為背景，結(jié)合國家863高科技研究發(fā)展計劃課題“數(shù)字化虛擬中國人的數(shù)據(jù)集構(gòu)建與海量數(shù)據(jù)庫系統(tǒng)”，對海量數(shù)據(jù)管理技術(shù)做了較為深入的研究。主要的工作和成果如下： 1、基于數(shù)據(jù)網(wǎng)格技術(shù)的海量數(shù)據(jù)管理方法 數(shù)據(jù)網(wǎng)格技術(shù)是網(wǎng)格的研究方向之一，側(cè)重于數(shù)據(jù)的存儲和管理。以現(xiàn)有的分布式、并行式等數(shù)據(jù)管理技術(shù)為基礎(chǔ)，數(shù)據(jù)網(wǎng)

2、格致力于集成網(wǎng)絡(luò)中的存儲資源、數(shù)據(jù)資源、計算資源等，建立分布海量數(shù)據(jù)的一體化數(shù)據(jù)訪問、存儲、傳輸、管理與服務(wù)架構(gòu)，為海量數(shù)據(jù)的管理提供了一種新的解決方案。 本文研究了基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理，以數(shù)字化虛擬人為背景，結(jié)合數(shù)字人數(shù)據(jù)集的特點，對存儲資源分配、副本管理、高速數(shù)據(jù)傳輸、快速數(shù)據(jù)訪問等關(guān)鍵技術(shù)進(jìn)行了探索，并在局域網(wǎng)內(nèi)建立了一個基于數(shù)據(jù)網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理原型系統(tǒng)。該系統(tǒng)將網(wǎng)絡(luò)上分布異構(gòu)的各種資源集成在一起，形成

3、虛擬的存儲環(huán)境，為上層應(yīng)用提供統(tǒng)一的訪問接口，達(dá)到了數(shù)據(jù)的高度共享。 2．元數(shù)據(jù)模型研究 元數(shù)據(jù)是數(shù)據(jù)管理技術(shù)中一個重要的組成部分。目前大多數(shù)據(jù)網(wǎng)格元數(shù)據(jù)研究只關(guān)注了文件系統(tǒng)中的數(shù)據(jù)，而對數(shù)據(jù)庫系統(tǒng)中的數(shù)據(jù)卻很少涉及。針對這一現(xiàn)象，本文提出并建立了一個網(wǎng)格數(shù)據(jù)庫環(huán)境下的元數(shù)據(jù)模型。該模型采用了關(guān)系．層次混合模式，統(tǒng)一管理數(shù)據(jù)庫系統(tǒng)以及文件系統(tǒng)中的數(shù)據(jù)，擴展了數(shù)據(jù)管理范圍。并且通過一次定位即可查詢到與數(shù)據(jù)相關(guān)的所有信息，極

4、大地提高了數(shù)據(jù)訪問效率。 3．?dāng)?shù)字化虛擬人應(yīng)用平臺通用結(jié)構(gòu) 通過分析數(shù)字化虛擬人的應(yīng)用需求，本文提出了一種應(yīng)用平臺的通用結(jié)構(gòu)。將海量數(shù)據(jù)管理技術(shù)、元數(shù)據(jù)模型以及中間件技術(shù)相結(jié)合，建立了基于數(shù)據(jù)管理的數(shù)字化虛擬人應(yīng)用平臺，并將其應(yīng)用于遠(yuǎn)程教育，展示了數(shù)字人在醫(yī)學(xué)教育方面的應(yīng)用。同時，該平臺也可以推廣到其他領(lǐng)域，例如天文學(xué)、物理學(xué)等等，為這些領(lǐng)域的海量數(shù)據(jù)管理提供強有力的支持。 本文最后對前述工作進(jìn)行了總結(jié)，并提出了