DWMS中元數(shù)據(jù)以及緩沖區(qū)的設計和實現(xiàn).pdf

1、近年來，隨著ERP、電子商務的迅速發(fā)展，越來越多的企業(yè)開始重視數(shù)據(jù)倉庫的建設，以從大量數(shù)據(jù)中獲得有用的信息，為企業(yè)帶來經(jīng)濟效益。相對于數(shù)據(jù)庫管理系統(tǒng)，數(shù)據(jù)倉庫系統(tǒng)具有面向主題、集成的、不可更新的特點，是一種支持對大量數(shù)據(jù)進行分析的決策性系統(tǒng)。在數(shù)據(jù)倉庫上進行數(shù)據(jù)分析時，常常要求進行ad-hoc查詢操作，這就會在短時間內(nèi)讀取大量新數(shù)據(jù)。因此，與數(shù)據(jù)庫管理系統(tǒng)相比較，數(shù)據(jù)倉庫系統(tǒng)更偏重于讀操作的性能。列存儲是一種保證高效讀性能的新型存儲技術

2、。在列存儲中，數(shù)據(jù)以列的形式存儲在磁盤塊中，在查詢時，只需讀取與查詢相關的列數(shù)據(jù)，從而減少磁盤I/O，提高了讀操作的效率，所以列存儲已成為目前數(shù)據(jù)倉庫的主流存儲架構。
　　 元數(shù)據(jù)和緩沖區(qū)是數(shù)據(jù)倉庫的重要組成部分，元數(shù)據(jù)和緩沖區(qū)的設計和實現(xiàn)關系到數(shù)據(jù)倉庫的運行效率和穩(wěn)定性，元數(shù)據(jù)保存了數(shù)據(jù)字典中各項基本數(shù)據(jù)，是數(shù)據(jù)倉庫數(shù)據(jù)的數(shù)據(jù)，而緩沖區(qū)是為了減少磁盤I/O而產(chǎn)生的內(nèi)存管理結構，因此元數(shù)據(jù)和緩沖區(qū)的設計好壞直接關系到數(shù)據(jù)倉庫的性

3、能。
　　 對于數(shù)據(jù)倉庫，其數(shù)據(jù)較少更新。但是對于元數(shù)據(jù)來說，系統(tǒng)需要頻繁的對其進行更新、刪除操作，由于列存儲的局限性，無法很好的支持數(shù)據(jù)更新.這也給系統(tǒng)實現(xiàn)帶來了很大的麻煩。本文作者的研究目標是如何設計出數(shù)據(jù)倉庫中元數(shù)據(jù)的邏輯結構以及存儲結構，并根據(jù)其存儲結構設計出與其相對應的緩沖區(qū)。
　　 本文的研究內(nèi)容主要包括：
　　 1.根據(jù)數(shù)據(jù)倉庫的定義，分析了數(shù)據(jù)存儲底層管理和實現(xiàn)機制，并對其實現(xiàn)機制，設計出了適合數(shù)

4、據(jù)倉庫底層存儲的物理存儲結構；
　　 2.由于元數(shù)據(jù)具有廣泛性，因此本文只采用了一種元數(shù)據(jù)即--數(shù)據(jù)字典作為研究重點，并對數(shù)據(jù)字典進行了詳細的設計，以符合數(shù)據(jù)倉庫上層模塊的需求；
　　 3.針對數(shù)據(jù)倉庫列存儲更新效率上的缺點以及數(shù)據(jù)倉庫對數(shù)據(jù)字典的高效定值查找、更新的需求，本文設計出了適合數(shù)據(jù)倉庫數(shù)據(jù)字典的存儲結構--Hash B+樹索引存儲結構，該索引結構可很好地滿足了數(shù)據(jù)倉庫的定值查找和數(shù)據(jù)更新；
　　 4.