數據集成方案中的元數據管理系統(tǒng)研究.pdf

1、在數據集成過程中，元數據為整個系統(tǒng)中的數據提供一張完整的數據地圖。通過元數據，我們可以了解到系統(tǒng)中的數據結構、數據來源、數據去向以及系統(tǒng)中的一些業(yè)務處理規(guī)則等。 在現(xiàn)有的元數據管理工具中，往往僅僅關注數據集成過程中的一部分，如ETL過程的元數據或數據倉庫中的元數據。然而，在數據集成越來越復雜，數據越來越多的今天，如果僅僅對這些元數據進行管理是不能夠滿足當前對元數據管理的需求的。因此，我們有必要提出一種元數據管理框架。通過該框架，

2、我們能夠了解在整個數據集成過程中涉及到的數據源、ETL過程、數據目標的元數據，并且能夠使這些元數據之間進行一定的交互?；谶@種需求，本文提出了一種覆蓋整個數據集成過程的元數據管理框架。它是一個以聯(lián)邦式元數據庫為基本思想，參考CWM元數據標準并結合高校數據集成中的共享數據庫平臺實際情況的元數據管理框架原型。 可擴展性是元數據管理工具開發(fā)的重要需求之一。隨著時間的推移，業(yè)務系統(tǒng)中的業(yè)務處理規(guī)則可能發(fā)生變化，對元數據查詢的需求可能會增

3、加。如何通過最簡單的方式實現(xiàn)工具對這種變化需求的滿足是工具開發(fā)中的難點之一。本文提出了一種動態(tài)關鍵字標識的方式來滿足這種可擴展性。工具通過維護關鍵字和動態(tài)鏈接庫的路徑表來實現(xiàn)對元數據的動態(tài)需求。動態(tài)鏈接庫與關鍵字相對應用以實現(xiàn)關鍵字所描述的功能。 ETL過程是數據集成中的重要步驟之一，是一個以元數據為驅動實現(xiàn)數據的集成的過程。因此如何描述、存儲和管理其中的元數據極為重要。本文將從邏輯上描述一個ETL過程，并給出一個簡化的ETL元