數據抽取轉換工具中數據映射關系的設計及其關鍵技術研究.pdf

1、目前信息化建設呈現出“數據集中化、業(yè)務綜合化、管理扁平化、決策科學化”的發(fā)展趨勢，因此大多數過去遺留下來的異構系統(tǒng)已不能滿足這樣的需求。企業(yè)信息和數據的集成交換需求越來越強烈。因為數據集成和交換必須解決復雜的數據處理過程，所以出現了專門的數據抽取、轉換和載入(Extract，Transform，Load)工具——即ETL工具。ETL工具在數據集成過程中起到了舉足輕重的作用。 論文首先介紹了ETL工具的相關背景知識，并分析了ETL

2、工具的研究現狀。分析得出結論：現有關于ETL的研究對源一目數據的映射關系重視不夠，而這一內容是數據抽取轉換的核心。基于這一結論，在第一章提出了本文的研究目標和研究內容。 根據論文的研究目標，本文論述了一種基于網絡的異種數據抽取轉換工具ETLA(Extract-Transform-Load-Analysis的縮寫)的分析和設計，該工具根據數據映射關系定義ETL任務，根據映射關系生成執(zhí)行腳本。論文在第二章闡述了該工具的系統(tǒng)框架、功能

3、劃分，以及數據處理和數據映射流程。 本文隨后重點研究了ETLA中的數據映射關系。分析了各種數據映射后，提出了數據映射關系的形式化描述。在ETLA中，映射關系是以表達式表示。表達式由源數據項、目標數據項、以及源數據項之間的關系構成，并符合一定表示規(guī)則。按照表達式表示映射關系后，ETLA的數據轉換模塊將解析表達式，生成數據轉換執(zhí)行腳本，并執(zhí)行。 論文最后設計了ETLA映射索引庫。索引庫按照主題組織源數據，用戶能夠根據目標表的