數(shù)據(jù)集成技術(shù)及其應(yīng)用研究.pdf

1、隨著社保審計(jì)范圍不斷擴(kuò)大，需要處理的業(yè)務(wù)數(shù)據(jù)呈現(xiàn)多源化、異構(gòu)化、海量化等特點(diǎn)，因此如何實(shí)現(xiàn)異構(gòu)分布式數(shù)據(jù)源信息共享成為當(dāng)前亟待解決的問題。本文研究的數(shù)據(jù)集成技術(shù)對(duì)異構(gòu)分布式數(shù)據(jù)源進(jìn)行邏輯集成，利用中間件技術(shù)形成一個(gè)虛擬數(shù)據(jù)庫，它向上為用戶提供統(tǒng)一的數(shù)據(jù)訪問接口，向下屏蔽底層異構(gòu)數(shù)據(jù)源。數(shù)據(jù)集成技術(shù)可應(yīng)用于社保審計(jì)分布式業(yè)務(wù)數(shù)據(jù)查詢中。
　　 本文主要工作包括數(shù)據(jù)集成系統(tǒng)框架設(shè)計(jì)，數(shù)據(jù)集成算法研究。數(shù)據(jù)集成系統(tǒng)框架設(shè)計(jì)包括總體架構(gòu)

2、設(shè)計(jì)、中間件邏輯結(jié)構(gòu)設(shè)計(jì)、數(shù)據(jù)持久層設(shè)計(jì)、部件交互設(shè)計(jì)。中間件結(jié)構(gòu)設(shè)計(jì)是關(guān)鍵，它在邏輯上由語法分析器、查詢重寫器、包裝器、連接池、結(jié)果整合器等組成。數(shù)據(jù)集成算法包括查詢重寫算法和結(jié)果整合算法。查詢重寫算法將面向全局模式的查詢重寫為面向各數(shù)據(jù)源模式的子查詢，它基于三叉鏈樹將查詢語句展開，并對(duì)樹中的模式和屬性節(jié)點(diǎn)分類映射。結(jié)果整合算法主要對(duì)結(jié)果集進(jìn)行連接操作、分組操作及嵌套查詢；連接操作使用預(yù)處理技術(shù)對(duì)結(jié)果集進(jìn)行排序，分組操作基于平衡樹進(jìn)行