雙模式異構數(shù)據(jù)整合系統(tǒng)研究與優(yōu)化設計.pdf

1、在電子政務應用系統(tǒng)建設潮流的驅動下，各政府機關和事業(yè)單位中已建成了各類應用系統(tǒng)并產(chǎn)生了大量業(yè)務數(shù)據(jù)。而在系統(tǒng)建設和運行過程中，因為建設時間先后問題，或是系統(tǒng)建設過程中的業(yè)務拓展問題，各種已建成系統(tǒng)或在建系統(tǒng)的實施過程往往會因為欠缺合理的整體規(guī)劃考慮，以致造成各個系統(tǒng)間信息交互的不通暢，使得原本業(yè)務相關的系統(tǒng)經(jīng)常容易出現(xiàn)因平臺、架構等問題而造成無法互通的現(xiàn)象，很多業(yè)務上的數(shù)據(jù)無法得到充分的共享和利用，于是產(chǎn)生了大量的信息孤島問題，嚴重限制

2、了電子政務系統(tǒng)的進一步發(fā)展。為此業(yè)界專門形成了針對數(shù)據(jù)集成的各種研究課題，并進一步針對這些課題提出了很多解決方案和技術。以SOA（Service-Oriented Architecture）架構和中間件技術為代表的系統(tǒng)間交互設計方案對解決此類問題提供了良好的思路，并且圍繞這些技術架構產(chǎn)生的各種應用與實際開發(fā)中的具體技術如Web Service、XML（eXtensible Markup Language）等也在不斷的推陳出新。而通過優(yōu)秀

3、的設計模式、系統(tǒng)分層架構設計等理念，也能為提高數(shù)據(jù)集成系統(tǒng)的靈活性和可維護性提供支持和幫助。
　　本文基于一個實際的異構數(shù)據(jù)集成項目，對各種數(shù)據(jù)集成技術進行借鑒和研究，按照系統(tǒng)間實際的異構現(xiàn)狀，設計并實現(xiàn)一套完整的數(shù)據(jù)整合系統(tǒng)，完成項目的基本功能要求。而本文所研究課題的創(chuàng)新點在于，通過將不同技術的交叉組合，形成一整套能夠適合實際系統(tǒng)環(huán)境的數(shù)據(jù)集成架構和解決方案，目的在于解決項目實施過程中凸顯的幾大集成難點問題。首先通過選用兩種不同

4、的同步模式，形成“雙模式”的同步設計，充分發(fā)揮兩種模式對數(shù)據(jù)整合的有效因素并分別彌補雙方的不足，解決了系統(tǒng)要求的同時滿足可靠性和即時性的問題；其次則通過將觀察者模式和適配器模式等設計模式進行合理的整合利用，形成基于事件發(fā)布-訂閱模型的數(shù)據(jù)即時同步引擎，利用消息在數(shù)據(jù)源系統(tǒng)和觀察者系統(tǒng)之間的特殊傳輸過程，解決多個不同平臺的下游系統(tǒng)間的數(shù)據(jù)即時同步的有效管理問題，充分發(fā)揮SOA架構的優(yōu)勢并提升系統(tǒng)的健壯性和可維護性；最后則應對系統(tǒng)實際試運行

5、過程中的性能問題，針對較為復雜的全同步需求專門設計了兩種不同算法，并以代理分析機制分別剖析兩者的時間復雜度，由理論結合實際找出一種較為高效的算法，解決了大數(shù)據(jù)量下的數(shù)據(jù)同步性能問題難點。
　　本課題整個研究過程提供了一種優(yōu)化設計思路，通過將各種數(shù)據(jù)集成前沿技術進行了有效的整合，并創(chuàng)造特殊的整合方案來解決實際情況下的數(shù)據(jù)整合需求，并最終通過實際項目上線運行情況對各種技術的組合使用進行了驗證，證明了本課題研究的價值。而對算法時間復雜度