面向證券交易數(shù)據(jù)的消息中間件的存儲系統(tǒng)的設(shè)計與實(shí)現(xiàn).pdf

1、金融領(lǐng)域中存在著眾多復(fù)雜的、分布式的、異構(gòu)的應(yīng)用系統(tǒng)。這些應(yīng)用系統(tǒng)之間存在著大量的業(yè)務(wù)數(shù)據(jù)交互需求。國內(nèi)金融行業(yè)某交易中心為了使證券交易數(shù)據(jù)能夠異步地、可靠地、安全地傳遞給各家交易機(jī)構(gòu)的應(yīng)用系統(tǒng)，采用消息中間件MessageHub作為可靠的消息傳遞手段。持久化存儲系統(tǒng)是該消息中間件的重要模塊，它的實(shí)現(xiàn)技術(shù)對消息中間件的功能和性能影響很大。
　　 MessageHub現(xiàn)有的持久化系統(tǒng)在擴(kuò)展性和健壯性等方面存在一些缺點(diǎn)，不能很好地滿

2、足該應(yīng)用場景的需要。為了解決這些問題，本文對消息中間件及其消息持久化技術(shù)進(jìn)行了分析與研究，借鑒分布式存儲的相關(guān)技術(shù)，結(jié)合MessageHub對數(shù)據(jù)存儲的需求和特點(diǎn)，設(shè)計了一個可靠性高、易擴(kuò)展、高可用、高性能的，面向證券交易數(shù)據(jù)傳輸?shù)南⒅虚g件的持久化存儲系統(tǒng)，并通過精心的設(shè)計，使其滿足該場景對消息一致性的需要。
　　 論文詳細(xì)介紹了存儲系統(tǒng)的架構(gòu)和各個模塊的具體設(shè)計。存儲系統(tǒng)的整體設(shè)計借鑒了Memcached這個分布式緩存系統(tǒng)，

3、由客戶端組件和服務(wù)端組件兩部分組成。為了提高存儲的可靠性，存儲系統(tǒng)對數(shù)據(jù)進(jìn)行雙備份，并結(jié)合一致性哈希算法和虛擬節(jié)點(diǎn)技術(shù)，實(shí)現(xiàn)數(shù)據(jù)在存儲節(jié)點(diǎn)的均衡分布。系統(tǒng)對已發(fā)送消息的隊(duì)列store采用主動復(fù)制方式，而對待發(fā)送消息的隊(duì)列queue采用被動復(fù)制方式，以滿足它們對一致性不同的需要。系統(tǒng)通過監(jiān)聽器機(jī)制支持存儲節(jié)點(diǎn)的動態(tài)變化。由于MessageHub傳輸?shù)南⒘看?，存儲系統(tǒng)采用基于文件存儲的持久化方法，分別對store和queue設(shè)計了各自的存