支持分庫(kù)分表和讀寫分離的ORM框架的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)的飛速發(fā)展，越來(lái)越多的企業(yè)在百度搜索引擎上投放廣告，實(shí)現(xiàn)流量變現(xiàn)。所以廣告業(yè)務(wù)系統(tǒng)的數(shù)據(jù)呈現(xiàn)爆炸性的增長(zhǎng)，單一的數(shù)據(jù)庫(kù)服務(wù)器已經(jīng)不足以存儲(chǔ)所有的數(shù)據(jù)，所以按照一系列規(guī)則對(duì)數(shù)據(jù)庫(kù)做了分庫(kù)分表的處理，并提供主從庫(kù)來(lái)分離數(shù)據(jù)庫(kù)的讀寫操作，以提高讀操作的性能。而在廣告業(yè)務(wù)系統(tǒng)中需要一個(gè)統(tǒng)一的模塊去和所有的數(shù)據(jù)庫(kù)進(jìn)行交互。雖然目前開源的對(duì)象映射（ORM）框架已經(jīng)很多，但是這些框架屬于通用型的，不能和業(yè)務(wù)及數(shù)據(jù)庫(kù)最好地配合。而系統(tǒng)目前使用

2、的ORM框架性能較低，對(duì)緩存服務(wù)器內(nèi)存的使用比較浪費(fèi)。
　　為了更好地和數(shù)據(jù)庫(kù)、緩存等交互，并節(jié)省緩存服務(wù)器的內(nèi)存，提出支持?jǐn)?shù)據(jù)庫(kù)分庫(kù)分表以及讀寫分離的ORM框架的需求。該框架使用JAVA語(yǔ)言開發(fā)，并和MYSQL服務(wù)器和REDIS緩存服務(wù)器進(jìn)行交互。其設(shè)計(jì)上分為六個(gè)模塊：配置管理、數(shù)據(jù)源管理、映射管理、緩存管理、數(shù)據(jù)存取和數(shù)據(jù)報(bào)告。其中配置管理完成了數(shù)據(jù)庫(kù)和緩存配置文件的定義和加載。數(shù)據(jù)源管理完成了如何將數(shù)據(jù)庫(kù)和緩存的配置解析并注

3、冊(cè)為相應(yīng)的數(shù)據(jù)源對(duì)象，并如何集中管理和查找數(shù)據(jù)源。映射管理完成了如何通過(guò)JAVA注解將JAVA的對(duì)象映射到數(shù)據(jù)庫(kù)表。緩存管理完成了緩存的結(jié)構(gòu)以及如何通過(guò)一致性哈希管理緩存服務(wù)器。數(shù)據(jù)存取完成了數(shù)據(jù)庫(kù)和緩存的增刪改查功能的實(shí)現(xiàn)，并完成了數(shù)據(jù)庫(kù)讀寫分離的實(shí)現(xiàn)和如何通過(guò)分布式緩存解決數(shù)據(jù)庫(kù)的主從延遲。作為框架的核心，其性能會(huì)影響系統(tǒng)的處理能力，所以提升數(shù)據(jù)庫(kù)和緩存操作的性能成為關(guān)鍵。最后完成了數(shù)據(jù)報(bào)告模塊，通過(guò)輸出框架運(yùn)行時(shí)的各項(xiàng)數(shù)據(jù)指標(biāo)，協(xié)