大規(guī)模時(shí)間序列數(shù)據(jù)存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn).pdf

1、時(shí)間序列數(shù)據(jù),即一段時(shí)間內(nèi)以固定的時(shí)間間隔采集的數(shù)據(jù)點(diǎn)的序列,已成為生產(chǎn)生活中重要的信息記錄形式。RRDtool是當(dāng)今被廣泛使用的一種存儲(chǔ)時(shí)間序列數(shù)據(jù)的數(shù)據(jù)庫(kù)工具,但是基于RRDtool構(gòu)建的時(shí)間序列數(shù)據(jù)存儲(chǔ)系統(tǒng)在處理大規(guī)模數(shù)據(jù)業(yè)務(wù)時(shí)I/O負(fù)荷較重,單位時(shí)間內(nèi)能夠處理的RRD文件數(shù)量不能滿(mǎn)足需求等問(wèn)題;同時(shí),數(shù)據(jù)量的迅速增長(zhǎng)要求存儲(chǔ)系統(tǒng)的容量具有較好的擴(kuò)展性,特別是能夠在不影響系統(tǒng)在線(xiàn)工作的情況下調(diào)整存儲(chǔ)容量;另一方面,考慮到系統(tǒng)可能發(fā)

2、生異常或部分受災(zāi),需要一種在這些情況下能保證系統(tǒng)可用性的存儲(chǔ)方案。
　　針對(duì)上述問(wèn)題,本文研究并實(shí)現(xiàn)了一種面向大規(guī)模時(shí)間序列數(shù)據(jù)的存儲(chǔ)系統(tǒng)。構(gòu)建該系統(tǒng)的關(guān)鍵部分是mem-RRD和MooseFS,前者是對(duì)RRDtool的改進(jìn)實(shí)現(xiàn),I/O性能更好;后者是一種分布式文件系統(tǒng),可以保證存儲(chǔ)系統(tǒng)的可用性和擴(kuò)展性。
　　本文首先介紹了一種命名為mem-RRD的基于用戶(hù)空間緩沖的RRDtool改進(jìn)方案的設(shè)計(jì)和實(shí)現(xiàn)過(guò)程;然后給出利用mem-