面向數(shù)據(jù)流的通用實時監(jiān)控平臺的研究與實現(xiàn).pdf

1、信息的價值隨著時間的流逝而降低，及時捕獲關鍵信息并做出響應才能先發(fā)制人。實時監(jiān)控是一個非常有挑戰(zhàn)性的課題。實時監(jiān)控應用要求系統(tǒng)在最短的時間做出響應，能處理海量數(shù)據(jù)，能快速的應對用戶不斷變化的業(yè)務需求并提供不間斷的服務。
　　 根據(jù)實時監(jiān)控場景下接入應用和業(yè)務人員的需求，本文設計并實現(xiàn)了一個高實時性、高可靠、可擴展、可定制、面向數(shù)據(jù)流的通用實時監(jiān)控平臺。本文抽象了信息模型來描述通用的監(jiān)控場景，包括主題、監(jiān)控項、數(shù)據(jù)源、請求和風險;

2、用戶可以根據(jù)自己的業(yè)務創(chuàng)建對應的數(shù)據(jù)實體并輕松的接入到實時監(jiān)控平臺;本文通過一個金融風險監(jiān)控應用進一步說明了如何在這個平臺搭建自己的應用。
　　 其次，本文設計了一個實時數(shù)據(jù)流處理引擎，定義了一個SQL風格的流處理語言，實現(xiàn)了在數(shù)據(jù)流上做支持滑動時間窗口的查詢和常用的集聚表達式，提供了API與其他軟件集成，并設計了持久化和故障恢復的模塊。
　　 最后，本文分析了軟件系統(tǒng)中普遍存在的數(shù)據(jù)一致性問題，并討論了如何在性能和一致