分布式數(shù)據(jù)采集與監(jiān)測系統(tǒng)的設計、實現(xiàn)及應用.pdf

1、在計算機系統(tǒng)結構和性能的研究過程中，數(shù)據(jù)采集和監(jiān)測系統(tǒng)一直都具有十分重要的作用，它能夠獲取軟硬件運行時所產(chǎn)生的可以反映系統(tǒng)性能、負載和效率等特征的大量數(shù)據(jù)，從而為現(xiàn)有系統(tǒng)的改進和新結構的設計提供參考。當前，以數(shù)據(jù)和計算中心為主體的集中式個人計算和存儲模式成為了新結構研究中的熱點。在這種模式中，計算和存儲資源被集中放置在服務器端，用戶通過與服務器連接的瘦客戶端和虛擬化技術獲得獨立、安全的個人計算環(huán)境。集中模式試圖通過服務器端的大規(guī)模資源共

2、享來提高資源利用率從而降低成本，這給服務器的設計帶來了挑戰(zhàn)。而這種服務器的資源及負載實際上是現(xiàn)有大量個人資源和負載的某種聚合。因此，研究現(xiàn)有個人計算機上的資源使用、應用和用戶行為等特征，可以為集中模式中服務器的設計提供量化的參考，這就需要對目前大量分布在網(wǎng)絡環(huán)境中的個人計算機上的數(shù)據(jù)進行長時期采集與監(jiān)測，并且，在此過程中采集和監(jiān)測的數(shù)據(jù)類型和人群也可能隨著研究的進行而發(fā)生動態(tài)變化。針對這些研究需求，本文設計并實現(xiàn)了一個動態(tài)可更新的分布式

3、數(shù)據(jù)采集與監(jiān)測系統(tǒng)，并對系統(tǒng)收集到的數(shù)據(jù)進行了全面的分析。 本文的主要工作和貢獻是： 1.分析了典型的分布式監(jiān)測系統(tǒng)的結構和技術特點，針對集中模式研究的需求，討論了用于獲取網(wǎng)絡環(huán)境中個人計算機數(shù)據(jù)的采集和監(jiān)測系統(tǒng)設計中的關鍵問題。在總結和分析已有系統(tǒng)的基礎上，提出了一個動態(tài)可更新的分布式數(shù)據(jù)采集和監(jiān)測系統(tǒng)DDCS的體系結構，這一結構融入了數(shù)據(jù)采集模塊獨立化和監(jiān)測過程服務化的設計思想，并基于Manager／Agent模型，

4、很好的滿足了長期研究過程中采集數(shù)據(jù)類型動態(tài)變化的需求。 2.基于動態(tài)可更新的體系結構，實現(xiàn)了分布式數(shù)據(jù)采集和監(jiān)測系統(tǒng)DDCS。DDCS通過動態(tài)更新協(xié)議實現(xiàn)了參數(shù)，數(shù)據(jù)采集器和系統(tǒng)三個級別的動態(tài)更新機制；它通過多種技術實現(xiàn)了系統(tǒng)的輕載性；DDCS還支持多層次和跨網(wǎng)域的數(shù)據(jù)采集和監(jiān)測，并一1ti臣過提供數(shù)據(jù)采集器開發(fā)包實現(xiàn)了系統(tǒng)的可擴展機制。 3.將DDCS在40臺個人辦公計算機上進行了部署實驗，收集到大量真實數(shù)據(jù)，通過從資