私有云環(huán)境下的程序狀態(tài)監(jiān)控及錯誤恢復(fù).pdf

1、進入互聯(lián)網(wǎng)時代以來，隨著計算機技術(shù)和網(wǎng)絡(luò)技術(shù)的發(fā)展，越來越多的應(yīng)用場景催生出海量的數(shù)據(jù)處理任務(wù)。云計算將大規(guī)模的計算資源通進行互聯(lián)和整合，實現(xiàn)了一種彈性的服務(wù)模式，使得計算資源（計算、存儲、網(wǎng)絡(luò)）能夠像公共基礎(chǔ)設(shè)施（水、電）一樣提供給用戶，是大規(guī)模數(shù)據(jù)處理問題良好的解決方案。同時，軟件技術(shù)的飛速發(fā)展使得計算機程序應(yīng)用范圍越來越廣，功能越來越復(fù)雜，也使得程序產(chǎn)生錯誤的可能性大大提高。如何有效地發(fā)現(xiàn)程序的異常和錯誤并加以處理在實際工作中有著

2、非常重要的意義。
　　社交網(wǎng)絡(luò)信息在用戶行為研究和突發(fā)性事件分析領(lǐng)域有著重要的價值，然而社交網(wǎng)絡(luò)信息的采集程序通常面臨采集數(shù)據(jù)量大、運行時間長等問題。本文深入研究了云計算技術(shù)、程序狀態(tài)監(jiān)控和錯誤恢復(fù)相關(guān)理論，詳細分析了采集程序的特點，設(shè)計并實現(xiàn)了一套私有云環(huán)境下的社交網(wǎng)絡(luò)信息采集系統(tǒng)，并且實現(xiàn)了采集程序的狀態(tài)監(jiān)控和錯誤恢復(fù)。本文的主要工作包括：
　　1.設(shè)計并實現(xiàn)了私有云環(huán)境下的社交網(wǎng)絡(luò)信息采集系統(tǒng)。該系統(tǒng)提供通信服務(wù)、作業(yè)

3、的執(zhí)行與監(jiān)控、作業(yè)的分派與調(diào)度、以及用戶交互等主要功能。借助于私有云環(huán)境強大的計算能力，對采集作業(yè)進行分布式并行化處理，從而提高了采集作業(yè)的執(zhí)行效率。
　　2.實現(xiàn)了采集程序的狀態(tài)監(jiān)控、異常檢測以及錯誤恢復(fù)。本文通過獲取采集程序運行時的狀態(tài)數(shù)據(jù)（系統(tǒng)資源使用情況和系統(tǒng)調(diào)用序列），并且將狀態(tài)數(shù)據(jù)輸入樸素貝葉斯分類器，實現(xiàn)了采集程序的狀態(tài)監(jiān)控和異常檢測；同時，本文分析了采集程序的特點，結(jié)合應(yīng)用級檢查點技術(shù)，對于采集程序中關(guān)鍵的應(yīng)用級數(shù)