私有云環(huán)境下的程序狀態(tài)監(jiān)控及錯(cuò)誤恢復(fù).pdf

1、進(jìn)入互聯(lián)網(wǎng)時(shí)代以來，隨著計(jì)算機(jī)技術(shù)和網(wǎng)絡(luò)技術(shù)的發(fā)展，越來越多的應(yīng)用場景催生出海量的數(shù)據(jù)處理任務(wù)。云計(jì)算將大規(guī)模的計(jì)算資源通進(jìn)行互聯(lián)和整合，實(shí)現(xiàn)了一種彈性的服務(wù)模式，使得計(jì)算資源（計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)）能夠像公共基礎(chǔ)設(shè)施（水、電）一樣提供給用戶，是大規(guī)模數(shù)據(jù)處理問題良好的解決方案。同時(shí)，軟件技術(shù)的飛速發(fā)展使得計(jì)算機(jī)程序應(yīng)用范圍越來越廣，功能越來越復(fù)雜，也使得程序產(chǎn)生錯(cuò)誤的可能性大大提高。如何有效地發(fā)現(xiàn)程序的異常和錯(cuò)誤并加以處理在實(shí)際工作中有著

2、非常重要的意義。
　　社交網(wǎng)絡(luò)信息在用戶行為研究和突發(fā)性事件分析領(lǐng)域有著重要的價(jià)值，然而社交網(wǎng)絡(luò)信息的采集程序通常面臨采集數(shù)據(jù)量大、運(yùn)行時(shí)間長等問題。本文深入研究了云計(jì)算技術(shù)、程序狀態(tài)監(jiān)控和錯(cuò)誤恢復(fù)相關(guān)理論，詳細(xì)分析了采集程序的特點(diǎn)，設(shè)計(jì)并實(shí)現(xiàn)了一套私有云環(huán)境下的社交網(wǎng)絡(luò)信息采集系統(tǒng)，并且實(shí)現(xiàn)了采集程序的狀態(tài)監(jiān)控和錯(cuò)誤恢復(fù)。本文的主要工作包括：
　　1.設(shè)計(jì)并實(shí)現(xiàn)了私有云環(huán)境下的社交網(wǎng)絡(luò)信息采集系統(tǒng)。該系統(tǒng)提供通信服務(wù)、作業(yè)

3、的執(zhí)行與監(jiān)控、作業(yè)的分派與調(diào)度、以及用戶交互等主要功能。借助于私有云環(huán)境強(qiáng)大的計(jì)算能力，對(duì)采集作業(yè)進(jìn)行分布式并行化處理，從而提高了采集作業(yè)的執(zhí)行效率。
　　2.實(shí)現(xiàn)了采集程序的狀態(tài)監(jiān)控、異常檢測以及錯(cuò)誤恢復(fù)。本文通過獲取采集程序運(yùn)行時(shí)的狀態(tài)數(shù)據(jù)（系統(tǒng)資源使用情況和系統(tǒng)調(diào)用序列），并且將狀態(tài)數(shù)據(jù)輸入樸素貝葉斯分類器，實(shí)現(xiàn)了采集程序的狀態(tài)監(jiān)控和異常檢測；同時(shí)，本文分析了采集程序的特點(diǎn)，結(jié)合應(yīng)用級(jí)檢查點(diǎn)技術(shù)，對(duì)于采集程序中關(guān)鍵的應(yīng)用級(jí)數(shù)