內容審計狀態(tài)標記與預處理在網絡監(jiān)控系統(tǒng)中的應用及實現.pdf

1、目前，網絡監(jiān)控方面的理論和產品都非常多，然而網絡監(jiān)控仍然面臨并將一直面臨多方面的挑戰(zhàn)。其中很重要的一方面是監(jiān)控處理速度問題，網絡傳輸技術的飛速發(fā)展帶來的海量數據使速度成為網絡監(jiān)控處理的“瓶頸”。本文針對網絡監(jiān)控的處理速度作出了思考，并提出了一種可以明顯提高處理速度的方法。 實際上，大量的網絡流量內容是相同的(比如對同一熱點新聞的點擊)，而網絡經濟也是“眼球經濟”，這說明相同內容在網絡中重復傳輸現象非常普遍。即使在同一局域網中，不

2、同的用戶對同一內容重復訪問的幾率也非常大，因為這些相似用戶的身份使得他們關注的內容比較趨同。由此可見，內容審計網絡監(jiān)控系統(tǒng)做了大量重復的工作，即對同一內容做了重復審計，而當前大多數網絡監(jiān)控系統(tǒng)沒有考慮到這一點，這使得監(jiān)控系統(tǒng)進行了很多重復審計，浪費了系統(tǒng)資源。 基于此，本文引入了“內容審計狀態(tài)標記”機制，目的是減少不必要的重復審計。具體思路是：(1)在現有的網絡內容審計監(jiān)控系統(tǒng)的基礎上，在監(jiān)控審計開始前，嵌入一段標準模塊，先到審

3、計結果狀態(tài)標記數據庫中快速檢索此內容(比如相同的URL)以前的審計結果，如果內容相同，并且以前做過審計，則直接使用上次審計結果，如果沒有再返回進行審計．；(2)在審計結束后，將結果保存到狀態(tài)標記數據庫中，以備以后查詢。 本文就狀態(tài)標記機制提出了模型框架設計、流程、數據庫設計、模塊設計及實現的具體思路，最后形成標準化組件。本文還討論了狀態(tài)標記機制實現中的相關策略，針對審計結果可能已經過期(比如結果保存后，相關網頁內容被更新)的情況