網站日志的數據挖掘.pdf

1、隨著INTERNET上數據量呈爆炸式的增長，信息數據的有用性變的十分必要。WEB挖掘是將數據挖掘技術應用于互聯網，目前在許多研究領域都是熱點。作者討論了WEB挖掘和WEB挖掘的分類。根據挖掘的內容，WEB挖掘可分為三種，WEB使用挖掘，WEB內容挖掘，WEB結構挖掘。對每種挖掘，作者都討論了與其相關的研究領域，技術和發(fā)展方向。WEB使用挖掘是本文主要的研究方向。 WEB使用挖掘是利用數據挖掘技術根據WEB使用數據挖掘用戶訪問網站

2、的行為模式。網站使用記錄挖掘不同與網站內容挖掘和網站結構挖掘，它的挖掘對象不是網上的原始數據，而是記錄用戶與網站交互的過程的數據。就些數據包括：客戶端瀏覽器日志記錄，網站服務器訪問記錄、代理服務器日志記錄、用戶注冊信息等。WEB使用挖掘分為三個階段，數據預處理，模式發(fā)現，模式分析。作者詳細討論了這三個階段所遇到的問題和解決辦法。 許多數據挖掘方法在WEB挖掘上都有很好的應用，作者討論以下幾種在WEB使用記錄上常用的方法，統(tǒng)計分析

3、方法，關聯規(guī)則方法，序列模式方法，聚類方法，分類方法，并著重討論關聯規(guī)則方法應用于WEB使用記錄的挖掘。關聯規(guī)則方法在數據挖掘領域被廣泛應用，它主要用于發(fā)現有用的模式，典型的例子就是購物籃分析。將關聯規(guī)則應用于WEB使用記錄挖掘的關鍵在于如何構造購物籃。用戶點擊網站的每一頁所產生的動作都被服務器記錄在日志中，分析日志文件，并結合網站的拓撲和實際內容，經過數據清理，用戶識別，會話識別，事務識別四個數據預處理過程，我們可以獲得一個事務集合，