Deep Web數(shù)據(jù)集成系統(tǒng)中數(shù)據(jù)抽取與語義標注研究.pdf

1、由于Internet上數(shù)據(jù)具有異質性和多樣性的特征，導致同一個領域中不同網(wǎng)站的結構也有很大差別，因此，用戶要從Web上逐漸增多的海量數(shù)據(jù)中找到自己感興趣的信息變得日益困難。目前，一項重要工作就是把結果頁面中用戶感興趣的相關數(shù)據(jù)抽取出來，并為其添加語義信息，然后集成為統(tǒng)一的結構化形式，以供后續(xù)處理及使用，這就是DeepWeb數(shù)據(jù)集成系統(tǒng)中數(shù)據(jù)抽取和語義標注。
　　 在Deep Web數(shù)據(jù)集成系統(tǒng)的研究中，現(xiàn)有的數(shù)據(jù)抽取方法依賴于查

2、詢接口模式和查詢結果模式，或者使用樹編輯距離算法導致時間復雜度高，影響了數(shù)據(jù)抽取的效果。本文將XML技術運用到抽取過程中，并且基于本體進行語義標注，主要工作有以下幾個方面：
　　 1.提出了一種基于索引路徑的數(shù)據(jù)抽取方法，先為每一個文本節(jié)點建立索引路徑，再通過關鍵字定位數(shù)據(jù)區(qū)，形成抽取規(guī)則，輸出相應的Wrapper，利用Wrapper能夠對同一個網(wǎng)站中相同領域的同類網(wǎng)頁進行自動地數(shù)據(jù)抽取。這種方法既不依賴HTML文檔的標簽，也不

3、使用樹編輯距離，而是充分利用用戶感興趣的數(shù)據(jù)在網(wǎng)頁中的連續(xù)性和結構相似性的特點定位數(shù)據(jù)區(qū)，抽取數(shù)據(jù)，形成抽取規(guī)則。
　　 2.應用領域知識、數(shù)據(jù)內容、表現(xiàn)形式和數(shù)據(jù)類型等數(shù)據(jù)特征對嵌套屬性的數(shù)據(jù)單元進行拆分。對于返回的查詢結果頁面，有些網(wǎng)站中一個標簽下面可能會存儲多個屬性，在進行語義標注之前需要對其進行拆分。3.應用圖書領域本體中概念與概念，概念與實例之間的映射關系對部分屬性值進行語義標注，對其他的屬性值應用其特殊的數(shù)據(jù)格式來形