科技領(lǐng)域?qū)嶓w語(yǔ)義向量構(gòu)建方法研究.pdf

1、互聯(lián)網(wǎng)文獻(xiàn)檢索在當(dāng)今科研活動(dòng)起著非常重要的作用，但是面對(duì)越來(lái)越大規(guī)模的科技文獻(xiàn)，高效智能的文獻(xiàn)檢索技術(shù)是非常需要的。傳統(tǒng)文獻(xiàn)檢索主要是利用各種檢索條件進(jìn)行關(guān)鍵字匹配搜索，使用不方便，缺乏語(yǔ)義理解，搜索結(jié)果不甚理想，究其根本原因在于缺乏科技文獻(xiàn)的知識(shí)表示。傳統(tǒng)的文本向量表示沒(méi)有考慮文本中特征項(xiàng)之間的關(guān)系，對(duì)語(yǔ)義表達(dá)造成了極大的信息損失。隨著深度學(xué)習(xí)的研究與廣泛應(yīng)用，以詞向量為基礎(chǔ)的短語(yǔ)結(jié)構(gòu)向量表示也得到了越來(lái)越多的關(guān)注，并已成功應(yīng)用于很多

2、領(lǐng)域的自然語(yǔ)言處理任務(wù)中。本文針對(duì)科技領(lǐng)域?qū)嶓w的語(yǔ)義向量表示進(jìn)行研究，主要包括領(lǐng)域詞典的構(gòu)建和詞向量的訓(xùn)練，為了使得科技領(lǐng)域文獻(xiàn)檢索更加高效、智能，本文結(jié)合詞向量模型，研究提出了科技文獻(xiàn)關(guān)鍵詞的提取算法及權(quán)重計(jì)算方式，基于多粒度混合語(yǔ)義的科技文檔向量模型構(gòu)建以及基于科技文檔向量表示的專(zhuān)家檢索模型。本文主要研究?jī)?nèi)容及創(chuàng)新性工作如下：
　　(1)研究提出一種科技領(lǐng)域詞典構(gòu)建方法。構(gòu)建科技領(lǐng)域詞典是語(yǔ)義挖掘的先行步驟，本文通過(guò)分布式爬蟲(chóng)

3、獲取科技數(shù)據(jù)，在傳統(tǒng)科技詞典的基礎(chǔ)上，融合第三方詞庫(kù)形成科技領(lǐng)域詞以及生成詞向量。
　　(2)研究提出一種基于詞聚類(lèi)的關(guān)鍵詞提取算法。將詞向量模型與K-Means聚類(lèi)算法相結(jié)合，根據(jù)每個(gè)詞與聚類(lèi)中心的語(yǔ)義距離和TF-IDF值相結(jié)合計(jì)算其權(quán)重，根據(jù)權(quán)重值提取關(guān)鍵詞。
　　(3)研究提出一種多粒度混合語(yǔ)義的科技文檔向量模型。傳統(tǒng)的文檔向量化表示方法僅僅只考慮了全局特征或者局部特征，本研究提出一種多粒度混合語(yǔ)義科技文檔向量模型，通

4、過(guò)對(duì)詞向量線性加權(quán)得到描繪了文檔內(nèi)詞語(yǔ)權(quán)重信息的文檔向量，使用主題模型得到描繪文檔間主題信息的文檔向量，以拼接的方式將兩個(gè)向量進(jìn)行組合，通過(guò)對(duì)向量空間維度的增加，將局部特征和全局特征相融合，從而更好地表達(dá)科技文檔向量。
　　(4)研究提出一種基于科技文檔向量的專(zhuān)家檢索模型。通過(guò)專(zhuān)家所發(fā)表的論文、專(zhuān)利以及所參與的項(xiàng)目對(duì)專(zhuān)家進(jìn)行建模，并結(jié)合衰減函數(shù)計(jì)算檢索值，通過(guò)檢索值高低完成檢索任務(wù)。
　　根據(jù)上述研究成果，設(shè)計(jì)并開(kāi)發(fā)科技領(lǐng)域