版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、漢語(yǔ)基本名詞短語(yǔ)自動(dòng)識(shí)別作為中文信息處理的基本任務(wù)之一,在淺層句法分析、信息抽取和檢索、機(jī)器翻譯等自然語(yǔ)言處理領(lǐng)域都有十分重要的理論價(jià)值和廣闊應(yīng)用前景。在語(yǔ)言學(xué)本體研究中,漢語(yǔ)基本名詞短語(yǔ)作為包含著豐富的語(yǔ)法信息的載體,它區(qū)別于一般的漢語(yǔ)名詞短語(yǔ),其構(gòu)成基本名詞短語(yǔ)的實(shí)詞搭配形式,如:“名詞+名詞”、“形容詞+名詞”、“動(dòng)詞+名詞”、“名詞+動(dòng)詞”、“數(shù)詞+量詞+名詞”等搭配組合都是語(yǔ)言學(xué)家們研究與關(guān)注的重點(diǎn)。以往的漢語(yǔ)基本名詞短語(yǔ)自動(dòng)
2、識(shí)別研究只是在現(xiàn)有的人工標(biāo)注好的語(yǔ)料上進(jìn)行單一統(tǒng)計(jì)模型的自動(dòng)識(shí)別實(shí)驗(yàn),并沒(méi)有很好地利用統(tǒng)計(jì)模型進(jìn)行自動(dòng)識(shí)別同時(shí)再融入語(yǔ)言學(xué)的相關(guān)信息來(lái)進(jìn)一步提高識(shí)別效果。
本文的工作在約100萬(wàn)詞次973清華中文樹庫(kù)的基礎(chǔ)上,對(duì)其中所包含的基本名詞短語(yǔ)進(jìn)行了詳細(xì)的統(tǒng)計(jì)和分析,具體考察了基本名詞短語(yǔ)的詞性序列分布信息、長(zhǎng)度分布信息和音節(jié)組合模式分布信息,同時(shí)在參考黃昌寧先生在自動(dòng)分詞領(lǐng)域提出的詞位能產(chǎn)度計(jì)算公式的基礎(chǔ)上,對(duì)組成基本名詞短語(yǔ)的
3、詞語(yǔ)的詞位信息進(jìn)行計(jì)算和分析,這些相關(guān)的統(tǒng)計(jì)考察工作為接下來(lái)利用統(tǒng)計(jì)模型識(shí)別基本名詞短語(yǔ)提供必要的數(shù)據(jù)支持和統(tǒng)計(jì)決策。
在基本名詞短語(yǔ)識(shí)別中,我們采用一種基于統(tǒng)計(jì)詞位信息的多標(biāo)記多特征的基本名詞短識(shí)別方法,在確定詞位標(biāo)記時(shí),我們不是簡(jiǎn)單的采用當(dāng)前國(guó)際上通用的BIO語(yǔ)塊標(biāo)注體系,而是通過(guò)參考基本名詞短語(yǔ)的長(zhǎng)度語(yǔ)法信息和詞位語(yǔ)法信息來(lái)確定具體的標(biāo)記數(shù)目,并且結(jié)合一些有效的特征信息進(jìn)一步提高識(shí)別結(jié)果。在識(shí)別結(jié)果評(píng)價(jià)方面,我們進(jìn)一
4、步規(guī)范了對(duì)于語(yǔ)塊識(shí)別的評(píng)價(jià)標(biāo)準(zhǔn),提出了采用未登錄短語(yǔ)召回率(Unkonwn Phrase Recall)做為評(píng)價(jià)識(shí)別基本名詞短語(yǔ)統(tǒng)計(jì)模型的重要標(biāo)準(zhǔn),并且對(duì)不同的統(tǒng)計(jì)模型進(jìn)行了相關(guān)的對(duì)比識(shí)別實(shí)驗(yàn)。
在互動(dòng)識(shí)別實(shí)驗(yàn)中,我們采用基于詞位信息校正的多分類器識(shí)別方法,主要思想是先計(jì)算出訓(xùn)練語(yǔ)料中組成基本名詞短語(yǔ)的詞語(yǔ)的詞位能產(chǎn)度統(tǒng)計(jì)量,再利用這些統(tǒng)計(jì)量對(duì)不同統(tǒng)計(jì)模型分類器的不同分類結(jié)果進(jìn)行校正。從實(shí)驗(yàn)結(jié)果上看,本文所使用的基于詞位信
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 漢語(yǔ)基本名詞短語(yǔ)識(shí)別與語(yǔ)法信息獲取的互動(dòng)研究(1)
- 漢語(yǔ)基本名詞短語(yǔ)的自動(dòng)識(shí)別模型.pdf
- 命名實(shí)體與基本名詞短語(yǔ)識(shí)別研究.pdf
- 營(yíng)養(yǎng)基礎(chǔ)基本名詞
- 漢語(yǔ)名詞復(fù)合短語(yǔ)識(shí)別與分類的方法研究.pdf
- 基于簡(jiǎn)單名詞短語(yǔ)的漢語(yǔ)介詞短語(yǔ)識(shí)別研究.pdf
- 漢語(yǔ)最長(zhǎng)名詞短語(yǔ)的自動(dòng)識(shí)別與分析.pdf
- 股票基本名詞概念
- 漢語(yǔ)簡(jiǎn)單名詞短語(yǔ)的識(shí)別及應(yīng)用.pdf
- 中文最長(zhǎng)名詞短語(yǔ)識(shí)別研究.pdf
- 漢語(yǔ)‘的’后名詞短語(yǔ)主題化研究.pdf
- 基于BPS理論的漢語(yǔ)名詞短語(yǔ)研究.pdf
- 石油工程測(cè)井基本名詞解釋
- 漢語(yǔ)光桿名詞短語(yǔ)的語(yǔ)義分析.pdf
- 中文名詞短語(yǔ)識(shí)別研究.pdf
- 漢語(yǔ)短語(yǔ)識(shí)別方法研究.pdf
- 漢語(yǔ)聯(lián)合短語(yǔ)結(jié)構(gòu)分析與識(shí)別.pdf
- 漢語(yǔ)光桿名詞短語(yǔ)語(yǔ)義研究——與英語(yǔ)相關(guān)句式比較.pdf
- 成本名詞解釋
- 現(xiàn)代漢語(yǔ)標(biāo)量名詞短語(yǔ)語(yǔ)義功能研究.pdf
評(píng)論
0/150
提交評(píng)論