一種新的并發(fā)分詞算法的研究與實(shí)現(xiàn).pdf

1、漢語的詞法分析是漢語理解的基礎(chǔ)，是漢語信息處理領(lǐng)域的一個(gè)重要課題。 該課題提出一種新的并發(fā)檢索-綜合排歧的分詞方法，目的是利用并行的特點(diǎn)，使分詞與分詞之間、分詞與排歧分析之間能夠并行處理，從而更高效、合理地實(shí)現(xiàn)詞法分析，進(jìn)一步提高分詞方法的切分精度和切分效率。 該文在目前漢語詞法分析方法基礎(chǔ)上，提出了一種并行分詞方法，并特別指出了全切分普遍存在的并發(fā)檢索和持續(xù)檢索問題，進(jìn)而，給出了并發(fā)檢索-綜合排歧分詞方法的算法模型。該

2、方法在輸入的同時(shí)進(jìn)行切分，同時(shí)維護(hù)多個(gè)詞庫檢索對象，并在分詞的同時(shí)進(jìn)行簡單的句法分析，最后通過多種排歧方法，實(shí)現(xiàn)輸入與切分、切分與歧義分析的并行運(yùn)算，在輸入結(jié)束時(shí)即刻得到分詞結(jié)果。該文提出了該分詞方法的體系結(jié)構(gòu)模型，設(shè)計(jì)了并發(fā)檢索算法，并建立了模擬實(shí)驗(yàn)系統(tǒng)。經(jīng)過在模擬實(shí)驗(yàn)，證明該方法是一種可行而且高效的分詞方法，達(dá)到了預(yù)期的目的。 該方法具有一定的理論和應(yīng)用價(jià)值。它利用并行計(jì)算技術(shù)實(shí)現(xiàn)了詞檢索的并行以及檢索和歧義分析的并行，克服