中文文本自動(dòng)分類中的若干問題研究.pdf

1、本文首先基于類別概念，討論了文本自動(dòng)分類中文檔類別間的關(guān)系，在此基礎(chǔ)上對(duì)文本自動(dòng)分類的定義進(jìn)行補(bǔ)充說(shuō)明，并討論了文本自動(dòng)分類中與全體文檔集合、訓(xùn)練集、類集合相關(guān)的若干問題，并結(jié)合具體分類算法進(jìn)行了相關(guān)論述。具體內(nèi)容如下： (1)基于概念間的關(guān)系，討論類別間的關(guān)系，分析了每種關(guān)系對(duì)應(yīng)的實(shí)際分類問題； (2)從集合論的角度出發(fā)，對(duì)文本自動(dòng)分類問題的定義進(jìn)行補(bǔ)充說(shuō)明，指出文本自動(dòng)分類是對(duì)全體文檔集合的劃分； (3)將現(xiàn)

2、有文本表示模型歸納為3種：“詞袋模型”，“空間向量模型”，“圖模型”，在此基礎(chǔ)上分析了每種模型對(duì)應(yīng)的全體文檔集合； (4)論述了訓(xùn)練集的相關(guān)性質(zhì)，定量分析了訓(xùn)練集的稀疏性； (5)論述了真實(shí)類集合和由分類器劃分的類集合間的關(guān)系，在此基礎(chǔ)上分析了分類器錯(cuò)分結(jié)果類型，指出分類器對(duì)錯(cuò)誤是敏感的，提出分類器的錯(cuò)誤敏感性； (6)基于類別概念，從全體文檔集合、等價(jià)關(guān)系、類集合3個(gè)方面分析了常見分類算法，重點(diǎn)給出了常見分類算

3、法所得類集合的幾何性質(zhì)； (7)提出基于向量空間模型分類算法的“重要點(diǎn)”結(jié)論，論述了重要點(diǎn)對(duì)提高分類器性能的重要性，并結(jié)合重要點(diǎn)，討論基于類中心的“推拉調(diào)整策略”，提出了兩種改進(jìn)策略； 文章接著針對(duì)特征選擇，論述了常見特征選擇方法的缺點(diǎn)，并在分析、歸納文本權(quán)值計(jì)算框架的基礎(chǔ)上，提出兩種全局最優(yōu)特征選擇模型。模型一以最大化類中心距離為目標(biāo)，模型二以最大化類中心距離方差為目標(biāo)，本文給出了兩種模型的具體算法。 最后，設(shè)