基于Spark的大規(guī)模社交媒體中用戶興趣建模研究.pdf

1、在大數據時代，挖掘社交媒體用戶的真實興趣已成為一個研究熱點問題，用戶興趣在個性化廣告推送、安全情報、網絡輿情等方向具有重要的理論和實踐意義。社交媒體用戶發(fā)表的內容在一定程度上反應了用戶的喜好，社交媒體中用戶興趣建模也引起了研究者的關注。
　　本文深入研究了以微博為代表的社交媒體中的用戶興趣建模問題，并提出了新的用戶興趣模型。該模型同樣適用于微信、Twitter等其它社交媒體。論文主要從構建方法和興趣表示開展研究：
　?。?）

2、根據社交媒體用戶發(fā)表的內容和時間，從主題模型、類別模型、興趣詞模型三個維度對用戶興趣進行建模。
　　在興趣主題模型方面，根據社交媒體短文本特征改進詞袋模型，利用Word2vec構建特征之間的語義表示模型，采用句子中特征先后順序構建次序圖模型，在此基礎上引入時間因素，提出了基于時間的用戶興趣主題模型用于抽取用戶關注的話題。實驗結果表明該方法的FM、AA和F等聚類指標相比目前新方法FSC-LDA分別提高了200.40％、46.50%、

3、80.05%。
　　在興趣類別模型方面，基于傳統的TF-IDF算法，綜合考慮了詞項、詞性、詞長以及文本歸一化處理，提出了基于貝葉斯的用戶興趣類別模型來抽取用戶愛好類別。實驗結果表明新算法在微博短文本分類的F1值上表現更好。從而更好地描述用戶興趣類別。
　　在興趣詞模型方面，基于興趣詞之間的語義關系，提出了用戶興趣詞三層模型（Three-Layer Model, TLM）抽取用戶興趣標簽詞，同時考慮時間窗口和遺忘函數來增量更新