潛在學術合作關系挖掘.pdf

1、隨著科技的快速發(fā)展，學科交叉和科研領域的細化，以個體封閉式的研究模式攻克科技難題已經(jīng)越來越困難。只有通過多人、多實驗室和多學科合作，才有可能取得較為顯著的科學成果。雖然互聯(lián)網(wǎng)的發(fā)展使跨地域的合作成為可能，但同時也帶來了一些困惑，在全球數(shù)以億計的科學家中，如何選取合作對象已成為目前亟待解決的問題。
　　目前國內(nèi)外關于學術合作關系挖掘的研究工作還很少，本文針對潛在學術合作關系挖掘課題進行了研究和技術實現(xiàn)。主要工作分為數(shù)據(jù)收集、學術合作

2、關系推薦和數(shù)據(jù)展示三大部分。數(shù)據(jù)收集部分，通過編寫了一個高效的分布式爬蟲框架，用以在互聯(lián)網(wǎng)收集學術合作關系信息?？蚣苤С志钟蚓W(wǎng)和廣域網(wǎng)混合部署，實現(xiàn)了單節(jié)點不少于100萬頁面/天的爬取速度。同時，為了滿足系統(tǒng)對高性能數(shù)據(jù)庫的需求以及解決異構環(huán)境部署問題，開發(fā)了一個輕量級分布式ORM框架，實現(xiàn)了異構數(shù)據(jù)庫連接、自定義存取規(guī)則、使用Java Annotation自動對象裝配等功能，并在SQL解析層提供Filter-Chain模式的接口，以方

3、便用戶實現(xiàn)數(shù)據(jù)審計、權限控制、日志記錄等功能；在學術合作關系推薦部分，實現(xiàn)了學術關系推薦算法，并通過多次實驗歸納出影響學術合作質(zhì)量的因素，以獲得較準確的預測結(jié)果。另外，本文還將其擴展為并行算法以提高算法效率；在數(shù)據(jù)展示部分，實現(xiàn)了一個分布式學術信息檢索平臺，支持查詢學者的個人信息及科研成果，并基于此進行學術合作關系推薦，該平臺基于分布式架構設計，支持服務器彈性伸縮策略，具有較高的性能和擴展性。
　　本系統(tǒng)已開發(fā)完成，并在阿里云上部