基于開源大數(shù)據(jù)技術(shù)的治安人物畫像系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、當今世界信息技術(shù)迅猛發(fā)展正帶領(lǐng)我們快速邁入大數(shù)據(jù)時代。在這個時代信息爆炸與知識貧乏交織并存，新興技術(shù)層出不窮，給公安、軍隊、安全等政府強力部門帶來了前所未有的機遇和挑戰(zhàn)。對公安機關(guān)而言，數(shù)據(jù)量急劇膨脹，業(yè)務(wù)需求不斷擴充，傳統(tǒng)的數(shù)據(jù)平臺架構(gòu)，數(shù)據(jù)倉庫設(shè)計已不堪負重，難以為繼，迫切需要新興的大數(shù)據(jù)技術(shù)來革新平臺架構(gòu)，重構(gòu)以人物畫像為重點的公安數(shù)據(jù)倉庫，凸顯大數(shù)據(jù)在人員行為分析和預(yù)警預(yù)測預(yù)判方面的應(yīng)用。從而發(fā)揮出其在精確打擊違法犯罪分子，有效

2、遏制涉恐涉暴行為的積極作用，達成對重點人員有效管控的目標。
　　本論文對開源大數(shù)據(jù)技術(shù)如何在以人物畫像為重點的公安數(shù)據(jù)倉庫建設(shè)中應(yīng)用與實現(xiàn)進行了研究，主要工作如下：
　　1、通過合理選擇開源大數(shù)據(jù)技術(shù)，搭建分布式數(shù)據(jù)處理作業(yè)平臺，克服了數(shù)據(jù)集中處理和匯總的瓶頸，具備了線性擴展能力，能夠有效應(yīng)對大數(shù)據(jù)的存儲和處理難題。
　　2、對以人物畫像為重點的數(shù)據(jù)倉庫建設(shè)算法進行了改進，提升了一人一檔畫像數(shù)據(jù)的準實時建倉效率，并提出