基于Hadoop交通信息并行處理云平臺的設(shè)計與實現(xiàn).pdf

1、隨著社會的發(fā)展和城市化的加快，機(jī)動車的數(shù)量呈現(xiàn)爆炸式的增長。但有限的地理空間和緊缺的土地資源，使得人、車、路之間的交通矛盾日益突出。并且隨著計算機(jī)網(wǎng)絡(luò)和信息采集技術(shù)的發(fā)展，日常需要處理的交通數(shù)據(jù)也逐步增多。而傳統(tǒng)平臺在面對大數(shù)據(jù)問題時顯得捉襟見肘，這使得所面臨的交通問題越來越嚴(yán)重。
　　可喜的是，目前出現(xiàn)了許多成熟的大數(shù)據(jù)處理技術(shù)，為智能交通系統(tǒng)的發(fā)展帶來了新的思路。本文設(shè)計的主要出發(fā)點(diǎn)是通過將Hadoop、HBase與現(xiàn)有交通云

2、平臺進(jìn)行整合，實現(xiàn)新一代智慧交通云平臺，從而增加平臺大數(shù)據(jù)處理的能力，改善現(xiàn)有的交通系統(tǒng)。本文研究的主要內(nèi)容有：
　　1. Hadoop、HBase集群多節(jié)點(diǎn)部署：本文在基于vSphere所構(gòu)建的多虛擬節(jié)點(diǎn)上搭建Hadoop與HBase集群，作為新一代交通云平臺的底層基礎(chǔ)。
　　2.交通基礎(chǔ)服務(wù)的設(shè)計與實現(xiàn)：本文給出了兩種交通服務(wù)的設(shè)計與實現(xiàn)方案，一種是針對原始交通數(shù)據(jù)所開發(fā)的數(shù)據(jù)中心統(tǒng)一化服務(wù)，從而解決數(shù)據(jù)輸入的問題。另一

3、種是為使已有云平臺獲得大數(shù)據(jù)處理能力而設(shè)計的并行計算和大數(shù)據(jù)存儲服務(wù)。
　　3.交通應(yīng)用架構(gòu)設(shè)計與案例實現(xiàn)：本文設(shè)計的交通應(yīng)用架構(gòu)體系體包括交通核心應(yīng)用和交通智慧應(yīng)用，其作用是驗證新一代交通云平臺功能。其中交通核心應(yīng)用主要功能是基于 MapReduce框架對交通數(shù)據(jù)做計算與分析，而交通智慧應(yīng)用是將計算結(jié)果以可視化的角度展示給用戶。通過應(yīng)用的成功部署、運(yùn)行從而可以驗證平臺整合方案的可行性、正確性。
　　4. Hadoop、HB

4、ase集群與原有交通云平臺整合：本文在基于Socket通信方式的基礎(chǔ)上，實現(xiàn)了Hadoop、HBase集群與原有云平臺功能的整合，使得新一代智慧交通云平臺擁有大數(shù)據(jù)處理的能力。用戶通過整合后的平臺入口上傳并運(yùn)行應(yīng)用，從而獲取大數(shù)據(jù)計算和存儲能力。
　　本文提出了通過融合Hadoop、HBase集群構(gòu)建交通信息并行處理云平臺的設(shè)計方案，從而解決交通領(lǐng)域大數(shù)據(jù)的難題。同時在此基礎(chǔ)上給出了交通應(yīng)用架構(gòu)和服務(wù)設(shè)計方案，為智能交通系統(tǒng)的發(fā)展