基于Hadoop交通信息并行處理云平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著社會(huì)的發(fā)展和城市化的加快，機(jī)動(dòng)車(chē)的數(shù)量呈現(xiàn)爆炸式的增長(zhǎng)。但有限的地理空間和緊缺的土地資源，使得人、車(chē)、路之間的交通矛盾日益突出。并且隨著計(jì)算機(jī)網(wǎng)絡(luò)和信息采集技術(shù)的發(fā)展，日常需要處理的交通數(shù)據(jù)也逐步增多。而傳統(tǒng)平臺(tái)在面對(duì)大數(shù)據(jù)問(wèn)題時(shí)顯得捉襟見(jiàn)肘，這使得所面臨的交通問(wèn)題越來(lái)越嚴(yán)重。
　　可喜的是，目前出現(xiàn)了許多成熟的大數(shù)據(jù)處理技術(shù)，為智能交通系統(tǒng)的發(fā)展帶來(lái)了新的思路。本文設(shè)計(jì)的主要出發(fā)點(diǎn)是通過(guò)將Hadoop、HBase與現(xiàn)有交通云

2、平臺(tái)進(jìn)行整合，實(shí)現(xiàn)新一代智慧交通云平臺(tái)，從而增加平臺(tái)大數(shù)據(jù)處理的能力，改善現(xiàn)有的交通系統(tǒng)。本文研究的主要內(nèi)容有：
　　1. Hadoop、HBase集群多節(jié)點(diǎn)部署：本文在基于vSphere所構(gòu)建的多虛擬節(jié)點(diǎn)上搭建Hadoop與HBase集群，作為新一代交通云平臺(tái)的底層基礎(chǔ)。
　　2.交通基礎(chǔ)服務(wù)的設(shè)計(jì)與實(shí)現(xiàn)：本文給出了兩種交通服務(wù)的設(shè)計(jì)與實(shí)現(xiàn)方案，一種是針對(duì)原始交通數(shù)據(jù)所開(kāi)發(fā)的數(shù)據(jù)中心統(tǒng)一化服務(wù)，從而解決數(shù)據(jù)輸入的問(wèn)題。另一

3、種是為使已有云平臺(tái)獲得大數(shù)據(jù)處理能力而設(shè)計(jì)的并行計(jì)算和大數(shù)據(jù)存儲(chǔ)服務(wù)。
　　3.交通應(yīng)用架構(gòu)設(shè)計(jì)與案例實(shí)現(xiàn)：本文設(shè)計(jì)的交通應(yīng)用架構(gòu)體系體包括交通核心應(yīng)用和交通智慧應(yīng)用，其作用是驗(yàn)證新一代交通云平臺(tái)功能。其中交通核心應(yīng)用主要功能是基于 MapReduce框架對(duì)交通數(shù)據(jù)做計(jì)算與分析，而交通智慧應(yīng)用是將計(jì)算結(jié)果以可視化的角度展示給用戶。通過(guò)應(yīng)用的成功部署、運(yùn)行從而可以驗(yàn)證平臺(tái)整合方案的可行性、正確性。
　　4. Hadoop、HB

4、ase集群與原有交通云平臺(tái)整合：本文在基于Socket通信方式的基礎(chǔ)上，實(shí)現(xiàn)了Hadoop、HBase集群與原有云平臺(tái)功能的整合，使得新一代智慧交通云平臺(tái)擁有大數(shù)據(jù)處理的能力。用戶通過(guò)整合后的平臺(tái)入口上傳并運(yùn)行應(yīng)用，從而獲取大數(shù)據(jù)計(jì)算和存儲(chǔ)能力。
　　本文提出了通過(guò)融合Hadoop、HBase集群構(gòu)建交通信息并行處理云平臺(tái)的設(shè)計(jì)方案，從而解決交通領(lǐng)域大數(shù)據(jù)的難題。同時(shí)在此基礎(chǔ)上給出了交通應(yīng)用架構(gòu)和服務(wù)設(shè)計(jì)方案，為智能交通系統(tǒng)的發(fā)展