基于Hadoop的交通大數(shù)據(jù)計算應用研究.pdf

1、隨著計算機網(wǎng)絡和車聯(lián)網(wǎng)在城市交通領域的廣泛應用,日常需要處理的城市交通數(shù)據(jù)已經(jīng)呈現(xiàn)出大數(shù)據(jù)的諸多特征,采用傳統(tǒng)的信息處理技術對交通大數(shù)據(jù)進行分析時不可避免的遇到了性能瓶頸。Hadoop是針對互聯(lián)網(wǎng)應用而提出的一種被廣泛認可的、面向大數(shù)據(jù)計算的、開源的大數(shù)據(jù)計算系統(tǒng)開發(fā)框架,其以HDFS和MapReduce編程模型為核心,在大數(shù)據(jù)計算方面表現(xiàn)出優(yōu)越的運算效率。隨著在網(wǎng)絡搜索、數(shù)據(jù)挖掘和用戶行為分析等眾多的互聯(lián)網(wǎng)應用領域大量成功應用,基于H

2、adoop的行業(yè)應用研究已經(jīng)成為計算機領域的研究熱點。然而,針對交通大數(shù)據(jù)的hadoop應用目前還鮮有報道。
　　本文基于Hadoop平臺對交通大數(shù)據(jù)的信息處理方法展開研究。首先,對Hadoop中的HDFS和MapReduce編程模型進行了深入研究,并對目前常見的幾種大數(shù)據(jù)計算平臺進行了分析比較;然后,在實際部署的Hadoop集群環(huán)境中,設計并實現(xiàn)了一種分布式誘導交通流分配方法,該方法在已知城市路網(wǎng)數(shù)據(jù)集的條件下可以兼顧交通誘導和