基于Hadoop的交通大數(shù)據(jù)計(jì)算應(yīng)用研究.pdf

1、隨著計(jì)算機(jī)網(wǎng)絡(luò)和車聯(lián)網(wǎng)在城市交通領(lǐng)域的廣泛應(yīng)用,日常需要處理的城市交通數(shù)據(jù)已經(jīng)呈現(xiàn)出大數(shù)據(jù)的諸多特征,采用傳統(tǒng)的信息處理技術(shù)對(duì)交通大數(shù)據(jù)進(jìn)行分析時(shí)不可避免的遇到了性能瓶頸。Hadoop是針對(duì)互聯(lián)網(wǎng)應(yīng)用而提出的一種被廣泛認(rèn)可的、面向大數(shù)據(jù)計(jì)算的、開源的大數(shù)據(jù)計(jì)算系統(tǒng)開發(fā)框架,其以HDFS和MapReduce編程模型為核心,在大數(shù)據(jù)計(jì)算方面表現(xiàn)出優(yōu)越的運(yùn)算效率。隨著在網(wǎng)絡(luò)搜索、數(shù)據(jù)挖掘和用戶行為分析等眾多的互聯(lián)網(wǎng)應(yīng)用領(lǐng)域大量成功應(yīng)用,基于H

2、adoop的行業(yè)應(yīng)用研究已經(jīng)成為計(jì)算機(jī)領(lǐng)域的研究熱點(diǎn)。然而,針對(duì)交通大數(shù)據(jù)的hadoop應(yīng)用目前還鮮有報(bào)道。
　　本文基于Hadoop平臺(tái)對(duì)交通大數(shù)據(jù)的信息處理方法展開研究。首先,對(duì)Hadoop中的HDFS和MapReduce編程模型進(jìn)行了深入研究,并對(duì)目前常見的幾種大數(shù)據(jù)計(jì)算平臺(tái)進(jìn)行了分析比較;然后,在實(shí)際部署的Hadoop集群環(huán)境中,設(shè)計(jì)并實(shí)現(xiàn)了一種分布式誘導(dǎo)交通流分配方法,該方法在已知城市路網(wǎng)數(shù)據(jù)集的條件下可以兼顧交通誘導(dǎo)和