基于Hive架構的物流運力供應鏈數(shù)據(jù)倉庫及運力匹配模型優(yōu)化研究.pdf

1、隨著互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的高速發(fā)展，物流行業(yè)中運力供應鏈數(shù)據(jù)規(guī)模正在逐漸增大，為了充分利用海量物流運力數(shù)據(jù)為物流企業(yè)提供決策支持，從而保障物流運力行業(yè)安全、高效地運行。構建一個強大的分布式數(shù)據(jù)倉庫平臺，研究海量物流運力供應鏈數(shù)據(jù)存儲和決策應用等方面具有重要的意義。
　　本文針對當前物流運力行業(yè)中傳統(tǒng)數(shù)據(jù)庫在海量數(shù)據(jù)存儲和提供決策支持等方面的不足，提出了基于Hive架構的物流運力供應鏈數(shù)據(jù)倉庫的構建方法。通過對課題聯(lián)合研究的某企業(yè)（以下簡

2、稱企業(yè)）中多個應用系統(tǒng)的運力供應鏈數(shù)據(jù)分析、整合，實現(xiàn)系統(tǒng)之間運力數(shù)據(jù)共享。針對海量運力供應鏈數(shù)據(jù)分析和決策需求，設計并優(yōu)化了運力匹配原始模型，通過Hive數(shù)據(jù)倉庫為企業(yè)的運力匹配提供決策支持。
　　本文的具體研究工作如下:
　　(1)提出基于Hive架構的物流運力供應鏈數(shù)據(jù)倉庫構建方法。運用該方法，在多臺阿里云服務器上搭建完全分布式的Hive數(shù)據(jù)倉庫。
　　(2)針對企業(yè)中多個應用系統(tǒng)的異構運力數(shù)據(jù)源，通過基于Hiv

3、e數(shù)據(jù)倉庫的整合方式整合多個運力數(shù)據(jù)源，將整合后的運力數(shù)據(jù)導入數(shù)據(jù)倉庫，實現(xiàn)多個系統(tǒng)之間的運力數(shù)據(jù)共享。
　　(3)針對企業(yè)中的一個運力調度子系統(tǒng)，設計并優(yōu)化了運力匹配模型，結合Hive數(shù)據(jù)倉庫可以匹配多個系統(tǒng)之間的車輛信息，同時為企業(yè)運力匹配提供輔助決策依據(jù)。
　　(4)結合企業(yè)提供的數(shù)據(jù)源以及構建的Hive數(shù)據(jù)倉庫，通過數(shù)據(jù)對比分析Oracle、Mysql、Impala以及Hive的查詢效率，并實現(xiàn)多源異構運力數(shù)據(jù)共享和