主從式云計算平臺高可用性研究.pdf

1、隨著云計算的普及和高速發(fā)展，PC互聯(lián)網(wǎng)和移動互聯(lián)網(wǎng)廠商都在積極部署云計算戰(zhàn)略，涌現(xiàn)了一大批基于“云”的應用。云計算產(chǎn)業(yè)規(guī)模的不斷擴大，使可用性成為了云計算核心關注點之一。
　　本文分析了開源社區(qū)的主要云計算平臺可用性，總結了不同方案的優(yōu)劣勢，并在此基礎上，提出了一種主從式云計算平臺的可用性問題的的通用解決方案——ZKFHA，以最少的改造代價，獲得良好的可用性。ZKFHA主要包括五個方面的設計：一是實時監(jiān)控主節(jié)點和集群狀態(tài)的備份節(jié)點

2、；二是狀態(tài)監(jiān)控進程，使用Zookeeper記錄集群中需要共享的狀態(tài)信息；三是故障恢復進程，包括遷移數(shù)據(jù)，保證數(shù)據(jù)的完整性；四是實現(xiàn)元數(shù)據(jù)的共享，這是一個可選的設計，主要針對有狀態(tài)、有元數(shù)據(jù)保存的中心節(jié)點而設計的；五是子節(jié)點和客戶端的重試機制。通過五個方面的設計來保證主從式云計算平臺的高可用性。
　　基于ZKFHA設計思想，ZKFHA-HDFS是針對HDFS中NameNode單點失效的改進方案，Name Node的單點問題是有元數(shù)據(jù)

3、保存的場景，ZKFHA-HDFS對Name Node實現(xiàn)熱備，并基于Zookeeper實現(xiàn)故障恢復，同時引進Quorum Node來實現(xiàn)元數(shù)據(jù)的共享存儲。ZKFHA-MR是針對Mapreduce中Jobtracker可用性的改進方案，Jobtracker單點是無狀態(tài)保存的場景，ZKFHA-MR實現(xiàn)多個備用的Jobtracker，通過選舉產(chǎn)生對外服務的Active Jobtracker，所有備用節(jié)點共用一個虛擬IP地址對外服務。并且實現(xiàn)了