基于Hadoop平臺(tái)的視頻轉(zhuǎn)碼系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著當(dāng)前移動(dòng)互聯(lián)網(wǎng)技術(shù)的迅猛發(fā)展，傳統(tǒng)的廣電行業(yè)正逐漸向新媒體領(lǐng)域拓展，他們需要同時(shí)向手機(jī)電視、互聯(lián)網(wǎng)、網(wǎng)絡(luò)電視臺(tái)等多個(gè)業(yè)務(wù)平臺(tái)提供視頻內(nèi)容。然而，不同業(yè)務(wù)平臺(tái)對(duì)視頻文件格式有著不同的要求，最常見(jiàn)的是對(duì)編碼格式、分辨率、碼率等參數(shù)的要求不同。為了滿足這種要求，廣電行業(yè)必須將原始視頻文件進(jìn)行格式轉(zhuǎn)換。當(dāng)前常用的傳統(tǒng)視頻轉(zhuǎn)碼系統(tǒng)一般采用一臺(tái)或幾臺(tái)高性能機(jī)器對(duì)統(tǒng)一存儲(chǔ)的視頻文件進(jìn)行離線轉(zhuǎn)碼，但這種轉(zhuǎn)碼方案存在著處理能力有限、一次只能轉(zhuǎn)一種格式

2、、當(dāng)處理大批量轉(zhuǎn)碼任務(wù)時(shí)消耗時(shí)間較長(zhǎng)等缺點(diǎn)。因此，急需一種靈活高效的轉(zhuǎn)碼方案來(lái)滿足當(dāng)前廣電行業(yè)的轉(zhuǎn)碼需求。目前，云技術(shù)得到了不斷的發(fā)展和成熟，它因其具有強(qiáng)大的并行處理能力、靈活的擴(kuò)展性和低廉的成本等優(yōu)點(diǎn)，必將在未來(lái)得到廣泛應(yīng)用。
　　本文首先描述了杭州電視臺(tái)全臺(tái)網(wǎng)下的轉(zhuǎn)碼系統(tǒng)，及其面臨的問(wèn)題，提出采用Hadoop技術(shù)處理視頻轉(zhuǎn)碼任務(wù)的方法。然后，通過(guò)分析HDFS和MapReduce兩大Hadoop核心技術(shù)的特點(diǎn)，結(jié)合視頻編解碼技術(shù)

3、和文件封裝原理，提出基于GOP組的分片策略，將原始視頻文件分割成若干視頻片段存儲(chǔ)在HDFS上，利用MapReduce編程原理對(duì)視頻分片進(jìn)行分布式轉(zhuǎn)碼，并采用工作流的方式對(duì)整個(gè)轉(zhuǎn)碼系統(tǒng)進(jìn)行靈活的配置和管理。這樣既充分利用了集群的并行計(jì)算能力，解決了單機(jī)性能瓶頸問(wèn)題，又很好的滿足了杭州電視臺(tái)對(duì)于轉(zhuǎn)碼同時(shí)生成多種格式視頻文件的需要。
　　最后本文通過(guò)對(duì)分布式轉(zhuǎn)碼系統(tǒng)的測(cè)試，驗(yàn)證了基于 Hadoop的視頻轉(zhuǎn)碼系統(tǒng)能夠有效的降低視頻大文件處