基于實感技術(shù)的手勢實時作曲系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、現(xiàn)實生活中，大眾習(xí)慣于通過多種方式來獲取實時創(chuàng)作的音樂，卻很少親自參與創(chuàng)作。原因是目前的實時作曲系統(tǒng)，往往需要專業(yè)的作曲經(jīng)驗，并且操作復(fù)雜。為了克服以上的障礙，幫助無創(chuàng)作經(jīng)驗的大眾參與和享受作曲帶來的樂趣，本文設(shè)計并實現(xiàn)了一個基于實感技術(shù)的手勢實時作曲系統(tǒng)。
　　本系統(tǒng)將英特爾最新的實感技術(shù)應(yīng)用于手勢識別中，幫助用戶使用生活中常用的自然手勢，實時地創(chuàng)作出旋律和諧多變且具有和聲結(jié)構(gòu)的曲子。系統(tǒng)主要由以下三個功能模塊組成：（1）手勢交

2、互模塊，通過3D實感攝像頭捕捉并識別用戶的手勢，映射成各級的和弦輸入；（2）實時作曲模塊，根據(jù)和弦輸入自動生成分解和弦旋律、低音貝司律動和打擊樂節(jié)奏。其中，分解和弦旋律的生成模塊采用基于循環(huán)神經(jīng)網(wǎng)絡(luò)的深度學(xué)習(xí)算法，用于生成具有和聲關(guān)系且富于變化的琶音。低音貝司律動的生成模塊采用基于旋律輪廓的生成算法，用于生成樂句間自然連貫的Walking Bass。（3）音樂輸出模塊，將實時作曲模塊生成的MIDI和音頻輸出。
　　本文設(shè)計并實現(xiàn)的