基于實(shí)感技術(shù)的手勢(shì)實(shí)時(shí)作曲系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、現(xiàn)實(shí)生活中，大眾習(xí)慣于通過(guò)多種方式來(lái)獲取實(shí)時(shí)創(chuàng)作的音樂(lè)，卻很少親自參與創(chuàng)作。原因是目前的實(shí)時(shí)作曲系統(tǒng)，往往需要專業(yè)的作曲經(jīng)驗(yàn)，并且操作復(fù)雜。為了克服以上的障礙，幫助無(wú)創(chuàng)作經(jīng)驗(yàn)的大眾參與和享受作曲帶來(lái)的樂(lè)趣，本文設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)基于實(shí)感技術(shù)的手勢(shì)實(shí)時(shí)作曲系統(tǒng)。
　　本系統(tǒng)將英特爾最新的實(shí)感技術(shù)應(yīng)用于手勢(shì)識(shí)別中，幫助用戶使用生活中常用的自然手勢(shì)，實(shí)時(shí)地創(chuàng)作出旋律和諧多變且具有和聲結(jié)構(gòu)的曲子。系統(tǒng)主要由以下三個(gè)功能模塊組成：（1）手勢(shì)交

2、互模塊，通過(guò)3D實(shí)感攝像頭捕捉并識(shí)別用戶的手勢(shì)，映射成各級(jí)的和弦輸入；（2）實(shí)時(shí)作曲模塊，根據(jù)和弦輸入自動(dòng)生成分解和弦旋律、低音貝司律動(dòng)和打擊樂(lè)節(jié)奏。其中，分解和弦旋律的生成模塊采用基于循環(huán)神經(jīng)網(wǎng)絡(luò)的深度學(xué)習(xí)算法，用于生成具有和聲關(guān)系且富于變化的琶音。低音貝司律動(dòng)的生成模塊采用基于旋律輪廓的生成算法，用于生成樂(lè)句間自然連貫的Walking Bass。（3）音樂(lè)輸出模塊，將實(shí)時(shí)作曲模塊生成的MIDI和音頻輸出。
　　本文設(shè)計(jì)并實(shí)現(xiàn)的