基于典型相關(guān)的音樂跨模態(tài)檢索.pdf

1、互聯(lián)網(wǎng)和多媒體技術(shù)的飛速發(fā)展帶來了網(wǎng)絡(luò)音樂數(shù)量的爆炸式增長,使得用戶有了很大的選擇空間,但同時也給音樂檢索系統(tǒng)帶來了新的挑戰(zhàn)。傳統(tǒng)的音樂檢索系統(tǒng)多使用提交音樂屬性相關(guān)的文本作為檢索詞的方式進(jìn)行檢索,這種音樂屬性關(guān)鍵字匹配的音樂檢索算法顯然已經(jīng)不能滿足人們?nèi)找嬷悄芑€性化的檢索需求,因此基于內(nèi)容的音樂檢索技術(shù)也應(yīng)運(yùn)而生。在基于內(nèi)容的音樂檢索技術(shù)的研究中,哼唱檢索是主流方式,然而這種方式由于過于專業(yè)化,很難普及到一般的用戶。隨著Web2.

2、0技術(shù)的發(fā)展,研究人員逐步提出了基于語義的音樂檢索方式。在諸如Last.fm等音樂網(wǎng)站上,用戶可以使用標(biāo)簽對其感興趣的音樂進(jìn)行標(biāo)記和描述,通常這些標(biāo)簽有著比較高的語義信息。然而如果完全根據(jù)標(biāo)簽檢索會忽視多媒體數(shù)據(jù)在內(nèi)容層面的相似性關(guān)系,因此如何能夠考慮多個模態(tài)的特性,讓各模態(tài)之間互相補(bǔ)充信息,來提高檢索準(zhǔn)確率,這就需要有一種新的檢索方式能夠處理不同模態(tài)的數(shù)據(jù),因此本文的目的就是提出一種跨模態(tài)檢索音樂方式?？缑襟w檢索技術(shù)是在基于內(nèi)容的檢索

3、技術(shù)的基礎(chǔ)上發(fā)展起來的,通過對來自不同模態(tài)的信息進(jìn)行綜合分析,彌補(bǔ)了單一模態(tài)檢索的弊端,提高了信息檢索的效率。本文利用能夠表征音樂內(nèi)容的文本信息和音樂本身的內(nèi)容信息去綜合檢索音樂,針對文本特征和音樂內(nèi)容的底層特征之間的異構(gòu)和不可比擬性使得跨媒體相似性難以計算的現(xiàn)狀,提出了一種基于典型相關(guān)的跨模態(tài)音樂檢索方法,分析了文本特征和音樂內(nèi)容特征潛在的統(tǒng)計關(guān)系,通過子空間映射解決了不同模態(tài)之間的特征異構(gòu)問題,再根據(jù)歐氏距離的大小衡量兩者的相關(guān)性,