基于深度特征的手繪草圖檢索圖像方法研究.pdf

1、近年來(lái)，觸屏設(shè)備和手寫設(shè)備的廣泛普及，以及表情包的流行，使得人們開(kāi)始嘗試用手繪草圖來(lái)替代文字或語(yǔ)言進(jìn)行抽象表達(dá)。在繪制草圖的過(guò)程中，人們可以很輕松地表達(dá)頭腦里浮現(xiàn)的任何事物和想法，然后通過(guò)繪制的草圖在現(xiàn)用圖像數(shù)據(jù)庫(kù)中尋找到與之匹配相似的圖像內(nèi)容。這種利用手繪草圖來(lái)表達(dá)想法的方式符合人類最原始的感知方式。并且，不同知識(shí)文化水平、不同繪畫水準(zhǔn)或不同年齡段的人都可以利用這種方式來(lái)表述所見(jiàn)到的自然圖像。因此，國(guó)內(nèi)外都有不少的機(jī)構(gòu)和學(xué)者在基于手繪

2、草圖檢索自然圖像的技術(shù)上重點(diǎn)關(guān)注并投入大量研究。
　　當(dāng)前手繪草圖的研究大多都是基于手工特征，包括二值特征以及自然圖像特征等；再使用中級(jí)特征編碼的方式來(lái)合成最終的手繪草圖的特征表示，進(jìn)而以用于手繪草圖檢索。然而手繪草圖具有極大的抽象性，不同的人繪制的同一目標(biāo)物體具有很大的外觀視覺(jué)差別，這導(dǎo)致基于傳統(tǒng)手工特征表示的手繪圖檢索自然圖像效果過(guò)分依賴于手繪圖線條的繪制水平。因此，基于傳統(tǒng)手工特征的檢索系統(tǒng)的性能一般，魯棒性較差，很難做到實(shí)

3、用水平。
　　在本文中，我們顯示深度卷積神經(jīng)網(wǎng)絡(luò)（DCNN）也適合跨域圖像識(shí)別，即使用手繪草圖作為查詢來(lái)檢索大型數(shù)據(jù)集中的自然圖像。為了解決這種跨域問(wèn)題，我們提出一種新穎的聯(lián)合圖像數(shù)據(jù)和草圖數(shù)據(jù)訓(xùn)練CNN的方式，進(jìn)而學(xué)習(xí)得到深度草圖特征（DSF）。這種深度草圖特征對(duì)于手繪圖檢索自然圖像的任務(wù)非常有效，我們僅僅在這種深度草圖特征上使用簡(jiǎn)單的歐幾里得距離就可以獲得優(yōu)于其它技術(shù)的領(lǐng)先水平。此外，我們發(fā)現(xiàn)，在標(biāo)準(zhǔn)的手繪草圖識(shí)別基準(zhǔn)中，用預(yù)