基于圖像與標(biāo)注語義上下文的圖像自動標(biāo)注算法研究.pdf

1、圖像自動標(biāo)注是圖像檢索的重要組成，隨著對圖像檢索功能的需求的日益增加，如何對圖像進(jìn)行有效的組織和管理也成為信息檢索領(lǐng)域的研究熱點(diǎn)，因此對圖像自動標(biāo)注進(jìn)行研究具有其重要的研究價值和應(yīng)用價值。本文在現(xiàn)有基于內(nèi)容的圖像自動標(biāo)注方法的基礎(chǔ)上，著重研究基于圖像塊上下文的圖像自動標(biāo)注方法和基于標(biāo)注詞圖像上下文的圖像語義反饋驗(yàn)證方法，以最終改善圖像自動標(biāo)注的性能。
　　針對目前圖像自動標(biāo)注算法中圖像分割的獨(dú)立性假設(shè)問題和詞到圖像的語義反饋驗(yàn)證問

2、題，開展了本文的研究工作，提出了以下主要工作和創(chuàng)新:
　　1.提出了基于圖像塊上下文的圖像自動標(biāo)注方法。針對現(xiàn)有圖像自動標(biāo)注模型對圖像分塊之間的獨(dú)立性假設(shè)和權(quán)值分配問題，本文通過關(guān)聯(lián)圖像各個分塊之間位置關(guān)系，在圖像內(nèi)容上下文關(guān)聯(lián)關(guān)系的尋找上，首先對圖像塊進(jìn)行上下文關(guān)聯(lián)的序列化表示，然后利用條件隨機(jī)場模型對圖像塊的關(guān)聯(lián)關(guān)系進(jìn)行建模并進(jìn)行自動標(biāo)注。通過構(gòu)建圖像分塊的序列來增加對圖像中上下文關(guān)系的考慮。
　　2.提出了基于標(biāo)注詞圖

3、像上下文的圖像語義反饋驗(yàn)證方法。由于目前的圖像自動標(biāo)注算法中認(rèn)為一幅圖像中所有標(biāo)注詞的貢獻(xiàn)相同，因此學(xué)習(xí)算法只能計算標(biāo)注詞是否與圖像相關(guān)，但無法獲得標(biāo)注詞語義與圖像語義的相關(guān)程度。針對上述問題，本文利用標(biāo)注模型得到的標(biāo)注結(jié)果所映射的圖像與測試圖像建立起圖像間的上下文關(guān)系，通過度量圖像間的相似度距離，來對標(biāo)注結(jié)果進(jìn)行排序和篩選，實(shí)現(xiàn)對圖像語義的反饋驗(yàn)證。
　　最后通過實(shí)驗(yàn)分別驗(yàn)證了本文提出的基于圖像塊上下文的標(biāo)注方法和基于標(biāo)注詞圖像