基于機(jī)器學(xué)習(xí)的單目視頻深度恢復(fù).pdf

1、單目視頻的深度恢復(fù)是計(jì)算機(jī)視覺領(lǐng)域的一個(gè)很重要的問題，尤其在3D電影越來越受追捧，各種3D設(shè)配，3D應(yīng)用興起的當(dāng)下。人們?cè)絹碓阶非?D視覺的享受，通過對(duì)單目視頻實(shí)現(xiàn)深度恢復(fù)，可以減少制作3D電影的制作成本，同時(shí)可以擴(kuò)大3D市場(chǎng)的片源。越來越多的研究人員將研究的焦點(diǎn)對(duì)準(zhǔn)了視頻的深度恢復(fù)，這不僅僅是商業(yè)化市場(chǎng)的需要，同時(shí)也是技術(shù)發(fā)展的要求。
　　 在2D轉(zhuǎn)3D的研究中，最近幾年的研究熱點(diǎn)是如何通過機(jī)器學(xué)習(xí)的方法來實(shí)現(xiàn)視頻深度恢復(fù)，之

2、所以焦點(diǎn)對(duì)準(zhǔn)機(jī)器學(xué)習(xí)，是因?yàn)闄C(jī)器學(xué)習(xí)的方法，相對(duì)于傳統(tǒng)視覺幾何方法，更具普遍性。傳統(tǒng)的通過分析不同視頻特點(diǎn)，解決特定問題深度恢復(fù)的解決方案，雖然會(huì)有更好的視覺效果，可是使用的場(chǎng)景受限，算法的工業(yè)化意義降低。
　　 本文提出的算法是以視頻分割為基礎(chǔ)，融入了機(jī)器學(xué)習(xí)的方法，同時(shí)為了提高算法的適用性，加入了用戶的輸入信息。作為輸入的用戶信息對(duì)于恢復(fù)視頻的深度信息，具有很好的指導(dǎo)意義。
　　 本文實(shí)現(xiàn)的基于機(jī)器學(xué)習(xí)的單目視頻深度

3、恢復(fù)，首先考慮到算法的適用性，以及實(shí)驗(yàn)重點(diǎn)，所需要的分割信息以及預(yù)處理時(shí)的深度信息，作為輸入信息給定，給定某些幀的分割信息以及深度信息;其次通過GMM模型，基于SIFT流的信息傳遞以及基于形狀先驗(yàn)的分割信息傳遞，將人工處理的分割信息傳遞到相鄰視頻幀，并通過插值法獲得前景區(qū)域的深度信息;最后對(duì)于背景區(qū)域的深度恢復(fù)，采用SIFT流傳遞深度信息，采用圖像補(bǔ)全技術(shù)進(jìn)行補(bǔ)全。圖像補(bǔ)全技術(shù)的限制，本文提出采用機(jī)器學(xué)習(xí)的方法，來實(shí)現(xiàn)未知區(qū)域的深度優(yōu)化