三維視頻的視點繪制與編碼.pdf

1、近年來，多視點+深度的三維視頻表示格式正在逐漸取代傳統(tǒng)的雙目立體視頻表示格式，并被廣泛應(yīng)用于新一代的三維視頻系統(tǒng)?；诙嘁朁c+深度的三維視頻系統(tǒng)通過視點繪制技術(shù)由給定視點的紋理圖像和深度圖像生成新的視點信息，從而構(gòu)成多視點立體顯示。本文針對多視點+深度的三維視頻系統(tǒng)，以如何有效提升繪制視點視頻質(zhì)量為研究主線，重點研究了視點繪制和多視點+深度的視頻編碼問題。本文的主要創(chuàng)新性研究成果包括:
　　提出了面向最小化空洞效應(yīng)的深度圖像增強算

2、法。本文首先分析了基于深度圖像的多視點重建過程，歸納了視點重建過程空洞產(chǎn)生的原因，并以此為依據(jù)對空洞類型進行了分類。針對離散分布的空洞像素，采用自適應(yīng)濾波器對深度圖像進行處理，以增強深度圖像的質(zhì)量;針對連續(xù)的遮蔽區(qū)域，應(yīng)用方向性的圖像填補算法對遮蔽區(qū)域進行填補。實驗表明此方案在提升重建視點視頻主觀視覺質(zhì)量方面具有明顯的效果。
　　提出了結(jié)合時間相關(guān)性信息的多視點繪制視頻增強方案。本文利用時域相關(guān)信息填補重建視點中的遮蔽區(qū)域，其中時

3、域相關(guān)信息的選取充分考慮了場景內(nèi)前景目標(biāo)的運動模式。同時，針對場景內(nèi)可能存在的復(fù)雜運動模式，本文利用前景深度相關(guān)原則恢復(fù)被運動目標(biāo)遮擋的背景信息。實驗表明本方案有效提升了重建視點的主、客觀質(zhì)量。
　　提出了深度視頻優(yōu)化采樣算法和率失真優(yōu)化編碼方案。針對尺度非對稱三維視頻編碼框架下的深度視頻采樣問題，本文以最小化合成視點失真為目標(biāo)，設(shè)計了深度視頻優(yōu)化采樣方案;針對三維視頻編碼率失真問題，優(yōu)化了尺度非對稱視頻編碼的率失真方案。率失真優(yōu)