專利名稱:平面視頻轉(zhuǎn)化為立體視頻的方法及系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及計(jì)算機(jī)多媒體技術(shù)領(lǐng)域,特別涉及一種基于圖像特征的平面視頻轉(zhuǎn)化為立體視頻的方法及系統(tǒng)。
背景技術(shù):
立體視頻是影視行業(yè)的未來主要發(fā)展方向。立體視頻的顯示效果層次分明、色彩鮮艷,具有很強(qiáng)的視覺沖擊力,給觀眾留下深刻的印象。但是,一個(gè)阻礙立體產(chǎn)業(yè)推廣的關(guān)鍵問題是立體視頻的缺乏?,F(xiàn)有的各種視頻媒介一般是以平面的形式存在的,這些視頻媒介在獲取的同時(shí)已經(jīng)損失掉了具體場景的深度信息。而采用平面視頻立體化技術(shù),直接將平面視頻轉(zhuǎn)換為立體視頻的制作成本比直接拍攝立體視頻要低很多,而且可以將任何一組現(xiàn)有的平面視頻轉(zhuǎn)換為對應(yīng)的立體視頻,其中的一項(xiàng)關(guān)鍵技術(shù)是深度圖生成,深度圖的質(zhì)量對于3D場景的重建起著至關(guān)重要的作用?,F(xiàn)有的各種深度提取方法很多,但是都存在一些計(jì)算復(fù)雜度高,計(jì)算耗時(shí),有些還需要人工操作等特點(diǎn)。
發(fā)明內(nèi)容
本發(fā)明旨在至少解決上述技術(shù)問題之一。為此,本發(fā)明的一個(gè)目的在于提出一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,該方法無需人工參與,能夠?qū)崿F(xiàn)全自動的平面視頻到立體視頻的轉(zhuǎn)換,且處理簡單快捷,具有良好的整體立體顯示效果。本發(fā)明的另一個(gè)目的在與提出一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的系統(tǒng)。為了實(shí)現(xiàn)上述目的,本發(fā)明第一方面的實(shí)施例提出了一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,包括以下步驟:提供平面視頻序列,并獲取所述平面視頻序列中每一幀平面圖像的初始深度圖;將所述平面視頻序列中的每一幀平面圖像變換至灰度空間中;根據(jù)變換的灰度圖對所述初始深度圖的空洞像素點(diǎn)進(jìn)行深度填補(bǔ);根據(jù)所述每一幀平面圖像的RGB三通道的色差對填補(bǔ)后的初始深度圖進(jìn)行聯(lián)合雙邊濾波處理,以得到平滑的深度圖;以及根據(jù)所述平面視頻序列中每一幀平面圖像的平滑的深度圖將所述平面視頻序列轉(zhuǎn)換為立體圖像序列。根據(jù)本發(fā)明實(shí)施例的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,不需要任何人工參與,能夠?qū)崿F(xiàn)全自動的平面視頻到立體視頻的轉(zhuǎn)換,且其處理過程簡單快捷,具有良好的整體立體顯示效果。另外,根據(jù)本發(fā)明上述實(shí)施例的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法還可以具有如下附加的技術(shù)特征:在本發(fā)明的實(shí)施例中,所述平面視頻為RGB格式的視頻幀格式。在本發(fā)明的實(shí)施例中,所述初 始深度圖的深度圖值通過如下公式計(jì)算:
權(quán)利要求
1.一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,包括以下步驟: 提供平面視頻序列,并獲取所述平面視頻序列中每一幀平面圖像的初始深度圖; 將所述平面視頻序列中的每一幀平面圖像變換至灰度空間中; 根據(jù)變換的灰度圖對所述初始深度圖的空洞像素點(diǎn)進(jìn)行深度填補(bǔ); 根據(jù)所述每一幀平面圖像的RGB三通道的色差對填補(bǔ)后的初始深度圖進(jìn)行聯(lián)合雙邊濾波處理,以得到平滑的深度圖;以及 根據(jù)所述平面視頻序列中每一幀平面圖像的平滑的深度圖將所述平面視頻序列轉(zhuǎn)換為立體圖像序列。
2.如權(quán)利要求1所述的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,所述平面視頻為RGB格式的視頻幀格式。
3.如權(quán)利要求1所述的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,所述初始深度圖的深度圖值通過如下公式計(jì)算:
4.如權(quán)利要求1所述的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,所述每一幀平面圖像的RGB三通道的色差,通過如下公式得到:
5.如權(quán)利要求1所述的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,所述平滑的深度圖的深度值通過如下公式計(jì)算:
6.如權(quán)利要求1所述的基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,其特征在于,在所述根據(jù)所述平面視頻序列中每一幀平面圖像的平滑的深度圖將所述平面視頻序列轉(zhuǎn)換為立體圖像序列之后,進(jìn)一步包括: 輸出所述立體圖像序列。
7.一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的系統(tǒng),其特征在于,包括: 視頻輸入模塊,所述視頻輸入模塊用于輸入所述平面視頻序列; 深度圖獲取模塊,所述深度圖獲取模塊用于獲取所述平面視頻序列中每一幀平面圖像的初始深度圖; 變換模塊,所述準(zhǔn)化模塊用于將所述平面視頻序列中每一幀平面圖像變換至灰度空間中; 填補(bǔ)模塊,所述填補(bǔ)理模塊用于根據(jù)變換的灰度圖對所述初始深度圖的空洞像素點(diǎn)進(jìn)行深度填補(bǔ); 處理模塊,所述處理模塊用于根據(jù)所述每一幀平面圖像的RGB三通道的色差對填補(bǔ)后的初始深度圖像進(jìn)行聯(lián)合雙邊濾波處理,以得到平滑的深度圖;以及 轉(zhuǎn)換模塊,所述轉(zhuǎn)換模塊用于根據(jù)所述平面視頻序列中每一幀平面圖像的平滑的深度圖將所述平面視頻序列轉(zhuǎn)換為立體圖像序列; 輸出模塊,所述 輸出模塊用于輸出所述立體圖像序列。
全文摘要
本發(fā)明提出一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的方法,包括以下步驟提供平面視頻序列,并獲取其中每一幀平面圖像的初始深度圖;將平面視頻序列中的每一幀平面圖像變換至灰度空間中;根據(jù)變換的灰度圖像對初始深度圖像的空洞像素點(diǎn)進(jìn)行深度填補(bǔ);根據(jù)每一幀平面圖像的RGB三通道的色差對填補(bǔ)后的初始深度圖進(jìn)行聯(lián)合雙邊濾波處理,以得到平滑的深度圖;根據(jù)平面視頻序列中每一幀平面圖像的平滑的深度圖將平面視頻序列轉(zhuǎn)換為立體圖像序列。本發(fā)明的實(shí)施例無需人工參與,能夠?qū)崿F(xiàn)全自動的平面視頻到立體視頻的轉(zhuǎn)換,且處理簡單快捷,具有良好的整體立體顯示效果。本發(fā)明還提出一種基于圖像顏色特征的平面視頻轉(zhuǎn)化為立體視頻的系統(tǒng)。
文檔編號H04N15/00GK103248909SQ20131019058
公開日2013年8月14日 申請日期2013年5月21日 優(yōu)先權(quán)日2013年5月21日
發(fā)明者戴瓊海, 柯家琪 申請人:清華大學(xué)