intral6X16表示當前圖像組中的第k幀右視點圖像中編碼模式為幀內(nèi) 16X16的宏塊的數(shù)目,1彡w彡Nintra16X16,Nintra4X4表示當前圖像組中的第k幀右視點圖像 中編碼模式為幀內(nèi)4X4的宏塊的數(shù)目,1彡w'彡NintM_4x4,WintMl6X16(w)表示當前圖像組 中的第k幀右視點圖像中編碼模式為幀內(nèi)16X16的第w個宏塊的系數(shù),Wintra4x4(w')表示 當前圖像組中的第k幀右視點圖像中編碼模式為幀內(nèi)4X4的第w'個宏塊的系數(shù),p表示 錯誤隱藏失真系數(shù); 并計算當前圖像組中的每幀左視點圖像的錯誤隱藏失真,將 當前圖像組中的第k幀左視點圖像的錯誤隱藏失真記為, ,其中,NintOT表示當前圖像 J-1
組中的第k幀左視點圖像中編碼模式為幀間編碼且采用運動矢量編碼的宏塊的數(shù)目, 1彡g彡Ninte,MV' ^表示當前圖像組中的第k幀左視點圖像中編碼模式為幀間編碼且采 用運動矢量編碼的第g個宏塊的運動矢量,N'intra16X16表示當前圖像組中的第k幀左視點 圖像中編碼模式為幀內(nèi)16X16的宏塊的數(shù)目,1彡j彡N'intral6X16,N'intM4x4表示當前圖 像組中的第k幀左視點圖像中編碼模式為幀內(nèi)4X4的宏塊的數(shù)目,1彡j'彡N'intM4x4, Winta_16X16(j)表示當前圖像組中的第k幀左視點圖像中編碼模式為幀內(nèi)16X16的第j個宏 塊的系數(shù),WintM4x4(j')表示當前圖像組中的第k幀左視點圖像中編碼模式為幀內(nèi)4X4的 第j'個宏塊的系數(shù); ④計算當前圖像組中的每幀右視點圖像的錯誤擴散失真,將當前圖像組中的第k幀右 視點圖像的錯誤擴散失真記為/i*,
車中,表示當前圖像組中的 第k幀右視點圖像對其后續(xù)的第s幀右視點圖像的錯誤擴散影響,亦表示當前圖像組中的 第k幀右視點圖像對當前圖像組中的第k+S幀右視點圖像的錯誤擴散影響,當S= 1時取 +i+1,當s尹1時/^^衫=/犯4+4-,/^知―丨表不當如圖像組中的第 k幀右視點圖像對其后續(xù)的第S-1幀右視點圖像的錯誤擴散影響,亦表示當前圖像組中的 第k幀右視點圖像對當前圖像組中的第k+S-l幀右視點圖像的錯誤擴散影響,a表示錯誤 擴散因子,心+1表示當前圖像組中的第k幀右視點圖像后續(xù)的第1幀右視點圖像中編碼模式 為幀間編碼的宏塊的比例,亦表示當前圖像組中的第k+1幀右視點圖像中編碼模式為幀間 編碼的宏塊的比例,心+3表示當前圖像組中的第k幀右視點圖像后續(xù)的第S幀右視點圖像中 編碼模式為幀間編碼的宏塊的比例,亦表示當前圖像組中的第k+s幀右視點圖像中編碼模 式為幀間編碼的宏塊的比例; 并計算當前圖像組中的每幀左視點圖像的錯誤擴散失真,將當前圖像組中的第k幀 左視點圖像的錯誤擴散失真記為/",,其中,4?表示當前 's=ls=0 圖像組中的第k幀左視點圖像對其后續(xù)的第S幀左視點圖像的錯誤擴散影響,亦表示當前 圖像組中的第k幀左視點圖像對當前圖像組中的第k+s幀左視點圖像的錯誤擴散影響, 當s= 1 時取^xaxA+i,當s尹 1 時 /斯扣=/£i^+s-ixxi? 丨表不當 前圖像組中的第k幀左視點圖像對其后續(xù)的第S-l幀左視點圖像的錯誤擴散影響,亦表示 當前圖像組中的第k幀左視點圖像對當前圖像組中的第k+S-1幀左視點圖像的錯誤擴散 影響,^^表示當前圖像組中的第k幀左視點圖像后續(xù)的第1幀左視點圖像中編碼模式 為幀間編碼的宏塊的比例,亦表示當前圖像組中的第k+1幀左視點圖像中編碼模式為幀間 編碼的宏塊的比例,^^表示當前圖像組中的第k幀左視點圖像后續(xù)的第s幀左視點圖 像中編碼模式為幀間編碼的宏塊的比例,亦表示當前圖像組中的第k+s幀左視點圖像中 編碼模式為幀間編碼的宏塊的比例,表示當前圖像組中的第k幀左視點圖像對當前 圖像組中的第k+s巾貞右視點圖像的錯誤擴散影響,當s= 0時取/ipixA,當s尹0 時表示當前圖像組中的第k幀左視點圖像對當前圖像組中的第 k+s-1幀右視點圖像的錯誤擴散影響,R表示當前圖像組中的所有右視點圖像采用視差矢 量編碼的平均比例; ⑤ 計算當前圖像組中的每幀立體圖像的總失真,將當前圖像組中的第k幀立體圖像的 總失真記為FIDPk,W叱=/^(/^+/^ + (1 -其中,表示加權(quán)系數(shù); ⑥ 計算當前圖像組中的每幀立體圖像的重要性權(quán)重,將當前圖像組中的第k幀立體圖 像的重要性權(quán)重記為《k,當k= 1時取c〇k= 1 ;當k尹1時采用歸一化方法對FIDPk進行 歸一化處理,得到的值賦值給《k; ⑦ 將立體視頻中下一個待處理的圖像組作為當前圖像組,然后返回步驟②繼續(xù)執(zhí)行, 直至立體視頻中的每個圖像組處理完畢,得到立體視頻中的每幀立體圖像的重要性權(quán)重, 完成立體視頻中的每幀立體圖像的重要性評估。
2. 根據(jù)權(quán)利要求1所述的一種立體視頻幀重要性評估方法,其特征在于所述的步驟③ 中取Wintral6X16(w) = 1.2,取Wintra4x4(w')= 1.3 ;所述的步驟③中取WintaU6X16(j) = 1.2, 取Wintra-4x4(j')= 1. 3。
3. 根據(jù)權(quán)利要求1或2所述的一種立體視頻幀重要性評估方法,其特征在于所述的步 驟④中錯誤擴散因子a的取值為0到1之間的數(shù)。
4. 根據(jù)權(quán)利要求3所述的一種立體視頻幀重要性評估方法,其特征在于所述的步驟⑤ 中加權(quán)系數(shù)3的取值為〇. 5。
5.根據(jù)權(quán)利要求4所述的一種立體視頻幀重要性評估方法,其特征在于所述的步驟⑥ 中當k尹1時
其中,F(xiàn)IDPmax表示當前圖像組中除第1巾貞立體圖像 外的所有立體圖像的總失真中的最大值,?10?_表示當前圖像組中除第1幀立體圖像外的 所有立體圖像的總失真中的最小值。
【專利摘要】本發(fā)明公開了一種立體視頻幀重要性評估方法,其在計算每幀右視點圖像的錯誤隱藏失真的過程中,加入了該幀右視點圖像中編碼模式為幀間編碼且采用視差矢量編碼的宏塊視差矢量;在計算每幀左視點圖像的錯誤擴散失真的過程中,利用當前幀對后續(xù)視點內(nèi)和視點間編碼幀的擴散失真影響累加得到,且在計算時加入了錯誤擴散因子;在計算每幀立體圖像的總失真時,利用該幀立體圖像的左視點圖像的錯誤擴散失真和右視點圖像的錯誤擴散失真之和與該幀立體圖像的左視點圖像的錯誤隱藏失真和右視點圖像的錯誤隱藏失真之和加權(quán)得到,得到的總失真的精度較高,因此本發(fā)明方法能夠有效地區(qū)分不同幀的重要等級,從而能夠提高終端視頻的感知質(zhì)量。
【IPC分類】H04N19-154, H04N17-00, H04N19-597
【公開號】CN104618714
【申請?zhí)枴緾N201510027445
【發(fā)明人】王曉東, 胡彬彬, 章聯(lián)軍, 葉慶衛(wèi), 周宇, 王騰飛
【申請人】寧波大學
【公開日】2015年5月13日
【申請日】2015年1月20日