本發(fā)明涉及視頻編碼技術(shù)相關(guān)技術(shù)領(lǐng)域,尤其是指一種hdr視頻編碼方法。
背景技術(shù):
隨著視頻處理技術(shù)的快速發(fā)展,4k和hdr(highdynamicrange,高動態(tài)范圍)等技術(shù)逐步成為人們對視覺體驗的新需求。相比于傳統(tǒng)sdr(standarddynamicrange,標準動態(tài)范圍)視頻,hdr視頻能夠呈現(xiàn)出更廣的亮度和更多的顏色,高光的時候不會過曝,暗調(diào)的時候不會欠曝,更好地反映真實環(huán)境中的視覺效果。
hdr視頻從拍攝到呈現(xiàn)給觀眾主要經(jīng)過以下四個步驟:
(1)拍攝采集:用hdr攝像機拍攝采集成具有若干幀圖像的hdr視頻;
(2)預(yù)處理:該階段可以對視頻數(shù)據(jù)進行去噪、調(diào)整尺寸等;
(3)編碼壓縮:對視頻數(shù)據(jù)進行編碼壓縮,生成壓縮視頻流;
(4)解碼觀看:用戶利用hdr顯示設(shè)備的解碼芯片將視頻流解碼成若干幀圖像,進行觀看。
編碼壓縮過程對于hdr技術(shù)至關(guān)重要,以往sdr視頻中,一個像素的亮度值可以用8個bit表示,而hdr中一個像素的亮度值需要用10個bit來表示,雖然它所能表示的亮度范圍更加廣泛,但是數(shù)據(jù)量也大大增加了;另外,由于hdr視頻包含了更多的圖像細節(jié),需要用更多的比特數(shù)來描述視頻內(nèi)容,如何提升編碼壓縮效率,減少數(shù)據(jù)量是hdr應(yīng)用推廣的關(guān)鍵技術(shù)?,F(xiàn)有hdr編碼采用的是原h(huán).265/hevc(highefficiencyvideocoding)對于sdr視頻編碼的方案,沒有考慮到hdr視頻的高亮度和高色域等特性。
視頻編碼中一個重要的環(huán)節(jié)是碼率控制,它通過可利用帶寬和視頻幀內(nèi)容的復(fù)雜度來計算各幀和各幀中所有的圖像編碼單元,碼率控制算法包括三層:gop(groupofpicture,圖像組)層碼率控制、幀層碼率控制和cu(codingunit,編碼單元)層碼率控制,hdr視頻編碼器將一個視頻分為多個gop,每個gop包含多幀,其中:gop層碼率控制根據(jù)視頻特性和網(wǎng)絡(luò)帶寬計算各個gop的目標碼率;幀層碼率控制將一個gop的目標碼率劃分到gop中的各個幀,根據(jù)各幀的復(fù)雜度計算各幀的目標碼率,并進一步計算出qp(quantizationparameter,量化參數(shù));cu層碼率控制將一幀分成多個cu,根據(jù)前一幀中對應(yīng)cu的復(fù)雜度來預(yù)測當前cu的復(fù)雜度并確定當前cu的目標碼率,并進一步計算出qp,利用qp對圖像數(shù)據(jù)進行量化壓縮。
qp大小反映了空間細節(jié)壓縮情況。若qp越小,大部分的細節(jié)都會被保留;若qp越大,細節(jié)則容易丟失。因此,一幀中各個cu的qp大小通常由該cu的紋理復(fù)雜度所決定,如果紋理越復(fù)雜,需要保留的細節(jié)越多,則將qp設(shè)置越小,反之則將qp設(shè)置越大。
對比度指的是一幅圖像中明暗區(qū)域最亮和最暗之間不同亮度層級的測量。而人眼分辨不同對比度的能力稱之為對比敏感度,它與對比度成反比。當對比度越小時,人眼越敏感,當對比度越大時,人眼越不敏感。但是該對比敏感度的值是在真實的顯示設(shè)備上通過主觀實驗而得出,而并非編碼亮度。部分編碼算法直接將顯示亮度做為編碼亮度來指導(dǎo)編碼,這樣是不正確的,因此,需要將編碼亮度這種電信號轉(zhuǎn)換為顯示亮度這種光信號才能準確地衡量對比敏感度。hdr視頻亮度范圍和色度范圍大,一幀圖像內(nèi)不同區(qū)域的對比度會出現(xiàn)較明顯的差異。
在電信號轉(zhuǎn)光信號的方案中,dolbyvision提出的感知量化(perceptualquantizer,pq)模型已經(jīng)成為smptest2084標準,其理論依據(jù)是人類視覺系統(tǒng)存在掩蔽效應(yīng),當某一個信號的失真不超過某一閾值時,不會被人眼所察覺,該閾值稱之為恰可察覺失真(justnoticeabledistortion,jnd)閾值。感知量化模型認為jnd閾值隨著亮度的變化呈一定的關(guān)系,低亮度區(qū)域該閾值較大,高亮度區(qū)域該閾值則較小。
現(xiàn)有編碼算法試圖用對比敏感度調(diào)節(jié)編碼的碼率分配,直接將顯示亮度做為編碼亮度來衡量對比敏感度,這樣不能正確反應(yīng)人眼在顯示設(shè)備上觀看視頻時由不同亮度對比產(chǎn)生的視覺差異。
技術(shù)實現(xiàn)要素:
本發(fā)明是為了克服現(xiàn)有技術(shù)中存在上述的不足,提供了一種提高細節(jié)保留完整度的hdr視頻編碼方法。
為了實現(xiàn)上述目的,本發(fā)明采用以下技術(shù)方案:
一種hdr視頻編碼方法,具體包括如下步驟:
(1)視頻源數(shù)據(jù)通過常規(guī)的碼率控制獲得量化參數(shù);
(2)視頻源數(shù)據(jù)通過電光轉(zhuǎn)換獲得當前編碼單元在hdr顯示設(shè)備上的對比敏感度;
(3)通過步驟(1)中的量化參數(shù)以及步驟(2)中的對比敏感度獲得當前編碼單元的量化參數(shù),并對視頻源數(shù)據(jù)進行量化。
本發(fā)明將編碼亮度這種電信號轉(zhuǎn)換為顯示亮度這種光信號,較準確地反應(yīng)出人眼在hdr顯示設(shè)備上觀看視頻時由亮度對比產(chǎn)生的不同敏感程度;將一幀中各個編碼單元的對比敏感度相對于該幀的平均對比敏感度來調(diào)節(jié)各個編碼單元的量化參數(shù),使越敏感的區(qū)域的細節(jié)保留的更完整;從而使hdr視頻中人眼比較敏感的對比敏感度較大的區(qū)域的細節(jié)保留地更加完整,提高了細節(jié)保留的完整度。
作為優(yōu)選,在步驟(2)中,當前編碼單元的對比敏感度獲取如下:
(a)當前編碼單元中的顯示亮度通過感知量化模型轉(zhuǎn)換而來:
其中,v(i)是當前編碼單元中第i個像素的編碼亮度,c1、c2、c3的值分別為0.835、18.851、18.687,m和n的值分別為78.843和0.159;
(b)根據(jù)當前編碼單元中的顯示亮度l(i)獲得當前編碼單元中的最大顯示亮度lmax和最小顯示亮度lmin;
(c)根據(jù)當前編碼單元中的最大顯示亮度和最小顯示亮度,獲得當前編碼單元的對比度敏感度:
作為優(yōu)選,在步驟(3)中,具體操作步驟如下:
(i)獲取當前編碼單元相對于當前幀的敏感度w,若當前編碼單元越敏感,則使量化參數(shù)越小,反之則量化參數(shù)越大,w的求取方式為:
其中:a=0.7,b=0.6,m=0,n=1,c=4,
(ii)獲取當前編碼單元的量化參數(shù)為:
其中:qpr表示步驟(1)中通過常規(guī)的碼率控制計算出的量化參數(shù)。
本發(fā)明的有益效果是:較準確地反應(yīng)出人眼在hdr顯示設(shè)備上觀看視頻時由亮度對比產(chǎn)生的不同敏感程度;使hdr視頻中人眼比較敏感的對比敏感度較大的區(qū)域的細節(jié)保留地更加完整,提高了細節(jié)保留的完整度。
附圖說明
圖1是本發(fā)明的方法流程圖。
具體實施方式
下面結(jié)合附圖和具體實施方式對本發(fā)明做進一步的描述。
如圖1所述的實施例中,一種hdr視頻編碼方法,具體包括如下步驟:
(1)視頻源數(shù)據(jù)通過常規(guī)的碼率控制獲得量化參數(shù);
(2)視頻源數(shù)據(jù)通過電光轉(zhuǎn)換獲得當前編碼單元在hdr顯示設(shè)備上的對比敏感度;其中:當前編碼單元的對比敏感度獲取如下:
(a)當前編碼單元中的顯示亮度通過感知量化模型轉(zhuǎn)換而來:
其中,v(i)是當前編碼單元中第i個像素的編碼亮度,c1、c2、c3的值分別為0.835、18.851、18.687,m和n的值分別為78.843和0.159;
(b)根據(jù)當前編碼單元中的顯示亮度l(i)獲得當前編碼單元中的最大顯示亮度lmax和最小顯示亮度lmin;
(c)根據(jù)當前編碼單元中的最大顯示亮度和最小顯示亮度,獲得當前編碼單元的對比度敏感度:
(3)通過步驟(1)中的量化參數(shù)以及步驟(2)中的對比敏感度獲得當前編碼單元的量化參數(shù),并對視頻源數(shù)據(jù)進行量化;其中:具體操作步驟如下:
(i)獲取當前編碼單元相對于當前幀的敏感度w,若當前編碼單元越敏感,則使量化參數(shù)越小,反之則量化參數(shù)越大,w的求取方式為:
其中:a=0.7,b=0.6,m=0,n=1,c=4,
(ii)獲取當前編碼單元的量化參數(shù)為:
其中:qpr表示步驟(1)中通過常規(guī)的碼率控制計算出的量化參數(shù)。
本發(fā)明將編碼亮度這種電信號轉(zhuǎn)換為顯示亮度這種光信號,較準確地反應(yīng)出人眼在hdr顯示設(shè)備上觀看視頻時由亮度對比產(chǎn)生的不同敏感程度;將一幀中各個編碼單元的對比敏感度相對于該幀的平均對比敏感度來調(diào)節(jié)各個編碼單元的量化參數(shù),使越敏感的區(qū)域的細節(jié)保留的更完整;從而使hdr視頻中人眼比較敏感的對比敏感度較大的區(qū)域的細節(jié)保留地更加完整,提高了細節(jié)保留的完整度。