專利名稱:用于實(shí)時(shí)地頻域水印處理多聲道音頻信號(hào)的方法和裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及用于實(shí)時(shí)地頻域水印處理多聲道音頻信號(hào)的方法和裝置,其中對(duì)于水印處理音頻信號(hào)的當(dāng)前輸入部分的全部聲道,在任何情況下,都沒有足夠處理能力可用,并且其中,對(duì)于水印處理,以重疊/相加方式每個(gè)聲道地處理音頻信號(hào)。
背景技術(shù):
實(shí)時(shí)數(shù)字音頻信號(hào)水印在處理能力有限的環(huán)境下是困難的。這是例如嵌入式平臺(tái)的情況,其中,由于成本、熱量和音量原因而通常使用低功率處理單元,或者是服務(wù)器的情況,在其中強(qiáng)力的處理器必須平行地實(shí)時(shí)水印多個(gè)數(shù)據(jù)流。通常,音頻水印系統(tǒng)基于如下的基于塊的方式操作,水印(WM)嵌入器取得N個(gè)輸入信號(hào)樣本的塊,WM處理此塊并返回N個(gè)改進(jìn)輸出信號(hào)樣本的塊。實(shí)時(shí)意味著用于信號(hào)數(shù)據(jù)塊的WM處理的時(shí)間周期小于用來獲得 下一個(gè)信號(hào)數(shù)據(jù)塊的時(shí)間周期。如果WM處理時(shí)間較長,則違背了實(shí)時(shí)的限制并且在嵌入器的輸入將發(fā)生緩沖溢出,這導(dǎo)致樣本的丟失和可聽假象(audible artefact)以及音頻質(zhì)量的退化。此外,嵌入水印所要求的處理時(shí)間經(jīng)常是取決于音頻信號(hào)內(nèi)容的。
發(fā)明內(nèi)容
所以,確保音頻數(shù)據(jù)流的水印處理而不違背實(shí)時(shí)限制是重要的。一方面,這意味著在絕大多數(shù)情況下不是全部多聲道數(shù)據(jù)流的聲道都可以被標(biāo)記。另一方面,水印盡可能多的音頻數(shù)據(jù)流的聲道以便于增加水印的魯棒性和安全性是有利的。在5. I聲道音頻中,例如,如果僅中央聲道被水印而不是左、中央和右聲道或全部6個(gè)聲道,則WM的魯棒性和安全性大幅降低。為了在上述受限環(huán)境中保證實(shí)時(shí)處理,必須找到對(duì)于其水印嵌入器將需要最長的處理時(shí)間的最壞情況輸入信號(hào)。基于這樣的時(shí)間周期,可以計(jì)算可以實(shí)時(shí)標(biāo)記的最大數(shù)量的聲道。但是,這樣的解決方案的缺點(diǎn)是,絕大多數(shù)輸入信號(hào)可以比上述最壞情況輸入信號(hào)更快地被處理,并且絕大多數(shù)時(shí)候,嵌入器水印比可以水印的聲道更少的聲道,而這降低魯棒性和安全性。本發(fā)明要解決的問題是,提供具有實(shí)時(shí)限制的水印處理,在其中可以水印盡可能多的音頻輸入信號(hào)聲道。用權(quán)利要求I中公開的方法解決此問題。在權(quán)利要求4中公開利用此方法的裝置。根據(jù)本發(fā)明,關(guān)于水印重要性將在基于數(shù)據(jù)塊的音頻多聲道信號(hào)中的聲道優(yōu)先級(jí)化,從而對(duì)于不同的輸入信號(hào)數(shù)據(jù)塊可以改變聲道優(yōu)先級(jí)。對(duì)于當(dāng)前輸入信號(hào)塊,水印最重要的聲道,例如5. I設(shè)置中的中央聲道,并且確定所要求的處理時(shí)間。如果,此所要求的處理時(shí)間比預(yù)定的取決于應(yīng)用的閾值小,則標(biāo)記次重要的聲道(例如,左聲道),且確定額外要求的處理時(shí)間。以此方式,為當(dāng)前輸入信號(hào)塊連續(xù)標(biāo)記重要性降序的聲道,直到總的所要求的處理時(shí)間大于預(yù)定處理時(shí)間閾值。此后,不水印剩余的聲道,而僅進(jìn)行必須的音頻處理,從而不發(fā)生塊假象(blocking artifact)。這樣的“抗塊處理”(參見下面的描述)通常遠(yuǎn)快于完全WM嵌入處理,并且因而此例程的方式將保證遵守實(shí)時(shí)限制。由于音頻編碼和水印基于塊的本質(zhì)并由于與對(duì)抗塊假象產(chǎn)生的音頻質(zhì)量的敏感度,所以必須解決若干問題以便于引向可接受的性能和質(zhì)量。本發(fā)明最優(yōu)化一方面的WM魯棒性和安全性與另一方面的實(shí)時(shí)處理限制之間的折中。大體上,本發(fā)明方法適用于實(shí)時(shí)地頻域水印處理多聲道音頻信號(hào),其中對(duì)于水印處理所述音頻信號(hào)的當(dāng)前輸入部分的全部聲道,在任何情況下都沒有足夠的處理能力,并且其中,對(duì)于所述水印處理,對(duì)所述音頻信號(hào)的當(dāng)前輸入部分和所述音頻信號(hào)的隨后的輸入部分,以重疊/相加方式每個(gè)聲道地處理所述音頻信號(hào),所述方法包括如下步驟a)對(duì)于所述音頻信號(hào)的所述當(dāng)前輸入部分,確定或考慮聲道優(yōu)先級(jí)列表;b)如果有足夠的處理能力可用于水印處理所述聲道優(yōu)先級(jí)列表的第一聲道,則水·印所述第一聲道的音頻內(nèi)容,其中該水印處理包括-級(jí)聯(lián)所述音頻信號(hào)的所述當(dāng)前輸入部分的此聲道的輸入數(shù)據(jù)塊和所述音頻信號(hào)的隨后的數(shù)據(jù)塊;-幅度加權(quán)、頻率變換、水印和逆頻率變換所述級(jí)聯(lián)的輸入數(shù)據(jù)塊;-幅度加權(quán)并相加兩個(gè)產(chǎn)生的數(shù)據(jù)塊,其中對(duì)于所述音頻信號(hào)的數(shù)據(jù)流的全部聲道的第一部分,將對(duì)應(yīng)的數(shù)據(jù)塊幅度加權(quán)并且相加而沒有先前水印處理;否則,不水印此聲道的音頻內(nèi)容,并略過對(duì)應(yīng)的數(shù)據(jù)塊;c)對(duì)所述音頻信號(hào)的所述當(dāng)前輸入部分的剩余聲道重復(fù)步驟b),并對(duì)所述音頻信號(hào)的隨后的輸入部分繼續(xù)用步驟b)和第一聲道。大體上,發(fā)明性的裝置適用于實(shí)時(shí)地頻域水印處理多聲道音頻信號(hào),其中,對(duì)于水印處理音頻信號(hào)的當(dāng)前輸入部分的全部聲道,在任何情況下都沒有足夠處理能力可用,并且其中對(duì)所述音頻信號(hào)的當(dāng)前輸入部分和所述音頻信號(hào)的隨后輸入部分以重疊方式/相加方式每個(gè)聲道地處理所述水印處理所述音頻信號(hào),所述裝置包括適配用于以下的部件a)對(duì)于所述音頻信號(hào)的所述當(dāng)前輸入部分,確定或考慮聲道優(yōu)先級(jí)列表;b)如果有足夠的處理能力可用于水印處理所述聲道優(yōu)先級(jí)列表的第一聲道,則水印所述第一聲道的音頻內(nèi)容,其中該水印處理包括-級(jí)聯(lián)所述音頻信號(hào)的所述當(dāng)前輸入部分的此聲道的輸入數(shù)據(jù)塊和所述音頻信號(hào)的隨后的數(shù)據(jù)塊;-幅度加權(quán)、頻率變換、水印和逆頻率變換所述級(jí)聯(lián)的輸入數(shù)據(jù)塊;-幅度加權(quán)并相加兩個(gè)產(chǎn)生的數(shù)據(jù)塊,其中對(duì)于所述音頻信號(hào)的數(shù)據(jù)流的全部聲道的第一部分,將對(duì)應(yīng)的數(shù)據(jù)塊幅度加權(quán)并且相加而而沒有先前水印處理;否則,不水印此聲道的音頻內(nèi)容,并略過對(duì)應(yīng)的數(shù)據(jù)塊;c)對(duì)所述音頻信號(hào)的所述當(dāng)前輸入部分的剩余聲道重復(fù)步驟b),并對(duì)所述音頻信號(hào)的隨后的輸入部分繼續(xù)用處理b)和第一聲道。本發(fā)明的有利的、額外的實(shí)施例在各自的獨(dú)立權(quán)利要求中公開。
參考所附附圖描述本發(fā)明的示例性實(shí)施例,所附附圖如下示出
圖I加權(quán)重疊-相加處理的示例;圖2隨著時(shí)間推移,周期中每個(gè)音頻信號(hào)數(shù)據(jù)塊使用的平均、最大和當(dāng)前處理器負(fù)載;圖3發(fā)明性處理的流程圖;圖4標(biāo)記聲道(MarkChannel)步驟的更具體的流程圖;圖5不標(biāo)記聲道(NotMarkChannel)步驟的更具體的流程圖;圖6從狀態(tài)“處理(PROCESS)”到狀態(tài)“略過(PASSTHROUGH)”的轉(zhuǎn)變圖7從狀態(tài)“略過”到狀態(tài)“處理”的逆轉(zhuǎn)變
具體實(shí)施方式
絕大多數(shù)音頻處理算法,無論是音頻編碼還是音頻水印,都是基于塊的,其中,在相同的時(shí)間處理N個(gè)輸入信號(hào)樣本的塊并生成N個(gè)輸出樣本。這樣的基于塊的處理的原因是,在頻域?qū)崿F(xiàn)部分處理而輸入樣本在時(shí)域,其中典型地用快速傅里葉變換(FFT)或改進(jìn)離散余弦變換(MDCT)變換N個(gè)時(shí)域樣本的塊并將其在頻域處理并使用對(duì)應(yīng)的逆變換將其變換回時(shí)域。因?yàn)檫@樣的變換對(duì)于二的指數(shù)的長度是非常高效的,所以512或1024大小的樣本最常使用?;趬K的音頻處理的直接方式是從包含k*N到(k+l)*N-l的輸入樣本的大小N的第k個(gè)輸入塊Ik中直接生成包含k*N到(k+1 )*N-1的輸出樣本的大小N的第k個(gè)輸出塊0k。但是,輸入音頻信號(hào)在塊邊界是連續(xù)的,即,在輸入塊Ik和Ik+1之間的界線,并且如果獨(dú)立地處理塊Ik和Ik+1的內(nèi)容,則將發(fā)生的是輸出塊Ok和0,+1之間的轉(zhuǎn)變不是連續(xù)的,引起可聽的微響假象。此問題的熟知解決方案是使用加權(quán)重疊-相加(WOLA)變換,其中,加權(quán)和重疊、變換、逆變換原始音頻信號(hào)輸入塊,并且當(dāng)形成輸出信號(hào)時(shí)加權(quán)并相加該原始音頻信號(hào)輸入塊,參見 J. B. Alien 的 “Short Term Spectral Analysis, Synthesis, and Modificationby Discrete Fourier Transform,,,IEEE Transactions on Acoustics, Speech, and SignalProcessing, vol. ASSP-25, no. 3, pp. 235 - 238, 1977 年 6 月。圖I描繪了用于典型重疊N的發(fā)明性水印處理結(jié)構(gòu),其中Jk是大小N的原始音頻信號(hào)輸入塊。在步驟或階段CC中級(jí)聯(lián)每兩個(gè)連續(xù)的塊Jk和Jk+1,引起長度2N和以N重疊的塊Ik,從而在I個(gè)塊中總計(jì)包含每個(gè)原始輸入音頻信號(hào)樣本兩次。取代級(jí)聯(lián)長度N的完整的塊,長度N/2的一半塊可以以連續(xù)方式級(jí)聯(lián)(例如,塊Jk的第二個(gè)半塊和塊Jk+1的第一個(gè)半塊,塊Jk+1的第一個(gè)半塊和塊Jk+1的第二個(gè)半塊,塊Jk+1的第二個(gè)半塊和塊Jk+2的第一個(gè)半塊等等),并且對(duì)應(yīng)的重疊是N/2。圖I不描繪相同的多聲道音頻信號(hào)部分的連續(xù)聲道,而是用于多聲道音頻信號(hào)的連續(xù)部分的相同聲道。在步驟或階段WTk,大體上塊Ik幅度加權(quán)并變換,在頻域內(nèi)施加水印改進(jìn)k,并且逆變換所產(chǎn)生的塊,產(chǎn)生大小2N的輸出塊0k。變換可以是FFT,其從每2N個(gè)輸入值中生成2N個(gè)變換的輸出值,并且對(duì)應(yīng)的逆變換IFFT從每2N個(gè)輸入值中生成2N個(gè)逆變換的輸出值,或者該變換可以是MDCT,其從每2N個(gè)輸入值中生成N個(gè)變換的輸出值,并且對(duì)應(yīng)的逆變換MDCT從每N個(gè)輸入值中生成2N個(gè)逆變換輸出值。
在步驟或階段WA中,當(dāng)前輸出塊對(duì)ok/ok+1的第一塊Ok與先前輸出塊對(duì)(V1A)k的第二塊Ok幅度加權(quán)并相加,以產(chǎn)生大小為N的最終輸出塊Pk。在WTk的輸入并在WA中,進(jìn)行兩個(gè)塊的兩個(gè)幅度加權(quán)從而存在總體平坦的響應(yīng)。例如,幅度加權(quán)使用正弦和余弦函數(shù)從而sin2+cos2=常數(shù),例如I。音頻數(shù)據(jù)流的第一原始輸出塊Jtl不根據(jù)上述處理產(chǎn)生輸出塊。反而,第一最終輸出塊Po是第一輸出塊Otl和原始輸入塊J0的組合。這意味著相對(duì)于對(duì)應(yīng)的輸入塊Jk,以一個(gè)塊延遲最終輸出塊Pk: 時(shí)間步驟原始輸入±夾原始輸出塊
toJ0無無
~WT^
~ J2WT\
tkJkWTk_iPk-I如上所述,在一些應(yīng)用中,沒有足夠的處理能力可以實(shí)時(shí)地水印多聲道音頻數(shù)據(jù)流的全部聲道。這例如在類似用于TV信號(hào)接收的機(jī)頂盒的嵌入式平臺(tái)上發(fā)生,但是也在同時(shí)處理很多數(shù)據(jù)流的大型服務(wù)器上發(fā)生。此外,負(fù)責(zé)進(jìn)行水印的處理器可能也實(shí)現(xiàn)其他類似音頻編碼的任務(wù),并從而該處理的當(dāng)前負(fù)載可以隨時(shí)間變化。不標(biāo)記全部聲道可能使水印(WM)系統(tǒng)的安全性降級(jí),因?yàn)檫@可能移除水印的聲道而不使用戶體驗(yàn)降級(jí)太多。如果例如在5. I音頻數(shù)據(jù)流中,僅標(biāo)記左聲道,取決于內(nèi)容,可能基于除左聲道以外的全部聲道生成新的2. I音頻數(shù)據(jù)流。當(dāng)然,在這樣的流中,不能檢測(cè)到水印。不標(biāo)記全部聲道還將使魯棒性降級(jí),該魯棒性對(duì)抗例如在電影院中麗系統(tǒng)音頻輸出的未授權(quán)話筒捕獲,因?yàn)樵谠捦搽A段,自動(dòng)地將全部聲道混合在一起。通常,以相同的方式標(biāo)記全部聲道,這意味著在此混音中添加水印。另一方面,如果一些聲道未標(biāo)記,則它們可以簡(jiǎn)單地作為對(duì)WM檢測(cè)器的額外噪聲,這可能引起水印的不可檢測(cè)性。嵌入水印所需的時(shí)間經(jīng)常取決于內(nèi)容的事實(shí)甚至使情況更復(fù)雜,如圖2所示,其中,描繪了隨著時(shí)間變化每個(gè)塊使用的最大值、平均值和當(dāng)前處理器周期。本發(fā)明性動(dòng)態(tài)聲道標(biāo)記提供了在實(shí)時(shí)要求、魯棒性和安全性之間的最優(yōu)的折中。如上所述,在一些應(yīng)用中,不可能水印音頻數(shù)據(jù)流的全部聲道。所以,將聲道優(yōu)先級(jí)化。例如,在5. I設(shè)置上絕大多數(shù)音頻信號(hào)內(nèi)容或能量在左、右和/或中央聲道。低頻效果(LFE)聲道和環(huán)繞聲道通常不攜帶大量信息。所以,5. I音頻數(shù)據(jù)流的優(yōu)先級(jí)可以被設(shè)置為I.中央、2.左、3.右、4.左環(huán)繞、5.右環(huán)繞、6. LFE。對(duì)于動(dòng)態(tài)聲道標(biāo)記中的每個(gè)連續(xù)信號(hào)輸入塊,以優(yōu)先級(jí)降序盡可能多地水印聲道,而不違背實(shí)時(shí)處理能力限制并且不損害由于塊假象的音頻質(zhì)量。
將音頻聲道的發(fā)明性水印處理的三個(gè)狀態(tài)定義為INIT是音頻數(shù)據(jù)流的第一塊的處理的狀態(tài)(圖I中的塊J。)?!疤幚怼笔钦5奶幚聿僮鳡顟B(tài)(圖I中的塊Jp J2和J3X在狀態(tài)“略過”中,不進(jìn)行水印處理,而僅返回對(duì)應(yīng)的輸入塊(圖6中的塊Jk和Jk+i以及圖7中的塊Jk_3和Jk_2)以便于維持?jǐn)?shù)據(jù)連續(xù)性。在示出通用發(fā)明性處理的流程圖的圖3中,在步驟31啟動(dòng)計(jì)時(shí)器,并且通過設(shè)置當(dāng)前音頻聲道數(shù)m以標(biāo)記為“0” (如果聲道優(yōu)先級(jí)列表從零開始,或者如果聲道優(yōu)先級(jí)列表從“I”開始,則m設(shè)為“I”)來在步驟32中選擇當(dāng)前音頻信號(hào)塊或部分的聲道優(yōu)先級(jí)列表的第一聲道。在步驟33中讀取當(dāng)前計(jì)時(shí)器值,并在步驟34中以整體的實(shí)時(shí)處理要求的角度檢查是否還存在足夠的時(shí)間以水印處理音頻聲道優(yōu)先級(jí)列表的下一個(gè)聲道。
一旦在水印處理當(dāng)前音頻信號(hào)輸入塊或部分期間,由上述無水印處理任務(wù)導(dǎo)致的處理器負(fù)載下降或增加,則不僅在步驟/階段33和34中評(píng)估允許時(shí)間周期,還評(píng)估剩余的當(dāng)前音頻信號(hào)輸入塊或部分的可用處理能力。如果當(dāng)前剩余的處理能力對(duì)水印處理是可用的,則在步驟35中水印優(yōu)先級(jí)列表的當(dāng)前音頻聲道m(xù)并且在步驟36中以“ I”遞增優(yōu)先級(jí)列表聲道數(shù)m,即,m — m+1。如果不可用,則在步驟39中不水印當(dāng)前音頻聲道m(xù)并且在步驟36中以“I”遞增聲道優(yōu)先級(jí)列表數(shù)m。步驟37檢查在聲道優(yōu)先級(jí)列表中是否存在更多剩余的聲道。如果是存在,則在步驟38中選擇聲道優(yōu)先級(jí)列表的下一個(gè)音頻聲道m(xù),讀取步驟33中的當(dāng)前計(jì)時(shí)器值并且如上所述地繼續(xù)處理。如果不存在,則當(dāng)前音頻信號(hào)塊或部分的水印處理結(jié)束并且對(duì)隨后的音頻信號(hào)塊或部分的第一優(yōu)先級(jí)列表聲道繼續(xù)處理。聲道計(jì)數(shù)器m與當(dāng)前聲道是否被水印無關(guān)地增加。這確保了不論一些聲道是否已經(jīng)處于狀態(tài)“略過”都獨(dú)立地應(yīng)用相同的修改(或類似的改進(jìn),因?yàn)樵摳倪M(jìn)可以是取決于內(nèi)容的)到一個(gè)音頻信號(hào)塊或部分的全部聲道。在圖4和圖5中描繪用于圖3的步驟35的“標(biāo)記聲道”和步驟39的“不標(biāo)記聲道”的更詳細(xì)的流程圖。在圖4中,在步驟41中檢查當(dāng)前狀態(tài)是否為“處理”。如果是,則在步驟42中進(jìn)行當(dāng)前聲道m(xù)的正常處理。如果不是,則在步驟43中進(jìn)行向處理當(dāng)前通道m(xù)的狀態(tài)“處理”的轉(zhuǎn)變,如同聯(lián)系圖1、6和7而描述的。在圖5中,在步驟51中檢查當(dāng)前狀態(tài)是否是“略過”。如果是,則在步驟52中進(jìn)行當(dāng)前聲道m(xù)的正常“略過”處理。如果不是,則在步驟53中進(jìn)行向處理當(dāng)前通道m(xù)的狀態(tài)“略過”的轉(zhuǎn)變,如同聯(lián)系圖1、6和7所描述的。在對(duì)于當(dāng)前音頻信號(hào)塊或部分的其它聲道沒有剩余水印處理能力的情況下,則如圖6所描繪的,對(duì)于剩余聲道水印處理狀態(tài)從狀態(tài)“處理”變?yōu)闋顟B(tài)“略過”。在該圖中,輸出塊Pk和Pk+1的內(nèi)容分別對(duì)應(yīng)于輸入塊Jk和Jk+1的內(nèi)容。在在當(dāng)前輸入信號(hào)塊或部分的處理期間對(duì)于當(dāng)前音頻信號(hào)塊或部分的其它聲道存在意料之外的水印處理能力(例如,由于不同的任務(wù)要求較少的處理能力)的情況下,則如圖7所描繪的,對(duì)于當(dāng)前音頻信號(hào)塊或部分的剩余聲道水印處理狀態(tài)可以從狀態(tài)“處理”變?yōu)闋顟B(tài)“略過”。在結(jié)束當(dāng)前音頻信號(hào)塊或部分的處理或檢查并且繼續(xù)處理隨后的音頻信號(hào)塊或部分的聲道優(yōu)先級(jí)列表的第一聲道的水印處理的情況下,這也是正確的。在該圖中,輸出塊Pk_3和Pk_2的內(nèi)容分別對(duì)應(yīng)于輸人塊Jk_3和Jk_2的內(nèi)容。
有利地,隨著時(shí)間推移聲道的優(yōu)先級(jí)化不需要是恒定的。例如,如果在5. I設(shè)置中僅水印 兩個(gè)聲道,從而最重要的聲道是中央聲道,左聲道和右聲道可能是同等重要的。為了使攻擊者的行為更加困難,有利的是,在這種情況下在第一時(shí)間周期標(biāo)記中央和左聲道并此后在第二時(shí)間周期標(biāo)記中央和右聲道,并重復(fù)此交替直到音頻數(shù)據(jù)流的結(jié)束。
權(quán)利要求
1.一種用于實(shí)時(shí)地頻域水印處理(CC、WT、WA、35)多聲道音頻信號(hào)的方法,其中對(duì)于水印處理所述音頻信號(hào)的當(dāng)前輸入部分的全部聲道,在任何情況下都沒有足夠的處理能力,并且其中,對(duì)于所述水印處理,對(duì)所述音頻信號(hào)的當(dāng)前輸入部分和所述音頻信號(hào)的隨后的輸入部分,以重疊/相加方式每個(gè)聲道地處理所述音頻信號(hào),所述方法包括如下步驟 a)對(duì)于所述音頻信號(hào)的所述當(dāng)前輸入部分,確定或考慮聲道優(yōu)先級(jí)列表; b)如果有足夠的處理能力可用于水印處理所述聲道優(yōu)先級(jí)列表的第一聲道(32),則水印(35)所述第一聲道的音頻內(nèi)容,其中該水印處理包括 -級(jí)聯(lián)(CC)所述音頻信號(hào)的所述當(dāng)前輸入部分的此聲道的輸入數(shù)據(jù)塊(J0, J1)和所述音頻信號(hào)的隨后的數(shù)據(jù)塊; -幅度加權(quán)、頻率變換、水印和逆頻率變換(WTtl)所述級(jí)聯(lián)的輸入數(shù)據(jù)塊; -幅度加權(quán)并相加(WA)兩個(gè)產(chǎn)生的數(shù)據(jù)塊,其中對(duì)于所述音頻信號(hào)的數(shù)據(jù)流的全部聲道的第一部分,將對(duì)應(yīng)的數(shù)據(jù)塊(Jtl)幅度加權(quán)并相加而沒有先前水印處理; 否則,不水印(39)此聲道的音頻內(nèi)容,并略過(PASSTHROUGH)對(duì)應(yīng)的數(shù)據(jù)塊; c)對(duì)所述音頻信號(hào)的所述當(dāng)前輸入部分的剰余聲道重復(fù)步驟b),并對(duì)所述音頻信號(hào)的隨后的輸入部分繼續(xù)用步驟b)和第一聲道。
2.根據(jù)權(quán)利要求I的方法, 其中,在存在從水印處理(“處理”)向無水印處理(“略過”)的切換的情況下,則在所述幅度加權(quán)和相加(WA)中,最后的數(shù)據(jù)塊是對(duì)應(yīng)的輸入數(shù)據(jù)塊,并且其中,一旦存在從無水印處理(“略過”)向水印處理(“處理”)的切換,則在所述幅度加權(quán)和相加(WA)中,第一數(shù)據(jù)塊是對(duì)應(yīng)的輸入數(shù)據(jù)塊。
3.根據(jù)權(quán)利要求I或2的方法,其中,對(duì)所述音頻信號(hào)的每個(gè)輸入部分確定所述聲道優(yōu)先級(jí)列表。
4.用于實(shí)時(shí)地頻域水印處理(CC、WT、WA、35)多聲道音頻信號(hào)的裝置,其中對(duì)于水印處理所述音頻信號(hào)的當(dāng)前輸入部分的全部聲道U),在任何情況下都沒有處理能力可用,并且其中,對(duì)于所述水印處理,對(duì)所述音頻信號(hào)的當(dāng)前輸入部分和所述音頻信號(hào)的隨后的輸入部分,以重疊/相加方式每個(gè)聲道地處理所述音頻信號(hào),所述裝置包括如下步驟 a)對(duì)于所述音頻信號(hào)的所述當(dāng)前輸入部分,確定或考慮聲道優(yōu)先級(jí)列表; b)如果有足夠的處理能力可用于水印處理所述聲道優(yōu)先級(jí)列表的第一聲道(32),則水印(35)所述第一聲道的音頻內(nèi)容,其中該水印處理包括 -級(jí)聯(lián)(CC)所述音頻信號(hào)的所述當(dāng)前輸入部分的此聲道的輸入數(shù)據(jù)塊(ふ,J1)和所述音頻信號(hào)的隨后的數(shù)據(jù)塊; -幅度加權(quán)、頻率變換、水印和逆頻率變換(WTtl)所述級(jí)聯(lián)的輸入數(shù)據(jù)塊; -幅度加權(quán)并相加(WA)兩個(gè)產(chǎn)生的數(shù)據(jù)塊,其中對(duì)于所述音頻信號(hào)的數(shù)據(jù)流的全部聲道的第一部分,將對(duì)應(yīng)的數(shù)據(jù)塊(Jtl)幅度加權(quán)并相加而沒有先前水印處理; 否則,不水印(39)此聲道的音頻內(nèi)容,并略過(“略過”)對(duì)應(yīng)的數(shù)據(jù)塊; c)對(duì)所述音頻信號(hào)的所述當(dāng)前輸入部分的剰余聲道重復(fù)步驟b),并對(duì)所述音頻信號(hào)的隨后的輸入部分繼續(xù)用步驟b)和第一聲道。
5.根據(jù)權(quán)利要求4的裝置, 其中,在存在從水印處理()向無水印處理()的切換的情況下,則在所述幅度加權(quán)和相カロ(WA)中,最后的數(shù)據(jù)塊是對(duì)應(yīng)的輸入數(shù)據(jù)塊,并且其中,一旦存在從無水印處理(“略過”)向水印處理(“處理”)的切換,則在所述幅度加權(quán)和相加(WA)中,第一數(shù)據(jù)塊是對(duì)應(yīng)的輸入數(shù)據(jù)塊。
6.根據(jù)權(quán)利要求4或5的裝置,其中,對(duì)所述音頻信號(hào)的每個(gè)輸入部分確定所述聲道優(yōu)先級(jí)列表。
7.根據(jù)權(quán)利要求I到3之一的方法處理的數(shù)字多聲道音頻信號(hào)。
8.一種其上包含或存儲(chǔ)、或記錄入權(quán)利要求7所述的多聲道音頻信號(hào)的存儲(chǔ)介質(zhì)。
全文摘要
數(shù)字音頻信號(hào)實(shí)時(shí)水印在具有有限處理能力的環(huán)境下是困難的。根據(jù)本發(fā)明,關(guān)于水印重要性將在基于數(shù)據(jù)塊的音頻多聲道信號(hào)中的聲道優(yōu)先級(jí)化,從而聲道優(yōu)先級(jí)可以為不同的輸入信號(hào)數(shù)據(jù)塊而改變。對(duì)于當(dāng)前輸入信號(hào)塊,水印最重要的聲道并確定要求的處理時(shí)間。如果此要求的處理時(shí)間短于預(yù)定的取決于應(yīng)用的閾值,則標(biāo)記次重要的聲道并且確定額外要求的處理時(shí)間等等。由于包括塊重疊/相加的音頻水印基于塊的本質(zhì)并且由于對(duì)抗塊假象的產(chǎn)生的音頻質(zhì)量的敏感度,解決若干個(gè)問題以便于引向可接受的性能和質(zhì)量。本發(fā)明最優(yōu)化一方面的水印魯棒性和安全性和另一方面的實(shí)時(shí)處理限制之間的折中。
文檔編號(hào)G10L19/018GK102956234SQ20121030251
公開日2013年3月6日 申請(qǐng)日期2012年8月23日 優(yōu)先權(quán)日2011年8月23日
發(fā)明者P.G.鮑姆, U.格里斯, M.阿諾德, 陳曉明 申請(qǐng)人:湯姆森特許公司