專利名稱：具有時(shí)間可縮放性的交錯(cuò)播送的制作方法
技術(shù)領(lǐng)域：
本發(fā)明一般涉及數(shù)據(jù)通信系統(tǒng)，尤其涉及具有時(shí)間分集的數(shù)據(jù)傳輸。
背景技術(shù)：
許多傳輸系統(tǒng)如移動(dòng)無(wú)線廣播系統(tǒng)都遭受物理信道的難題。尤其是，除了衰減和 多普勒效應(yīng)以外，信號(hào)可能完全被建筑物、樹、桿和立交橋阻擋。這種條件可能容易造成接 收器端發(fā)生一秒或更長(zhǎng)時(shí)間的信號(hào)丟失。為了解決這些問(wèn)題，移動(dòng)系統(tǒng)經(jīng)常使用時(shí)間分集技術(shù)，如交叉；長(zhǎng)塊碼如低密度 奇偶校驗(yàn)碼(LDPC)或Turbo碼；卷積碼；以及多協(xié)議封裝與前向糾錯(cuò)組合(MPE-FEC)。不 幸的是，這些系統(tǒng)一般都導(dǎo)致與時(shí)間分集成比例的延遲。對(duì)于該延遲，用戶通常會(huì)感覺(jué)到長(zhǎng) 的信道變換時(shí)間，這對(duì)于用戶是非常令人反感的。數(shù)據(jù)流如視頻數(shù)據(jù)的傳輸中經(jīng)常使用的一種時(shí)間分集技術(shù)是交錯(cuò)播送。交錯(cuò)播送 提供一種通過(guò)發(fā)送冗余次流來(lái)防止信號(hào)丟失的方法，該冗余次流相對(duì)于主流可能發(fā)生了時(shí) 間移位。這允許接收器預(yù)先緩沖次流的分組，以替代傳輸中丟失的主流分組?，F(xiàn)在有各種交錯(cuò)播送技術(shù)，它們不同之處在于次流中發(fā)送的冗余數(shù)據(jù)的類型。例 如，次流可以僅僅是以某一時(shí)間偏移交錯(cuò)的主流精確拷貝。另一種交錯(cuò)播送技術(shù)涉及與主流分開編碼的次流的傳輸。當(dāng)可縮放視頻編碼不可 得時(shí)(例如，對(duì)于不提供可縮放視頻編解碼器的規(guī)范或標(biāo)準(zhǔn))，該次流完全獨(dú)立于主流，且 只是代表相同源視頻的獨(dú)立編碼流。因?yàn)橐曨l解碼器通常必須維護(hù)狀態(tài)數(shù)據(jù)，如必定用于 對(duì)將來(lái)幀解碼的預(yù)先解碼參考幀，所以這種交錯(cuò)播送配置要求接收器為每種流都維護(hù)兩種 獨(dú)立解碼器狀態(tài)，這樣給接收器帶來(lái)額外的存儲(chǔ)器負(fù)擔(dān)。

發(fā)明內(nèi)容
我們已看到，存在時(shí)間可縮放性技術(shù)，該技術(shù)允許對(duì)視頻流進(jìn)行編碼，以致能夠以 多種幀頻解碼和顯示流。經(jīng)過(guò)時(shí)間可縮放編碼的視頻流包含可以從中預(yù)測(cè)其它幀的參考 幀，以及附加的非參考幀。一般被稱為“可隨意處理”幀的非參考幀對(duì)于視頻流其它幀的解 碼是不必要的，因而可以丟棄，導(dǎo)致較低的視頻顯示幀頻。在本發(fā)明的示例實(shí)施例中，將交錯(cuò)播送和時(shí)間可縮放性技術(shù)進(jìn)行組合，以便在發(fā) 送主編碼視頻流以外，還發(fā)送次編碼視頻流，以致次流包含主流視頻幀的子集。以某一時(shí)間 偏移(即交錯(cuò))發(fā)送主流和次流，從而允許接收器預(yù)先緩沖次流，以替代不遠(yuǎn)將來(lái)丟失的主流。
通過(guò)在主流和次流中都發(fā)送視頻參考幀，來(lái)減小丟失的編碼視頻數(shù)據(jù)的影響。如 果帶寬受限，則在主流中發(fā)送的可隨意處理的視頻幀不必在次流中發(fā)送。在時(shí)間上交錯(cuò)主 流和次流，可以減小次流數(shù)據(jù)和主流數(shù)據(jù)一起丟失的可能性。接收器可以緩沖次流，使得當(dāng) 發(fā)生主流丟失時(shí)，接收器可以求助于該次流數(shù)據(jù)。在本發(fā)明另一示例實(shí)施例中，可以在交錯(cuò)流中使用不同級(jí)別的保護(hù)。例如，可以向 傳輸更關(guān)鍵元素的次流提供高級(jí)防錯(cuò)，而向主流提供低級(jí)防錯(cuò)或者根本不提供防錯(cuò)。鑒于以上，并且通過(guò)閱讀詳細(xì)說(shuō)明，顯然其它實(shí)施例和特征也是可能的，并且在本 發(fā)明原理內(nèi)。


現(xiàn)在參考附圖舉例說(shuō)明根據(jù)本發(fā)明實(shí)施例的設(shè)備和/或方法的某些實(shí)施例，其 中圖1是其中可以實(shí)施本發(fā)明的示例交錯(cuò)播送配置的框圖；圖2示出了圖1的交錯(cuò)播送配置中的主流和次流及其復(fù)用組合的邏輯表示；圖3示出了說(shuō)明性情形，其中在圖2的復(fù)用組合中發(fā)生了數(shù)據(jù)丟失，并且根據(jù)本發(fā) 明原理在接收器上重構(gòu)數(shù)據(jù)。
具體實(shí)施例方式除本發(fā)明概念以外，附圖所示元件都是眾所周知的，將不詳細(xì)描述。例如，除本發(fā) 明概念以外，假定熟悉離散多音(DMT)傳輸(也稱為正交頻分復(fù)用(OFDM)或編碼正交頻分 復(fù)用(COFDM))，在此不描述。而且，假定熟悉電視廣播、接收器和視頻編碼，在此不詳細(xì)描 述。例如，除本發(fā)明概念以外，假定熟悉當(dāng)前和推薦的電視標(biāo)準(zhǔn)建議，如美國(guó)國(guó)家電視系統(tǒng) 委員會(huì)制式(NTSC)、逐行倒相制式(PAL)、順序傳送與存儲(chǔ)彩色電視系統(tǒng)(SECAM)和高級(jí)電 視系統(tǒng)委員會(huì)(ATSC)、中國(guó)數(shù)字電視系統(tǒng)(GB) 20600-2006和手持?jǐn)?shù)字視頻廣播(DVB-H)。 同樣，除本發(fā)明概念以外，假定熟悉其它傳輸概念，如8電平殘留邊帶(8-VSB)、正交調(diào)幅 (QAM)以及接收器部件，如射頻(RF)前端(如低噪聲模塊、調(diào)諧器、降頻變換器等)、解調(diào) 器、相關(guān)器、泄漏積分器和平方器。此外，除本發(fā)明概念以外，假定熟悉協(xié)議，如單向傳輸文 件傳遞(FLUTE)協(xié)議、異步分層編碼(ALC)協(xié)議、網(wǎng)際協(xié)議(IP)和網(wǎng)際協(xié)議封裝器(IPE)， 在此不描述。類似，除本發(fā)明概念以外，用于產(chǎn)生傳輸位流的格式化和編碼方法(如運(yùn)動(dòng)圖 象專家組(MPEG)-2系統(tǒng)標(biāo)準(zhǔn)(IS0/IEC 13818-1))是眾所周知的，在此不描述。還應(yīng)該注 意，可以利用常規(guī)編程技術(shù)來(lái)實(shí)施本發(fā)明概念，因而在此不描述。最后，圖上相同附圖標(biāo)記 代表相似元件。圖1是說(shuō)明性配置100的框圖，包括交錯(cuò)發(fā)送器103 ；復(fù)用器(MUX) 105 ；通信系 統(tǒng)107，可以包括通過(guò)各種媒介(如有線、光、無(wú)線)工作的多種部件(如連網(wǎng)、路由、開關(guān)、 傳輸部件)；以及接收器109。源101如視頻編碼器，向交錯(cuò)發(fā)送器103提供原始的數(shù)據(jù)單 元流，交錯(cuò)發(fā)送器103又將交錯(cuò)播送傳輸提供給MUX 105。MUX 105的輸出連接到通信系統(tǒng) 107支撐的帶寬受限傳輸信道，并提供給接收器109。接收器109又連接到附加部件，如用于 對(duì)接收數(shù)據(jù)解碼的視頻解碼器111。另外，視頻解碼器111可以連接到用于顯示解碼視頻數(shù) 據(jù)的顯示設(shè)備113。注意，在該實(shí)施例中，每個(gè)數(shù)據(jù)單元都可以包含用于視頻流的幀、幀的一
4部分或多幀的編碼視頻數(shù)據(jù)。另外，假定視頻流是包含參考幀和可隨意處理(disposable) 的非參考幀的時(shí)間可縮放視頻流。如上所述，參考幀是可以從中預(yù)測(cè)其它幀的幀，并且被看 作是不可隨意處理的，以提供連續(xù)視頻。非參考幀對(duì)于視頻流其它幀的解碼是不必要的，因 而可以丟棄，由此導(dǎo)致較低的視頻顯示幀頻。在2004年10月的ITU-T建議H. 264和ISO/ IEC 14496-10 (MPEG-4part 10)高級(jí)視頻編碼中，闡述了時(shí)間可縮放視頻標(biāo)準(zhǔn)。注意，雖然相對(duì)于視頻實(shí)施描述該實(shí)施例，但是本發(fā)明原理可應(yīng)用于處理多種時(shí) 間可縮放數(shù)據(jù)如音頻數(shù)據(jù)的系統(tǒng)。從發(fā)送器103到MUX 105的交錯(cuò)播送傳輸包括兩個(gè)流。一個(gè)流是主流10，對(duì)應(yīng)于 來(lái)自于源101的原始流，另一個(gè)流是次流20，可以是主流全部或一部分的拷貝。次流20相 對(duì)于主流10可以是時(shí)間移位的或交錯(cuò)的，在這種情況下，也可稱為“交錯(cuò)”流。交錯(cuò)允許接 收器109預(yù)先緩沖次流20的數(shù)據(jù)單元，使得它們可以替代在傳輸中可能丟失或損壞的主流 10中對(duì)應(yīng)數(shù)據(jù)單元。在圖1的示例配置中，MUX 105將主流10和次流20交錯(cuò)排列到一個(gè)輸出流30中， 以便通過(guò)通信系統(tǒng)107傳輸?shù)浇邮掌?09。輸出流30的帶寬將通常大于主流10和次流20 每一個(gè)的帶寬?？梢杂山诲e(cuò)發(fā)送器103和/或MUX 105來(lái)確定分配給主流和次流每一個(gè)的 輸出流30的帶寬部分。例如，如交錯(cuò)發(fā)送器103所產(chǎn)生的主流和次流可以有相同的帶寬， 且次流20包含主流10每個(gè)數(shù)據(jù)塊的拷貝。然而，MUX 105可以選擇次流20數(shù)據(jù)單元的子 集包括在輸出流30中。作為選擇，交錯(cuò)發(fā)送器103可以產(chǎn)生次流20，使得次流20包含主流 10數(shù)據(jù)單元的子集，且MUX 105將它在主流和次流上接收的數(shù)據(jù)單元傳遞給輸出流30。圖 2示出了這種情形。圖2示出了根據(jù)本發(fā)明原理按時(shí)間發(fā)送的主流10、次流20和組合輸出流30的邏 輯表示。主流數(shù)據(jù)單元用白色塊表示，而次流數(shù)據(jù)單元用陰影塊表示。次流20中的給定塊 是主流10中具有相同數(shù)字標(biāo)記的對(duì)應(yīng)塊的拷貝(例如，次塊“0”和主塊“0”代表相同的視 頻幀，且包含相同數(shù)據(jù))。在圖2的說(shuō)明性情況下，主流10包含來(lái)自于源101的原始流的全部數(shù)據(jù)單元，而 次流20只包含每隔一個(gè)的數(shù)據(jù)單元，即偶數(shù)編號(hào)單元。如上所述，某些數(shù)據(jù)單元如那些包 含參考幀的數(shù)據(jù)單元，是不可隨意處理的，而其它數(shù)據(jù)單元是可隨意處理的。在圖2的例子 中，奇數(shù)編號(hào)塊代表可隨意處理數(shù)據(jù)單元，為清楚起見，被標(biāo)記為“d”，而偶數(shù)編號(hào)塊代表不 可隨意處理數(shù)據(jù)單元。圖2演示了本發(fā)明示范性實(shí)施例的兩個(gè)重要特性。首先，次流20只包含來(lái)自主流 10的不可隨意處理幀的拷貝，而不包含可隨意處理幀的拷貝。其次，次流20在時(shí)間上早于 主流被交錯(cuò)，從而允許接收器緩沖冗余數(shù)據(jù)，以便替代丟失的主流數(shù)據(jù)單元。在圖2所示例子中，顯示兩個(gè)流之間的偏移量為4個(gè)數(shù)據(jù)單元，即次流20比主流 10早4個(gè)數(shù)據(jù)單元被傳輸。為簡(jiǎn)單起見，圖2所示的所有數(shù)據(jù)單元都具有相同的傳輸時(shí)間。 然而，實(shí)際上，編碼幀的尺寸將基本上隨幀而變，因此每幀(或者是圖2中的數(shù)據(jù)單元)的 傳輸時(shí)間也隨幀而變。實(shí)際上，交錯(cuò)偏移量典型地用時(shí)間而不是幀來(lái)表示；例如，次流幀可 以比等效的主流幀早4秒傳輸。本發(fā)明不限于任何特定的時(shí)間偏移量。對(duì)于給定實(shí)施例的 優(yōu)選時(shí)間偏移量將取決于實(shí)施例特定的細(xì)節(jié)，如接收器上可用于緩沖的存儲(chǔ)器以及錯(cuò)誤丟 失特性。另外，次流可以在時(shí)間上晚于主流被交錯(cuò)。然而，實(shí)際上，優(yōu)選地次流應(yīng)該在主流之前。假定次流能提供防止主流丟失的保護(hù)機(jī)制，在時(shí)間上比主流晚發(fā)送次流將導(dǎo)致，在數(shù) 據(jù)丟失后的某一時(shí)刻保護(hù)才起作用。初始播放時(shí)，或者一旦發(fā)生第一次數(shù)據(jù)丟失，主流就將 必須暫停，以等待交錯(cuò)流的替換數(shù)據(jù)單元到來(lái)，由此導(dǎo)致觀眾感官質(zhì)量下降。當(dāng)次流在時(shí)間 上早于主流時(shí)，如圖所示，則接收器能夠在緩沖次流以防止將來(lái)數(shù)據(jù)丟失的同時(shí)，立即開始 未受保護(hù)主流的播放。在示范性實(shí)施例中，可以向主流和次流提供防錯(cuò)(例如turbo碼、前向糾錯(cuò)等)。 可以向主流和次流，或者只向次流提供防錯(cuò)。也可以向主流和次流提供不同級(jí)別的防錯(cuò)，優(yōu) 選地向次流提供更高級(jí)的防錯(cuò)。通過(guò)只將防錯(cuò)應(yīng)用于次流，有可能減小防錯(cuò)方案的總開銷。 這也帶來(lái)以下優(yōu)點(diǎn)允許接收器立即解碼和播放未受保護(hù)的主流。因?yàn)閮?yōu)選地在主流之前 接收次流，所以在需要利用次流數(shù)據(jù)單元替代任何丟失的主流數(shù)據(jù)單元之前，應(yīng)該有足夠 的時(shí)間去校正任何次流數(shù)據(jù)單元中的錯(cuò)誤。再次參考圖2，在本發(fā)明說(shuō)明性實(shí)施例中，流30顯示出主流和次流可以組合起來(lái) 傳輸。如流30所表示的，主流10和次流20在時(shí)間上復(fù)用，以便通過(guò)單一物理信道進(jìn)行順 序傳輸。圖2示出了將主流和次流交錯(cuò)排列的一個(gè)例子，其中在發(fā)送一個(gè)次流數(shù)據(jù)單元后， 接著發(fā)送兩個(gè)主流數(shù)據(jù)單元。如從本發(fā)明說(shuō)明可以理解的，多種交叉模式及主流數(shù)據(jù)單元 與次流數(shù)據(jù)單元之比都是可能的，并且通過(guò)本發(fā)明能夠預(yù)期。注意，在圖1所示配置中，源101提供單個(gè)流，該單個(gè)流作為兩個(gè)流的交錯(cuò)播送傳 輸一部分，被發(fā)送器103重發(fā)。然而，這只是本發(fā)明原理可以應(yīng)用的多種可能配置之一。例 如，本發(fā)明也可用于以下配置源101產(chǎn)生交錯(cuò)播送傳輸(具有兩個(gè)流)，然后，該交錯(cuò)播送 傳輸被一個(gè)或多個(gè)交錯(cuò)播送收發(fā)器接收和重發(fā)。本發(fā)明可以設(shè)想源101、交錯(cuò)發(fā)送器103和 MUX 105的多種組合。而且，在某些應(yīng)用中，和如圖所示由交錯(cuò)發(fā)送器產(chǎn)生次流相反，如本發(fā)明設(shè)想的次 流可以是已經(jīng)可得的。例如，規(guī)范可以為內(nèi)容到移動(dòng)設(shè)備的傳輸定義多種檔次(profile)。 這些檔次的流，可以從用于在具有小屏幕的簡(jiǎn)單移動(dòng)電話上觀看的很低分辨率/幀頻/位 速率流，變化到用于能夠呈現(xiàn)視頻的較好移動(dòng)設(shè)備(具有較大屏幕、更強(qiáng)的解碼器等)的較 高分辨率/幀頻/位速率流。系統(tǒng)可以在同一信道上以兩種檔次同時(shí)發(fā)送給定視頻節(jié)目， 從而任一類型設(shè)備的用戶都可以接收對(duì)于他們各自設(shè)備最優(yōu)的視頻。在這種應(yīng)用中，本發(fā) 明的實(shí)施例將允許更大功率設(shè)備將較簡(jiǎn)單的流用作次流，以便為數(shù)據(jù)丟失的時(shí)段提供替代 視頻。這將要求把較簡(jiǎn)單流識(shí)別為次流，并以相對(duì)于主流的某一時(shí)間偏移量發(fā)送次流。這 種實(shí)施的優(yōu)點(diǎn)在于不需要信道上的任何附加帶寬，因?yàn)榇瘟魇且呀?jīng)存在的。現(xiàn)在參考圖3，圖3示出了如應(yīng)用于圖2示例傳輸流30的本發(fā)明原理的說(shuō)明性情 形。在圖3所示情況下，在通過(guò)通信系統(tǒng)107將流30傳送到接收器109的期間，發(fā)生了數(shù) 據(jù)丟失，因而接收器收到流30’，它是原始流30丟失了某些數(shù)據(jù)單元的型式。在這種情況 下，丟失了 6個(gè)連續(xù)數(shù)據(jù)單元4個(gè)主流單元，4、5d、6和7d ；以及兩個(gè)次流單元，8和10。對(duì)于在次流中包括了對(duì)應(yīng)拷貝的全部或某些主流數(shù)據(jù)單元，接收器109能夠利用 接收的流30’中包含的冗余次流數(shù)據(jù)單元對(duì)全部或某些主流數(shù)據(jù)單元進(jìn)行重構(gòu)。在圖3中， 序列40代表接收器109從流30’中的主流和次流數(shù)據(jù)單元重構(gòu)的數(shù)據(jù)單元序列，并被接收 器109提供給解碼器111。注意，序列40中的數(shù)據(jù)單元是按照它們的邏輯順序的。如序列 40所示，因?yàn)樵跀?shù)據(jù)丟失之前發(fā)送了次流數(shù)據(jù)單元4和6，所以這些次流數(shù)據(jù)單元被提供給解碼器111，以代替丟失的主流數(shù)據(jù)單元。而且，因?yàn)榱?0’中沒(méi)有可隨意處理數(shù)據(jù)單元5d 和7d的拷貝，所以這些數(shù)據(jù)單元不能被重構(gòu)，且丟失了。一旦處理重構(gòu)數(shù)據(jù)單元序列40，解碼器111就將解碼的視頻幀提供給顯示器113， 如序列50所示。序列50表示包含用于顯示的視頻數(shù)據(jù)幀的重構(gòu)數(shù)據(jù)單元序列，且指示幀 被顯示的時(shí)刻。如序列50所示，由于數(shù)據(jù)丟失的持續(xù)時(shí)間，使得幀頻近似降為一半，觀眾對(duì) 此通常會(huì)感覺(jué)到短時(shí)間的不流暢運(yùn)動(dòng)。假定根據(jù)定義，可隨意處理幀不用作參考幀，因而它 們的丟失也不影響流中的其它任何幀，則丟失的可隨意處理幀的視覺(jué)影響應(yīng)該是最小的， 而丟失的參考幀將影響流中的其它幀。雖然不必重構(gòu)或隱藏丟失幀，但是本發(fā)明的實(shí)施不 排除這種措施?？梢岳斫猓鲜雠渲玫男阅軐⑷Q于多種因素，包括次流中提供的冗余度以及數(shù) 據(jù)丟失事件的持續(xù)時(shí)間。例如，從重構(gòu)數(shù)據(jù)單元序列40產(chǎn)生的視頻的幀頻將取決于組合流 30中的次流20所提供的冗余度。例如，如果次流20包含主流10中所有數(shù)據(jù)單元的拷貝， 即可隨意處理和不可隨意處理的數(shù)據(jù)單元的拷貝，則只要丟失數(shù)據(jù)單元的交錯(cuò)拷貝沒(méi)有丟 失，就有可能能夠在接收器109重構(gòu)傳輸中丟失的所有數(shù)據(jù)單元。對(duì)于能夠容忍暫時(shí)降低 的幀頻的應(yīng)用，如上所述，可以在次流20中只提供不可隨意處理的數(shù)據(jù)單元。相比于周知的方法，本發(fā)明實(shí)施例有幾個(gè)優(yōu)點(diǎn)。如上所述，一種交錯(cuò)播送方法涉及 與主流分開編碼的次流的傳輸。當(dāng)可縮放視頻編碼不可得時(shí)(例如，對(duì)于不提供可縮放視 頻編解碼器的規(guī)范或標(biāo)準(zhǔn))，該次流完全獨(dú)立于主流，并且只是代表相同源視頻的分開編碼 流。典型的視頻解碼器必須維護(hù)狀態(tài)數(shù)據(jù)，如必定可用于對(duì)將來(lái)幀解碼的預(yù)先解碼參考幀， 將來(lái)幀是從這些預(yù)先解碼參考幀預(yù)測(cè)得到的。在主流和次流相互獨(dú)立的情況下，接收器將 需要為每種流都維護(hù)兩種獨(dú)立的解碼器狀態(tài)，由此給接收器帶來(lái)額外的存儲(chǔ)器負(fù)擔(dān)。假定 兩種流是相關(guān)的，即，次流是主流的子集，可以只用一個(gè)解碼器和相關(guān)狀態(tài)存儲(chǔ)器來(lái)實(shí)施上 述本發(fā)明示例配置。本發(fā)明原理可以和其它交錯(cuò)播送方法組合。例如，交錯(cuò)播送可以和空間可縮放視 頻流一起使用，以致在主流中既提供較低分辨率基層流又提供較高分辨率增強(qiáng)層流，同時(shí) 在交錯(cuò)次流中提供較低分辨率基層流。這將提供對(duì)基層的保護(hù)，同時(shí)也通過(guò)不復(fù)制增強(qiáng)層 來(lái)節(jié)省帶寬。鑒于以上，以上僅僅說(shuō)明了本發(fā)明原理，因此應(yīng)該理解，本領(lǐng)域技術(shù)人員將能夠設(shè) 計(jì)雖然未在此明確描述，但體現(xiàn)本發(fā)明原理、且在本發(fā)明精神和范圍內(nèi)的諸多替換配置。例 如，可以在受存儲(chǔ)程序控制的處理器如數(shù)字信號(hào)處理器中，實(shí)施本發(fā)明概念，該處理器執(zhí)行 用于實(shí)現(xiàn)本發(fā)明原理方法的相關(guān)軟件。此外，本發(fā)明原理適用于其它類型通信系統(tǒng)，如衛(wèi) 星、無(wú)線保真(Wi-Fi)、蜂窩網(wǎng)絡(luò)等。實(shí)際上，本發(fā)明概念也適用于固定和移動(dòng)接收器。因 此，應(yīng)該理解，可以對(duì)說(shuō)明性實(shí)施例進(jìn)行諸多修改，并且可以在不脫離本發(fā)明精神和范圍的 情況下，設(shè)計(jì)其它配置。
權(quán)利要求
1.一種處理數(shù)據(jù)單元流的方法，包括接收主流數(shù)據(jù)單元，所述主流數(shù)據(jù)單元包含可隨意處理和不可隨意處理的數(shù)據(jù)單元； 接收次流數(shù)據(jù)單元，所述次流數(shù)據(jù)單元包括所述主流數(shù)據(jù)單元中包含的所述不可隨意 處理的數(shù)據(jù)單元的拷貝；在所述主流和次流數(shù)據(jù)單元之間引入時(shí)間偏移；將所述時(shí)間偏移的主流和次流數(shù)據(jù)單元組合成組合數(shù)據(jù)單元流；以及發(fā)送所述組合數(shù)據(jù)單元流。
2.根據(jù)權(quán)利要求1所述的方法，包括 接收所述組合數(shù)據(jù)單元流的一部分；以及從所述接收的組合數(shù)據(jù)單元流部分，重構(gòu)所述主流數(shù)據(jù)單元的一部分，其中所述重構(gòu) 的主流數(shù)據(jù)單元部分包括，所述主流數(shù)據(jù)單元的所述不可隨意處理的數(shù)據(jù)單元，以及所述 主流數(shù)據(jù)單元的所述可隨意處理單元一部分。
3.根據(jù)權(quán)利要求1所述的方法，其中所述數(shù)據(jù)單元包含時(shí)間可縮放編碼視頻數(shù)據(jù)，所 述不可隨意處理的數(shù)據(jù)單元包含代表參考幀的數(shù)據(jù)。
4.根據(jù)權(quán)利要求1所述的方法，其中所述組合步驟包括，將所述時(shí)間偏移的主流和次 流數(shù)據(jù)單元進(jìn)行時(shí)間復(fù)用。
5.根據(jù)權(quán)利要求1所述的方法，其中所述主流和次流數(shù)據(jù)單元之間的所述時(shí)間偏移使 得所述次流在所述主流之前。
6.根據(jù)權(quán)利要求1所述的方法，其中所述數(shù)據(jù)單元包含包含視頻和音頻數(shù)據(jù)至少之 一
7.根據(jù)權(quán)利要求1所述的方法，包括向所述次流數(shù)據(jù)單元提供防錯(cuò)。
8.—種處理數(shù)據(jù)單元流的方法，包括接收組合數(shù)據(jù)單元流的一部分，所述組合數(shù)據(jù)單元流包含 主流數(shù)據(jù)單元，所述主流數(shù)據(jù)單元包含可隨意處理和不可隨意處理單元；以及 次流數(shù)據(jù)單元，所述次流數(shù)據(jù)單元包含所述主流數(shù)據(jù)單元中包括的所述不可隨意處理 數(shù)據(jù)單元的拷貝，其中所述主流和次流數(shù)據(jù)單元之間存在時(shí)間偏移；以及從所述接收的組合數(shù)據(jù)單元流部分，重構(gòu)所述主流數(shù)據(jù)單元的一部分，其中所述重構(gòu) 的主流數(shù)據(jù)單元部分包括，所述主流數(shù)據(jù)單元的所述不可隨意處理數(shù)據(jù)單元，以及所述主 流數(shù)據(jù)單元的所述可隨意處理數(shù)據(jù)單元一部分。
9.根據(jù)權(quán)利要求8所述的方法，其中所述數(shù)據(jù)單元包含時(shí)間可縮放編碼的視頻數(shù)據(jù)， 所述不可隨意處理數(shù)據(jù)單元包含代表參考幀的數(shù)據(jù)。
10.根據(jù)權(quán)利要求8所述的方法，其中所述時(shí)間偏移的主流和次流數(shù)據(jù)單元被時(shí)間復(fù) 用為所述組合數(shù)據(jù)單元流。
11.根據(jù)權(quán)利要求8所述的方法，其中所述主流和次流數(shù)據(jù)單元之間的所述時(shí)間偏移 使得所述次流在所述主流之前。
12.根據(jù)權(quán)利要求8所述的方法，其中所述數(shù)據(jù)單元包含視頻和音頻數(shù)據(jù)至少之一。
13.根據(jù)權(quán)利要求8所述的方法，其中向所述次流數(shù)據(jù)單元提供防錯(cuò)，所述方法包括糾 正所述接收的組合數(shù)據(jù)單元流部分中的所述次流數(shù)據(jù)單元中的錯(cuò)誤。
全文摘要
在數(shù)據(jù)流如編碼視頻的傳輸中，以某一相對(duì)時(shí)間偏移(即交錯(cuò))發(fā)送主流和次流的交錯(cuò)播送技術(shù)，允許接收器預(yù)先緩沖次流的幀，以替換可能在傳輸中丟失的主流幀。在說(shuō)明性實(shí)施中，執(zhí)行交錯(cuò)播送，其中次流包含主流中傳輸?shù)木幋a視頻幀的子集。主流包含對(duì)于正確解碼視頻數(shù)據(jù)必不可少的參考幀，以及不是必需的可隨意處理幀。然而，次流包含參考幀的拷貝，并且可以包含某些可隨意處理幀的拷貝，或者根本不包括可隨意處理幀的拷貝。當(dāng)主流和次流的交錯(cuò)排列流的幀丟失時(shí)，這種配置將允許接收器以暫時(shí)降低的幀頻重構(gòu)連續(xù)的視頻流。
文檔編號(hào)H04N7/24GK101999235SQ200980112772
公開日2011年3月30日 申請(qǐng)日期2009年4月7日 優(yōu)先權(quán)日2008年4月11日
發(fā)明者戴維·安東尼·坎帕納, 戴維·布賴恩·安德森, 阿倫·杰伊·斯坦 申請(qǐng)人:湯姆遜許可公司