專利名稱：用于3d tv的立體視圖的同播的制作方法
用于3D TV的立體視圖的同播優(yōu)先權(quán)的要求本申請要求在2009年7月15日提交的、題目為"Simulcast of Stereoviews For 3D TV(用于3D TV的立體視圖的同播)”的美國臨時(shí)專利申請No. 61/225，792的優(yōu)先權(quán)的權(quán)益，其公開通過引用被整體合并在此。
背景技術(shù)：
通過捕捉兩個(gè)視圖并且一個(gè)用于左眼及另一個(gè)用于右眼，提供了三維(3D)TV的深度感覺。這兩個(gè)視圖被壓縮和通過各種網(wǎng)絡(luò)發(fā)送或被存儲在存儲介質(zhì)上。解碼器解碼該兩個(gè)視圖，并且向3D TV發(fā)送解碼的視頻以顯示。已知該兩個(gè)視圖或者被合并成單個(gè)視頻幀或被保持分離。當(dāng)被保持分離時(shí)，已知使用各種方法來壓縮和分發(fā)該兩個(gè)視圖。這些方法中的兩種是多視圖編碼(MVC)方法和同播方法。在MVC方法中，壓縮該兩個(gè)視圖，使得利用在該兩個(gè)視圖之間的相關(guān)來提高編碼效率。在同播方法中，已知該兩個(gè)視圖作為兩個(gè)獨(dú)立的視頻流被壓縮和分發(fā)。MPEG標(biāo)準(zhǔn)(諸如高級視頻編碼(AVC)或H. ^4MPEG_4和MPEG-2系統(tǒng))提供了用于表示和壓縮多于一個(gè)視圖并且以各種方式傳送這個(gè)壓縮的數(shù)據(jù)的方法和句法。然而，MPEG 標(biāo)準(zhǔn)的當(dāng)前版本沒有指定如何同播兩個(gè)視圖，使得可以適當(dāng)?shù)亟獯a和組合該兩個(gè)視圖以提供3D顯示。結(jié)果，當(dāng)前可能不能使用用于視頻系統(tǒng)和其他類型的系統(tǒng)的MPEG標(biāo)準(zhǔn)來進(jìn)行同播。而且，大量服務(wù)提供商和制造商遵循的許多廣播中心標(biāo)準(zhǔn)(即，有線電信工程師協(xié)會(SCTE)和高級電視系統(tǒng)委員會(ATSC))不允許在同一節(jié)目或頻道內(nèi)發(fā)送利用同一編碼方法壓縮的兩個(gè)視頻分量(即，在節(jié)目圖表中不允許具有同一“流類型”的兩個(gè)視頻分量)。這種限制排除了在同一節(jié)目中使用同一壓縮標(biāo)準(zhǔn)來同播與兩眼視圖對應(yīng)的兩個(gè)視頻流。例如，該限制排除了在同一節(jié)目中同播兩個(gè)獨(dú)立的MPEG-2或MPEG-4流(S卩，對于3D TV而言，一個(gè)用于左眼，一個(gè)用于右眼)。在獨(dú)立的節(jié)目中發(fā)送該兩個(gè)視圖可以是可能的， 但是增加了需要另外的調(diào)諧器和在兩個(gè)節(jié)目之間的時(shí)基同步的復(fù)雜性。而且，在MPEG中和在業(yè)內(nèi)所討論的許多當(dāng)前建議中，使用同一編碼標(biāo)準(zhǔn)來壓縮兩眼視圖。因?yàn)榇嬖趦蓚€(gè)支配的編碼標(biāo)準(zhǔn)MPEG-2和MPEG-4，所以這產(chǎn)生了對于在具有MPEG-2 和MPEG-4解碼器的混和的數(shù)字TV系統(tǒng)中的同播方法的向后兼容問題。例如，如果使用 MPEG-4標(biāo)準(zhǔn)壓縮該兩個(gè)視圖，則MPEG-2解碼器不能解碼任何一個(gè)視圖。

發(fā)明內(nèi)容
根據(jù)一個(gè)實(shí)施例，一種三維(3D)視頻編碼器包括第一編碼器、第二編碼器和復(fù)用器。所述第一編碼器被配置為編碼基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流。所述第二編碼器被配置為編碼非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流。所述復(fù)用器被配置為復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流，以形成傳送流。所述傳送流可用于被處理以使用所述基本和非基本視圖來渲染3D視頻。根據(jù)另一個(gè)實(shí)施例，一種3D視頻解碼器包括輸入模塊、解碼模塊和3D組合模塊。 所述輸入模塊被配置為接收傳送流。所述傳送流包括在所述傳送流中的同一廣播節(jié)目中包括的與所述視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流。所述解碼模塊被配置為解碼所述傳送流以分別從與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流形成基本和非基本視圖。所述3D組合模塊被配置為使用所述基本和非基本視圖來渲染3D視頻。根據(jù)另一個(gè)實(shí)施例，公開了一種編碼傳送流的方法。所述方法包括接收視頻內(nèi)容。 其后，編碼基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流。編碼非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流。與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流被復(fù)用以形成傳送流。所述傳送流可用于被處理以使用所述基本和非基本視圖來渲染3D視頻。根據(jù)另一個(gè)實(shí)施例，公開了一種將傳送流渲染為3D視頻的方法。所述方法包括 接收所述傳送流，所述傳送流包括在所述傳送流中的同一廣播節(jié)目中包括的與所述視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流。然后，解碼所述傳送流以分別從與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流形成基本和非基本視圖。其后，使用所述基本和非基本視圖來渲染3D視頻。在另一個(gè)實(shí)施例中，一種其上嵌入了一個(gè)或多個(gè)計(jì)算機(jī)程序的計(jì)算機(jī)可讀存儲介質(zhì)實(shí)現(xiàn)了上面公開的將傳送流渲染為3D視頻的方法。本發(fā)明的實(shí)施例包括在用于3D TV分發(fā)系統(tǒng)的同一節(jié)目中同播獨(dú)立壓縮的視頻流。該壓縮的視頻流可以具有不同的標(biāo)準(zhǔn)，諸如MPEG 2和MPEG 4，以允許向后兼容。在另一個(gè)實(shí)施例中，所述壓縮的視頻流可以具有諸如都是MPEG 4的相同標(biāo)準(zhǔn)，以在具有兼容的解碼器的系統(tǒng)中提供最高分辨率和質(zhì)量的3D圖像。而且，在一個(gè)實(shí)施例中，通過作為不同類型發(fā)送所述獨(dú)立壓縮的視頻流來在同一節(jié)目中同播所述流。通過在同一節(jié)目而不是在兩個(gè)不同的節(jié)目中發(fā)送流，在流之間的同步更容易生成3D視頻。


通過下面參考附圖的描述，本發(fā)明的特征將對于本領(lǐng)域內(nèi)的技術(shù)人員變得顯而易見，在附圖中圖1圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的網(wǎng)絡(luò)架構(gòu)；圖2圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的、復(fù)用與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流以形成傳送流的功能框圖；圖3圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的3D視頻解碼器的簡化框圖；圖4圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的編碼傳送流的方法的流程圖；圖5圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的、將傳送流渲染成3D視頻的方法的流程圖；圖6圖示根據(jù)本發(fā)明的一個(gè)實(shí)施例的將傳送流渲染成3D視頻的方法的流程圖；以及圖7示出了根據(jù)本發(fā)明的一個(gè)實(shí)施例的、可以在3D視頻解碼器中使用的計(jì)算機(jī)系統(tǒng)的框圖。
具體實(shí)施例方式為了簡單和說明的目的，通過主要參考本發(fā)明的示例性實(shí)施例來描述本發(fā)明。在下面的描述中，闡述了多個(gè)特定細(xì)節(jié)以提供對本發(fā)明的徹底理解。然而，對于本領(lǐng)域內(nèi)的普通技術(shù)人員顯然的是，可以實(shí)踐本發(fā)明而不限于這些特定細(xì)節(jié)。在其他情況下，未詳細(xì)描述公知的方法和結(jié)構(gòu)，以避免不必要地模糊本發(fā)明。圖1圖示根據(jù)實(shí)施例的、其中可以使用3D視頻解碼器130的系統(tǒng)的網(wǎng)絡(luò)架構(gòu)100。 如圖ι中所示，網(wǎng)絡(luò)架構(gòu)100被圖示為有線電視(CATV)網(wǎng)絡(luò)架構(gòu)，包括線纜頭端單元110 和線纜網(wǎng)絡(luò)111。多個(gè)數(shù)據(jù)源101、102、103可以通信地耦接到線纜頭端單元110，多個(gè)數(shù)據(jù)源101、102、103包括但是不限于多個(gè)服務(wù)器101、因特網(wǎng)102、無線電信號或經(jīng)由內(nèi)容提供商103接收的電視信號。線纜頭端單元110也通過線纜網(wǎng)絡(luò)111通信地耦接到一個(gè)或多個(gè)訂戶150a-n。應(yīng)當(dāng)理解，在圖1中描述的網(wǎng)絡(luò)架構(gòu)100可以包括另外的組件，并且在不偏離網(wǎng)絡(luò)架構(gòu)100的范圍的情況下，可以去除和/或修改在此所述的組件中的一些。線纜頭端110被配置為輸出傳送流131。傳送流131可以使用衛(wèi)星傳輸、利用例如固定光纖或同軸線纜的因特網(wǎng)或其他網(wǎng)絡(luò)被輸出到機(jī)頂盒(STB) 120a-n。傳送流131被配置為對可以被STB 120a-n使用的3D視頻解碼器和2D解碼器121的混合的跨標(biāo)準(zhǔn)兼容性。 訂戶150a-n中的每一個(gè)可以在STB 120a_n接收傳送流131。STB 120a_n是使得TV能夠接收數(shù)字電視(DTV)廣播的裝置。在一個(gè)實(shí)施例中，STB 120a-n包括任何裝置，而不僅是可以執(zhí)行在此所述的STB 120a-n的功能的傳統(tǒng)STB。STB 120a-n可以配備具有相對于2D解碼器121所述的2D能力或3D能力的解碼器。STB 120a-n可以連接到2D TV 123或支持3D的TV 122。為了接收和顯示3D視頻，具有3D能力的STB可以連接到支持3D的TV 122。應(yīng)當(dāng)理解，3D視頻解碼器130和其所位于的STB 120c可以用在其他網(wǎng)絡(luò)中，并且為了簡單和說明的目的示出了線纜網(wǎng)絡(luò)架構(gòu)100。3D視頻解碼器130可以用在其他架構(gòu)中。圖2圖示3D視頻編碼器200的功能框圖。如圖2中所示，3D視頻編碼器200包括第一編碼器202、第二編碼器204、描述符處理器208和復(fù)用器206。應(yīng)當(dāng)理解，在圖2中描述的3D視頻編碼器200可以包括另外的組件，并且在不偏離3D視頻編碼器200的范圍的情況下，可以去除和/或修改在此所述的組件中的一些。第一編碼器202被配置為壓縮基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流13加。基本視圖是用于3D視頻的眼睛視圖，其可以被用作在二維QD)系統(tǒng)中的全視圖。例如，基本視圖可以包括在3D視頻系統(tǒng)中的左眼視圖和在2D視頻系統(tǒng)中的全視圖?？梢岳鐝膹V播節(jié)目、因特網(wǎng)協(xié)議TV(IPTV)、切換視頻(STV)、視頻點(diǎn)播(VOD)和其他視頻源接收視頻內(nèi)容。第二編碼器被配置為壓縮非基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流132b。非基本視圖與基本視圖一起使用以渲染3D視頻，如下所述， 并且可以被2D系統(tǒng)丟棄。與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流不參考其他分量被壓縮，例如，與其中相對于彼此編碼分量的MVC編碼的視頻分量相反。視頻壓縮的示例可以包括傳統(tǒng)的MPEG標(biāo)準(zhǔn)。在此使用的“MPEG”指的是由運(yùn)動圖像專家組定義的用于編碼和解碼傳送流的一組標(biāo)準(zhǔn)。MPEG包括用于傳送流的幾種格式，諸如MPEG-2和 MPEG-4 部分 10/Η. 264ο描述符處理器208被配置為向第一和第二獨(dú)立壓縮的視頻流產(chǎn)生和增加相關(guān)聯(lián)的描述符209。描述符處理器208可以分別從第一編碼器202和第二編碼器204接收用于描述第一和第二獨(dú)立壓縮的視頻流的信息，并且使用這個(gè)信息來生成描述符209。描述符209被配置為允許接收傳送流131的解碼器從解碼的基本和非基本視圖解碼(包括對視頻分辨率的任何調(diào)整)和渲染3D視頻，并且被包括在第一和第二獨(dú)立壓縮的視頻流兩者中。復(fù)用器206被配置為從第一編碼器202和第二編碼器204接收與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流13h_b。復(fù)用器206其后復(fù)用第一和第二獨(dú)立壓縮的視頻流以及相關(guān)聯(lián)的描述符209，以形成傳送流131。傳送流131是包括第一和第二獨(dú)立壓縮的視頻流13 +的視頻流。獨(dú)立壓縮的視頻流可以被包括在傳送流131中的同一節(jié)目中。同一節(jié)目可以例如對應(yīng)于在廣播中的單個(gè)頻道。傳送流131可以包括因特網(wǎng)協(xié)議(IP)分組或被配置為發(fā)送傳送流131的任何分組化方案。例如，傳送流131可以包括MPEG流、IP分組或用于從源向終端用戶傳送3D視頻的任何適當(dāng)?shù)慕橘|(zhì)。注意，以第一壓縮格式的基本視圖(例如，用于視頻分量132a)是可以被2D解碼器接收和解碼的全分辨率2D兼容流，該2D解碼器例如是接收同一傳送流131的在圖1中所示的2D解碼器121。非基本視圖可以被例如傳統(tǒng)2D解碼器的2D解碼器121丟棄。因此，可以使用傳送流131來在具有帶有傳統(tǒng)2D解碼器的STB和帶有3D解碼器的STB的混合的網(wǎng)絡(luò)架構(gòu)中提供向后兼容，該網(wǎng)絡(luò)架構(gòu)例如是具有傳統(tǒng)解碼器并且同時(shí)利用STB 120c 來允許3D能力的網(wǎng)絡(luò)架構(gòu)100。根據(jù)一個(gè)實(shí)施例，以例如MPEG-2的第一壓縮格式來配置第一獨(dú)立壓縮的視頻流 132a。以例如MPEG-4的與第一壓縮格式不同的第二壓縮格式來配置第二獨(dú)立壓縮的視頻流132b。當(dāng)使用不同的編碼標(biāo)準(zhǔn)(例如，MPEG-2和MPEG-4)來壓縮兩個(gè)視圖時(shí)，廣播中心限制允許在同一節(jié)目內(nèi)的具有不同的流類型值的兩個(gè)視頻分量(即，可以使用用于MPEG-2 視頻(0x02)和MPEG-4 (OxlB)的現(xiàn)有流類型值)。根據(jù)另一個(gè)實(shí)施例，以例如都是MPEG-2或都是MPEG-4的共同壓縮格式來配置第一和第二獨(dú)立壓縮的視頻流13h-b。第二獨(dú)立壓縮的視頻流132b可以在比第一獨(dú)立壓縮的視頻流13 低的分辨率。在用于傳送流131的節(jié)目圖表中，第二獨(dú)立壓縮的視頻流132b 被分配與第一獨(dú)立壓縮的視頻流13 不同的新的流類型。節(jié)目圖表用于描述包括與節(jié)目相關(guān)聯(lián)的基本流的每一個(gè)單個(gè)節(jié)目?？梢栽诠?jié)目圖表中指定流類型。用于非基本視圖的新的流類型可以由例如MPEG-2的傳送系統(tǒng)分配。由MPEG-2系統(tǒng)分配的新的流類型可以等于用于MPEG-4的0x21和等于用于MPEG-2的0x22。替代地，可以使用在MPEG-2系統(tǒng)(國際標(biāo)準(zhǔn)化組織(ISO) 13818-1)流類型表中的例如下一個(gè)可用“保留”流類型值的下一個(gè)可用流類型來確定新的流類型。如果將單獨(dú)地壓縮的兩個(gè)視圖作為兩種不同的流類型發(fā)送，則可以將單獨(dú)地壓縮的兩個(gè)視圖作為在傳送流131中的同一廣播節(jié)目的一部分發(fā)送(使用諸如MPEG-4的同一壓縮標(biāo)準(zhǔn))。傳送流131也包括描述符209，描述符209提供有助于將兩個(gè)獨(dú)立解碼的圖像組合和渲染到適當(dāng)?shù)娘@示上的信息。描述符209提供有助于將來自基本和非基本視圖的兩個(gè)獨(dú)立解碼的圖像組合和渲染為要在支持3D的TV 122上顯示的3D圖像的信息。描述符 209可以指定獨(dú)立壓縮的視頻流用于特定的視圖。因此，即使可以保留用于視頻流的流類型或某個(gè)其他流類型，例如在上面的圖1中的3D解碼器130的解碼器可以從描述符209確定該流要與用于另一個(gè)視圖的另一個(gè)流組合。描述符209也可以包括視圖的標(biāo)識(例如，左或右)、在視圖分辨率不同的情況下的上采樣規(guī)則、用于組合視圖的信息(例如，場交織或幀交織)和另外的顯示相關(guān)的元素。根據(jù)一個(gè)實(shí)施例，描述符209可以被配置為提供關(guān)于單個(gè)流的使用、組合和渲染在同一視頻序列中的兩個(gè)場或兩個(gè)幀和在傳送流131是符合MPEG-4的流的情況下的另外的顯示相關(guān)元素的信息。與用于承載基本和非基本視圖的兩個(gè)流相反，使用單個(gè)流。根據(jù)一個(gè)實(shí)施例，在系統(tǒng)級的描述符209中提供的信息包括3D渲染信息描述符。 3D渲染信息描述符包括描述符標(biāo)簽、描述符長度和用于渲染在3D視頻中的每一個(gè)畫面的指令。以表格形式的3D渲染信息描述符的示例如下表1-3D渲染信息描述符的示例
權(quán)利要求
1.一種三維(3D)視頻編碼器，包括第一編碼器，被配置為編碼基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流；第二編碼器，被配置為編碼非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流；以及復(fù)用器，被配置為復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流以形成傳送流，其中，所述傳送流用于被處理以使用所述基本和非基本視圖來渲染3D視頻。
2.根據(jù)權(quán)利要求1所述的3D視頻編碼器，進(jìn)一步包括描述符處理器，被配置為生成與所述第一和第二獨(dú)立壓縮的視頻流相關(guān)聯(lián)的描述符， 其中，所述描述符包含用于組合所述基本和非基本視圖以形成所述3D視頻的信息，并且其中，所述復(fù)用器被配置為將所述描述符包括在所述傳送流中。
3.根據(jù)權(quán)利要求2所述的3D視頻編碼器，其中，與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流在共同壓縮格式下被編碼，并且被分配不同的流類型，并且其中，所述共同壓縮格式是MPEG-4和MPEG-2格式中的一個(gè)，并且其中，所述描述符包含用于渲染在共同視頻序列中的至少兩個(gè)場的信息，其中，從所述第一和第二獨(dú)立壓縮的視頻流兩者渲染所述至少兩個(gè)場。
4.根據(jù)權(quán)利要求2所述的3D視頻編碼器，其中，在所述描述符中包含的所述信息包括 所述基本和非基本視圖的方位；以及可應(yīng)用來使得所述基本視圖的分辨率等于所述非基本視圖的分辨率的上采樣規(guī)則。
5.根據(jù)權(quán)利要求2所述的3D視頻編碼器，其中，所述第一獨(dú)立壓縮的視頻流用于被2D 解碼器處理以形成全分辨率2D兼容流，并且其中，所述2D解碼器用于丟棄所述第二壓縮的視頻流。
6.根據(jù)權(quán)利要求2所述的3D視頻編碼器，其中，所述傳送流包括補(bǔ)充增強(qiáng)信息(SEI) 消息，所述補(bǔ)充增強(qiáng)信息(SEI)消息提供在畫面級或片級的信息，其中，值表示下述中的一個(gè)或多個(gè)畫面大小，其中，第一預(yù)定值指示在所述非基本視圖中的畫面大小與在所述基本視圖中的畫面大小相同； 基本視圖畫面大??； 樣本長寬比(SAR)；Lh，其中，Lh是在水平方向上的重新采樣多相濾波器中的腿的數(shù)量，并且其中， “ 0，，值指示不要求水平重新采樣， “ 1，，值指示要重復(fù)水平線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lh-I、j = 0 至N-I被設(shè)置為的值，其中，N是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量；以及Lv，其中，Lv是在垂直方向上的所述重新采樣多相濾波器中的腿的數(shù)量，并且其中 “ 0，，值指示不要求垂直重新采樣， “ 1，，值指示要重復(fù)垂直線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lv-I、j = 0 至M-I被設(shè)置為的值，其中，M是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量。
7.根據(jù)權(quán)利要求2所述的3D視頻編碼器，其中，所述傳送流包括用戶數(shù)據(jù)元素，所述用戶數(shù)據(jù)元素提供在畫面級的信息，其中，值表示下述中的一個(gè)或多個(gè)用戶數(shù)據(jù)類型代碼，被設(shè)置為由注冊描述符信號通知的4字節(jié)值； 長度數(shù)據(jù)；畫面大小，其中，值“0”指示所述畫面大小對于所述基本和非基本視圖相同； 基本視圖畫面大小； 樣本長寬比(SAR)；Lh，其中，Lh是在水平方向上的重新采樣多相濾波器中的腿的數(shù)量，并且其中， “ 0，，值指示不要求水平重新采樣， “ 1，，值指示要重復(fù)水平線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lh-I、j = 0 至N-I被設(shè)置為的值，其中，N是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量；以及Lv，其中，Lv是在垂直方向上的所述重新采樣多相濾波器中的腿的數(shù)量，并且其中 “ 0，，值指示不要求垂直重新采樣， “ 1，，值指示要重復(fù)垂直線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lv-I、j = 0 至M-I被設(shè)置為的值，其中，M是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量。
8.一種3D視頻解碼器，包括輸入模塊，被配置為接收傳送流，所述傳送流包括與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流；解碼模塊，被配置為解碼所述傳送流以分別從所述第一和第二獨(dú)立壓縮的視頻流形成基本和非基本視圖；以及3D組合模塊，被配置為使用所述基本和非基本視圖來渲染3D視頻。
9 根據(jù)權(quán)利要求8所述的3D視頻解碼器，其中，所述傳送流包括描述符，所述描述符提供組合所述基本和非基本視圖以形成所述3D視頻的信息；并且與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流被以共同壓縮格式獨(dú)立地編碼，并且被分配不同的流類型。
10.根據(jù)權(quán)利要求8所述的3D視頻解碼器，所述傳送流包括描述符，所述描述符提供組合所述基本和非基本視圖以形成所述3D視頻的信息；以及與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流被分別以彼此不同的第一和第二壓縮格式編碼。
11.一種接收器，包括處理器，被配置為接收包括與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流的傳送流，其中，所述傳送流包括描述符，所述描述符用于被所述處理器操作來渲染3D視頻，所述描述符具有句法，所述句法包括描述符標(biāo)簽，用于標(biāo)識所述描述符； 描述符長度；以及用于渲染所述3D視頻的指令，所述指令包括如果兩個(gè)視頻在所述傳送流中，則確定在所述傳送流中是否接收到場畫面，并且如果接收到場畫面，則確定是否存在場奇偶校驗(yàn)，并且如果存在場奇偶校驗(yàn)，則使用在構(gòu)成上為第一個(gè)的頂部場，如果未接收到場畫面，則使用幀順序并且使用特定于顯示的信息；并且如果兩個(gè)視圖不在所述傳送流中，則水平地上采樣，垂直地上采樣，使用場或幀交織， 并且使用特定于顯示的信息來用于在所述傳送流中的左眼視圖或右眼視圖。
12.—種編碼傳送流的方法，所述方法包括 接收視頻內(nèi)容；編碼基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流； 編碼非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流；以及復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流以形成傳送流，其中，所述傳送流用于被處理以使用所述基本和非基本視圖來渲染3D視頻。
13.根據(jù)權(quán)利要求12所述的方法，進(jìn)一步包括生成描述符，其中，所述描述符包含用于組合所述基本和非基本視圖以形成所述3D視頻的信息；以及其中，復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流以形成所述傳送流包括在所述傳送流中包括描述符，以包含用于組合所述基本和非基本視圖以形成所述3D視頻的信息。
14.根據(jù)權(quán)利要求13所述的方法，其中，編碼所述基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一獨(dú)立壓縮的視頻流以及編碼所述非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的所述第二獨(dú)立壓縮的視頻流進(jìn)一步包括以共同壓縮格式分別編碼與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流，并且向所述第一和第二獨(dú)立壓縮的視頻流分配不同的流類型。
15.根據(jù)權(quán)利要求13所述的方法，其中，編碼所述基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一獨(dú)立壓縮的視頻流以及編碼所述非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的所述第二獨(dú)立壓縮的視頻流進(jìn)一步包括分別以彼此不同的第一和第二壓縮格式來編碼與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流。
16.根據(jù)權(quán)利要求13所述的方法，其中在所述傳送流中包括所述描述符進(jìn)一步包括 包括SEI消息，所述SEI消息提供在畫面級或片級的用戶數(shù)據(jù)信息，其中，值表示畫面大小，其中，第一預(yù)定值指示在所述非基本視圖中的畫面大小與在所述基本視圖中的畫面大小相同； 基本視圖畫面大??； 樣本長寬比(SAR)；Lh，其中，Lh是在水平方向上的重新采樣多相濾波器中的腿的數(shù)量，并且其中， “ 0，，值指示不要求水平重新采樣， “ 1，，值指示要重復(fù)水平線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lh-I、j = 0 至N-I被設(shè)置為的值，其中，N是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量；以及Lv，其中，Lv是在垂直方向上的所述重新采樣多相濾波器中的腿的數(shù)量，并且其中 “ 0，，值指示不要求垂直重新采樣，“ 1，，值指示要重復(fù)垂直線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lv-I、j = 0 至M-I被設(shè)置為的值，其中，M是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量。
17.根據(jù)權(quán)利要求13所述的方法，其中，在所述傳送流中包括所述描述符進(jìn)一步包括 包括用戶數(shù)據(jù)元素，所述用戶數(shù)據(jù)元素提供在畫面級的信息，其中，值表示下述中的一個(gè)或多個(gè)用戶數(shù)據(jù)類型代碼，被設(shè)置為由注冊描述符信號通知的4字節(jié)值； 長度數(shù)據(jù)；畫面大小，其中，值“0”指示所述畫面大小對于所述基本和非基本視圖相同； 基本視圖畫面大小； 樣本長寬比(SAR)；Lh，其中，Lh是在水平方向上的重新采樣多相濾波器中的腿的數(shù)量，并且其中， “ 0，，值指示不要求水平重新采樣， “ 1，，值指示要重復(fù)水平線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lh-I、j = 0 至N-I被設(shè)置為的值，其中，N是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量；以及Lv，其中，Lv是在垂直方向上的所述重新采樣多相濾波器中的腿的數(shù)量，并且其中 “ 0，，值指示不要求垂直重新采樣， “ 1，，值指示要重復(fù)垂直線以用于上采樣，大于或等于2的值指示重新采樣多相濾波器的系數(shù)(i，j)對于i = 0至Lv-I、j = 0 至M-I被設(shè)置為的值，其中，M是在所述多相腿的每一個(gè)中的系數(shù)的數(shù)量。
18.根據(jù)權(quán)利要求13所述的方法，其中，復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流以形成所述傳送流進(jìn)一步包括在所述傳送流中包括描述符，以提供用于組合所述基本和非基本視圖以形成所述3D 視頻的信息；以及其中，以彼此不同的第一和第二壓縮格式來分別編碼與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流。
19.一種將傳送流渲染為3D視頻的方法，所述方法包括接收所述傳送流，所述傳送流包括與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流；解碼所述傳送流以形成分別從與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流形成的基本和非基本視圖；以及使用所述基本和非基本視圖來渲染3D視頻。
20.根據(jù)權(quán)利要求19所述的方法，其中，接收所述傳送流進(jìn)一步包括接收在所述傳送流中的描述符，以提供用于組合所述基本和非基本視圖以形成所述3D 視頻的信息；以及接收以共同壓縮格式分別編碼的與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流，與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流被分配不同的流類型。
21.根據(jù)權(quán)利要求19所述的方法，其中，接收所述傳送流進(jìn)一步包括接收在所述傳送流中的描述符，以提供用于組合所述基本和非基本視圖以形成所述3D 視頻的信息；以及接收以彼此不同的第一和第二壓縮格式分別編碼的與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流。
22.—種計(jì)算機(jī)可讀存儲介質(zhì)，存儲至少一個(gè)計(jì)算機(jī)程序，所述至少一個(gè)計(jì)算機(jī)程序當(dāng)被執(zhí)行時(shí)執(zhí)行一種將傳送流渲染為3D視頻的方法，所述方法包括接收所述傳送流，所述傳送流包括在所述傳送流中的同一廣播節(jié)目中包括的、與視頻內(nèi)容相關(guān)聯(lián)的第一和第二獨(dú)立壓縮的視頻流；解碼所述傳送流以形成分別從與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流形成的基本和非基本視圖；以及使用所述基本和非基本視圖來渲染3D視頻。
23.一種計(jì)算機(jī)可讀存儲介質(zhì)，存儲至少一個(gè)計(jì)算機(jī)程序，所述至少一個(gè)計(jì)算機(jī)程序當(dāng)被執(zhí)行時(shí)執(zhí)行一種編碼傳送流的方法，所述方法包括編碼基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流；編碼非基本視圖以形成與所述視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流；以及復(fù)用與所述視頻內(nèi)容相關(guān)聯(lián)的所述第一和第二獨(dú)立壓縮的視頻流以形成傳送流，其中，所述傳送流用于被處理以使用所述基本和非基本視圖來渲染3D視頻。
全文摘要
一種三維(3D)視頻編碼器包括第一編碼器、第二編碼器和復(fù)用器。該第一編碼器被配置為編碼基本視圖以形成與視頻內(nèi)容相關(guān)聯(lián)的第一獨(dú)立壓縮的視頻流。該第二編碼器被配置為編碼非基本視圖以形成與該視頻內(nèi)容相關(guān)聯(lián)的第二獨(dú)立壓縮的視頻流。該復(fù)用器被配置為復(fù)用與該視頻內(nèi)容相關(guān)聯(lián)的該第一和第二獨(dú)立壓縮的視頻流以形成傳送流。該傳送流可用于被處理以使用該基本和非基本視圖來渲染3D視頻。
文檔編號H04N13/00GK102474635SQ201080031847
公開日2012年5月23日 申請日期2010年7月15日 優(yōu)先權(quán)日2009年7月15日
發(fā)明者曼達(dá)亞姆·A·納拉辛漢, 阿杰伊·盧特拉 申請人:通用儀表公司