專利名稱：接收裝置、發(fā)送裝置、通信系統(tǒng)、接收裝置控制方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及接收裝置、發(fā)送裝置、通信系統(tǒng)、接收裝置控制方法和程序。
背景技術(shù)：
傳統(tǒng)地，已知用于顯示3維立體視頻(3D視頻)的各種系統(tǒng)。例如，如在以下專利文獻(xiàn)I到3中描述的，已知這樣的方法，其中具有視差的用于左眼的圖像和用于右眼的圖像在規(guī)定時(shí)段交替提供到顯示器，并且利用提供有在規(guī)定時(shí)段同步并且驅(qū)動(dòng)的液晶快門的一副眼鏡觀察圖像。引用列表專利文獻(xiàn) 專利文獻(xiàn)I JP 9-138384A專利文獻(xiàn)2 JP 2000-36969A專利文獻(xiàn)3 JP 2003-45343A

發(fā)明內(nèi)容
技術(shù)問(wèn)題為了從廣播站發(fā)送3D視頻，需要發(fā)送用于左眼的圖像和用于右眼的圖像二者。為了確保與現(xiàn)有2D視頻類似的圖像質(zhì)量，因此需要發(fā)送兩倍數(shù)據(jù)，并且與2D視頻的發(fā)送頻帶相比，還要求雙倍的發(fā)送頻帶。然而，由于廣播波的發(fā)送頻帶或經(jīng)由網(wǎng)絡(luò)的傳送數(shù)據(jù)受限，所以在增加發(fā)送頻帶上存在困難。此外，如果發(fā)送兩倍數(shù)據(jù)，那么接收裝置中的解碼器可能變得超載。此外，作為發(fā)送3D視頻的格式，已知諸如并排方案的技術(shù)。在并排方案中，一幀劃分為多個(gè)視圖，然后被發(fā)送。由于一幀劃分為多個(gè)視圖，所以不能避免圖像質(zhì)量的劣化。此夕卜，當(dāng)以這樣的3D視頻格式發(fā)送視頻數(shù)據(jù)時(shí)，已經(jīng)廣泛普及到用戶的2D視頻電視接收機(jī)不能執(zhí)行正確的顯示，因此用戶不能正確地觀看2D視頻或3D視頻。因此，已經(jīng)鑒于上述問(wèn)題實(shí)現(xiàn)本發(fā)明，并且本發(fā)明的目的是提供一種新穎的和改進(jìn)的接收裝置、發(fā)送裝置、通信系統(tǒng)、接收裝置控制方法和程序，其使得用戶能夠利用簡(jiǎn)單的結(jié)構(gòu)觀看3D視頻。對(duì)于問(wèn)題的解決方案根據(jù)本發(fā)明的一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種接收裝置，包括第一解碼器，用于解碼第一圖像信號(hào)；第二解碼器，用于解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)；信息獲取部分，用于獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及視頻覆蓋部分，用于基于位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。此外，接收裝置可以包括顯示器，用于周期性地顯示所述第一圖像幀的圖像和所述第二圖像幀的圖像。
此外，所述第一圖像幀可以是運(yùn)動(dòng)圖像幀，所述對(duì)象指示信息可以包括相對(duì)于所述第一圖像幀的區(qū)域的圖像的時(shí)間同步信息，并且所述視頻覆蓋部分可以基于所述位置信息和同步信息，使得所述區(qū)域的圖像覆蓋所述第一圖像幀。此外，所述對(duì)象指示信息可以包括在所述第一圖像信號(hào)或所述第二圖像信號(hào)的圖像幀的畫面報(bào)頭中。此外，所述對(duì)象指示信息可以在與所述第一圖像信號(hào)和所述第二圖像信號(hào)的分離流中發(fā)送，并且可以通過(guò)時(shí)間戳與所述第一圖像信號(hào)和所述第二圖像信號(hào)相關(guān)聯(lián)。此外，在所述第一圖像信號(hào)的第一圖像幀的尺寸和所述第二圖像信號(hào)的圖像幀的尺寸相同的情況下，所述信息獲取部分可以不獲取所述對(duì)象指示信息。此外，所述第一解碼器和所述第二解碼器可以通過(guò)不同解碼方法執(zhí)行各自解碼。根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種發(fā)送裝置，包括第一 編碼器，用于編碼第一圖像信號(hào)；第二編碼器，用于編碼對(duì)應(yīng)于所述第一圖像信號(hào)的圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)；以及發(fā)送器，用于發(fā)送編碼的第一圖像信號(hào)、編碼的第二圖像信號(hào)、以及包括相對(duì)于所述圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息。此外，所述圖像幀可以是運(yùn)動(dòng)圖像幀，并且所述對(duì)象指示信息可以包括所述圖像幀的區(qū)域的圖像的時(shí)間同步信息。此外，所述對(duì)象指示信息可以插入所述第一圖像信號(hào)或所述第二圖像信號(hào)的圖像幀的畫面報(bào)頭中。此外，所述對(duì)象指示信息可以在與所述第一圖像信號(hào)和所述第二圖像信號(hào)的分離流中發(fā)送，并且可以通過(guò)時(shí)間戳與所述第一圖像信號(hào)和所述第二圖像信號(hào)相關(guān)聯(lián)。此外，發(fā)送裝置可以包括圖像分離部分，用于從所述圖像幀分離所述區(qū)域的圖像，并且所述第二編碼器可以編碼對(duì)應(yīng)于由所述圖像分離部分分離的所述區(qū)域的圖像的所述
第二圖像信號(hào)。此外，所述圖像分離部分根據(jù)對(duì)應(yīng)于所述區(qū)域的對(duì)象的運(yùn)動(dòng)，改變所述圖像幀內(nèi)所述區(qū)域的位置的同時(shí)，可以從所述圖像幀分離所述區(qū)域的圖像。此外，在所述第一圖像信號(hào)的第一圖像幀的尺寸和所述第二圖像信號(hào)的圖像幀的尺寸相同的情況下，所述發(fā)送器可以不發(fā)送所述對(duì)象指示信息。此外，所述第一編碼器和所述第二編碼器可以通過(guò)不同編碼方法執(zhí)行各自編碼。此外，根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種通信系統(tǒng)，包括發(fā)送裝置，其包含第一編碼器，用于編碼第一圖像信號(hào)，第二編碼器，用于編碼對(duì)應(yīng)于所述第一圖像信號(hào)的圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)，以及發(fā)送器，用于發(fā)送編碼的第一圖像信號(hào)、編碼的第二圖像信號(hào)、以及包括相對(duì)于所述圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及接收裝置，其包含第一解碼器，用于解碼所述第一圖像信號(hào)，第二解碼器，用于解碼所述第二圖像信號(hào)，信息獲取部分，用于獲取所述對(duì)象指示信息，以及視頻覆蓋部分，用于基于包括在所述對(duì)象指示信息中的位置信息，使得所述區(qū)域的圖像覆蓋所述第一圖像信號(hào)的所述第一圖像幀，以生成第二圖像幀。此外，根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種接收裝置控制方法，包括以下步驟解碼第一圖像信號(hào)；解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)；獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及基于位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。此外，根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種程序，用于使得計(jì)算機(jī)用作用于解碼第一圖像信號(hào)的裝置；用于解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)的裝置；用于獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息的裝置；以及用于基于位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀的裝置。此外，根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種接收裝置，包括第一解碼器，用于解碼第一圖像信號(hào)；信息獲取部分，用于獲取所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的空間位置信息，以及包括所述第一圖像幀的區(qū)域的偏移量的對(duì)象指示信息；以及視頻圖像覆蓋部分，用于基于所述對(duì)象指示信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。此外，根據(jù)本發(fā)明的另一個(gè)方面，為了實(shí)現(xiàn)上述目的，提供了一種接收裝置，包括 第一解碼器，用于解碼對(duì)應(yīng)于從靜態(tài)圖像的源圖像裁剪的第一圖像的第一圖像信號(hào)；第二解碼器，用于解碼對(duì)應(yīng)于從靜態(tài)圖像的源圖像裁剪的第二圖像的第二圖像信號(hào)；位置信息獲取部分，用于獲取所述第一圖像和所述第二圖像的空間位置信息；以及顯示器，用于在基于位置信息相對(duì)偏移所述第一圖像和所述第二圖像的狀態(tài)下，周期性地顯示所述第一圖像和所述第二圖像。本發(fā)明的有利效果根據(jù)本發(fā)明，可以提供使得用戶能夠用簡(jiǎn)單結(jié)構(gòu)觀看3D視頻的接收裝置、發(fā)送裝置、通信系統(tǒng)、接收裝置控制方法以及程序。


圖I是圖示根據(jù)本發(fā)明實(shí)施例的立體圖像顯示/觀看系統(tǒng)的結(jié)構(gòu)的示意圖。圖2是圖示根據(jù)本發(fā)明實(shí)施例的發(fā)送裝置的配置示例的示意圖。圖3是詳細(xì)圖示目標(biāo)分離部分的配置的示意圖。圖4是用于說(shuō)明發(fā)送裝置中的編碼處理的示意圖。圖5是用于說(shuō)明發(fā)送裝置中的編碼處理的示意圖。圖6是用于說(shuō)明發(fā)送裝置中的編碼處理的示意圖。圖7是圖示用于3D對(duì)象顯示的對(duì)象指示信息的示意圖。圖8是圖示3D_descriptor的定義的示意圖。圖 9 是圖不由圖 7 中的 Vertical_Sta;rt_Position、Ho;rizontal_Sta;rt_Position、Vertical_End_Position 和 Horizontal_End_Position 指定的信息的不意圖。圖10是圖示當(dāng)3D信息添加到視頻數(shù)據(jù)的位流時(shí)添加3D信息到初級(jí)視頻的示例的示意圖。圖11是圖示當(dāng)次級(jí)視頻是靜態(tài)圖像等時(shí)可以改變顯示時(shí)間時(shí)添加3D信息到初級(jí)視頻的示例的示意圖。圖12是圖示添加3D信息到次級(jí)視頻并且每個(gè)運(yùn)動(dòng)圖像的畫面同步初級(jí)視頻和次級(jí)視頻的示例的示意圖。
圖13是圖示當(dāng)次級(jí)視頻是靜態(tài)圖像等時(shí)可以改變顯示時(shí)間時(shí)添加3D信息到次級(jí)視頻的示例的示意圖。圖14是圖示接收裝置的配置示例的示意圖。圖15是圖示對(duì)象重建部分中的處理的示意圖。
具體實(shí)施例方式下文中，將參照附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。注意到，在該說(shuō)明書和附圖中，具有基本相同功能和結(jié)構(gòu)的元件用相同的參考標(biāo)號(hào)表示，并且省略重復(fù)描述。將按以下順序執(zhí)行描述。I.系統(tǒng)的配置示例 2.發(fā)送裝置的配置示例3.用于3D對(duì)象顯示的信息4.接收裝置的配置示例[I.系統(tǒng)的配置示例]圖I是圖示根據(jù)本發(fā)明實(shí)施例的立體圖像顯示/觀看系統(tǒng)的結(jié)構(gòu)的示意圖。根據(jù)本發(fā)明的系統(tǒng)包括發(fā)送裝置100、電視接收機(jī)(接收裝置)200和一副顯示圖像欣賞眼鏡300，發(fā)送裝置100用于以數(shù)字廣播格式發(fā)送視頻內(nèi)容等，電視接收機(jī)(接收裝置)200提供有包括例如IXD的顯示面板。圖I示出該接收裝置200和該副顯示圖像欣賞眼鏡300。接收裝置200是接收地面數(shù)字廣播等的電視接收機(jī)，并且接收和解碼視頻數(shù)據(jù)的位流，并且將其顯示在顯示面板上。接收裝置200基于從發(fā)送裝置發(fā)送的視頻數(shù)據(jù)，將視頻時(shí)間分割以便在極短時(shí)間段在整個(gè)屏幕上交替顯示視頻。此外，接收裝置200能夠通過(guò)與用于左眼的視頻和用于右眼的視頻的顯示時(shí)段同步，分開提供視頻到左眼和右眼。接收裝置200例如每場(chǎng)交替顯示用于右眼的圖像R和用于左眼的圖像L。顯示圖像欣賞眼鏡300包括在對(duì)應(yīng)于透鏡的部分的一對(duì)液晶快門300a和300b。液晶快門300a和300b與接收裝置200的每場(chǎng)的圖像切換同步，并且輪流執(zhí)行開-關(guān)操作。也就是說(shuō)，在顯示用于右眼的圖像R的接收裝置200的場(chǎng)中，用于左眼的液晶快門300b關(guān)閉而用于右眼的液晶快門300a打開。同樣，在顯示用于左眼的圖像L的場(chǎng)中，執(zhí)行相反操作。以此方式，在與用于左眼的視頻L和用于右眼的視頻R的顯示時(shí)段同步的同時(shí)，接收裝置200在極短時(shí)段在整個(gè)屏幕上交替顯示用于右眼的視頻R和用于左眼的視頻L，以便分開提供視頻到左眼和右眼。在這種操作的情況下，僅僅用于右眼的圖像R進(jìn)入用戶的右眼，并且僅僅用于左眼的圖像L進(jìn)入用戶的左眼，該用戶佩戴欣賞眼鏡300并且觀看接收裝置200。結(jié)果，用于右眼的圖像和用于左眼的圖像在用戶的眼睛內(nèi)部組合，并且可以以三維識(shí)別接收裝置200上顯示的圖像。此外，當(dāng)用戶沒有使用欣賞眼鏡300時(shí)，接收裝置200能夠顯示普通2維圖像。在此情況下，不執(zhí)行用于右眼的圖像R和用于左眼的圖像L的切換。注意到，圖I圖示提供有顯示圖像欣賞眼鏡300的系統(tǒng)。然而，本實(shí)施例不限于該系統(tǒng)，并且可以應(yīng)用于立體圖像顯示/觀看系統(tǒng)，諸如不要求眼鏡300的偏振片系統(tǒng)。在此，目前已經(jīng)廣泛普及到用戶家庭的電視接收機(jī)(下文中，該電視接收機(jī)可以稱為傳統(tǒng)電視接收機(jī))采取2D解碼。因此，直到普及采取3D視頻觀看的電視接收機(jī)，希望廣泛普及的電視接收機(jī)可以提供3D視頻觀看。因此，可以考慮這樣的方法，其使用當(dāng)前利用廣播波發(fā)送的2D視頻數(shù)據(jù)作為左和右圖像之一，并且額外發(fā)送相同量的數(shù)據(jù)并且使用該數(shù)據(jù)作為左和右圖像的另一。然而，在此情況下，與目前發(fā)送頻帶相比發(fā)送頻帶變?yōu)殡p倍。因?yàn)橛糜趶V播波的發(fā)送頻帶受限，所以難以通過(guò)發(fā)送額外視頻數(shù)據(jù)實(shí)現(xiàn)3D視頻觀看。此夕卜，在此情況下，當(dāng)試圖解碼通過(guò)普通電視接收機(jī)接收的數(shù)據(jù)時(shí)，由于解碼器需要覆蓋用于兩個(gè)信道的解碼負(fù)載，所以解碼器變得過(guò)載，并且將不執(zhí)行普通解碼。因此，即使發(fā)送額外數(shù)據(jù)，也認(rèn)為普通電視接收機(jī)不能將數(shù)據(jù)處理為3D格式。因此，為了通過(guò)使用已經(jīng)廣泛普及到用戶的電視接收機(jī)實(shí)現(xiàn)3D觀看，需要通過(guò)最小化并且發(fā)送額外圖像數(shù)據(jù)來(lái)實(shí)現(xiàn)3D觀看。以此方式，在直到3D電視接收機(jī)廣泛普及的引入時(shí)段期間，利用2D電視接收機(jī)的3D觀看變得可能，并且3D視頻可以廣泛提供給公眾。同時(shí)，作為用于發(fā)送用于左眼的圖像L和用于右眼的圖像R的格式，已知諸如并排或上下的技術(shù)，其中屏幕分為多個(gè)視圖，并且發(fā)送多個(gè)視圖。然而，由于已經(jīng)廣泛普及到公眾的2D電視接收機(jī)不支持這樣的格式，所以不能執(zhí)行正確的3D顯示。此外，即使電視接收機(jī)支持格式，圖像質(zhì)量劣化到發(fā)送普通2D圖像的圖像質(zhì)量的一半，因?yàn)橐粠ㄓ液妥笠?頻數(shù)據(jù)。在本實(shí)施例中，對(duì)于包括多于2個(gè)視圖的源圖像，發(fā)送裝置100僅提取和裁剪要3D顯示的區(qū)域，連同關(guān)于基本視圖的相對(duì)位置信息編碼該區(qū)域，并且將其發(fā)送到接收裝置200作為額外視圖視頻數(shù)據(jù)。對(duì)于基本視圖，發(fā)送其整個(gè)視頻數(shù)據(jù)。另一方面，對(duì)于額外視圖，僅發(fā)送從基本視圖裁剪的視頻數(shù)據(jù)。結(jié)果，不發(fā)送相對(duì)于基本視圖不具有視差的視頻作為額外視圖，并且對(duì)于相對(duì)于基本視圖不具有視差的視頻，接收裝置200復(fù)制基本視圖視頻到額外視圖。因此，接收裝置200對(duì)于額外視圖僅解碼已經(jīng)從基本視圖裁剪的視頻數(shù)據(jù)，并且這大大地減少解碼過(guò)程。因此，接收裝置200可以通過(guò)在CPU的外載荷執(zhí)行解碼，并且可以實(shí)現(xiàn)利用非常簡(jiǎn)單結(jié)構(gòu)的3D視頻數(shù)據(jù)的解碼。注意到，在下文中要描述的實(shí)施例中，視頻數(shù)據(jù)不限于運(yùn)動(dòng)圖像，并且靜態(tài)圖像可以添加到基本視圖的運(yùn)動(dòng)圖像作為額外視圖。此外，基本視圖和額外視圖可以分別應(yīng)用于幻燈片的顯示作為靜態(tài)圖像。在此情況下，編碼方案獨(dú)立于視頻數(shù)據(jù)格式，并且基本視圖和額外視圖的編碼方案可以是相同方案，或者可以采用不同方案。[2.發(fā)送裝置的配置示例]圖2是圖示根據(jù)本發(fā)明實(shí)施例的發(fā)送裝置100的配置示例的示意圖。發(fā)送裝置100是在用于提供例如諸如電視節(jié)目的視頻內(nèi)容的廣播站的設(shè)備。發(fā)送裝置100以諸如數(shù)字廣播格式的數(shù)據(jù)格式提供視頻內(nèi)容到電視接收機(jī)。如圖2所不,發(fā)送裝置100包括CPU 102、圖像捕獲部分104、目標(biāo)分尚部分106、第一編碼器108、第二編碼器110、多路復(fù)用器112和輸出部分114。在本實(shí)施例中，相對(duì)于包括多余2個(gè)視圖的源圖像，發(fā)送裝置提取并且裁剪要3D顯示的區(qū)域，連同相對(duì)于基本視圖的相對(duì)位置信息編碼該區(qū)域，并且將該區(qū)域傳送給編碼器。更具體地，關(guān)于由圖像捕獲部分104捕獲的直播視頻或者視頻文件的輸入，目標(biāo)分離部分106在從CPU 102接收要裁剪的目標(biāo)區(qū)域(對(duì)象的尺寸)的指定時(shí)，執(zhí)行從基本視圖的視頻裁剪要3D顯示的區(qū)域的處理。目標(biāo)分離部分106發(fā)送裁剪區(qū)域的控制信息(對(duì)象控制信息)到CPU 102，并且CPU 102發(fā)送裁剪區(qū)域的指示數(shù)據(jù)、以及用于指定顯示時(shí)段的數(shù)據(jù)(對(duì)象指示信息)到編碼器108和110。圖3是詳細(xì)圖示目標(biāo)分離部分106的配置的示意圖。如圖3所示，目標(biāo)分離部分106包括分塊部分122、幀延遲部分124、塊匹配部分126、位置移動(dòng)部分128、目標(biāo)對(duì)象塊分離部分130和選擇器132。注意到，圖2和3中示出的每個(gè)功能塊可以由電路(硬件)或CPU102以及用于使得CPU 102運(yùn)行的軟件(程序)構(gòu)成。在此情況下，程序可以存儲(chǔ)在諸如發(fā)送裝置100包括的存儲(chǔ)器的存儲(chǔ)介質(zhì)，或者發(fā)送裝置100外部的存儲(chǔ)介質(zhì)中。在本實(shí)施例中，基本視圖的視頻稱為初級(jí)視頻，并且從初級(jí)視圖裁到的另一視圖的視頻稱為次級(jí)視頻。作為示例，作為基本視圖的初級(jí)視頻可以是普通2D視頻。目標(biāo)分離部分106檢測(cè)要從初級(jí)視頻裁剪的區(qū)域的移動(dòng)，并且響應(yīng)于移動(dòng)改變要裁剪的區(qū)域。例如，當(dāng)僅從基本視圖裁剪人面部時(shí)，其中可以響應(yīng)于面部的移動(dòng)改變要裁剪的區(qū)域的處理變得可能。接收裝置200可以在屏幕上移動(dòng)面部的同時(shí)，顯示具有3D效果的向屏幕前面突出的面部。作為基本視圖的初級(jí)視頻輸入圖3所不的分塊部分122和巾貞延遲部分124。分塊 部分122從CPU 102接收指定要裁剪的目標(biāo)區(qū)域(或?qū)ο?的信息用于次級(jí)視頻裁剪。分塊部分122基于來(lái)自CPU 102的指令，執(zhí)行用于將要裁剪的目標(biāo)區(qū)域150的當(dāng)前畫面分塊的處理。結(jié)果，目標(biāo)區(qū)域150的當(dāng)前畫面分為多個(gè)矩形塊。幀延遲部分124延遲幀，并且塊匹配部分126執(zhí)行分塊的當(dāng)前畫面與延遲的之前畫面的塊匹配，并且獲取指示每個(gè)塊的移動(dòng)的運(yùn)動(dòng)矢量。位置移動(dòng)部分128基于該運(yùn)動(dòng)矢量移動(dòng)目標(biāo)區(qū)域。位置移動(dòng)部分128響應(yīng)于在塊匹配部分126的處理結(jié)果，在包括對(duì)應(yīng)于每個(gè)塊的多個(gè)運(yùn)動(dòng)矢量中的大多數(shù)矢量并且不超過(guò)目標(biāo)區(qū)域的尺寸的范圍內(nèi)，確定目標(biāo)區(qū)域從之前畫面移動(dòng)的偏移量0FS，并且將該偏移量OFS發(fā)送到下一個(gè)步驟。此外，位置移動(dòng)部分128將偏移量OFS發(fā)送到CPU 102作為對(duì)象控制信息。每幀的視頻數(shù)據(jù)輸入到目標(biāo)對(duì)象塊分離部分130。目標(biāo)對(duì)象塊分離部分130根據(jù)偏移量OFS裁剪每幀的目標(biāo)區(qū)域，并且將其發(fā)送到選擇器132。此外，作為基本視圖的初級(jí)視頻輸入到選擇器132。選擇器132交替切換來(lái)自目標(biāo)對(duì)象塊分離部分130的輸入視頻和原始初級(jí)視頻，并且將它們發(fā)送到第一和第二編碼器108和110。在這一點(diǎn)上，原始初級(jí)視頻輸入到第一編碼器108，并且在目標(biāo)對(duì)象塊分離部分130裁剪的視頻發(fā)送到第二編碼器110。第一編碼器108將初級(jí)視頻數(shù)據(jù)編碼為原始視頻，而第二編碼器110編碼裁剪的次級(jí)視頻數(shù)據(jù)。在此，發(fā)送到第二編碼器110的裁剪的視頻可以響應(yīng)于目標(biāo)區(qū)域150的移動(dòng)改變其區(qū)域。因此，即使用于3D顯示的目標(biāo)區(qū)域或用于3D顯示的目標(biāo)對(duì)象涉及移動(dòng)，根據(jù)區(qū)域或?qū)ο蟮囊苿?dòng)3D顯示也總是可能的。在第一編碼器108和第二編碼器110編碼的初級(jí)和次級(jí)視頻數(shù)據(jù)在多路復(fù)用器112多路復(fù)用，并且連同音頻數(shù)據(jù)、文本數(shù)據(jù)等一起發(fā)送到輸出部分114。輸出部分114以數(shù)字廣播信號(hào)格式發(fā)送多路復(fù)用的視頻數(shù)據(jù)、音頻數(shù)據(jù)和文本數(shù)據(jù)到接收裝置200。注意到，發(fā)送裝置100當(dāng)發(fā)送普通2D視頻時(shí)僅發(fā)送初級(jí)視頻到接收裝置200。在此情況下，不執(zhí)行次級(jí)視頻的裁剪。如上所述,在本實(shí)施例中，關(guān)于初級(jí)視頻(作為示例,普通2D視頻)，因?yàn)閮H僅裁剪和發(fā)送要3D顯示的區(qū)域到接收裝置200，所以可以僅發(fā)送3D顯示所需的最少數(shù)據(jù)到接收裝置200。因此，可以最小化接收裝置200中的解碼器的配置，并且可以利用接收裝置200的CPU的外載荷進(jìn)行解碼。因此，接收裝置200可以配置為簡(jiǎn)單的。接下來(lái)，將描述次級(jí)視頻相對(duì)于初級(jí)視頻的相對(duì)位置信息。稍后將描述細(xì)節(jié)，但是接收初級(jí)視頻和次級(jí)視頻的接收裝置200使用初級(jí)視頻作為第一視圖，并且使用通過(guò)將次級(jí)視頻覆蓋初級(jí)視圖獲得的視頻作為第二視圖。然后，接收裝置200通過(guò)交替顯示第一視圖和第二視圖執(zhí)行3D顯不。因此，發(fā)送裝置100發(fā)送初級(jí)視頻和次級(jí)視頻以及指定次級(jí)視頻相對(duì)于初級(jí)視頻的位置的相對(duì)位置信息到接收裝置200。結(jié)果，接收裝置200可以使次級(jí)視頻覆蓋在初級(jí)視頻的正確位置。次級(jí)視頻相對(duì)于初級(jí)視頻的相對(duì)位置信息例如插入編碼流的畫面層的輔助數(shù)據(jù)區(qū)域。在此，如果相對(duì)位置信息部存在于輔助數(shù)據(jù)區(qū)域，那么接收裝置200確定次級(jí)視頻等于基本視圖的畫面的頂部和左邊圖像。如果初級(jí)視頻和次級(jí)視頻的尺寸是相同的，那么發(fā)送裝置100可以省略發(fā)送相對(duì)位置信息，并且接收裝置200可以省略接收相對(duì)位置信肩、O 次級(jí)視頻數(shù)據(jù)流的編碼不應(yīng)顯著不同于作為初級(jí)視頻的重建基本視圖的圖像質(zhì)量。次級(jí)視頻流的編碼可以采用與初級(jí)視圖的編碼方案類似的編碼方案，或者可以通過(guò)選擇另一運(yùn)動(dòng)圖像編解碼器、靜態(tài)圖像編解碼器等來(lái)執(zhí)行。例如，可以通過(guò)使用MPEG-4AVC編碼初級(jí)視頻，并且可以通過(guò)使用MPEG2編碼次級(jí)視頻。在此情況下，可以進(jìn)一步減少次級(jí)視頻的解碼負(fù)荷?？商娲兀梢酝ㄟ^(guò)使用MPEG2視頻編碼初級(jí)視頻，并且可以通過(guò)使用MPEG-4AVC編碼次級(jí)視頻，以便減少由于額外視圖的發(fā)送頻帶的增加。此外,可以通過(guò)使用MPEG-4AVC或MPEG2視頻編碼初級(jí)視頻，并且可以通過(guò)使用JPEG作為靜態(tài)圖像編碼次級(jí)視頻。圖4、5和6是用于說(shuō)明發(fā)送裝置100中的編碼處理的示意圖。在此，圖4示出通過(guò)將兩個(gè)視像結(jié)合為一幀的編碼示例。在此情況下，在屏幕的水平方向分別壓縮第一視圖和第二視圖，并且結(jié)合和編碼為一幀。該處理類似于普通并排處理。此外，圖5是圖示本實(shí)施例中第一視圖和第二視圖的裁剪區(qū)域的編解碼器的示意圖。在此情況下，編碼并且添加第二視圖作為增強(qiáng)層。圖5中的兼容層示出作為普通2D視頻數(shù)據(jù)的初級(jí)視頻數(shù)據(jù)。兼容層可以用與普通2D視頻類似的圖像質(zhì)量發(fā)送。由于增強(qiáng)層支持必要的最小裁剪區(qū)域，所以數(shù)據(jù)量小于兼容層的數(shù)據(jù)量。如圖5所示，通過(guò)PID或視頻軌道的信息指定初級(jí)視頻和次級(jí)視頻。圖6是圖示本實(shí)施例中裁剪處理的編碼方案的示意圖。如圖6的上部圖示所示，在僅發(fā)送第一視圖視頻作為2D視頻的情況下，僅編碼第一視圖視頻數(shù)據(jù)。在此情況下，通過(guò)第一編碼器108編碼初級(jí)視頻，并且將其發(fā)送到接收裝置200。圖6的底部圖示示出這樣的情況，其中通過(guò)使用上述本實(shí)施例的方案，編碼作為第二視圖從初級(jí)視頻裁剪的區(qū)域的視頻。如圖6的底部圖不所不,在本實(shí)施例中，對(duì)于第一視圖，由第一編碼器108照原樣編碼一幀數(shù)據(jù)。另一方面，對(duì)于第二視圖，由第二編碼器110僅僅編碼從第一視圖裁剪的區(qū)域。結(jié)果，如圖6的底部圖示所示，與第一視圖的編碼視頻數(shù)據(jù)的數(shù)據(jù)量相比，可以顯著減少第二視圖的裁剪區(qū)域的編碼視頻數(shù)據(jù)的數(shù)據(jù)量。因此，可以最小化接收裝置200中的解碼負(fù)荷。在整個(gè)系統(tǒng)的多路復(fù)用流中，圖I所示的多路復(fù)用器112分配ID到基本視圖的視頻流(其對(duì)應(yīng)于普通2D視頻信號(hào))和次級(jí)視圖的流，并且多路復(fù)用它們。以此方式，初級(jí)視頻和次級(jí)視頻可以通過(guò)多路復(fù)用流中的ID相關(guān)聯(lián)。此外，作為時(shí)間戳，應(yīng)用與基本視圖的視頻數(shù)據(jù)的同步方法類似的同步方法。利用在傳送流(TS)的報(bào)頭中定義的PMT (程序映射表)的表格，由CPU 102執(zhí)行多路復(fù)用的系統(tǒng)管理。在此情況下，初級(jí)視頻定義為2D視頻流，并且在如下所述的PMT下，通過(guò)添加到2D視頻流定義額外視圖(次級(jí)視頻)的流，并且分配和管理ID。根據(jù)該方案，初級(jí)視頻和次級(jí)視頻可以通過(guò)PES的ID相關(guān)聯(lián)，而不改變當(dāng)前傳送流的結(jié)構(gòu)。PAT------PMTl-----------視頻(2D 基本)-----------音頻-----------視頻(次級(jí)增強(qiáng))-------PMT2 PMT指定每個(gè)編碼信號(hào)的PID指定、ES的種類或狀態(tài)、程序的PCR的PID等。接收裝置200通過(guò)使用當(dāng)前方案將初級(jí)視頻與次級(jí)視頻相關(guān)聯(lián)，并且執(zhí)行與上面編碼處理的反向處理，使得可以執(zhí)行希望的顯示。多路復(fù)用器112多路復(fù)用由第一編碼器108編碼的數(shù)據(jù)和由第二編碼器110編碼的數(shù)據(jù)。多路復(fù)用的數(shù)據(jù)從輸出部分114發(fā)送到接收裝置200。[3.用于3D對(duì)象顯示的信息]圖7是圖示用于3D對(duì)象顯示的對(duì)象指示信息(下文中，可以稱為3D信息)的示意圖。圖7所示的對(duì)象指示信息發(fā)送到第一編碼器108、第二編碼器110和多路復(fù)用器112，并且插入視頻數(shù)據(jù)。對(duì)象指示信息可以作為一個(gè)基本流發(fā)送。在此情況下，初級(jí)視頻、次級(jí)視頻和對(duì)象指示信息可以通過(guò)時(shí)間戳相關(guān)聯(lián)。此外，對(duì)象指示信息可以插入初級(jí)視頻或次級(jí)視頻的畫面單元(畫面報(bào)頭的用戶數(shù)據(jù)區(qū)域)，如稍后將描述的。為了說(shuō)明圖7所示的每個(gè)信息，Data_Length代表對(duì)象指示信息的數(shù)據(jù)量。Number_of_VideoViews N代表從單個(gè)初級(jí)視頻裁剪的次級(jí)視頻的數(shù)目。本實(shí)施例描述其中從單個(gè)初級(jí)視頻裁剪單個(gè)次級(jí)視頻的示例。然而，可以裁剪超過(guò)兩個(gè)次級(jí)視頻，或者可以裁剪N條次級(jí)視頻。Target_Vide0View(i)是這樣的信息，其代表由該信息覆蓋的視圖的基本PID0該信息用作為標(biāo)識(shí)信息的ID指定相對(duì)于次級(jí)視頻的初級(jí)視頻，并且初級(jí)視頻可以通過(guò)每幀與次級(jí)視頻時(shí)間上相關(guān)聯(lián)。在圖7中，Target_videoView對(duì)應(yīng)于初級(jí)視頻的視圖，并且指定相應(yīng)視圖的PID。Partner_videoView對(duì)應(yīng)于次級(jí)視頻的視圖，并且指定相應(yīng)視圖的PID。例如,相應(yīng)視圖由Target_videoView=PID_l 和 Partner_ViewoView=PIDO 指定。Picture_ID 是由每個(gè)畫面總計(jì)的值，并且用作靜態(tài)圖像的時(shí)序標(biāo)識(shí)符。此外，在每個(gè)視圖中，設(shè)置指定次級(jí)視頻相對(duì)于初級(jí)視頻的空間位置(屏幕中的位置)的位置信息、以及用于指定次級(jí)視頻的顯示時(shí)段的若干標(biāo)記0bjecL_0fTset_position_flag和 Status_Count_flag0當(dāng)Object_Offset_position_flag 為 “I” 時(shí)，由 Vertical_Sta;rt_Position、Horizontal_Start_Position、Vertical_End_Position 和 Horizontal_End_Position 的每個(gè)數(shù)據(jù)指定裁剪區(qū)域。該信息是指定Partner_ViewoView的對(duì)象區(qū)域相對(duì)于Target_videoView的開始點(diǎn)(0,0)的開始位置和結(jié)束位置的數(shù)據(jù)。
Pixel_ratio 是指定 Partner_ViewoView 的對(duì)象相對(duì)于 Target_videoView 的分辨率的分辨率的信息。當(dāng)Pixel_ratio=0x0時(shí),這指示不需要分辨率轉(zhuǎn)換。當(dāng)Status_Count_flag 是“I” 時(shí)，由 All_VideoView 和 DurationCounter 指定使用次級(jí)視頻的3D顯示連續(xù)時(shí)段。當(dāng)All_VideoView是“I”時(shí)，使用Duration_Counter的顯示連續(xù)時(shí)間控制不但應(yīng)用于Target_VideoView而且應(yīng)用于所有視頻視圖。Duration_Counter通過(guò)開始顯示之后的幀數(shù)目指定顯示連續(xù)時(shí)間。注意到，在運(yùn)動(dòng)圖像的情況下，接收裝置200可以通過(guò)將對(duì)象指示信息插入每個(gè)畫面，識(shí)別次級(jí)視頻的顯示連續(xù)時(shí)段。Duration_Counter在指定顯示連續(xù)時(shí)段時(shí)(特別地，當(dāng)發(fā)送靜態(tài)圖像時(shí))有效。注意到，發(fā)送裝置100可以替代發(fā)送次級(jí)視頻數(shù)據(jù)本身，發(fā)送來(lái)自初級(jí)視頻的裁剪區(qū)域以及相對(duì)于初級(jí)視頻的視差信息。在此情況下，發(fā)送裝置100在發(fā)送視差信息的同時(shí)，用 Vertical_Start_Position、Horizontal_Start_Position、Vertical_End_Position和Horizontal_End_Position的每個(gè)數(shù)據(jù)指定裁剪區(qū)域。接收裝置200裁剪由Vertical—Start_Position、Horizontal_Start_Position、Vertical_End_Position 和 Horizontal— EncLPosition的每個(gè)數(shù)據(jù)指定的區(qū)域，并且生成具有視差的次級(jí)視頻。對(duì)于除了裁剪區(qū)域外沒有視差的區(qū)域，復(fù)制初級(jí)視頻以生成次級(jí)視頻。結(jié)果，接收裝置200可以生成包括初級(jí)視頻和次級(jí)視頻的3D視頻。注意到，圖7所示的對(duì)象指示信息可以在獨(dú)立的基本流中發(fā)送，或者以畫面為單位作為視頻數(shù)據(jù)的用戶數(shù)據(jù)發(fā)送。如上所述，MPEG包括PMT (節(jié)目映射表格)作為描述要發(fā)送的內(nèi)容的流信息的PSI(節(jié)目系統(tǒng)信息)。PMT的流信息包括用于選擇諸如音頻或視頻的分組的PID (分組ID)、streamjype和描述符，使得可以知道什么用于編碼視頻編解碼器和音頻編解碼器。當(dāng)在傳送流內(nèi)多路復(fù)用圖7所示的3D信息時(shí)，可以通過(guò)節(jié)目映射部分(TS表格ID=0x02)中的3D_descriptor指定各視圖之間的鏈接信息。在此情況下，如圖8所示定義3D_descriptor。圖 9 是圖不由圖 7 中的 Vertical_Sta;rt_Position、Ho;rizontal_Sta;rt_Position、Vertical_End_Position 和 Horizontal_End_Position 指定的信息的不意圖。在圖9中，X代表初級(jí)視頻畫面水平尺寸，并且Y代表初級(jí)視頻畫面垂直尺寸。在HD尺寸的情況下，X=1920像素，并且Y=IOSO像素。此外，(hs, vs)代表次級(jí)視頻的開始位置Pl的坐標(biāo)位置，并且(he, ve)代表次級(jí)視頻的結(jié)束位置P2的坐標(biāo)位置。在圖9所示的示例中，作為次級(jí)視頻裁剪的視頻是矩形區(qū)域，其具有(hs，vs)作為左上頂點(diǎn)，并且(he，ve)作為右下頂點(diǎn)。注意到，替代(he，ve)可以發(fā)送對(duì)象區(qū)域的尺寸。此外，可以根據(jù)編碼流中的報(bào)頭信息在發(fā)送方法中發(fā)送3D信息。在上面不例中，通過(guò)由Vertical_Start_Position、Ho;rizontal_Sta;rt_Position、Vertical_End_Position和Horizontal_End_Position指定的信息指定來(lái)自初級(jí)視頻的次級(jí)視頻的裁剪區(qū)域。另一方面，例如當(dāng)從發(fā)送裝置100發(fā)送靜態(tài)圖像時(shí)，因?yàn)殪o態(tài)圖像的分辨率大于由運(yùn)動(dòng)圖像幀顯示的顯示面板(諸如全HD尺寸)的分辨率，所以從靜態(tài)圖像的源圖像裁剪并且發(fā)送規(guī)定區(qū)域。因此，在發(fā)送靜態(tài)圖像時(shí)，圖7中所示的每個(gè)信息可以用作指定來(lái)自源圖像的裁剪區(qū)域的信息。在此情況下，從源圖像裁剪初級(jí)圖像和次級(jí)圖像，并且發(fā)送到接收裝置200。接收裝置200交替顯示初級(jí)圖像和次級(jí)圖像，使得可能觀看靜態(tài)圖像的3D視頻。
圖10是圖示當(dāng)3D信息添加到視頻數(shù)據(jù)的位流時(shí)添加3D信息到初級(jí)視頻的示例的示意圖。圖9示出在運(yùn)動(dòng)圖像的3D顯示的情況下每畫面同步初級(jí)視頻和次級(jí)視頻的示例。通過(guò)使用時(shí)間戳逐幀執(zhí)行同步。在此情況下，3D信息在第一編碼器108插入初級(jí)視頻的每個(gè)畫面。作為一個(gè)示例，3D信息可以與編碼視頻的GOP (畫面組)或I畫面同步，并且插入它的報(bào)頭。圖11是圖示當(dāng)次級(jí)視頻是靜態(tài)圖像等時(shí)可以改變顯示時(shí)間時(shí)添加3D信息到初級(jí)視頻的示例的示意圖。在此情況下，由于次級(jí)視頻在規(guī)定顯示時(shí)間期間不改變，3D信息不需要插入每個(gè)畫面。因此，根據(jù)次級(jí)視頻的顯示時(shí)間，3D信息在第一編碼器108插入指定數(shù)目的畫面的每個(gè)。次級(jí)視頻的顯示時(shí)間由圖7所示的Duration_Counter指定。圖12是圖示添加3D信息到次級(jí)視頻并且每個(gè)運(yùn)動(dòng)圖像的畫面同步初級(jí)視頻和次級(jí)視頻的示例的示意圖。在此情況下，3D信息在第二編碼器110插入每個(gè)次級(jí)畫面。作為一個(gè)示例，3D信息可以與編碼視頻的GOP或I畫面同步并且插入。圖13是圖示當(dāng)次級(jí)視頻是靜態(tài)圖像等時(shí)可以改變顯示時(shí)間時(shí)添加3D信息到次級(jí) 視頻的示例的示意圖。在此情況下，由于次級(jí)視頻在規(guī)定顯示時(shí)間期間不改變，所以根據(jù)顯示時(shí)間，3D信息在第二編碼器110插入指定數(shù)目的畫面的每個(gè)。在此情況下，次級(jí)視頻的顯示時(shí)間也由圖7所示的Duration_Counter指定。[4 接收裝置的配置示例]接下來(lái)，將描述接收裝置200的配置。圖14是圖示接收裝置200的配置示例的示意圖。如圖14所示，接收裝置200包括CPU202、解多路復(fù)用器204、第一解碼器206、第二解碼器208、對(duì)象重建部分210和3D處理視圖交織部分212。此外，接收裝置200包括顯示器，其包括液晶顯示面板等。注意到，圖14所示的每個(gè)功能塊可以由電路(硬件)、或者CPU202以及使得CPU 202運(yùn)行的軟件(程序)來(lái)構(gòu)成。在此情況下，程序可以存儲(chǔ)在諸如接收裝置200包括的存儲(chǔ)器的記錄介質(zhì)，或接收裝置200外部的記錄介質(zhì)中。從發(fā)送裝置100發(fā)送的位流或視頻文件的輸出輸入到解多路復(fù)用器204。解多路復(fù)用器204將輸入數(shù)據(jù)分離為視頻數(shù)據(jù)、音頻數(shù)據(jù)、文本數(shù)據(jù)等，并且將視頻數(shù)據(jù)發(fā)送到第一解碼器108和第二解碼器110。此外，解多路復(fù)用器204從位流提取對(duì)象指示信息，并且將其發(fā)送到CPU 202。解多路復(fù)用器204分離初級(jí)視頻數(shù)據(jù)和次級(jí)視頻數(shù)據(jù)，并且發(fā)送初級(jí)視頻數(shù)據(jù)到第一解碼器206以及發(fā)送次級(jí)視頻數(shù)據(jù)到第二解碼器208。因?yàn)榈降谝缓偷诙獯a器206和208的輸入的格式基本與現(xiàn)有2D視頻解碼的格式相同，所以可以通過(guò)使用當(dāng)前數(shù)字視頻信號(hào)格式的方案執(zhí)行解碼。在不需要觀看3D視頻的情況下，通過(guò)僅解碼初級(jí)視頻，2D視頻觀看是可能的。在次級(jí)視頻不存在的情況下，在第一解碼器206執(zhí)行普通2D視頻數(shù)據(jù)的解碼。CPU 202基于從解多路復(fù)用器204發(fā)送的對(duì)象指示信息，控制第一解碼器206和第二解碼器208。CPU 202發(fā)送指定顯示時(shí)段的信息到第二解碼器208。結(jié)果，第二解碼器208在指定的顯示時(shí)段期間識(shí)別次級(jí)視頻存在，并且執(zhí)行次級(jí)視頻的解碼。對(duì)象重建部分210復(fù)制第一視圖和第二視圖之間的視頻數(shù)據(jù)，并且使圖像覆蓋在對(duì)象位置。結(jié)果，覆蓋解碼的初級(jí)視頻和次級(jí)視頻以生成第二視圖的視頻。對(duì)于初級(jí)視頻，在第一解碼器206解碼的視頻數(shù)據(jù)輸入到3D處理視圖交織部分212。
圖15是圖示對(duì)象重建部分210中的處理的示意圖。如圖15所示，第一視圖的初級(jí)視頻數(shù)據(jù)在第一解碼器206解碼，并且獲取初級(jí)視頻400。該處理可用傳統(tǒng)接收裝置200執(zhí)行。同時(shí)，第二視頻數(shù)據(jù)在第二解碼器解碼，并且獲取次級(jí)視頻410。對(duì)象重建部分210輸出初級(jí)視頻400作為第一視圖。此外，對(duì)象重建部分210復(fù)制初級(jí)視頻400，并且通過(guò)將次級(jí)視頻410位移偏移量使得次級(jí)視頻410覆蓋復(fù)制的初級(jí)視頻400，以輸出第二視圖的視頻數(shù)據(jù)。在此，通過(guò)上述 Vertical_Start_Position、Horizontal_Start_Position、Vertical—End_Position和Horizontal_End_Position指定偏移量，并且從解多路復(fù)用器204發(fā)送到CPU 202。此外，在對(duì)象指示信息插入每個(gè)畫面的情況下，可以從第一解碼器206和第二解碼器208獲取對(duì)象指示信息。此外，對(duì)象重建部分210基于基本流的時(shí)間戳和初級(jí)視頻和次級(jí)視頻的ID (PID)，執(zhí)行初級(jí)視頻400和次級(jí)視頻410的時(shí)間同步。注意到，如上所述，在沒有從發(fā)送裝置100發(fā)送次級(jí)視頻數(shù)據(jù)本身，并且發(fā)送來(lái)自初級(jí)視頻的裁剪區(qū)域和相對(duì)于初級(jí)視頻的視差信息的情況下，接收裝置200基于裁剪區(qū)域生成次級(jí)視頻410。此外，對(duì)象重建部分210通過(guò)將次級(jí)視頻410位移視差量使得生成的次級(jí)視頻410覆蓋初級(jí)視頻400，以輸出第二視圖的圖像。 此外，在發(fā)送裝置100從源圖像裁剪初級(jí)圖像和次級(jí)圖像的情況下，對(duì)象重建部分210將裁剪的初級(jí)圖像和次級(jí)圖像位移偏移量，以輸出第一視圖和第二視圖視頻。結(jié)果，通過(guò)交替顯示初級(jí)圖像和次級(jí)圖像，靜態(tài)圖像的3D視頻觀看變?yōu)榭赡?。從?duì)象重建部分210輸出的第一視圖和第二視圖的視頻數(shù)據(jù)輸入到3D處理視圖交織部分212，第一視圖和第二視圖的輸入圖像數(shù)據(jù)經(jīng)歷諸如高幀速率的規(guī)定處理，并且輸出到顯示面板。在第一視圖取為用于左眼的圖像L并且第二視圖取為用于右眼的圖像R的情況下，以規(guī)定幀速率在顯示面板上交替顯示用于左眼的圖像L和用于右眼的圖像R。此夕卜，在欣賞眼鏡300的液晶快門300b打開時(shí)的定時(shí)顯示用于左眼的圖像L，并且在液晶快門300a打開時(shí)的定時(shí)顯示用于右眼的圖像R。因此，用戶的雙眼識(shí)別具有視差的用于左眼的圖像L和用于右眼的圖像R，這實(shí)現(xiàn)3D顯示。根據(jù)如上所述的本實(shí)施例，因?yàn)?D區(qū)域限于裁剪區(qū)域，發(fā)送帶的需求可以減少到必需的最小值。此外，由于對(duì)于接收裝置200的解碼負(fù)荷的增加限于對(duì)應(yīng)于添加到2D視頻的額外視圖的立體顯示的區(qū)域，所以使用現(xiàn)有傳統(tǒng)電視接收機(jī)的2D顯示和3D顯示變?yōu)榭赡?。因此，通過(guò)使用現(xiàn)有數(shù)字視頻信號(hào)格式的方案，可以保持與現(xiàn)有傳統(tǒng)電視接收機(jī)的向后兼容性。此外，因?yàn)榻邮昭b置200僅僅額外解碼額外視圖的適當(dāng)區(qū)域，所以應(yīng)用于現(xiàn)有2D解碼的解碼負(fù)荷可以減少到必需的最小值。結(jié)果，通過(guò)使得不同于解碼器的CPU執(zhí)行額外解碼負(fù)荷，可以改進(jìn)系統(tǒng)假定中的負(fù)荷平衡。上面已經(jīng)參照附圖描述了本發(fā)明的優(yōu)選實(shí)施例，然而本發(fā)明當(dāng)然不限于上面的示例。本領(lǐng)域的技術(shù)人員可以發(fā)現(xiàn)所附權(quán)利要求的范圍內(nèi)的各種替換和修改，并且應(yīng)該理解它們將在本發(fā)明的技術(shù)范圍下自然出現(xiàn)。參考符號(hào)列表100發(fā)送裝置108第一編碼器110第二編碼器114輸出部分
200接收裝置206第一編碼器208第二編碼器202CPU
210對(duì)象重建部分
權(quán)利要求
1.一種接收裝置，包括 第一解碼器，用于解碼第一圖像信號(hào)； 第二解碼器，用于解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)； 信息獲取部分，用于獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及 視頻覆蓋部分，用于基于所述位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。
2.根據(jù)權(quán)利要求I的接收裝置，還包括 顯示器，用于周期性地顯示所述第一圖像幀的圖像和所述第二圖像幀的圖像。
3.根據(jù)權(quán)利要求I的接收裝置， 其中，所述第一圖像幀是運(yùn)動(dòng)圖像幀，所述對(duì)象指示信息包括相對(duì)于所述第一圖像幀的區(qū)域的圖像的時(shí)間同步信息，并且 其中，所述視頻覆蓋部分基于所述位置信息和同步信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀。
4.根據(jù)權(quán)利要求3的接收裝置， 其中，所述對(duì)象指示信息包括在所述第一圖像信號(hào)或所述第二圖像信號(hào)的圖像幀的畫面報(bào)頭中。
5.根據(jù)權(quán)利要求3的接收裝置， 其中，所述對(duì)象指示信息在與所述第一圖像信號(hào)和所述第二圖像信號(hào)的分離流中發(fā)送，并且通過(guò)時(shí)間戳與所述第一圖像信號(hào)和所述第二圖像信號(hào)相關(guān)聯(lián)。
6.根據(jù)權(quán)利要求I的接收裝置， 其中，在所述第一圖像信號(hào)的第一圖像幀的尺寸和所述第二圖像信號(hào)的圖像幀的尺寸相同的情況下，所述信息獲取部分不獲取所述對(duì)象指示信息。
7.根據(jù)權(quán)利要求I的接收裝置， 其中，所述第一解碼器和所述第二解碼器通過(guò)不同解碼方法執(zhí)行各自解碼。
8.一種發(fā)送裝置，包括 第一編碼器，用于編碼第一圖像信號(hào)； 第二編碼器，用于編碼對(duì)應(yīng)于所述第一圖像信號(hào)的圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)；以及 發(fā)送器，用于發(fā)送編碼的第一圖像信號(hào)、編碼的第二圖像信號(hào)、以及包括相對(duì)于所述圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息。
9.根據(jù)權(quán)利要求8的發(fā)送裝置， 其中，所述圖像幀是運(yùn)動(dòng)圖像幀，并且所述對(duì)象指示信息包括相對(duì)于所述圖像幀的區(qū)域的圖像的時(shí)間同步信息。
10.根據(jù)權(quán)利要求8的發(fā)送裝置， 其中，所述對(duì)象指示信息插入所述第一圖像信號(hào)或所述第二圖像信號(hào)的圖像幀的畫面報(bào)頭中。
11.根據(jù)權(quán)利要求8的發(fā)送裝置，其中，所述對(duì)象指示信息在與所述第一圖像信號(hào)和所述第二圖像信號(hào)的分離流中發(fā)送，并且通過(guò)時(shí)間戳與所述第一圖像信號(hào)和所述第二圖像信號(hào)相關(guān)聯(lián)。
12.根據(jù)權(quán)利要求8的發(fā)送裝置，還包括 圖像分離部分，用于從所述圖像幀分離所述區(qū)域的圖像， 其中，所述第二編碼器編碼對(duì)應(yīng)于由所述圖像分離部分分離的所述區(qū)域的圖像的所述第二圖像信號(hào)。
13.根據(jù)權(quán)利要求12的發(fā)送裝置， 其中，所述圖像分離部分根據(jù)對(duì)應(yīng)于所述區(qū)域的對(duì)象的運(yùn)動(dòng)，改變所述圖像幀內(nèi)所述區(qū)域的位置的同吋，從所述圖像幀分離所述區(qū)域的圖像。
14.根據(jù)權(quán)利要求8的發(fā)送裝置， 其中，在所述第一圖像信號(hào)的第一圖像幀的尺寸和所述第二圖像信號(hào)的圖像幀的尺寸相同的情況下，所述發(fā)送器不發(fā)送所述對(duì)象指示信息。
15.根據(jù)權(quán)利要求8的發(fā)送裝置， 其中，所述第一編碼器和所述第二編碼器通過(guò)不同編碼方法執(zhí)行各自編碼。
16.ー種通信系統(tǒng)，包括 發(fā)送裝置，包含 第一編碼器，用于編碼第一圖像信號(hào)， 第二編碼器，用于編碼對(duì)應(yīng)于所述第一圖像信號(hào)的圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)，以及 發(fā)送器，用于發(fā)送編碼的第一圖像信號(hào)、編碼的第二圖像信號(hào)、以及包括相對(duì)于所述圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及接收裝置，包含 第一解碼器，用于解碼所述第一圖像信號(hào)； 第二解碼器，用于解碼所述第二圖像信號(hào)； 信息獲取部分，用于獲取所述對(duì)象指示信息；以及 視頻覆蓋部分，用于基于包括在所述對(duì)象指示信息中的位置信息，使得所述區(qū)域的圖像覆蓋所述第一圖像信號(hào)的所述第一圖像幀，以生成第二圖像幀。
17.一種接收裝置控制方法，包括以下步驟 解碼第一圖像信號(hào)； 解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào); 獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及 基于位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。
18.—種程序，用于使得計(jì)算機(jī)用作 用于解碼第一圖像信號(hào)的裝置； 用于解碼對(duì)應(yīng)于所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的圖像的第二圖像信號(hào)的裝置； 用于獲取包括相對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息的裝置；以及用于基于位置信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀的裝置。
19.一種接收裝置，包括 第一解碼器，用于解碼第一圖像信號(hào)； 信息獲取部分，用于獲取所述第一圖像信號(hào)的第一圖像幀的至少一部分區(qū)域的空間位置信息，以及包括相對(duì)于所述第一圖像幀的區(qū)域的偏移量的對(duì)象指示信息；以及 視頻覆蓋部分，用于基于所述對(duì)象指示信息使得所述區(qū)域的圖像覆蓋所述第一圖像幀，以生成第二圖像幀。
20.一種接收裝置，包括第一解碼器，用于解碼對(duì)應(yīng)于從靜態(tài)圖像的源圖像裁剪的第一圖像的第一圖像信號(hào)；第二解碼器，用于解碼對(duì)應(yīng)于從靜態(tài)圖像的源圖像裁剪的第二圖像的第二圖像信號(hào)；位置信息獲取部分，用于獲取所述第一圖像和所述第二圖像的空間位置信息；以及顯示器，用于在基于位置信息相對(duì)偏移所述第一圖像和所述第二圖像的狀態(tài)下，周期性地顯示所述第一圖像和所述第二圖像。
全文摘要
公開了一種接收設(shè)備，其提供有第一解碼器(206)，用于解碼第一圖像信號(hào)；第二解碼器(208)，用于解碼對(duì)應(yīng)于由所述第一圖像信號(hào)產(chǎn)生的第一圖像幀的至少一部分的區(qū)域的圖像的第二圖像信號(hào)；CPU(202)，用于獲取包括對(duì)于所述第一圖像幀的區(qū)域的空間位置信息的對(duì)象指示信息；以及對(duì)象再現(xiàn)單元(210)，用于根據(jù)所述位置信息合成用于第一圖像幀的區(qū)域的圖像，并且生成第二圖像幀。
文檔編號(hào)H04N13/00GK102804791SQ20118001396
公開日2012年11月28日 申請(qǐng)日期2011年1月14日 優(yōu)先權(quán)日2010年1月22日
發(fā)明者塚越郁夫 申請(qǐng)人:索尼公司