專利名稱:立體圖像數(shù)據(jù)傳輸裝置和立體圖像數(shù)據(jù)接收裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及立體圖像數(shù)據(jù)傳輸裝置和立體圖像數(shù)據(jù)接收裝置,并且更具體地涉及能夠有利地顯示如隱藏字幕信息、字幕信息、圖形信息和文本信息的重疊信息的立體圖像數(shù)據(jù)傳輸裝置等。
背景技術(shù):
例如,在PTL 1中,提出了使用電視廣播電波傳輸立體圖像數(shù)據(jù)的方法。在此情況下,傳輸包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像,并且電視接收機(jī)利用雙眼視差執(zhí)行立體圖像顯示。圖131圖示了利用雙眼視差的立體圖像顯示中屏幕上對象的左和右圖像的顯示位置與立體圖像的再現(xiàn)位置之間的關(guān)系。例如,對于以如圖所示的方式,其左圖像La和右圖像Ra顯示在屏幕上分別向右和向左偏移的對象A,立體圖像的再現(xiàn)位置位于屏幕表面的前面,因?yàn)樽蠛陀乙暰€在屏幕表面的前面交叉。DI^代表水平方向上對象A的視差矢量。同樣,例如,對于以如圖所示的方式,其左圖像Lb和右圖像Rb顯示在屏幕上相同位置的對象B,立體圖像的再現(xiàn)位置位于屏幕表面上,因?yàn)樽蠛陀乙暰€在屏幕表面上交叉。 此外,例如,對于以如圖所示的方式,其左圖像Lc和右圖像Rc顯示在屏幕上分別向左和向右偏移的對象C,立體圖像的再現(xiàn)位置位于屏幕表面的后面,因?yàn)樽蠛陀乙暰€在屏幕表面的后面交叉。DPc代表水平方向上對象C的視差矢量。引用列表專利文獻(xiàn)PTL 1 日本未審專利申請公開No. 2005-6114
發(fā)明內(nèi)容
技術(shù)問題如上所述,在立體圖像顯示中,通常觀看者通過利用雙眼視差感覺立體圖像的透視圖。希望要重疊在圖像上的重疊信息(例如,如隱藏字幕信息、字幕信息、圖形信息或文本信息)不但在二維空間方面而且在三維深度感方面與立體圖像顯示相關(guān)聯(lián)地表現(xiàn)。例如,在作為隱藏字幕信息或字幕信息的字幕要在圖像上重疊并且顯示(覆蓋顯示)的情況下,如果字幕在透視方面不在圖像中最近對象的前面顯示,則觀看者可能感覺透視的不一致。此外,同樣希望在其它圖形信息或文本信息要在圖像上重疊和顯示的情況下,根據(jù)圖像中每個(gè)對象的透視執(zhí)行視差調(diào)整以便保持透視的一致性。本發(fā)明的目的是在如字幕信息、隱藏字幕信息、圖形信息或文本信息的重疊信息的顯示中,在重疊信息和圖像中的每個(gè)對象之間保持透視的一致性。對于問題的解決方案本發(fā)明的概念在于一種立體圖像數(shù)據(jù)傳輸裝置,包括立體圖像數(shù)據(jù)輸出單元,其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);重疊信息數(shù)據(jù)輸出單元,其輸出要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù);視差信息輸出單元,其輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及傳輸單元,其傳輸從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)、從重疊信息數(shù)據(jù)輸出單元輸出的重疊信息的數(shù)據(jù)、以及從視差信息輸出單元輸出的視差信息,其中傳輸單元使用相同的基本流傳輸至少視差信息和重疊信息的數(shù)據(jù),使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。在本發(fā)明中,由立體圖像數(shù)據(jù)輸出單元輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。此外,由重疊信息數(shù)據(jù)輸出單元輸出要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù)。這里,重疊信息意味著要重疊在圖像上的信息,如隱藏字幕信息或用于顯示字幕的字幕信息。此外,由視差信息輸出單元輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息。 然后,通過傳輸單元傳輸上述立體圖像數(shù)據(jù)、上述重疊信息的數(shù)據(jù)、以及上述視差信息。這里,使用相同的基本流傳輸至少視差信息和重疊信息的數(shù)據(jù),使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。以此方式,在本發(fā)明中,視差信息和重疊信息的數(shù)據(jù)配置為以可標(biāo)識的方式使用相同的基本流傳輸,并且在接收側(cè),可以從基本流有利地獲取重疊信息以及視差信息的數(shù)據(jù)。然后,在接收側(cè),使用視差信息可以將適當(dāng)?shù)囊暡罱o到要重疊在左眼圖像和右眼圖像的相同的重疊信息(如字幕信息或隱藏字幕信息)。因此,在重疊信息的顯示時(shí),重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。在本發(fā)明中,例如,重疊信息數(shù)據(jù)可以已經(jīng)添加了用于指示是否存在與重疊信息的數(shù)據(jù)相關(guān)聯(lián)的視差信息的標(biāo)記信息。在接收側(cè),適當(dāng)標(biāo)記信息,可能容易地掌握是否存在與重疊信息的數(shù)據(jù)相關(guān)聯(lián)的視差信息。此外,在本發(fā)明中,例如,視差信息可以包括要在預(yù)定數(shù)目的屏幕區(qū)域中使用的一條或多條視差信息,并且指示一條視差信息是否由預(yù)定數(shù)目的屏幕區(qū)域共享的共享信息可能添加到視差信息。在接收側(cè),使用共享信息,可能確定發(fā)送的視差信息是否是要在預(yù)定數(shù)目的屏幕區(qū)域中公用的一條視差信息,并且可能有效地執(zhí)行視差信息獲取處理等。此外,在本發(fā)明中,例如,視差信息可以是特定服務(wù)使用的視差信息或通用視差信息,并且視差信息可能已經(jīng)添加了用于標(biāo)識特定服務(wù)使用的視差信息和通用視差信息的使用信息。這里,例如,當(dāng)視差信息是特定服務(wù)使用的視差信息時(shí),視差信息是屬于其中要顯示重疊信息的區(qū)域的視差信息,并且當(dāng)視差信息是通用視差信息時(shí),視差信息是屬于通過將屏幕劃分為預(yù)定數(shù)目的部分所獲得的每個(gè)子區(qū)域的視差信息。在接收側(cè),利用使用信息, 可能確定發(fā)送的視差信息是特定服務(wù)使用的視差信息或通用視差信息,并且可能適當(dāng)?shù)厥褂冒l(fā)送的視差信息。此外,在本發(fā)明中,例如,視差信息是在其期間顯示重疊信息的預(yù)定數(shù)目的幀的時(shí)段期間公用的視差信息,或者是在預(yù)定數(shù)目的幀的時(shí)段期間順序更新的視差信息,并且視差信息可能已經(jīng)添加了指示在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息的標(biāo)記信息。在此情況下,可能根據(jù)例如圖像的內(nèi)容,選擇性地傳輸在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息。也就是說,在圖像的移動大的情況下,傳輸在各個(gè)幀中順序更新的視差信息,使得在接收側(cè),可以根據(jù)圖像的內(nèi)容的改變動態(tài)改變要給到重疊信息的視差。此外,在圖像的移動小的情況下,傳輸在各個(gè)幀中公用的視差信息, 因此允許抑制視差信息的數(shù)據(jù)量。此外,在本發(fā)明中,例如,在各個(gè)幀中順序更新的視差信息可以配置為包括關(guān)于預(yù)定數(shù)目的幀的時(shí)段期間的第一幀的視差信息,以及關(guān)于相對于關(guān)于之前幀的視差信息的第二和隨后幀的偏移信息。在此情況下,可以已知視差信息的數(shù)據(jù)量。此外,在本發(fā)明中,例如,視差信息可能已經(jīng)添加了偏移目標(biāo)信息,其基于要重疊在基于左眼圖像數(shù)據(jù)的圖像上的重疊信息以及要重疊在基于右眼圖像數(shù)據(jù)的圖像上的重疊信息中的視差信息,指定要偏移的重疊信息。利用偏移目標(biāo)指定信息,可能僅偏移要重疊在左眼圖像上的重疊信息,僅偏移要重疊在右眼圖像上的重疊信息,或者偏移要重疊在左眼圖像和右眼圖像兩者的重疊信息。此外,本發(fā)明的另一概念在于一種立體圖像數(shù)據(jù)接收裝置,包括接收單元,其接收包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù)、以及用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及圖像數(shù)據(jù)處理單元,其使用由接收單元接收的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)、由接收單元接收的視差信息、以及由接收單元接收的重疊信息的數(shù)據(jù), 給出視差到要重疊在左眼圖像和右眼圖像上的相同的重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像信息的數(shù)據(jù)以及其上已經(jīng)重疊重疊信息的右眼圖像信息的數(shù)據(jù),其中使用相同的基本流至少傳輸由接收單元接收的視差信息和重疊信息的數(shù)據(jù), 使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。在本發(fā)明中,通過接收側(cè)接收包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)以及視差信息和重疊信息的數(shù)據(jù)。這里,使用相同的基本流傳輸視差信息和重疊信息的數(shù)據(jù),使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。因此,在接收單元中,可以基于標(biāo)識信息從相同的基本流有利地獲取視差信息和重疊信息的數(shù)據(jù)。由圖像數(shù)據(jù)處理單元使用左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)、視差信息和重疊信息的數(shù)據(jù),給出視差到要重疊在左眼圖像和右眼圖像上的相同的重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像信息的數(shù)據(jù)以及其上已經(jīng)重疊重疊信息的右眼圖像信息的數(shù)據(jù)。以此方式,在本發(fā)明中,可以使用適于重疊信息的視差信息,給出適當(dāng)?shù)囊暡畹揭丿B在左眼圖像和右眼圖像上的重疊信息(如隱藏字幕信息或字幕信息)。因此,在重疊信息的顯示時(shí),重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。此外,本發(fā)明的另一概念在于一種立體圖像數(shù)據(jù)傳輸裝置,包括立體圖像數(shù)據(jù)輸出單元,其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);重疊信息數(shù)據(jù)輸出單元,其輸出要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù);
視差信息輸出單元,其輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及傳輸單元,其傳輸包括從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)、從重疊信息數(shù)據(jù)輸出單元輸出的重疊信息的數(shù)據(jù)、以及從視差信息輸出單元輸出的視差信息的傳送流,其中傳送流中已經(jīng)插入指示傳送流中包括的每個(gè)基本流屬于哪個(gè)節(jié)目的PSI信息和SI信息,并且其中包括至少用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在PSI 信息或SI信息中的預(yù)定位置。在本發(fā)明中,由立體圖像數(shù)據(jù)輸出單元輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。此外,由視差信息輸出單元輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息。這里,重疊信息意味著要重疊在圖像上的信息,如隱藏字幕信息或用于顯示字幕的信息。此外,由視差信息輸出單元輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息。由傳輸單元傳輸包括立體圖像數(shù)據(jù)、重疊信息的數(shù)據(jù)、以及視差信息的傳送流。這里,傳送流中已經(jīng)插入指示傳送流中包括的每個(gè)基本流屬于哪個(gè)節(jié)目的PSI (節(jié)目特定信息)信息。此外,傳送流中已經(jīng)插入用于逐個(gè)節(jié)目發(fā)送屬性信息的SI(服務(wù)信息)信息。在本發(fā)明中,包括至少用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在PSI信息或SI信息中的預(yù)定位置。以此方式,在本發(fā)明中,傳輸用于顯示立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)以及視差信息。因此,在接收側(cè),使用視差信息可以給出適當(dāng)?shù)囊暡畹揭丿B在左眼圖像和右眼圖像上的相同的重疊信息(如隱藏字幕信息或字幕信息)。因此,在重疊信息的顯示時(shí),重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。此外,在本發(fā)明中,描述符安排在PSI信息或SI信息中的預(yù)定位置,并且描述符包含用于標(biāo)識包含視差信息的基本流的標(biāo)識信息。因此,在接收側(cè),以用該標(biāo)識信息掌握包含視差信息的基本流,并且可以容易地獲取視差信息。在本發(fā)明中,例如,可以在基本流環(huán)路中安排描述符,其中安排標(biāo)識包含重疊信息的數(shù)據(jù)的標(biāo)識信息的基本流。在此情況下,在接收側(cè),可以從其中安排描述符的基本流環(huán)路容易地掌握包含對其應(yīng)用視差信息的重疊信息的數(shù)據(jù)的基本流,并且可以容易地獲取與該視差信息相關(guān)聯(lián)的重疊信息的數(shù)據(jù)。此外,在本發(fā)明中,例如,描述符中可以已經(jīng)描述指示包含重疊信息的數(shù)據(jù)的基本流是否包含視差信息的標(biāo)記信息。在此情況下,在接收側(cè),可以用該標(biāo)記信息確定包含重疊信息的數(shù)據(jù)的基本流是否包含視差信息。然后,當(dāng)包含視差信息時(shí),可以忽略使用包含在上述描述符中的用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的確定。此外,在本發(fā)明中,例如,視差信息可以是特定服務(wù)使用的視差信息或通用視差信息,并且描述符可以已經(jīng)描述了用于標(biāo)識特定服務(wù)使用的視差信息和通用視差信息的使用信息。在此情況下,在接收側(cè),利用使用信息,包括用于識別基本流的識別信息。因此,在接收側(cè),可以確定由上述標(biāo)識信息指示的基本流中包括的視差信息是特定服務(wù)使用的視差信息或通用視差信息,并且可以適當(dāng)?shù)厥褂靡暡钚畔ⅰ4送?,本發(fā)明的另一概念在于一種立體圖像數(shù)據(jù)接收裝置,包括數(shù)據(jù)獲取單元,其從傳送流獲取包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù)、以及用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及圖像數(shù)據(jù)處理單元,其使用由數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)、由數(shù)據(jù)獲取單元獲取的視差信息、以及由數(shù)據(jù)獲取單元獲取的重疊信息的數(shù)據(jù),給出視差到要重疊在左眼圖像和右眼圖像上的相同的重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像信息的數(shù)據(jù)以及其上已經(jīng)重疊重疊信息的右眼圖像信息的數(shù)據(jù),其中傳送流中已經(jīng)插入指示傳送流中包括的每個(gè)基本流屬于哪個(gè)節(jié)目的PSI信息和SI信息,并且其中包括至少用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在PSI 信息或SI信息中的預(yù)定位置。在本發(fā)明中,通過數(shù)據(jù)獲取單元從傳送流獲取左眼圖像數(shù)據(jù)、視差信息和重疊信息的數(shù)據(jù)。包括用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在插入傳送流的 PSI信息中。因此,使用該標(biāo)識信息,可以掌握包含視差信息的基本流,并且可以容易地獲取視差信息。此外,由圖像數(shù)據(jù)處理單元使用左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù)以及視差信息,給出視差到要重疊在左眼圖像和右眼圖像的相同重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像的數(shù)據(jù)和其上已經(jīng)重疊重疊信息的右眼圖像的數(shù)據(jù)。以此方式,在本發(fā)明中,可以使用適于重疊信息的視差信息(使用偏移目標(biāo)指定信息),給出適當(dāng)?shù)囊暡畹揭丿B在左眼圖像和右眼圖像上的重疊信息(如隱藏字幕信息或字幕信息)。因此,在重疊信息的顯示時(shí),重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。本發(fā)明的有益效果根據(jù)本發(fā)明,可以使用適于重疊信息的視差信息,給出適當(dāng)?shù)囊暡畹揭丿B在左眼圖像和右眼圖像上的重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息),并且,在重疊信息的顯示時(shí),重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。
圖1是圖示作為本發(fā)明的實(shí)施例的立體圖像顯示系統(tǒng)的示例配置的框圖。圖2是圖示廣播站中的傳輸數(shù)據(jù)生成單元的示例配置的框圖。
圖3是圖示1920 X IOSOp像素格式的圖像數(shù)據(jù)的圖。圖4是包括描述作為立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))傳輸方法的“上下(Top& Bottom)” 方法、“并排(Side By Side) ” 方法和“幀順序(Frame Sequential) ” 方法的圖。圖5是描述檢測右眼圖像相對于左眼圖像的視差矢量的示例的圖。圖6是描述使用塊匹配方法確定視差矢量的圖。
圖7包括圖示視差由矢量檢測單元檢測到的、圖像中的預(yù)定位置處的視差矢量VV 的示例的圖。圖8是圖示視差矢量的傳輸內(nèi)容的圖。圖9包括圖示視差檢測塊示例以及在這種情況下視差矢量的傳輸內(nèi)容的圖。圖10包括描述用于檢測和傳輸視差矢量的定時(shí)的示例的圖。圖11是描述用于檢測和傳輸視差矢量的定時(shí)的示例的圖。圖12是圖示在傳輸數(shù)據(jù)生成單元中多路復(fù)用的數(shù)據(jù)流的示例的圖。圖13是圖示廣播站中的傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖14圖示在廣播站中的傳輸數(shù)據(jù)生成單元中多路復(fù)用的單個(gè)流的示例。圖15是圖示廣播站中的傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖16圖示在廣播站中的傳輸數(shù)據(jù)生成單元中多路復(fù)用的單個(gè)流的示例。圖17包括用于描述在傳輸方法為第一傳輸方法(“上下”方法)的情況下左眼圖形信息和右眼圖形信息的重疊位置等的圖。圖18包括描述在傳輸方法為第一傳輸方法(“上下”方法)的情況下用于生成左眼圖形信息和右眼圖形信息的方法的圖。圖19包括描述在傳輸方法為第二傳輸方法(“并排”方法)的情況下用于生成左眼圖形信息和右眼圖形信息的方法的圖。圖20是描述在傳輸方法為第二傳輸方法(“并排”方法)的情況下用于生成左眼圖形信息和右眼圖形信息的方法的圖。圖21是圖示廣播站中的傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖22是圖示廣播站中的傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖23是圖示在基于像素的視差矢量的值用作單個(gè)像素的亮度值的情況下的圖像示例的圖。圖M是圖示基于塊(Block)的視差矢量的示例的圖。圖25是圖示傳輸數(shù)據(jù)生成單元的視差信息組創(chuàng)建單元中執(zhí)行的小型化 (downsize)處理的示例的圖。圖沈是圖示圖像上字幕和應(yīng)用圖形的顯示示例以及其透視的圖。圖 27 是描述視差序列 ID(Disparity_kquence_id)的圖。圖28是圖示在情況(1)(其中僅發(fā)送通用視差信息組(在與特定服務(wù)沒有關(guān)系的情況下))下創(chuàng)建的視差信息組的示例的圖。圖四是圖示在情況(1)下統(tǒng)一地傳輸與圖像數(shù)據(jù)的每一個(gè)特定時(shí)段的圖像數(shù)據(jù)對應(yīng)的多個(gè)視差信息組(封包視差組)的組等的圖。圖30是圖示在情況(2)(其中僅發(fā)送通用視差信息組(在與特定服務(wù)有關(guān)系的情況下))下創(chuàng)建的視差信息組的示例的圖。圖31是圖示在情況( 下統(tǒng)一地傳輸與圖像數(shù)據(jù)的每一個(gè)特定時(shí)段的圖像數(shù)據(jù)對應(yīng)的多個(gè)視差信息組(封包視差組)的組等的圖。圖32是圖示在分量元素ID與視差矢量之間的關(guān)聯(lián)信息(C0mp0nent_Linked_ Info)的示例的圖。圖33是圖示在情況( 下統(tǒng)一地傳輸與圖像數(shù)據(jù)的每一個(gè)特定時(shí)段的圖像數(shù)據(jù)對應(yīng)的多個(gè)視差信息組(封包視差組)的組等的圖。圖34是圖示在分量元素ID與視差矢量之間的關(guān)聯(lián)信息(C0mp0nent_Linked_ Info)的示例的圖。圖35是圖示要在情況(3)(其中發(fā)送通用視差信息組和特定服務(wù)使用的視差信息組二者)下創(chuàng)建的視差信息組的示例的圖。圖36是圖示在情況C3)下統(tǒng)一地傳輸與圖像數(shù)據(jù)的每一個(gè)特定時(shí)段的圖像數(shù)據(jù)對應(yīng)的多個(gè)視差信息組(封包視差組)的組等的圖。圖37是圖示在分量元素ID與視差矢量之間的關(guān)聯(lián)信息(C0mp0nent_Linked_ Info)的示例的圖。圖38是圖示要在情況(4)(其中僅發(fā)送特定服務(wù)使用的視差信息組)下創(chuàng)建的視差信息組的示例的圖。圖39是圖示在情況(4)下統(tǒng)一地傳輸與圖像數(shù)據(jù)的每一個(gè)特定時(shí)段的圖像數(shù)據(jù)對應(yīng)的多個(gè)視差信息組(封包視差組)的組等的圖。圖40是描述在DVB字幕的情況下使用基本PID(Elementary PID)在字幕片段 (Subtitle Segment)與視差矢量數(shù)據(jù)(Disparity Data)之間的關(guān)聯(lián)性的圖。圖41是示意性圖示視頻基本流的示例結(jié)構(gòu)的圖。圖42是圖示在MPEG2、H. 264 AVC和VC-I編碼方法中用戶數(shù)據(jù)的示例配置的圖。圖43是圖示將視差序列ID(DiSparity_kquence_id)和服務(wù)相關(guān)聯(lián)的視差鏈接描述符(Disparity_Linkage_Descriptor)的示例配置的圖。圖44是圖示視差鏈接描述符(Disparity_Linkage_Descriptor)中的每一條信息的內(nèi)容的圖。圖45包括圖示在將視差信息組插入到圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)的狀態(tài)下將其發(fā)送到接收側(cè)的情況下,以及在將包括視差信息組的視差矢量基本流(PEQ與其它流多路復(fù)用并且將其傳輸?shù)浇邮諅?cè)的情況下,PID的示例的圖。圖46包括圖示添加有“Disparityjequencejd = 1”的視差信息組與字幕相關(guān)聯(lián)(鏈接到字幕)的示例、以及添加有“Disparityjequencejd = 2”的視差信息組與隱藏字幕相關(guān)聯(lián)(鏈接到隱藏字幕)的示例的圖。圖47是圖示視差信息組與字幕相關(guān)聯(lián)的情況的圖。圖48是圖示視差信息組與字幕相關(guān)聯(lián)的情況的圖。圖49是圖示視差信息組與隱藏字幕相關(guān)聯(lián)(其中在將隱藏字幕數(shù)據(jù)插入到圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)的狀態(tài)下將其發(fā)送到接收側(cè))的情況的圖。圖50是圖示視差信息組與隱藏字幕相關(guān)聯(lián)(其中在將隱藏字幕數(shù)據(jù)插入到圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)的狀態(tài)下將其發(fā)送到接收側(cè))的情況的圖。圖51是圖示包括視差信息(Disparityjnformation)的用戶數(shù)據(jù)的詳細(xì)配置的示例的圖。圖52是圖示視差信息(Disparity_Information)的示例配置的圖。圖53是圖示視差信息數(shù)據(jù)(Disparity_Information_Data)中包括的 DSL(Disparity_Information_Link_Information)的配置的圖。圖54是圖示視差信息數(shù)據(jù)(Disparity_Information_Data)中包括的DHI (Disparity_Header_Information)的配置的圖。圖55是圖示視差信息數(shù)據(jù)(Disparity_Information_Data)中包括的 DHI (Disparity_Header_Information)的配置的圖。圖56是圖示視差信息數(shù)據(jù)(Disparity_Information_Data)中包括的 DDS(Disparity_Data_Set)的配置的圖。圖57是圖示DSL、DHI和DDS中每一條信息的內(nèi)容的圖。圖58是圖示DSL、DHI和DDS中每一條信息的內(nèi)容的圖。圖59是圖示DSL、DHI和DDS中每一條信息的內(nèi)容的圖。圖60是圖示DSL、DHI和DDS中每一條信息的內(nèi)容的圖。圖61包括描述DHI中包括的信息“Partition”的圖。圖62是圖示用于將服務(wù)組件與視差信息相關(guān)聯(lián)的視差鏈接描述符的另一示例配置的圖。圖63是圖示視差鏈接描述符中的每一條信息的內(nèi)容的圖。圖64是圖示視差信息(視差數(shù)據(jù))的應(yīng)用范圍的概念的圖。圖65是圖示其中字幕的視差信息嵌入字幕流的情況的圖。圖66是圖示其中字幕的視差信息嵌入視頻流的情況的圖。圖67是圖示其中字幕的視差信息嵌入視差信息流的情況的圖。圖68是圖示其中通用(一般使用)的視差信息嵌入視頻流或視差信息流的情況的圖。圖69是圖示其中通用(一般使用)的視差信息嵌入視頻流或視差信息流的情況的圖。圖70是圖示其中隱藏字幕的視差信息嵌入視頻流的情況的圖。圖71是圖示當(dāng)從PES層觀察時(shí)DVB_Subtitling的配置(語法)的圖。圖72是圖示“Segment_type”的每個(gè)值和片段類型之間的對應(yīng)關(guān)系的圖。圖 73 是圖示當(dāng)設(shè)置 “segment_type = 0x40” 時(shí)獲得的 “disparity_data_set_ segment”的示例配置的圖。圖74是圖示“diSparity_data”的配置(語法)的示例的圖。圖75是圖示“diSparity_data”的配置中每一條信息的內(nèi)容的圖。圖76是圖示“diSparity_data”的配置中每一條信息的內(nèi)容的圖。圖 77 是圖示“segment_type = 0x10” 的“page_composition_segment” 的示例配置的圖。圖78是圖示包括視差信息的用戶數(shù)據(jù)的示例配置的圖(在MPEG4-AVC的情況下)。圖79 是圖示“disparity_data_set” 的配置的圖。圖80是圖示包括視差信息(disparity_data)的PES_data_fieldno的示例配置的圖。圖81 是圖示“disparity_data_set” 的配置的圖。圖82是圖示其中視差信息嵌入字幕流的情況的圖。圖83是圖示其中視差信息嵌入視頻流的情況的圖。
圖84是圖示其中視差信息嵌入視差信息流的情況的圖。圖85是圖示廣播站中傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖86是圖示廣播站中傳輸數(shù)據(jù)生成單元的另一示例配置的框圖。圖87是圖示包括視差信息的用戶數(shù)據(jù)的詳細(xì)配置的示例的圖。圖88是圖示包括視差信息的用戶數(shù)據(jù)的詳細(xì)配置中的每一條信息的內(nèi)容的圖。圖89是圖示視差信息的詳細(xì)配置的示例的圖。圖90是圖示視差信息的詳細(xì)配置中的每一條信息的內(nèi)容的圖。圖91是圖示視差信息的詳細(xì)配置中的每一條信息的內(nèi)容的圖。圖92是圖示視差信息的配置中的數(shù)據(jù)量(數(shù)據(jù)大小)的計(jì)算示例的圖。圖93包括圖示在傳輸方法是第二傳輸方法(“并排”方法)的情況下左眼圖像信息和右眼圖形信息的重疊位置的圖。圖94包括圖示將基于從位流數(shù)據(jù)提取的并且使用傳統(tǒng)方法傳輸?shù)膱D形數(shù)據(jù)的圖形圖像照原樣重疊在左眼圖像和右眼圖像上的狀態(tài)的圖。圖95包括圖示在時(shí)間T0、T1、T2和T3處在三個(gè)對象位置的視差矢量(觀察矢量) 的圖。圖96是圖示圖像上的字幕(圖形信息)、以及背景、前景對象和字幕的透視 (perspective)的顯示示例的圖。圖97包括圖示圖像上的字幕(圖形信息)以及用于顯示字幕的左眼圖形信息LGI 和右眼圖形信息RGI的顯示示例的圖。圖98包括描述在圖像中的多個(gè)位置處檢測到的視差矢量中與其重疊位置對應(yīng)的視差矢量用作視差矢量的圖。圖99包括描述在圖像中的多個(gè)位置處檢測到的視差矢量中與其重疊位置對應(yīng)的視差矢量用作視差矢量的圖。圖100包括描述在圖像中的多個(gè)位置處檢測到的視差矢量中與其重疊位置對應(yīng)的視差矢量用作視差矢量的圖。圖101包括圖示在圖像內(nèi)存在對象A、B和C并且指示每個(gè)對象的注解的文本信息重疊在鄰近對象的位置上的圖。圖102是圖示立體圖像顯示系統(tǒng)中包括的機(jī)頂盒的示例配置的框圖。圖103是圖示機(jī)頂盒的位流處理單元的示例配置的框圖。圖104是圖示在電視顯示器的方向上觀看時(shí)在左手側(cè)的視頻對象具有大視差矢量VVl的情況下,揚(yáng)聲器輸出控制示例的圖。圖105是圖示從廣播站發(fā)送的每一個(gè)數(shù)據(jù)流與視差矢量之間的對應(yīng)關(guān)系的圖。圖106是圖示從廣播站發(fā)送的每一個(gè)數(shù)據(jù)流與視差矢量之間的對應(yīng)關(guān)系的圖。圖107是圖示從廣播站發(fā)送的圖像數(shù)據(jù)、隱藏字幕數(shù)據(jù)、圖形數(shù)據(jù)和視差信息組之間的對應(yīng)關(guān)系的圖。圖108是圖示機(jī)頂盒中包括的位流處理單元的另一示例配置的框圖。圖109是圖示從廣播站發(fā)送的每一個(gè)數(shù)據(jù)流與視差矢量之間的對應(yīng)關(guān)系的圖。圖110是圖示從廣播站發(fā)送的每一個(gè)數(shù)據(jù)流與視差矢量之間的對應(yīng)關(guān)系的圖。圖111是圖示從廣播站發(fā)送的每一個(gè)數(shù)據(jù)流與視差矢量之間的對應(yīng)關(guān)系的圖。
圖112是圖示從廣播站發(fā)送的圖像數(shù)據(jù)、隱藏字幕數(shù)據(jù)、圖形數(shù)據(jù)和視差信息組之間的對應(yīng)關(guān)系的圖。圖113是圖示機(jī)頂盒中包括的位流處理單元的另一示例配置的框圖。圖114是圖示機(jī)頂盒中包括的位流處理單元的另一示例配置的框圖。圖115是圖示機(jī)頂盒中包括的位流處理單元的另一示例配置的框圖。圖116是圖示基于單個(gè)幀中順序更新的視差信息,給出視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息的處理的示例的圖。圖117是圖示機(jī)頂盒的另一示例配置的框圖。圖118包括圖示字幕信息和圖形信息重疊在左眼圖像和右眼圖像上的示例的圖。圖119是圖示立體圖像顯示系統(tǒng)中包括的電視接收機(jī)的示例配置的框圖。圖120是圖示HDMI傳輸單元(HDMI源)和HDMI接收單元(HDMI宿)的示例配置的框圖。圖121是圖示HDMI傳輸單元中包括的HDMI傳輸器以及HDMI接收單元中包括的 HDMI接收器的示例配置的框圖。圖122是圖示TMDS傳輸數(shù)據(jù)的示例結(jié)構(gòu)(在傳輸具有水平方向1920像素和垂直方向1080線的圖像數(shù)據(jù)的情況下)的圖。圖123是圖示在源裝置和宿裝置之間連接的HDMI線纜的HDMI端子的管腳陣列 (類型A)的圖。圖124是圖示E-EDID的示例數(shù)據(jù)結(jié)構(gòu)的圖。圖125是圖示廠商專用區(qū)域(HDMI廠商專用數(shù)據(jù)塊)的示例數(shù)據(jù)結(jié)構(gòu)的圖。圖1 是圖示作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的幀封裝方法的3D視頻格式的圖。圖127是圖示作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的線交替方法的3D視頻格式的圖。圖1 是圖示作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的并排(全) (side-by-side (Full))方法的3D視頻格式的圖。圖1 是描述用于將視差矢量與分量元素ID相關(guān)聯(lián)的另一種方法的圖。圖130是圖示立體圖像顯示系統(tǒng)的另一個(gè)示例配置的圖。圖131是圖示利用雙眼視差的立體圖像顯示中屏幕上對象的左右圖像的顯示位置與立體圖像的再現(xiàn)位置之間的關(guān)系的圖。
具體實(shí)施例方式以下將描述用于執(zhí)行本發(fā)明的方式(以下稱為“實(shí)施例”)。注意,該描述將按以下順序給出。1.實(shí)施例2.示例修改<1、實(shí)施例〉[立體圖像顯示系統(tǒng)的示例配置]圖1圖示了作為實(shí)施例的立體圖像顯示系統(tǒng)10的配置示例。該立體圖像顯示系統(tǒng)10包括廣播站100、機(jī)頂盒(STB =Set Top Box) 200和電視接收機(jī)300。機(jī)頂盒200和電視接收機(jī)300經(jīng)由HDMI (高清晰度多媒體接口)線纜400相互連接。機(jī)頂盒200提供有HDMI端子202。電視接收機(jī)300提供有HDMI端子302。HDMI線纜 400的一端連接到機(jī)頂盒200的HDMI端子202,而HDMI線纜400的另一端連接到電視接收機(jī)300的HDMI端子302。[廣播站的描述]廣播站100傳輸在廣播波上攜帶的位流數(shù)據(jù)。該位流數(shù)據(jù)包含包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、以及重疊信息數(shù)據(jù),還包含視差信息(視差矢量)等。這里,重疊信息數(shù)據(jù)包括隱藏字幕(closed caption)數(shù)據(jù)、字幕數(shù)據(jù)、圖形數(shù)據(jù)、 文本數(shù)據(jù)等。[傳輸數(shù)據(jù)生成單元的示例配置]圖2圖示生成上述位流數(shù)據(jù)的廣播站100中的傳輸數(shù)據(jù)生成單元110的配置示例。這個(gè)示例配置是傳輸視差矢量作為數(shù)字信息的示例。該傳輸數(shù)據(jù)生成單元110包括相機(jī)IllL和111R、視頻成幀單元112、視頻編碼器113、視差矢量檢測單元114和視差矢量編碼器115。此外,該傳輸數(shù)據(jù)生成單元110包括麥克風(fēng)116、音頻編碼器117、字幕/圖形產(chǎn)生單元118、字幕/圖形編碼器119、文本產(chǎn)生單元120、文本編碼器121和多路復(fù)用器122。注意,在該實(shí)施例中,假設(shè)文本產(chǎn)生單元120還用作隱藏字幕數(shù)據(jù)產(chǎn)生單元。隱藏字幕數(shù)據(jù)用于隱藏字幕的字幕顯示的文本數(shù)據(jù)。相機(jī)IllL捕獲左眼圖像并且獲得用于立體圖像顯示的左眼圖像數(shù)據(jù)。相機(jī)IllR 捕獲右眼圖像并且獲得用于立體圖像顯示的右眼圖像數(shù)據(jù)。視頻成幀單元112將由相機(jī) IllL獲得的左眼圖像數(shù)據(jù)以及由相機(jī)IllR獲得的右眼圖像數(shù)據(jù)修改和處理為根據(jù)傳輸方法的狀態(tài)。[立體圖像數(shù)據(jù)的傳輸方法的示例]盡管這里給出以下第一至第三方法作為立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))的傳輸方法,但是可以使用任何其它傳輸方法。這里如圖3所示,將在這樣的情況的背景下給出描述左眼(L)和右眼(R)的每個(gè)圖像數(shù)據(jù)是具有確定的分辨率(例如,作為示例, 1920 XlOSOp的像素格式)的圖像數(shù)據(jù)。第一傳輸方法是“上下”方法,如圖4(a)所示,其是這樣的方法在垂直方向的上一半中傳輸左眼圖像數(shù)據(jù)的每一行的數(shù)據(jù),而在垂直方向的下一半中傳輸右眼圖像數(shù)據(jù)的每一行的數(shù)據(jù)。在這種情況下,因?yàn)樽笱蹐D像數(shù)據(jù)和右眼圖像數(shù)據(jù)的行被稀疏到1/2,所以垂直分辨率減小到原始信號的分辨率的一半。第二傳輸方法是“并排”方法,如圖4(b)所示,其是這樣的方法在水平方向的前一半中發(fā)送左眼圖像數(shù)據(jù)的像素?cái)?shù)據(jù),而在水平方向的后一半中發(fā)送右眼圖像數(shù)據(jù)的像素?cái)?shù)據(jù)。在這種情況下,左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的每一個(gè)的水平方向上的像素?cái)?shù)據(jù)稀疏到1/2。水平分辨率是當(dāng)前信號的一半。第三傳輸方法是“幀順序”方法,如圖4(c)所示,其是這樣的方法在對于每一場順序切換左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的同時(shí),發(fā)送這些左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。返回圖2,視頻編碼器113使用MPEG4-AVC,MPEG2,VC-I等對由視頻成幀單元112修改和處理的立體圖像數(shù)據(jù)執(zhí)行編碼,以獲得編碼視頻數(shù)據(jù)。此外,視頻編碼器113在其后級包括流格式化器113a。流格式化器113a允許生成視頻的基本流,該視頻的基本流在有效載荷部分包括視頻數(shù)據(jù)。視差矢量檢測單元114基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)檢測視差矢量,該視差矢量是圖像內(nèi)預(yù)定位置處左眼圖像和右眼圖像之一相對于另一個(gè)的視差信息。這里,圖像內(nèi)的預(yù)定位置包括所有像素位置、多個(gè)像素形成的每一個(gè)區(qū)域的代表性位置、要重疊重疊信息(這里為圖形信息或文本信息)的區(qū)域的代表性位置等。[視差矢量的檢測]將描述視差矢量的檢測示例。這里,將給出對于檢測右眼圖像相對于左眼圖像的視差矢量的示例的描述。如圖5所示,假設(shè)將左眼圖像是檢測圖像,并且右眼圖像是參考圖像。在該示例中,檢測位置(xi,yi)和(xj,yj)處的視差矢量。作為示例,將對于檢測位置(xi,yi)處的視差矢量的情況進(jìn)行描述。在這種情況下,例如其左上像素在像素位置(xi,yi)的8X8或16X16的像素塊(視差檢測塊)Bi設(shè)置在左眼圖像中。然后,在右眼圖像中搜索匹配像素塊Bi的像素塊。在這種情況下,在右眼圖像中設(shè)置以位置(xi,yi)作為中心的搜索范圍,并且例如通過將搜索范圍中的每個(gè)像素當(dāng)作感興趣像素,順序地設(shè)置與上述像素塊Bi類似的 8X8或16X16的對照塊。對于每一個(gè)對應(yīng)像素確定像素塊Bi與順序設(shè)置的每個(gè)對照塊之間的絕對差值的總和。這里,如圖6所圖示,當(dāng)像素塊Bi的像素值由L(x,y)表示,并且對照塊的像素值由 R(x,y)表示時(shí),像素塊Bi與某個(gè)對照塊之間的絕對差值的總和被表示為Σ L(x,y)-R(x, y)l。當(dāng)在右眼圖像中設(shè)置的搜索范圍包括η個(gè)像素時(shí),最終確定η個(gè)總和Sl至Sn,并且選擇它們中的最小總和Smin。然后,從對其獲得了總和Smin的對照塊獲得左上像素的位置(xi' , yi')。從而,以如(xi' -xi, yi' _yi)的方式檢測位置(xi,yi)處的視差矢量。雖然將省略詳細(xì)描述,但是同樣通過在左眼圖像中設(shè)置其左上像素處于位置(xj,yj) 的例如8X8或16X16的像素塊,使用類似處理步驟檢測在位置(xj,yj)的視差矢量。圖7(a)圖示圖像中的預(yù)定位置處的視差矢量VV(其由視差矢量檢測單元114檢測)的示例。這種情況意味著如圖7(b)所示,在該圖像內(nèi)的預(yù)定位置,移位視差矢量VV 的左眼圖像(檢測圖像)與右眼圖像(參考圖像)交迭。返回參考圖2,視差矢量編碼器115生成視差矢量基本流,其包括由視差矢量檢測單元114等檢測到的視差矢量。這里,視差矢量基本流包括下列內(nèi)容。即,將ID (ID_Block)、 垂直位置信息(Vertical_Position)、水平位置信息(Horizontal_Position)和視差矢量 (View_Vector)設(shè)置為一組。然后,將這個(gè)組重復(fù)N(其數(shù)量等于視差檢測塊的數(shù)量)次。圖8圖示了視差矢量的傳輸內(nèi)容。視差矢量包括垂直方向分量(VieW_VeCtor_ Vertical)和水平方向分量(View_Vector_Horizontal)。注意到,視差檢測塊的垂直和水平位置是在垂直方向和水平方向上從圖像的左上原點(diǎn)到該塊的左上像素的偏移值。對于每一個(gè)視差矢量的傳輸分配視差檢測塊的ID,以便確保到要在圖像上重疊和顯示的重疊信息式樣(諸如隱藏字幕信息、字幕信息、圖形信息、文本信息等)的鏈接。注意到,在圖8的示例中,水平和垂直視差矢量(視差信息)由16位信息表示。然而,視差矢量(視差信息)的位數(shù)不限于16位??梢愿鶕?jù)顯示大小、要給出的視差等使用下述諸如8位的適當(dāng)位數(shù)。例如,如圖9(a)所示,當(dāng)存在視差檢測塊A至F時(shí),如圖9(b)所示,傳輸內(nèi)容包括視差檢測塊A至F的ID、垂直和水平位置信息和視差矢量。例如,在圖9中,對于視差檢測塊A,ID2指示視差檢測塊A的ID,(Ha, Va)指示視差檢測塊A的垂直和水平位置信息,而視差矢量a指示視差檢測塊A的視差矢量。這里,將描述檢測和傳輸視差矢量的定時(shí)。關(guān)于該定時(shí),例如,可以想到下列第一至第四示例。在第一示例中,如圖10(a)所示,該定時(shí)與畫面的編碼同步。在這種情況下,以畫面的單元傳輸視差矢量。畫面的單元是傳輸視差矢量的最小單元。在第二示例中,如圖 10(b)所示,該定時(shí)與視頻場景同步。在這種情況下,以場景的單位傳輸視差矢量。在第三示例中,如圖10(c)所示,該定時(shí)與編碼視頻的I-畫面(幀內(nèi)畫面)或 GOP(畫面組)同步。在第四示例中,如圖11所示,該定時(shí)與要在圖像上重疊和顯示的字幕信息、圖形信息、文本信息等的顯示開始定時(shí)同步。返回參照圖2,麥克風(fēng)116檢測使用相機(jī)IllL和IllR拍攝的圖像對應(yīng)的音頻,并且獲得音頻數(shù)據(jù)。音頻編碼器117對由麥克風(fēng)116獲得的音頻數(shù)據(jù)執(zhí)行使用MPEG-2音頻 AAC等的編碼,并且生成音頻的基本流。字幕/圖形產(chǎn)生單元118產(chǎn)生要重疊在圖像上的字幕信息和圖形信息的數(shù)據(jù)(字幕數(shù)據(jù)、圖形數(shù)據(jù))。字幕信息例如是字幕。此外,圖形信息例如是徽標(biāo)(logo)等。字幕數(shù)據(jù)和圖形數(shù)據(jù)是位圖數(shù)據(jù)。字幕數(shù)據(jù)和圖形數(shù)據(jù)具有添加到其的指示在圖像上的重疊位置的空閑(idling)偏移信息。該空閑偏移信息指示例如在垂直方向和水平方向上從圖像的左上原點(diǎn)到字幕信息或圖形圖像的重疊位置的左上像素的偏移值。注意,通過DVB(其為歐洲的數(shù)字廣播標(biāo)準(zhǔn))將用以將字幕數(shù)據(jù)作為位圖數(shù)據(jù)傳輸?shù)臉?biāo)準(zhǔn)標(biāo)準(zhǔn)化為DVB_Subtitling,并且所述標(biāo)準(zhǔn)在操作中。字幕/圖形編碼器119接收由字幕/圖形產(chǎn)生單元118產(chǎn)生的字幕信息或圖形信息的數(shù)據(jù)(字幕數(shù)據(jù)、圖形數(shù)據(jù))作為輸入。然后,字幕/圖形編碼器119生成在有效載荷部分中包括這些數(shù)據(jù)塊的基本流。文本產(chǎn)生單元120產(chǎn)生要重疊在圖像上的文本信息的數(shù)據(jù)(文本數(shù)據(jù))。文本信息例如是電子節(jié)目指南、文本廣播的內(nèi)容等。與上述圖形數(shù)據(jù)類似,該文本數(shù)據(jù)已經(jīng)添加了指示在圖像上的重疊位置的空閑偏移信息。該空閑偏移信息指示在垂直方向和水平方向上從圖像的左上原點(diǎn)到文本信息的重疊位置的左上像素的偏移值。注意,文本數(shù)據(jù)的傳輸?shù)氖纠ㄗ鳛楣?jié)目預(yù)約操作的EPG以及美國的數(shù)字地面規(guī)范ATSC中的CC數(shù)據(jù)(隱藏字眷)ο文本編碼器121接收由文本產(chǎn)生單元120產(chǎn)生的文本數(shù)據(jù)作為輸入。然后,文本編碼器121生成在有效載荷部分中包括這些數(shù)據(jù)塊的基本流。多路復(fù)用器122多路復(fù)用從編碼器113、115、117、119和121輸出的分組基本流。 然后,多路復(fù)用器122輸出位流數(shù)據(jù)(傳送流)BSD作為傳輸數(shù)據(jù)。將簡要地描述在圖2中所示的傳輸數(shù)據(jù)生成單元110的操作。在相機(jī)IllL中,拍攝左眼圖像。將由相機(jī)IllL獲得的用于立體圖像顯示的左眼圖像數(shù)據(jù)供應(yīng)到視頻成幀單元112。此外,在相機(jī)IllR中,拍攝右眼圖像。將由相機(jī)IllR獲得的用于立體圖像顯示的右眼圖像數(shù)據(jù)供應(yīng)到視頻成幀單元112。在視頻成幀單元112中,將左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)修改和處理為根據(jù)傳輸方法的狀態(tài),并且獲得立體圖像數(shù)據(jù)(參見圖4(a)至4(c))。將由視頻成幀單元112獲得的立體圖像數(shù)據(jù)供應(yīng)到視頻編碼器113。在視頻編碼器113中,對立體圖像數(shù)據(jù)執(zhí)行使用MPEG4-AVC、MPEG2、VC-1等的編碼,并生成包括編碼視頻數(shù)據(jù)的視頻基本流。將該視頻基本流供應(yīng)到多路復(fù)用器122。此外,通過視頻成幀單元112將由相機(jī)IllL和IllR獲得的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)供應(yīng)到視差矢量檢測單元114。在視差矢量檢測單元114中,基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù),將視差檢測塊設(shè)置到圖像中的預(yù)定位置,并檢測作為關(guān)于左眼圖像和右眼圖像之一相對于另一個(gè)的視差信息的視差矢量。將由視差矢量檢測單元114檢測到的圖像內(nèi)預(yù)定位置的視差矢量供應(yīng)到視差矢量編碼器115。在這種情況下,視差檢測塊的ID、視差檢測塊的垂直位置信息、視差檢測塊的水平位置信息和視差矢量作為一組傳遞。在視差矢量編碼器115中,生成包括視差矢量的傳輸內(nèi)容的視差矢量基本流(參見圖8)。將視差矢量基本流供應(yīng)到多路復(fù)用器122。此外,在麥克風(fēng)116中,檢測與使用相機(jī)11IL和IllR拍攝的圖像對應(yīng)的音頻。將由該麥克風(fēng)116獲得的音頻數(shù)據(jù)供應(yīng)到音頻編碼器117。在音頻編碼器117中,對音頻數(shù)據(jù)執(zhí)行使用MPEG-2音頻AAC等的編碼,并且生成包括編碼音頻數(shù)據(jù)的音頻基本流。將該音頻基本流供應(yīng)到多路復(fù)用器122。此外,在字幕/圖形生成單元118中,產(chǎn)生要在圖像上重疊的字幕信息和圖形信息的數(shù)據(jù)(字幕數(shù)據(jù)、圖形數(shù)據(jù))。將這種數(shù)據(jù)(位圖數(shù)據(jù))供應(yīng)到字幕/圖形編碼器119。 字幕/圖形數(shù)據(jù)被添加了指示在圖像上的重疊位置的空閑偏移信息。在字幕/圖形編碼器 119中,對圖形數(shù)據(jù)執(zhí)行預(yù)定編碼,并且生成包括編碼數(shù)據(jù)的基本流。將該基本流供應(yīng)到多路復(fù)用器122。此外,在文本生成單元120中,產(chǎn)生要在圖像上重疊的文本信息的數(shù)據(jù)(文本數(shù)據(jù))。將該文本數(shù)據(jù)供應(yīng)到文本編碼器121。類似于上述圖形數(shù)據(jù),文本數(shù)據(jù)被添加了指示在圖像上的重疊位置的空閑偏移信息。在文本編碼器121中,對該文本數(shù)據(jù)執(zhí)行預(yù)定編碼, 并且生成包括編碼數(shù)據(jù)的基本流。將該基本流供應(yīng)到多路復(fù)用器122。在多路復(fù)用器122中,多路復(fù)用從各個(gè)編碼器供應(yīng)的基本流的分組,并獲得用作傳輸數(shù)據(jù)的位流數(shù)據(jù)(傳送流)BSD。圖12圖示了在圖2所示的傳輸數(shù)據(jù)生成單元110中多路復(fù)用的各個(gè)數(shù)據(jù)流的示例。注意,該示例指示了以視頻場景的單位檢測并傳輸視差矢量的情況(參見圖10(b))。 注意,用于同步顯示的時(shí)間戳被添加到了每個(gè)流的分組,并且在接收側(cè)可以控制在圖像上重疊字幕信息、圖形信息、文本信息等的定時(shí)?!皞鬏敂?shù)據(jù)生成單元的另一示例配置”注意,圖2中圖示的上述傳輸數(shù)據(jù)生成單元110配置為將視差矢量的傳輸內(nèi)容 (參見圖8)傳輸?shù)浇邮諅?cè)作為獨(dú)立基本流。然而,也可以想到,在嵌入另一流中的狀態(tài)下傳輸視差矢量的傳輸內(nèi)容。例如,在嵌入作為用戶數(shù)據(jù)的視頻流中的狀態(tài)下傳輸視差矢量的傳輸內(nèi)容。此外,例如,在嵌入字幕、圖形或文本的流中的狀態(tài)下傳輸視差矢量的傳輸內(nèi)容。
圖13圖示傳輸數(shù)據(jù)生成單元IlOA的示例配置。這個(gè)示例也是傳輸視差矢量作為數(shù)字信息的示例。該傳輸數(shù)據(jù)生成單元IlOA配置為在將視差的傳輸內(nèi)容嵌入作為用戶數(shù)據(jù)的視頻流中的狀態(tài)下傳輸該視差矢量的傳輸內(nèi)容。在圖13中,與圖2中的那些對應(yīng)的部分分配相同標(biāo)號,并且省略了其詳細(xì)描述。在傳輸數(shù)據(jù)生成單元IlOA中,將由視差矢量檢測單元114檢測到的圖像中的預(yù)定位置處的視差矢量供應(yīng)到視頻編碼器113中的流格式化器113a。在這種情況下,視差檢測塊的ID、視差檢測塊的垂直位置信息、視差檢測塊的水平位置信息和視差矢量作為一組傳遞。在流格式化器113a中,將視差矢量的傳輸內(nèi)容(參見圖8)嵌入作為用戶數(shù)據(jù)的視頻流中。雖然省略了詳細(xì)描述,但是在圖13中圖示的傳輸數(shù)據(jù)生成單元IlOA的其他組件以與在圖2中圖示的傳輸數(shù)據(jù)生成單元110的那些組件類似的方式配置。圖14圖示在圖13中所示的傳輸數(shù)據(jù)生成單元IlOA中多路復(fù)用的圖像數(shù)據(jù)流、字幕或圖形數(shù)據(jù)流和文本數(shù)據(jù)流的示例。在嵌入圖像數(shù)據(jù)流中的狀態(tài)下傳輸視差矢量(視差[傳輸數(shù)據(jù)生成單元的另一示例配置]圖15圖示了傳輸數(shù)據(jù)生成單元IlOB的配置示例。該示例也是傳輸視差矢量作為數(shù)字信息的示例。傳輸數(shù)據(jù)生成單元IlOB配置為在將視差矢量的傳輸內(nèi)容嵌入字幕或圖形數(shù)據(jù)流的狀態(tài)下傳輸該視差矢量的傳輸內(nèi)容。在圖15中,對應(yīng)于圖2的部分分配同樣的標(biāo)號,并且省略了其詳細(xì)描述。在傳輸數(shù)據(jù)生成單元IlOB中,將由視差矢量檢測單元114檢測到的圖像內(nèi)預(yù)定位置的視差矢量供應(yīng)到字幕/圖形編碼器119中的流格式化器119a。在這種情況下,視差檢測塊的ID、視差檢測塊的垂直位置信息、視差檢測塊的水平位置信息和視差矢量作為一組傳遞。在流格式化器119a中,將視差矢量的傳輸內(nèi)容(參見圖8)嵌入字幕或圖形數(shù)據(jù)流中。雖然省略了詳細(xì)描述,但是在圖15中圖示的傳輸數(shù)據(jù)生成單元IlOB的其他組件以與在圖2中圖示的傳輸數(shù)據(jù)生成單元110的那些組件類似的方式配置。圖16圖示了在圖15中所示的傳輸數(shù)據(jù)生成單元IlOB中多路復(fù)用的圖像數(shù)據(jù)流、 字幕或圖形數(shù)據(jù)流和文本數(shù)據(jù)流的示例。在將視差矢量(視差信息)嵌入字幕或圖形數(shù)據(jù)流的狀態(tài)下傳輸該視差矢量?!皞鬏敂?shù)據(jù)生成單元的另一配置示例”此外,圖2、圖13和圖15中所示的上述傳輸數(shù)據(jù)生成單元110、IlOA和IlOB傳輸
視差矢量作為數(shù)字信息(參見圖8)。然而,代替?zhèn)鬏斠暡钍噶孔鳛閿?shù)字信息,也可以想到在要重疊在圖像上的重疊信息(如,字幕信息、圖形信息、文本信息等)的數(shù)據(jù)中預(yù)先反映視差數(shù)據(jù)的同時(shí),在傳輸側(cè)傳輸視差信息。例如,在圖形信息的數(shù)據(jù)中反映視差信息的情況下,在發(fā)送側(cè)生成與要重疊在左眼圖像上的左眼圖形信息和要重疊在右眼圖像上的右眼圖形信息兩者對應(yīng)的圖形數(shù)據(jù)。在這種情況下,左眼圖形信息和右眼圖形信息是同樣的圖形信息。然而,例如圖像中右眼圖形信息的顯示位置配置為在水平方向偏移對應(yīng)于相對于左眼圖形信息的顯示位置的視差矢量的水平方向分量。
例如,在圖像內(nèi)多個(gè)位置處檢測到的視差矢量之中,使用與視差矢量的重疊位置對應(yīng)的視差矢量作為視差矢量。此外,例如,在圖像內(nèi)多個(gè)位置處檢測到的視差矢量之中, 使用就透視而言被識別為最近的位置處的視差矢量作為視差矢量。注意,雖然省略了詳細(xì)描述,但對于字幕信息或圖形信息的數(shù)據(jù)中反映視差信息的情況類似適用。圖17(a)圖示在傳輸方法為上述第一傳輸方法(“上下”方法)的情況下左眼圖形信息和右眼圖形信息的重疊位置。左眼圖形信息和右眼圖形信息為相同信息。然而,要被重疊在右眼圖像頂上的右眼圖形信息RGI配置為在水平方向上關(guān)于要重疊在左眼圖像 IL上的左眼圖形信息LGI移位視差矢量的水平方向分量VVT的位置。如圖17(a)所示,生成圖形數(shù)據(jù),使得將各條圖形信息LGI和RGI分別重疊在每一個(gè)區(qū)域IL和頂上。從而,如圖17(b)所示,觀察者可以使用視差與圖像IL和頂一起觀察各條圖形信息LGI和RGI,并且還能夠察覺圖形信息的透視。例如,如圖18(a)所示,生成各條圖形信息LGI和RGI的圖形數(shù)據(jù)作為單個(gè)區(qū)域的數(shù)據(jù)。在這種情況下,可以將各條圖形信息LGI和RGI以外的部分中的數(shù)據(jù)生成為透明數(shù)據(jù)。此外,例如,如圖18(b)所示,將各條圖形信息LGI和RGI的圖形數(shù)據(jù)生成為不同區(qū)域的數(shù)據(jù)。圖19(a)圖示在傳輸方法為上述第二傳輸方法(“并排”方法)的情況下左眼圖形信息和右眼圖形信息的重疊位置。左眼圖形信息和右眼圖形信息為相同信息。然而,要重疊在右眼圖像頂上的右眼圖形信息RGI配置為在水平方向上關(guān)于要重疊在左眼圖像IL上的左眼圖形信息LGI移位視差矢量的水平方向分量VVT的位置。注意,IT是空閑偏移值。生成圖形數(shù)據(jù),如圖19(a)所示,使得將各條圖形信息LGI和RGI分別重疊在圖像 IL和頂上。從而,如圖19(b)所示,觀察者可以使用視差與圖像IL和頂一起觀察各條圖形信息LGI和RGI,并且還能夠察覺圖形信息的透視。例如,如圖20所示,將各條圖形信息LGI和RGI的圖形數(shù)據(jù)生成為單個(gè)區(qū)域的數(shù)據(jù)。在這種情況下,可以將在各條圖形信息LGI和RGI以外的部分中的數(shù)據(jù)生成為透明數(shù)據(jù)。圖21圖示傳輸數(shù)據(jù)生成單元IlOC的配置示例。該傳輸數(shù)據(jù)生成單元IlOC配置為在諸如隱藏字幕信息、字幕信息、圖形信息或文本信息等的重疊信息的數(shù)據(jù)中反映視差信息的同時(shí),傳輸視差信息。在圖21中,與圖2中的那些對應(yīng)的部分配置相同標(biāo)號,并且省略其詳細(xì)描。在傳輸數(shù)據(jù)生成單元IlOC中,在字幕/圖形產(chǎn)生單元118與字幕/圖形編碼器 119之間插入字幕/圖形處理單元124。此外,在傳輸數(shù)據(jù)生成單元IlOC中,在文本產(chǎn)生單元120與文本編碼器121之間插入文本處理單元125。然后,將視差矢量檢測單元114檢測到的圖像內(nèi)預(yù)定位置處的視差矢量供應(yīng)到字幕/圖形處理單元1 和文本處理單元125。在字幕/圖形處理單元IM中,生成要重疊在左眼圖像IL和右眼圖像頂上的左眼和右眼的字幕或圖形信息項(xiàng)LGI和RGI的數(shù)據(jù)。在這種情況下,基于由字幕/圖形產(chǎn)生單元118產(chǎn)生的字幕數(shù)據(jù)或圖形數(shù)據(jù)產(chǎn)生字幕和圖形信息項(xiàng)。左眼和右眼的字幕信息項(xiàng)或圖形信息項(xiàng)是相同的信息。然而,例如,配置圖像內(nèi)的右眼字幕信息或圖形信息的重疊位置, 以便在水平方向上關(guān)于左眼字幕信息或圖形信息移位視差矢量的水平方向分量VVT (參見圖 17(a)和圖 19(a))。
將以這種方式由字幕/圖形處理單元IM生成的字幕數(shù)據(jù)或圖形數(shù)據(jù)供應(yīng)到字幕 /圖形編碼器119。注意,字幕數(shù)據(jù)或圖形數(shù)據(jù)添加有指示圖像上的重疊位置的空閑偏移信息。在字幕/圖形編碼器119中,生成由字幕/圖形處理單元124生成的字幕數(shù)據(jù)或圖形數(shù)據(jù)的基本流。此外,在文本處理單元125中,基于由文本產(chǎn)生單元120產(chǎn)生的文本數(shù)據(jù),生成要重疊在左眼圖像上的左眼文本信息的數(shù)據(jù)以及要重疊在右眼圖像上的右眼文本信息的數(shù)據(jù)。在這種情況下,左眼文本信息和右眼文本信息為相同文本信息。然而,例如,配置圖像內(nèi)右眼文本信息的重疊位置,以便在水平方向上關(guān)于左眼文本信息移位視差矢量的水平方向分量VVT。將以這種方式由文本處理單元125生成的文本數(shù)據(jù)供應(yīng)到文本編碼器121。注意, 該文本數(shù)據(jù)添加有指示圖像上的重疊位置的空閑偏移信息。在文本編碼器121中,生成由文本處理單元生成的文本數(shù)據(jù)的基本流。盡管省略詳細(xì)描述,但是圖21中所示的傳輸數(shù)據(jù)生成單元IlOC的其他組件以與圖2中所示的傳輸數(shù)據(jù)生成單元110類似的方式配置?!皞鬏敂?shù)據(jù)生成單元的另一配置示例”在圖2、圖13和圖15中所示的傳輸數(shù)據(jù)生成單元110U10A和IlOB中,在視差矢量檢測單元114中,基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù),檢測圖像內(nèi)預(yù)定位置處的視差矢量(視差信息)。傳輸數(shù)據(jù)生成單元110U10A和IlOB配置為照原樣傳輸由視差矢量檢測單元114檢測到的圖像內(nèi)預(yù)定位置處的視差信息到接收側(cè)。然而,例如,可以想到的是,對以與圖像數(shù)據(jù)相關(guān)聯(lián)的方式在數(shù)據(jù)記錄介質(zhì)中記錄的基于像素的視差矢量執(zhí)行小型化處理,并且創(chuàng)建包括屬于通過將屏幕分割為預(yù)定尺寸而獲得的一個(gè)或多個(gè)區(qū)域的視差信息的視差信息組。在這種情況下,例如,基于接收側(cè)要求 (諸如視差矢量的空間密度或傳輸帶)選擇每一個(gè)區(qū)域的尺寸。此外,構(gòu)思通用視差信息組和特定服務(wù)使用視差信息組用作視差信息組。特定服務(wù)使用的示例包括隱藏字幕使用和字幕使用。然后,對于要傳輸?shù)浇邮諅?cè)的視差信息組,可以構(gòu)思如下情況。(1)僅發(fā)送通用視差信息組(在與特定服務(wù)沒有關(guān)系的情況下)(2)僅發(fā)送通用視差信息組(在與特定服務(wù)有關(guān)系的情況下)(3)發(fā)送通用視差信息組和特定服務(wù)使用視差信息組二者(4)僅發(fā)送特定服務(wù)使用視差信息組圖22圖示傳輸數(shù)據(jù)生成單元IlOD的示例配置。該傳輸數(shù)據(jù)生成單元IlOD配置為創(chuàng)建與上述情況(1)到(4)之一對應(yīng)的預(yù)定組的視差信息組,并將預(yù)定組的視差信息組傳輸?shù)浇邮諅?cè)。在該圖22中,對應(yīng)于圖2的那些部分的部分分配相同標(biāo)號,并且將適當(dāng)?shù)厥÷云湓敿?xì)描述。傳輸數(shù)據(jù)生成單元IlOD包括數(shù)據(jù)提取單元(存檔單元)130、視差信息組創(chuàng)建單元131、視頻編碼器113和音頻編碼器117。此外,該傳輸數(shù)據(jù)生成單元IlOD包括字幕/圖形產(chǎn)生單元118、字幕/圖形編碼器119、文本產(chǎn)生單元120、文本編碼器121和多路復(fù)用器 122。數(shù)據(jù)記錄介質(zhì)130a例如以可移除的方式附接到數(shù)據(jù)提取單元130。音頻數(shù)據(jù)和視差矢量與包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)一起記錄在該數(shù)據(jù)記錄介質(zhì)130a上,以便相互對應(yīng)。數(shù)據(jù)提取單元130從數(shù)據(jù)記錄介質(zhì)130a中提取并輸出立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、視差矢量等。數(shù)據(jù)記錄介質(zhì)130a是盤形記錄介質(zhì)、半導(dǎo)體存儲器等。這里,數(shù)據(jù)記錄介質(zhì)130a上記錄的立體圖像數(shù)據(jù)設(shè)計(jì)為對應(yīng)于由圖2中所示的傳輸數(shù)據(jù)生成單元110的視頻成幀單元112獲得的立體圖像數(shù)據(jù)。此外,數(shù)據(jù)記錄介質(zhì)130a 上記錄的視差矢量例如是形成圖像的基于像素的視差矢量。視差信息組創(chuàng)建單元131具有取景器功能。該視差信息組創(chuàng)建單元131對從數(shù)據(jù)提取單元130輸出的視差矢量(S卩,基于像素的視差矢量)執(zhí)行小型化處理,并且生成屬于預(yù)定區(qū)域的視差矢量。圖23圖示給出為單個(gè)像素的亮度值的相對深度方向上的數(shù)據(jù)的示例。這里,可以通過預(yù)定轉(zhuǎn)換處理相對深度方向上的數(shù)據(jù)作為每一個(gè)像素的視差矢量。在該示例中,人物部分具有高亮度值。這意味著人物部分的視差矢量的值大,因此這意味著察覺人物部分處于立體圖像顯示中的浮動狀態(tài)。此外,在該示例中,背景部分具有低亮度值。這意味著背景部分的視差矢量的值小,因此這意味著察覺該背景部分處于立體圖像顯示中的下沉狀態(tài)。圖24圖示基于塊的視差矢量的示例。該塊對應(yīng)于位于底層的像素上的上部層。塊由在水平方向和垂直方向以預(yù)定尺寸劃分圖像(畫面)區(qū)域構(gòu)成。每一塊的視差矢量例如通過從塊內(nèi)存在的所有像素的視差矢量中選擇具有最大值的視差矢量獲得。在該示例中, 每一塊的視差矢量由箭頭指示,并且箭頭的長度對應(yīng)于視差矢量的大小。圖25圖示由視差信息組創(chuàng)建單元131執(zhí)行的小型化處理的示例。首先,如25(a) 所示,視差信息組創(chuàng)建單元134使用基于像素的視差矢量確定基于塊的視差矢量。如上所述,塊對應(yīng)于位于底層的像素上的上部層,并且由在水平方向和垂直方向中以預(yù)定尺寸劃分圖像(畫面)區(qū)域構(gòu)成。例如,每一塊的視差矢量通過從塊內(nèi)存在的所有像素的視差矢量之中選擇具有最大值的視差矢量來獲得。接著,如圖25(b)所示,視差信息組創(chuàng)建單元131使用基于塊的視差矢量來確定基于群(Group Of Block,塊群)的視差矢量。該群對應(yīng)于塊之上的上部層,并且通過共同地分組多個(gè)相鄰塊來獲得。在圖25(b)的示例中,每一群由以虛線框包圍的四個(gè)塊組成。然后,例如,每一群的視差矢量通過從其群內(nèi)的所有塊的視差矢量之中選擇具有最大值的視
差矢量來獲得。接著,如圖25(c)所示,視差信息組創(chuàng)建單元131使用基于群的視差矢量來確定基于分區(qū)(Partition)的視差矢量。該分區(qū)對應(yīng)于各群之上的上部層,并且通過共同地分組多個(gè)相鄰群來獲得。在圖25(c)的示例中,每一分區(qū)由以虛線框包圍的兩個(gè)群構(gòu)成。然后, 例如,每一分區(qū)的視差矢量通過從其部分內(nèi)的所有群的視差矢量之中選擇具有最大值的視
差矢量來獲得。接著,如圖25(d)所示,視差信息組創(chuàng)建單元131使用基于分區(qū)的視差矢量來獲得位于頂層的整個(gè)畫面(整個(gè)圖像)的視差矢量。在圖25(d)的示例中,整個(gè)畫面包括以虛線框包圍的四個(gè)區(qū)域。然后,例如,通過從整個(gè)畫面中包括的所有區(qū)域的視差矢量之中選擇具有最大值的視差矢量,獲得整個(gè)畫面的視差矢量。在這種情況下,除了整個(gè)畫面的視差矢量之外,可以確定關(guān)于從其獲得視差的原始像素的位置(圖中以“ + ”指示)的信息,并且用作視差矢量的額外信息。在確定上述塊、群或分區(qū)的視差矢量時(shí)也類似。
因此,視差信息組創(chuàng)建單元131通過對位于底層的每一個(gè)像素的視差矢量執(zhí)行小型化處理,可以確定各個(gè)層中的各個(gè)區(qū)域(即,塊、群、分區(qū)和整個(gè)畫面)的視差矢量。注意, 在圖25中所示的小型化處理的示例,最終,確定除了像素層之外四個(gè)層(S卩,塊、群、分區(qū)和整個(gè)畫面)的視差矢量。然而,層的數(shù)量、如何分區(qū)每一個(gè)層為的各區(qū)域和區(qū)域的數(shù)量不限于上面那些。視差信息組創(chuàng)建單元131通過上述小型化處理創(chuàng)建包括對于具有預(yù)定尺寸的每一區(qū)域的視差矢量的視差信息組。該視差信息組被添加有指示每一條視差信息所屬的屏幕區(qū)域的信息。例如,作為指示屏幕區(qū)域的信息,添加指示屏幕的分割數(shù)量的信息,如零個(gè)分割、四個(gè)分割、九個(gè)分割、十六個(gè)分割等。此外,例如作為指示屏幕區(qū)域的信息,添加指示區(qū)域大小(塊大小)的信息,如16X16、32X32或64X64等。如果以掃描順序安排視差信息組中的各條視差信息,則可以使用指示屏幕的分割數(shù)量的信息或指示區(qū)域大小的信息掌握每一條視差信息所屬的屏幕區(qū)域。在這個(gè)意義上, 指示屏幕分區(qū)的數(shù)量的信息和指示區(qū)域大小的信息變?yōu)橹甘久恳粭l視差信息所屬的屏幕區(qū)域的信息。此外,視差信息組創(chuàng)建單元131根據(jù)需要?jiǎng)?chuàng)建特定服務(wù)使用的視差信息組。例如, 根據(jù)需要,創(chuàng)建對于隱藏字幕使用、字幕使用、特定應(yīng)用(窗口小部件)圖形使用等的視差信息組。在這種情況下,通過上述小型化處理,創(chuàng)建屬于一個(gè)或多個(gè)屏幕區(qū)域的視差矢量, 分別對應(yīng)于重疊信息(如隱藏字幕信息、字幕信息、或圖形信息)的一個(gè)或多個(gè)顯示區(qū)域。圖沈仏)圖示圖像上字幕和應(yīng)用圖形的顯示示例。圖沈…)圖示圖像、字幕和應(yīng)用圖形的透視。例如,如圖所示,字幕顯示在屏幕下半部的中心區(qū)域,但想要在圖像的最近的位置前面進(jìn)一步識別字幕顯示。在這種情況下,在視差信息組創(chuàng)建單元131中,從字幕的顯示區(qū)域和對應(yīng)圖像區(qū)域的視差矢量,創(chuàng)建用于向字幕提供視差的視差矢量。此外,例如,如圖所示,應(yīng)用圖形顯示在屏幕的右下邊緣區(qū)域中,希望在字幕前面進(jìn)一步識別應(yīng)用圖形。在這種情況下,在視差信息組創(chuàng)建單元131中,從應(yīng)用圖形的顯示區(qū)域和對應(yīng)圖像區(qū)域的視差矢量,創(chuàng)建用于向應(yīng)用圖形提供視差的視差矢量。這里,如上所述,視差信息組創(chuàng)建單元131具有取景器功能。在該視差信息組創(chuàng)建單元131中,實(shí)際上顯示如圖^(a)所示的立體圖像。因此,將從數(shù)據(jù)提取單元130輸出的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))提供到該視差信息組創(chuàng)建單元131。此外, 對于該視差信息組創(chuàng)建單元131,提供由字幕和圖形生成單元118產(chǎn)生的字幕數(shù)據(jù)或圖形數(shù)據(jù)以及由文本產(chǎn)生單元120產(chǎn)生的文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù))。對于由視差信息組創(chuàng)建單元131創(chuàng)建的、且與立體圖像數(shù)據(jù)一起傳輸?shù)拿恳唤M視差信息組,添加有視差序列ID(DiSparity_kquence_id)。該視差序列ID是指示重疊信息 (對其要使用視差信息組中包括的視差信息)的類型的標(biāo)識信息。使用視差序列ID,標(biāo)識視差信息組是通用視差信息組還是特定服務(wù)使用的視差信息組。此外,使用標(biāo)識信息,標(biāo)識特定服務(wù)使用的視差信息組的代表的服務(wù)使用的視差信息組的類型。如圖27所示,DisparityJequencejd = 0指示通用視差信息組。該視差信息組基于預(yù)先記錄的視差信息來創(chuàng)建。在該視差信息組與特定服務(wù)不相關(guān)聯(lián)的情況下,不需要使用例如視差鏈接描述符(DiSparity_Linkage_DeScriptor)等來與特定服務(wù)相關(guān)聯(lián)。此外,Disparity_Sequence_id = 1到255指示使用例如視差鏈接描述符等關(guān)聯(lián)的特定服務(wù)使用的視差信息組。[視差信息組]在下述情況(1)到(4)中的每一個(gè)的上下文中進(jìn)一步描述由視差信息組創(chuàng)建單元 131創(chuàng)建的視差信息組?!扒闆r(1),,如上所述,情況(1)是僅發(fā)送通用視差信息組的情況。在該情況(1)中,僅創(chuàng)建通用視差信息組。注意,在該情況(1)中,視差信息組中包括的視差信息與特定服務(wù)沒有關(guān)系。圖28圖示了在該情況(1)中創(chuàng)建的視差信息組的示例。在該示例中,視差信息組包括屬于通過將屏幕劃分為九個(gè)部分獲得的單個(gè)屏幕區(qū)域的視差矢量(水平視差矢量)PO 到P8。例如,通過例如使用基于像素的視差矢量的上述小型化處理來確定視差矢量PO到 P8。在圖觀中,箭頭指示視差矢量,而箭頭的長度對應(yīng)于視差矢量的大小。該視差信息組是通用視差信息組。因此,如圖四所示,要添加到該視差信息組的標(biāo)識信息“Disparityjequencejd”設(shè)置為“0”,其指示通用視差信息組。這里,該通用視差信息組是對于圖像數(shù)據(jù)的每一預(yù)定單元(如,對于編碼視頻的每一畫面)的視差信息組。如下所述,圖像數(shù)據(jù)分割為特定時(shí)段,并且特定時(shí)段的圖像數(shù)據(jù)的傳輸之前,傳輸對應(yīng)于每一特定時(shí)段的圖像數(shù)據(jù)的多個(gè)視差信息組(PaCked_DiSparity_ Set)的群。因此,如圖四所示,每個(gè)預(yù)定單元的視差信息組添加有偏移(Offset)作為指示使用視差信息組的定時(shí)的時(shí)間信息。添加到每個(gè)視差信息組的偏移代表從第一視差信息組的使用時(shí)間(由時(shí)間戳(Time Stamp)指示)起的時(shí)間?!扒闆r⑵,,如上所述,情況( 是僅發(fā)送通用視差信息組的情況。在該情況( 中,僅創(chuàng)建通用視差信息組。注意,在該情況O)中,視差信息組中包括的視差信息與特定服務(wù)有關(guān)系。圖30圖示了在該情況(2)中創(chuàng)建的視差信息組的示例。在該示例中,視差信息組包括屬于通過將屏幕劃分為九個(gè)部分而獲得的單個(gè)屏幕區(qū)域的視差矢量(水平的視差矢量)PO到P8。例如,通過使用基于像素的視差矢量的以上小型化處理來確定視差矢量PO到 P8。在圖30中,箭頭指示視差矢量,而箭頭的長度對應(yīng)于視差矢量的大小。該視差信息組是通用視差信息組。因此,如圖31所示,要添加到該視差信息組的標(biāo)識信息“Disparityjequencejd”設(shè)置為“0”,其指示通用視差信息組。這里,該通用視差信息組是圖像數(shù)據(jù)的每個(gè)預(yù)定單元(例如編碼視頻的每個(gè)畫面)的視差信息組。如下所述,圖像數(shù)據(jù)分割為特定時(shí)段,并且在特定時(shí)段的圖像數(shù)據(jù)的傳輸之前,傳輸對應(yīng)于每個(gè)特定時(shí)段的圖像數(shù)據(jù)的多個(gè)視差信息組(PackecLDisparityJiet) 的群。因此,如圖31所示,對于每個(gè)預(yù)定單位的視差信息組,添加偏移(Offset)作為指示使用視差信息組的定時(shí)的時(shí)間信息。添加到每個(gè)視差信息組的偏移代表從第一視差信息組的使用時(shí)間(以時(shí)間戳(Time Stamp)指示)起的時(shí)間。如上所述,在情況(2)中,視差信息組中包括的視差信息與特定服務(wù)有關(guān)系。圖31 圖示視差矢量P7和隱藏字幕數(shù)據(jù)DFO相關(guān)聯(lián)的示例。注意,如圖30所示,基于隱藏字幕數(shù)據(jù)DFO的隱藏字幕信息顯示在視差矢量P7所屬的屏幕區(qū)域上。在這種情況下,指示顯示該隱藏字幕信息的屏幕區(qū)域的分量元素ID(C0mp0nent_Element ID)和視差矢量P7相關(guān)聯(lián)。
圖32圖示了在這種情況下分量元素ID與視差矢量之間的關(guān)聯(lián)表(Component Linked_Info)的示例。在這種情況下,由分區(qū)位置ID(Partition_Position_ID)指定視差矢量的對象位置。該分區(qū)位置ID指示由分割數(shù)量或塊大小指定多個(gè)屏幕區(qū)域中的哪個(gè)屏幕區(qū)域。注意,圖31中所示的示例圖示了其中一條視差信息與一條隱藏字幕數(shù)據(jù)相關(guān)聯(lián)的示例。然而,也可以想到的是,多條視差信息與一條隱藏字幕數(shù)據(jù)相關(guān)聯(lián)。以此方式,在多條視差信息與一條隱藏字幕數(shù)據(jù)相關(guān)聯(lián)的情況下,在接收側(cè)可以選擇并使用一條視差信息,以便給出視差到基于該條隱藏字幕數(shù)據(jù)的隱藏字幕信息。圖33圖示了視差矢量P6和P7與隱藏字幕數(shù)據(jù)DFl之間的關(guān)聯(lián)并且進(jìn)一步視差矢量P7和P8與隱藏字幕數(shù)據(jù)DF2之間的關(guān)聯(lián)的示例。在這種情況下,執(zhí)行分量元素ID與視差矢量P6和P7之間的關(guān)聯(lián),分量元素ID指示其中顯示基于隱藏字幕數(shù)據(jù)DFl的隱藏字幕信息的屏幕區(qū)域。此外,類似地,執(zhí)行分量元素ID與視差矢量P7和P8之間的關(guān)聯(lián),分量元素ID指示其中顯示基于隱藏字幕數(shù)據(jù)DF2的隱藏字幕信息的屏幕區(qū)域。圖34圖示了在這種情況下分量元素ID與視差矢量之間的關(guān)聯(lián)表(Component Linked_Info)的示例。在這種情況下,由分區(qū)位置ID(Partition_Position_ID)指定視差矢量。該分區(qū)位置ID指示由分割數(shù)量或塊大小指定多個(gè)屏幕區(qū)域中的哪個(gè)屏幕區(qū)域?!扒闆r⑶”如上所述,情況C3)是發(fā)送通用視差信息組和特定服務(wù)使用的視差信息組二者的情況。在該情況(3)中,創(chuàng)建通用視差信息組和特定服務(wù)使用的視差信息組二者。在這種情況下,添加到通用視差信息組的標(biāo)識信息(Disparityjequencejd)設(shè)置為“0”。此外, 添加到特定服務(wù)使用的視差信息組的標(biāo)識信息(Disparityjiequencejd)設(shè)置為“0”以外的值。例如,通過如上所述將其信息插入到用戶數(shù)據(jù),執(zhí)行標(biāo)識信息(DiSparityJ5eqUence_ id)與服務(wù)之間的關(guān)聯(lián)??商娲?,例如,使用如上所述的視差鏈接描述符(Disparity, Linkage_Descriptor)來執(zhí)行該關(guān)聯(lián)。圖35圖示了在該情況(3)中創(chuàng)建的視差信息組的示例。在該示例中,通用視差信息組包括屬于通過將屏幕劃分為九個(gè)部分而獲得的單個(gè)屏幕區(qū)域的視差矢量(水平的視差矢量)P0到P8。例如,通過使用基于像素的視差矢量的上述小型化處理來確定視差矢量 PO到P8。在圖35中,箭頭指示視差矢量,而箭頭的長度對應(yīng)于視差矢量的大小。此外,創(chuàng)建隱藏字幕使用的視差信息組,作為特定服務(wù)使用的視差信息組。隱藏字幕使用的視差信息組包括與隱藏字幕信息“Caption 1”對應(yīng)的視差矢量CCl和與隱藏字幕信息“Caption 2”對應(yīng)的視差矢量CC2。這里,視差信息組是對于圖像數(shù)據(jù)的每個(gè)預(yù)定單元(例如,對于編碼視頻的每個(gè)畫面)的視差信息組。如下所述,圖像數(shù)據(jù)分割為特定時(shí)段,并且在特定時(shí)段的圖像數(shù)據(jù)的傳輸之前,傳輸對應(yīng)于每個(gè)特定時(shí)段的圖像數(shù)據(jù)的多個(gè)視差信息組(Packed Disparity Set)的群。因此,如圖36所示,對于每個(gè)預(yù)定單元的視差信息組,添加偏移(Offset)作為指示使用視差信息組的定時(shí)的時(shí)間信息。添加到每個(gè)視差信息組的偏移代表從第一視差信息的使用時(shí)間(由時(shí)間戳(Time Stamp)指示)起的時(shí)間。如上所述,特定服務(wù)使用的視差信息組是隱藏字幕使用的視差信息組。圖35圖示了視差矢量CCl和隱藏字幕數(shù)據(jù)DFl之間的關(guān)聯(lián)以及進(jìn)一步的視差矢量CC2與隱藏字幕數(shù)
25據(jù)DF2之間的關(guān)聯(lián)的示例。在這種情況下,執(zhí)行指示顯示該隱藏字幕信息的屏幕區(qū)域的分量元素ID(Component_Element ID)與視差矢量CCl和CC2之間的關(guān)聯(lián)。圖37圖示了在這種情況下分量元素ID與視差矢量之間的關(guān)聯(lián)表(Component Linked_Info)。在這種情況下,由分區(qū)位置ID(Partition_Position_ID)指定視差矢量的對象位置。該分區(qū)位置ID指示由分割數(shù)量或塊大小指定多個(gè)屏幕區(qū)域中的哪個(gè)屏幕區(qū)域?!扒闆r(4),,如上所述,情況(3)是僅發(fā)送特定服務(wù)使用的視差信息組的情況。在該情況⑷ 中,僅創(chuàng)建特定服務(wù)使用的視差信息組。在這種情況下,添加到特定服務(wù)使用的視差信息組的標(biāo)識信息(Disparityjequencejd)設(shè)置為不同于“0”。例如,通過如上所述將該信息插入到用戶數(shù)據(jù),執(zhí)行標(biāo)識信息(Disparityjiequencejd)和服務(wù)之間的關(guān)聯(lián)??商娲?,例如,使用如上所述的視差鏈接描述符(DiSparity_Linkage_DesCript0r)執(zhí)行該關(guān)聯(lián)。圖38圖示了在該情況⑷中創(chuàng)建的視差信息組的示例。在該示例中,創(chuàng)建隱藏字幕使用的視差信息組作為特定服務(wù)使用的視差信息組。隱藏字幕使用的視差信息組包括與隱藏字幕信息“Caption 1”對應(yīng)的視差矢量CCl和與隱藏字幕信息“Caption 2”對應(yīng)的視差矢量CC2。這里,視差信息組是對于圖像數(shù)據(jù)的每個(gè)預(yù)定單元(例如,對于編碼視頻的每個(gè)畫面)的視差信息組。如下所述,圖像數(shù)據(jù)分割為特定時(shí)段,并且在特定時(shí)段的圖像數(shù)據(jù)的傳輸之前,傳輸對應(yīng)于每個(gè)特定時(shí)段的圖像數(shù)據(jù)的多個(gè)視差信息組(Packed Disparity Set)的群。因此,如圖39所示,對于每個(gè)預(yù)定單位的視差信息組,添加偏移(Offset)作為指示使用視差信息組的定時(shí)的時(shí)間信息。添加到每個(gè)視差信息組的偏移代表從第一視差信息組的使用時(shí)間(由時(shí)間戳(Time Stamp)指示)起的時(shí)間。如上所述,特定服務(wù)使用的視差信息組是隱藏字幕使用的視差信息組。圖39圖示了視差矢量CCl和隱藏字幕數(shù)據(jù)DFl之間的關(guān)聯(lián)以及進(jìn)一步的視差矢量CC2與隱藏字幕數(shù)據(jù)DF2之間的關(guān)聯(lián)的示例。在這種情況下,執(zhí)行指示顯示該隱藏字幕信息的屏幕區(qū)域的分量元素ID(Component_Element ID)與視差矢量CCl和CC2之間的關(guān)聯(lián)(見圖37)。注意,在圖32、圖34和圖37中,圖示了這樣的示例其中,作為分量元素ID與視差矢量之間的關(guān)聯(lián)表,分量元素ID是隱藏字幕的窗口 ID(WindoW ID)。例如,在DVB字幕的情況下,分量元素ID是DVB字幕的區(qū)域ID (Regionjd)。在DVB字幕的情況下,例如,如圖40所示,使用基本PID (Elementary PID)執(zhí)行字幕片段(Subtitle Segment)與視差矢量數(shù)據(jù)(Disparity Data)之間的關(guān)聯(lián)。然后,字幕片段內(nèi)的頁面ID(Pagejd)和視差矢量數(shù)據(jù)的標(biāo)識信息(Disparityjequencejd)相關(guān)聯(lián)。 此外,區(qū)域 ID (Region ID)和視差矢量(Disparity_Vector_horizontal)相關(guān)聯(lián)。視頻編碼器113對從數(shù)據(jù)提取單元130提供的立體圖像數(shù)據(jù)執(zhí)行使用MPEG4-AVC、 MPEG2、VC-I等的編碼,以獲得編碼視頻數(shù)據(jù)。此外,視頻編碼器113使用在其后級提供的流格式化器113a,在有效載荷部分生成包括編碼視頻數(shù)據(jù)的視頻基本流。如上所述,將由視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組提供到視頻編碼器113中的流格式化器 113a。流格式化器113a將預(yù)定組的視差信息組作為用戶數(shù)據(jù)嵌入視頻流中。圖41示意性地圖示視頻基本流(Video Elementary Stream)的示例結(jié)構(gòu)。在視頻基本流中,在開頭安排包括每個(gè)序列參數(shù)的序列報(bào)頭部分。在該序列報(bào)頭部分之后,安排包括每個(gè)畫面參數(shù)和用戶數(shù)據(jù)的畫面報(bào)頭。在該畫面報(bào)頭部分之后,安排包括畫面數(shù)據(jù)的有效載荷部分。隨后,重復(fù)地安排畫面報(bào)頭部分和有效載荷部分。上述視差信息組例如嵌入畫面報(bào)頭部分中的用戶數(shù)據(jù)區(qū)域中。圖42圖示了用戶數(shù)據(jù)的示例配置。圖42(a)圖示了在編碼方法是MPEG2的情況下的用戶數(shù)據(jù)的配置。圖 42(b)圖示了在編碼方法是HJ64AVC(MPEG4-AVC)的情況下用戶數(shù)據(jù)的配置。此外,圖 42(c)圖示了在編碼方法是VC-I的情況下用戶數(shù)據(jù)的配置。盡管將省略詳細(xì)描述,各個(gè)方法中的用戶數(shù)據(jù)的配置基本類似。也就是說,指示用戶數(shù)據(jù)開始的代碼安排在開頭,其后安排指示數(shù)據(jù)類型的標(biāo)識符“userjdentifier ”,并且進(jìn)一步地其后安排數(shù)據(jù)主體“useLstructure”。下面將描述包括視差信息(Disparity, Information)的用戶數(shù)據(jù)的詳細(xì)配置。音頻編碼器117對從數(shù)據(jù)提取單元130提供的音頻數(shù)據(jù)執(zhí)行使用MPEG-2 Audio AAC等的編碼,并且生成音頻基本流。多路復(fù)用器122多路復(fù)用從編碼器113、117、119和 121輸出的分組基本流。然后,該多路復(fù)用器122輸出用作傳輸數(shù)據(jù)的位流數(shù)據(jù)(傳送流) BSD。圖22中所示的傳輸數(shù)據(jù)生成單元IlOD的其他元件以與圖2中所示的傳輸數(shù)據(jù)生成單元110的那些元件類似的方式配置。將簡單描述圖22中所示的傳輸數(shù)據(jù)生成單元IlOD的操作。將從數(shù)據(jù)提取單元 130輸出的立體圖像數(shù)據(jù)提供到視頻編碼器113。在視頻編碼器113中,對立體圖像數(shù)據(jù)執(zhí)行使用MPEG-4-AVC、MPEG2、VC-l等的編碼,并生成包括編碼視頻數(shù)據(jù)的視頻基本流。將該視頻基本流提供到多路復(fù)用器122。此外,將從數(shù)據(jù)提取單元130輸出的基于像素的視差矢量提供到視差信息組創(chuàng)建單元131。在該視差信息組創(chuàng)建單元131中,對視差矢量執(zhí)行小型化處理等,并創(chuàng)建要傳輸?shù)念A(yù)定組的視差信息組(情況(1)到G))。將由該視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組提供到視頻編碼器113內(nèi)的流格式化器113a。在流格式化器113a中,將預(yù)定組的視差信息組作為用戶數(shù)據(jù)嵌入視頻流中。此外,將從數(shù)據(jù)提取單元130輸出的音頻數(shù)據(jù)提供到音頻編碼器117。在該音頻編碼器117中,對音頻數(shù)據(jù)執(zhí)行使用MPEG-2 Audio AAC等的編碼,并且生成包括編碼音頻數(shù)據(jù)的音頻基本流。將該音頻基本流提供到多路復(fù)用器122。此外,將包括關(guān)于字幕數(shù)據(jù)或圖形數(shù)據(jù)的編碼數(shù)據(jù)的基本流從字幕/圖形編碼器 119提供到多路復(fù)用器122。進(jìn)一步,將包括關(guān)于文本數(shù)據(jù)的編碼數(shù)據(jù)的基本流從文本編碼器121提供到多路復(fù)用器122。然后,在多路復(fù)用器122中,多路復(fù)用從各個(gè)編碼器提供的基本流的分組,并且獲得用作傳輸數(shù)據(jù)的位流數(shù)據(jù)(傳輸流)BSD。[服務(wù)分量和每個(gè)流的視差信息之間的關(guān)聯(lián)、視差信息組標(biāo)識信息和服務(wù)之間的關(guān)聯(lián)]使用視差鏈接描述符(DiSparity_Linkage_DeSCript0r)執(zhí)行各個(gè)關(guān)聯(lián)流中的服務(wù)分量和視差信息之間的關(guān)聯(lián)。此外,使用該視差鏈接描述符,還執(zhí)行各個(gè)流中的視差信息組標(biāo)識信息(Disparityjiequencejd)和服務(wù)之間的關(guān)聯(lián)。該視差鏈接描述符安排在多路復(fù)用的流的報(bào)頭區(qū)域中,或者多路復(fù)用的流中的描述符表(如PMT)中。圖43圖示在這種情況下視差鏈接描述符的示例配置。圖44圖示圖43中所示的配置中每條信息的內(nèi)容。“descriptoLtag”是指示描述符類型的8位數(shù)據(jù)。這里,設(shè)置 “OxDO”,其指示視差鏈接描述符?!癲escriptorjength”是指示該信息的長度(大小)的8 位數(shù)據(jù)?!皀umber_of_Linked_Mreams” 是指示根據(jù)視差信息數(shù)據(jù)(Disparity_Data)對其限定兩個(gè)流之間的關(guān)系的基本流的數(shù)量的5位數(shù)據(jù),并且流相關(guān)聯(lián)?!癊lementaryPID_of_ disparity”是指示包括視差信息數(shù)據(jù)(Disparity_Data)的基本流(PES)的PID(節(jié)目ID) 的13位數(shù)據(jù)。“ElementaryPID_of_krvice_Component”是指示包括服務(wù)分量(如字幕、字幕、文本或圖形)的基本流(PES)的PID(節(jié)目ID)的13位數(shù)據(jù)。使用兩個(gè)PID,對于每個(gè)相關(guān)聯(lián)的基本流執(zhí)行視差信息和服務(wù)分量之間的關(guān)聯(lián)?!皀umber_of_linked_sequences”是指示要關(guān)聯(lián)以便對應(yīng)于每個(gè)相關(guān)聯(lián)的基本流的視差信息組(視差信息,Disparity Information)的數(shù)量的5位數(shù)據(jù)。"Service_id" 是指示用于標(biāo)識服務(wù)的唯一字的32位數(shù)據(jù)。例如,對于ATSC分配“0x47413934”?!癉ata_ Type”是指示由“Servicejd”標(biāo)識的服務(wù)中的數(shù)據(jù)類型的8位數(shù)據(jù)。例如,“0x03”指示隱
藏字幕數(shù)據(jù)。安排視差序列ID “Disparity_kquence_id”和服務(wù)頁面 ID "Service_page_id", 其數(shù)量對應(yīng)于由"number_of_l inked_ sequences,,才皆不白勺值?!癉isparity—Sequence—id,,是用于標(biāo)識每個(gè)服務(wù)的標(biāo)識信息的8位數(shù)據(jù)?!発rViCe_page_id”是指定服務(wù)(如字幕頁面) 的8位數(shù)據(jù)。因此,預(yù)定數(shù)量的視差序列ID和服務(wù)頁面ID與預(yù)定“Service_page_id”和 “Data_Type(i)” 相關(guān)聯(lián)。將描述關(guān)于圖43中所示的視差鏈接描述符的示例配置中的每一項(xiàng)的特定示例。 圖45(a)圖示了在將視差信息組插入圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)域并且將其發(fā)送到接收側(cè) (如使用圖22中的傳輸數(shù)據(jù)生成單元110D)的情況下PID的示例。在該示例中,視差鏈接描述符(Disparity_Linkage_Descriptor)安排在多路復(fù)用的流(TS)內(nèi)的PMT中。然后,在該示例中,多路復(fù)用的流(化)中包括的包含視差信息數(shù)據(jù)(Disparity Data)的視頻(圖像數(shù)據(jù))基本流(PES)的PID被設(shè)置為“PID_0”。此外,在該示例中,多路復(fù)用的流(TS)中包括的音頻基本流(PES)的PID被設(shè)置為“PID_1”。進(jìn)一步,在該示例中,多路復(fù)用的流(TS)中包括的字幕基本流(PES)的PID被設(shè)置為“PID_2”。圖45(b)圖示了在生成包括視差信息組的視差矢量的基本流(PES),并且該獨(dú)立的流與另一個(gè)流多路復(fù)用并將其發(fā)送到接收側(cè)(如使用下面描述的圖62中的傳輸數(shù)據(jù)生成單元110E)的情況下PID的示例。在該示例中,將視差鏈接描述符(DiSparity_Linkage_ Descriptor)安排在多路復(fù)用的流(TS)內(nèi)的PMT中。然后,在該示例中,多路復(fù)用的流(TS)中包括的視頻(圖像數(shù)據(jù))基本流(PES)的 PID被設(shè)置為“PID_0”。此外,在該示例中,多路復(fù)用的流(TS)中包括的音頻基本流(PES) 的PID被設(shè)置為“PID_1”。此外,在該示例中,多路復(fù)用的流(TS)中包括的字幕基本流 (PES)的PID被設(shè)置為“PID_2”。此外,在該示例中,多路復(fù)用的流(TS)中包括的視差矢量基本流(PES)的PID被設(shè)置為“PID_3”。圖46(a)圖示了這樣的示例其中,添加了“Disparity_kquence_id = 1”的視差信息組與字幕相關(guān)聯(lián)(鏈接)。在該示例中,視差信息組包括與字幕信息“Subtitle 1”對應(yīng)的視差矢量“Region 1”以及與字幕信息“Subtitle 2”對應(yīng)的視差矢量“Region 2”。圖46(b)圖示了這樣的示例其中,添加了 “Disparityjequencejd = 2”的視差信息組與隱藏字幕相關(guān)聯(lián)(鏈接)。在該示例中,視差信息組包括與隱藏字幕信息“Caption 1”對應(yīng)的視差矢量CCl以及與隱藏字幕信息“Caption 2”對應(yīng)的視差矢量CC2。圖47圖示了上述圖45 (a)的情況下視差信息組與字幕相關(guān)聯(lián)的情況。在這種情況下,將“ElementaryPID_ofJervice_Component,,設(shè)置到字幕基本流的PID (Subtitle PID)。 此外,在這種情況下,將“ElementaryPID_of_disparity”設(shè)置到視頻基本流的PID (Video PID)。圖48圖示了上述圖45(b)的情況下視差信息組與字幕相關(guān)聯(lián)的情況。在這種情況下,將 “ElementaryPID_of_krvice_Component” 設(shè)置到字幕基本流的 PID (Subtitle PID)。并且,在這種情況下,將“ElementaryPID_0f_diSparity”設(shè)置到視差矢量基本流的 PID (Disparity PID)。圖49圖示了上述圖45(a)的情況下(其中在將隱藏字幕數(shù)據(jù)插入圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)域的狀態(tài)下,將隱藏字幕數(shù)據(jù)發(fā)送到接收側(cè)),視差信息組與隱藏字幕相關(guān)聯(lián)的情況。這里,"Service_id"代表ATSC,并且“Data_Type”代表隱藏字幕(CC)。在這種情況下,將“ElementaryPID_of_krvice_Component”設(shè)置到視頻基本流的 PID (Video PID)。此夕卜,在這種情況下,還將“ElementaryPID_of_disparity”設(shè)置到視頻基本流的PID (Video PID)。注意,盡管將省略詳細(xì)描述,但是例如,ID的現(xiàn)有操作數(shù)如下“krviCe_id = 0x474139:34”代表“ATSC”,其中“Data_Type = 0x03”代表“隱藏字幕”,“Data_Type = 0x06” 代表“Bar_data(郵箱或郵筒區(qū)域)”。此外,“krvice_id = 0x44544731” 代表 “AFD,,。圖50圖示在上述圖45(b)的情況下(其中在將隱藏字幕數(shù)據(jù)插入圖像數(shù)據(jù)流的用戶數(shù)據(jù)區(qū)域的狀態(tài)下,將隱藏字幕數(shù)據(jù)發(fā)送到接收側(cè)),視差信息組與隱藏字幕相關(guān)聯(lián)的情況。這里,Mervicejd”代表ATSC,并且“Data_Type”代表隱藏字幕(CC)。在這種情況下,將 “ElementaryPID_of_krvice_Component” 設(shè)置到視頻基本流的 PID(VideoPID)。 此外,在這種情況下,將"ElementaryPID_of_disparity"設(shè)置到視差矢量基本流的 PID (Disparity PID)。[包括視差信息(Disparityjnformation)的用戶數(shù)據(jù)的詳細(xì)配置]圖51圖示了包括視差信息(Disparityjnformation)的用戶數(shù)據(jù)的詳細(xì)配置的示例。該示例是在編碼方法為MPEG2的情況下的示例。當(dāng)開始碼(uSer_data_Start_COde) 之后的數(shù)據(jù)標(biāo)識符是視差信息標(biāo)識符(Disparity Jnformationjdentifier)時(shí),安排視差信息(Disparityjnformation)作為數(shù)據(jù)標(biāo)識符之后的數(shù)據(jù)主體(data body)。圖52圖示安排了視差信息數(shù)據(jù)(Disparity_Information_Data)的視差信息 (Disparity_Information)的配置。該視差信息數(shù)據(jù)可以具有與上述圖43中的視差鏈接描述符(DiSparity_Linkage_DesCript0r)類似的信息。在這種情況下,該視差信息數(shù)據(jù)包括 DSL(DisparityJnformation_LinkJnformation),其具有在圖 53 所示的配置。此外,該視差信息數(shù)據(jù)包括DHI (DisparityJfeaderJnformation),其具有在圖M和圖55所示的配置。進(jìn)一步,該視差信息數(shù)據(jù)包括DDS (Disparity Data Set),其具有圖56所示的配置。圖 57到圖60圖示了在圖53到圖56中所示的配置中各條信息的內(nèi)容。將參照圖57描述DSL。該DSL是用于將視差序列ID(DisparityJequencejd)與服務(wù)關(guān)聯(lián)的信息?!癉isparityJnfc^Length”是指示該信息的長度(大小)的16位數(shù)據(jù)。 "Disparity_Info_Type"是指示該信息的類型的2位數(shù)據(jù),并且這里設(shè)置到“0x0”,其指示該信息是“DSL”。盡管將省略詳細(xì)描述,但是項(xiàng)目‘‘number_of_Linked_ Streams “ , “ ElementaryPID_of_disparity “ 、 “ ElementaryPID_of_Service_ Component “、“ number_of_linked_sequences “、“ Service_id “、“ Data_Type “ 和〃 Disparity_kquence_id〃 與圖 43 所述的相同。將參照圖M和圖55描述DHI。該DHI也包括用于將每個(gè)服務(wù)分量和分區(qū)位置 ID(Partition_Position_ID)關(guān)聯(lián)的信息,所述分區(qū)位置ID用于指定要用于該分量的視差矢量?!癉isparityJnfc^Length”是指示該信息的長度(大小)的16位數(shù)據(jù)。"Disparity. Info_Type"是指示該信息的類型的2位數(shù)據(jù),并且這里設(shè)置到“0x1”,其指示該信息是 "DHI“VieWS_0ffSet”是指示將偏移的擴(kuò)展應(yīng)用于“第二視圖”(如,僅右眼圖像)還是 “兩個(gè)視圖”(即,左眼圖像和右眼圖像的每個(gè))的1位數(shù)據(jù)。在“1”的情況下,指示應(yīng)用于 “兩個(gè)視圖”。在“0”的情況下,指示應(yīng)用于“第二視圖”?!癉isparity—precision”是指示重疊信息相對于視差矢量移位程度的2位數(shù)據(jù)。在“0”的情況下,指示移位了對應(yīng)于一半視差矢量的量。在“1”的情況下,指示移位了對應(yīng)于視差矢量的量。在“2”的情況下,指示移位了對應(yīng)于視差矢量的單元值,其中一個(gè)單元等于兩個(gè)像素。例如,如果視差矢量是“7”,則執(zhí)行2X7 = 14個(gè)像素的移位。在“3”的情況下,指示移位了對應(yīng)于視差矢量的單元值,其中一個(gè)單元等于三個(gè)像素。例如,如果視差矢量是“7”,則執(zhí)行3X7 = 21個(gè)像素的移位。"Disparity_Sequence_id"是作為用于標(biāo)識每個(gè)服務(wù)的標(biāo)識信息的8位數(shù)據(jù)。 “Service_Linked_flag”是指示是否存在與上述DSL內(nèi)的服務(wù)相關(guān)聯(lián)的視差矢量(視差信息)的1位數(shù)據(jù)。在“1”的情況下,指示存在與服務(wù)相關(guān)聯(lián)的視差矢量。相反,在“0”的情況下,指示不存在與服務(wù)相關(guān)聯(lián)的視差矢量。"Target_Resolution_Type"是用于指定關(guān)于目標(biāo)視頻的編碼視差信息組的分辨率的2位數(shù)據(jù)。在“0x0”的情況下,指示1920X1080的分辨率。在“0x1”的情況下,指示 1440X1080的分辨率。在“0x2”的情況下,指示1280X720的分辨率?!癇lock_SiZe”是用于指定塊大小的2位數(shù)據(jù)。該“Block_SiZe”是指示形成屏幕區(qū)域的信息的區(qū)域的大小的信息。在“0x0”的情況下,指示16像素X 16像素的塊大小。在 “0x1”的情況下,指示的32像素X32像素的塊大小。在“0x2”的情況下,指示64像素X64 像素的塊大小。進(jìn)一步,在“0x3”的情況下,指示1 像素XU8像素的塊大小?!癓ink_S0UrCe”指示視差信息組(源)是通用視差信息組還是特定服務(wù)使用的視差信息組。當(dāng)設(shè)置“1”時(shí),指示視差信息組是具有通過劃分屏幕而獲得的屏幕區(qū)域的視差矢量的通用視差信息組。當(dāng)設(shè)置“0”時(shí),指示視差信息組是具有與服務(wù)分量元素對應(yīng)的視差矢量的特定服務(wù)使用的視差信息組?!癙artition”指示劃分屏幕的模式。該“Partition”是指示形成指示屏幕區(qū)域的信息的、屏幕上劃分的數(shù)量的信息。在“0x0”的情況下,如圖61 (a)所示,指示圖像(畫面) 區(qū)域未劃分,并且傳輸表示該圖像(畫面)區(qū)域的一個(gè)視差矢量(視差信息)。在“0x1”的情況下,如圖61(b)所示,指示將圖像(畫面)區(qū)域劃分為4個(gè)部分,并且傳輸表示各個(gè)子區(qū)域的4個(gè)視差矢量(視差信息)。在這種情況下,以這樣的方式安排視差矢量,使得左上區(qū)域中的視差矢量變?yōu)榈谝?,而右下區(qū)域中的視差矢量變?yōu)樽詈?在圖61(b)中0到3的順序中)。在“0x2”的情況下,如圖61(c)所示,指示將圖像(畫面)區(qū)域劃分為9個(gè)部分, 并且傳輸表示各個(gè)子區(qū)域的9個(gè)視差矢量(視差信息)。在這種情況下,以這樣的方式安排視差矢量,使得左上區(qū)域中的視差矢量變?yōu)榈谝唬蚁聟^(qū)域中的視差矢量變?yōu)樽詈?在圖61(c)中0到8的順序中)。在“0x3”的情況下,如圖61(d)所示,指示將圖像(畫面) 區(qū)域劃分為16個(gè)部分,并且傳輸表示各個(gè)子區(qū)域的16個(gè)視差矢量(視差信息)。在這種情況下,以這樣的方式安排視差矢量,使得左上區(qū)域中的視差矢量變?yōu)榈谝?,而右下區(qū)域中的視差矢量變?yōu)樽詈?在圖61 (d)中0到15的順序中)。在“0x7”的情況下,指示將圖像(畫面)區(qū)域劃分為多個(gè)塊,并且傳輸表示各個(gè)子區(qū)域的多個(gè)視差矢量(視差信息)。在這種情況下,以這樣的方式安排視差矢量,使得左上區(qū)域中的視差矢量變?yōu)榈谝唬蚁聟^(qū)域中的視差矢量變?yōu)樽詈蟆?Number_of_Component_Elements"是指示由上述"Partition,,或“Block_Size,, 指定的屏幕區(qū)域的數(shù)量,或者指示相關(guān)聯(lián)的服務(wù)內(nèi)分量元素的數(shù)量。接下來,在上述“ServidLinkecLflag”是“1”的情況下,安排分量鏈接信息 (C0mp0nent_Linkage_Inf0),其量對應(yīng)于與視差信息組內(nèi)的視差矢量(視差信息)相關(guān)聯(lián)的服務(wù)數(shù)量(number of service)。在該分量鏈接信息中,如圖55中所示,對于分量元素的數(shù)量,安排關(guān)于分量元素與視差矢量之間對應(yīng)的信息。"Component_Element"是指示分量元素ID的8位數(shù)據(jù)。分量元素ID例如是隱藏字幕的窗口 ID (Window ID)、DVB 字幕的區(qū)域 ID (region_idga)等。"Element_Linkage_ Length”是指示信息的長度(大小)的8位數(shù)據(jù)。“nUmber_0f_mUtiple_link”指示與分量元素ID相關(guān)聯(lián)的視差矢量的數(shù)量?!癙artiti0n_P0Siti0n_id”是指定視差矢量的13位信息。該“Partiti0n_P0Siti0n_id”指示多個(gè)屏幕區(qū)域(所述屏幕區(qū)域由上述“!Partition” 或“Block_Size”指定)的屏幕區(qū)域數(shù)量是多少。將參照圖56描述DDS。該DDS包括關(guān)于每一個(gè)視差信息組中包括的視差矢量的信息?!癉isparityJnfo_Length”是指示該信息的長度(大小)的16位數(shù)據(jù)?!癉isparity_ Info_Type"是指示該信息的類型的2位數(shù)據(jù),并且這里設(shè)置到“0x2”,其指示該信息是 “DID”?!癉iSparity_kqUence_id”是用于是通用視差信息組還是特定服務(wù)使用的視差信息組,并且用于在特定服務(wù)使用的情況下標(biāo)識服務(wù)的8位數(shù)據(jù)。"Number_of_Component_Elements"是指示由上述"Partition,,或“Block_Size,, 指定的屏幕區(qū)域的數(shù)量或相關(guān)聯(lián)的服務(wù)內(nèi)分量元素的數(shù)量的13位數(shù)據(jù)。安排要用于視頻數(shù)據(jù)的某一時(shí)間段內(nèi)(如,15幀的時(shí)間段內(nèi))的每一幀的視差信息組中包括的P個(gè)視差矢量的值?!?Disparityjetsjruperiod”是指示用于提供視頻數(shù)據(jù)的某一時(shí)間段中包括的偏移的視差矢量(視差信息)組的數(shù)量的8位數(shù)據(jù)。“OffSet_Frame_In_diSparity_Set”是指示使用每個(gè)視差信息組的定時(shí)的時(shí)間信息。該時(shí)間信息指示從由時(shí)間戳(Time Stamp)指示的第一個(gè)視差信息組的使用時(shí)間起的時(shí)間(幀數(shù))。"Disparity_Vector_Horozontal (i) ”指示作為第i個(gè)視差矢量的值的水平視差矢量的值。注意,在以上描述中,已經(jīng)示出了這樣的示例其中,安排用于在視差序列 ID (Disparity_Sequence_id)和服務(wù)之間進(jìn)行關(guān)聯(lián)的信息,作為用作用戶數(shù)據(jù)的視差信息(Disparityjnformation)中的DSL。然而,可以想到的是,使用視差鏈接描述符 (Disparity_Linkage_Descriptor)來執(zhí)行視差序列ID和服務(wù)之間的關(guān)聯(lián)。該視差鏈接描述符DLD例如安排在多路復(fù)用的流(位流數(shù)據(jù)BSD)的PMT表內(nèi)。在圖22中所示的傳輸數(shù)據(jù)生成單元110D,與包括用于顯示立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)一起,傳輸每一個(gè)均添加了指示應(yīng)當(dāng)使用視差信息的重疊信息的類型的標(biāo)識信息的預(yù)定組視差信息組。因此,在接收側(cè),使用適于該重疊信息的類型的視差信息組,將適當(dāng)?shù)囊暡罱o予要重疊在左眼圖像和右眼圖像上的相同的重疊信息 (如隱藏字幕信息、字幕信息、圖形信息、或文本信息等)。注意,在圖22中所示的傳輸數(shù)據(jù)生成單元IlOD的以上描述中,已經(jīng)進(jìn)行了描述, 其中視差信息組創(chuàng)建單元131對底層的每個(gè)像素的視差矢量執(zhí)行小型化處理以確定每層中的每個(gè)區(qū)域的視差矢量。然而,在數(shù)據(jù)記錄介質(zhì)130a上可以記錄每層中的每個(gè)區(qū)域的視差矢量,視差信息組創(chuàng)建單元131可以利用它。[服務(wù)分量和視差信息之間的關(guān)聯(lián)]例如,使用如上述圖43所示的視差鏈接描述符(DiSparity_Linkage_ Descriptor)執(zhí)行服務(wù)分量(如字幕或隱藏字幕)和視差信息之間的關(guān)聯(lián)。例如,在圖43 所示的視差鏈接描述符中,執(zhí)行要嵌入視頻基本流的報(bào)頭部分的用戶數(shù)據(jù)區(qū)域的視差信息組和服務(wù)分量(重疊信息)之間的關(guān)聯(lián)。然后,對于該關(guān)聯(lián),使用分配到每條視差信息的視差序列 ID "Disparity_Sequence_id"0圖62圖示用于執(zhí)行服務(wù)分量和視差信息之間的關(guān)聯(lián)的視差鏈接描述符 (Disparity_Linkage_Descriptor)的另一示例配置。視差鏈接描述符安排在插入傳送流的 PSI (服務(wù)特定信息)信息或SI (服務(wù)信息)信息中的預(yù)定位置。PSI信息指示傳送流中包括的每個(gè)基本流所屬的節(jié)目。此外,SI信息以節(jié)目為單位發(fā)送屬性信息。例如,視差鏈接描述符可以安排在PMT(節(jié)目映射表,Program Map Table)中的節(jié)目描述符(Program descriptor)的位置。在此情況下,作為通用使用,由PMT覆蓋的范圍中的任意服務(wù)分量和視差信息(視差數(shù)據(jù))可以相互關(guān)聯(lián)。此外,例如,視差鏈接描述符可以安排在PMT中的基本流環(huán)路(Elementary Stream loop)的描述符(descriptor)部分中。 在此情況下,基本流(elementary stream)的各個(gè)分量(例如,字幕流和視差信息(視差數(shù)據(jù)))可以相互關(guān)聯(lián)。此外,在視差信息(視差數(shù)據(jù))處于通用的操作的情況下,描述符中的 “Disparity^ervice-number”設(shè)為“0”,其指示不存在與特定服務(wù)的關(guān)聯(lián)。例如,在此情況下,視差鏈接描述符可以安排在用作節(jié)目唯一信息的EIT(事件信息表,Event Information Table)中。在此情況下,當(dāng)以節(jié)目為單位發(fā)布視差信息時(shí),可能指示可以以事件(Events) 為單位控制的視差信息(disparity)的目標(biāo)時(shí)間范圍。圖63圖示在圖62中圖示的配置中的每條信息的內(nèi)容。“descriptorjag”是代表描述符的類型的8位數(shù)據(jù)。這里,例如,設(shè)置“OxDO ”,其指示視差鏈接描述符。“ descriptor, length”是代表信息的長度(大小)的8位數(shù)據(jù)。
“disparity_self_contained_flag”是1位標(biāo)記信息。該標(biāo)記信息指示包括對應(yīng)于安排視差鏈接描述符的位置的服務(wù)分量(重疊信息)的數(shù)據(jù)的基本流是否包含視差信息 (視差數(shù)據(jù))。當(dāng)"disparity_self_contained_flag"是1時(shí),指示包括視差信息(視差數(shù)據(jù))。在此情況下,忽視下述 “ElementaryPID_of_krvice_Component” 和"Disparity_ service_number,,的信息。相反,當(dāng) “disparity_self_contained_flag,,是 0 時(shí),指示不包括視差信息(視差)?!癊lementaryPID_of_krvice_Component” 是 13 位數(shù)據(jù)。該數(shù)據(jù)代表包括視差信息的基本流的PID。"Disparity_service_number^ 8位數(shù)據(jù)。該數(shù)據(jù)是在存在視差信息 (視差數(shù)據(jù))的情況指定使用哪個(gè)頻道以便對應(yīng)于多個(gè)頻道的每個(gè)(例如,英文和日文) 的信息。注意到,如上所述,在視差信息(視差)是通用的操作中的情況下,“Disparity, ServiCe_nUmber”設(shè)為“0”,其指示不存在與特定服務(wù)的關(guān)聯(lián)。圖64圖示視差信息(視差數(shù)據(jù))的應(yīng)用范圍的概念。在圖64中,矩形平行六面體的側(cè)表面代表顯示屏幕(即,頁)的概念。然后,在時(shí)間軸方向安排的每個(gè)表面對應(yīng)于一個(gè)視頻幀。然后,在圖64中,每頁存在三個(gè)字幕區(qū)域(Region)或塊。公共視差信息可以應(yīng)用于每個(gè)區(qū)域或塊,或者可以應(yīng)用相互不同的各條視差信息。此外,例如,在字幕的情況下,每個(gè)區(qū)域顯示預(yù)定顯示時(shí)段。在此情況下,相同的視差信息可以應(yīng)用為用于顯示時(shí)段的視差信息,或者還可以應(yīng)用在各個(gè)幀中順序更新的視差 信息。此外,一頁僅具有一條視差信息,并且該視差信息還可以對于特定時(shí)段在時(shí)間方向上應(yīng)用而不取決于如字幕的服務(wù)分量。在此情況下,視差信息是通用視差信息。在此情況下,例如,以如服務(wù)(Services)或流序列(Mream sequences)為單元應(yīng)用固定值的視差信息。以此方式,提供多種視差信息的應(yīng)用范圍。[服務(wù)分量(重疊信息)和視差信息之間的關(guān)聯(lián)的示例]這里,將描述服務(wù)分量(重疊信息)和視差信息之間的關(guān)聯(lián)的示例。圖65圖示在字幕流中嵌入字幕的視差信息(視差數(shù)據(jù))的情況。在此情況下,在PMT中的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中安排視差鏈接描述符。在該環(huán)路中存在字幕基本流PID (Subtitle Elementary PID),并且該P(yáng)ID標(biāo)識包含要應(yīng)用視差信息的字幕信息的字幕基本流(Subtitle ES)。在該示例中,視差信息嵌入該流中。因此,視差鏈接描述符的“diSparity_Self_COntained_f lag”設(shè)為“ 1 ”,其指示該基本流包含視差信息(視差數(shù)據(jù))。因此,字幕和視差信息相互鏈接。圖66圖示在視頻流中嵌入字幕的視差信息(視差數(shù)據(jù))的情況。在此情況下,在 PMT(節(jié)目映射表,Program Map Table)中的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中安排視差鏈接描述符。在該環(huán)路中存在字幕基本流PID (Subtitle Elementary PID),并且該P(yáng)ID標(biāo)識包含要應(yīng)用視差信息的字幕信息的字幕基本流 (Subtitle ES)。在該示例中,視差信息嵌入該視頻流。因此,視差鏈接描述符的“disparity_self_ containecLflag”設(shè)為“0”。因此,指示字幕流不包含視差信息(視差數(shù)據(jù))。然后,視差鏈接描述符的“ElementaryPIDjfJerviceJ^mponent”設(shè)計(jì)為代表包含視差信息的視頻基本流(Video ES)的PID。因此,視頻流中的字幕和視差信息相互鏈接。
圖67圖示在視差信息流中嵌入字幕的視差信息(視差數(shù)據(jù))的情況。在此情況下,在PMT中的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中安排視差鏈接描述符。在該環(huán)路中存在字幕基本流PID (Subtitle Elementary PID),并且該P(yáng)ID 標(biāo)識包含要應(yīng)用視差信息的字幕信息的字幕基本流(Subtitle ES)。在該示例中,視差信息嵌入該視頻流中。因此,視差鏈接描述符的“disparity, Self_COntained_flag”設(shè)為“0”。因此,指示字幕流不包含視差信息(視差數(shù)據(jù))。然后, 視差鏈接描述符的“ElementaryPIDjfJerviceJ^mponent”設(shè)計(jì)為代表包含視差信息的視差信息基本流(Disparity ES)的PID。因此,視差信息流中的字幕和視差信息相互鏈接。注意到,圖66圖示視差信息嵌入視頻流中的情況,并且此外,圖67圖示視差信息嵌入視差信息流中的情況。然而,除此之外,還預(yù)期視差信息嵌入如圖形流中的任何其它流的情況。類似的也在該情況下應(yīng)用。也就是說,視差鏈接描述符的“disparity_self_ containecLflag”設(shè)為“0”。因此,指示字幕流不包含視差信息(視差數(shù)據(jù))。然后,視差鏈接描述符的“ElementaryPIDjfJerviceJ^mponent”設(shè)計(jì)為代表例如包含視差信息的圖形信息基本流的PID。圖68圖示通用(一般使用,Generic use)的視差信息(視差數(shù)據(jù))嵌入視頻流或視差信息流中的情況。在此情況下,視差鏈接描述符例如安排在PMT中的節(jié)目描述符 (Program Descriptor)中。在此情況下,不指定應(yīng)用視差信息的服務(wù)分量,并且建議視差信息是通用(Generic use)。在該示例中,視差信息嵌入視頻流或視差信息流中。因此,視差鏈接描述符的 “disparity_self_contained_flag” 設(shè)為 “0”。此外,視差鏈接描述符的 “ElementaryPID_ ofjervidComponent”設(shè)計(jì)為代表包含視差信息的視頻流(Video ES)或視差信息流 (Disparity ES)的 PID。圖69圖示通用(一般使用,Generic use)的視差信息(視差數(shù)據(jù))嵌入視頻流或視差信息流中的情況。在此情況下,視差信息例如以節(jié)目為單位提供。在此情況下,視頻鏈接描述符例如安排在EIT(事件信息表,Event Information Table)中。在此情況下,不指定應(yīng)用視差信息的服務(wù)分量,并且建議視差信息是通用(Generic use)。在該示例中,視差信息嵌入視頻流或視差信息流中。因此,視差鏈接描述符的 “disparity_self_contained_flag” 設(shè)為 “0”。此外,視差鏈接描述符的 “ElementaryPID_ ofjervidComponent”設(shè)計(jì)為代表包含視差信息的視頻流(Video ES)或視差信息流 (Disparity ES)的 PID。圖70圖示隱藏字幕的視差信息(視差數(shù)據(jù))嵌入視頻流的情況。在此情況下,視差鏈接描述符安排在PMT (Program Map Table)中的節(jié)目描述符(Program Descriptor)中。 在該環(huán)路中存在視頻基本流PID (Video Elementary PID),并且該P(yáng)ID標(biāo)識包含要應(yīng)用視差信息的隱藏字幕信息的視頻基本流(Video ES)。在該示例中,視差信息嵌入視頻流中。因此,視差鏈接描述符的“disparity_self_ containecLflag”設(shè)為“1”。因此,指示視頻流包含視差信息(視差數(shù)據(jù))。因此,隱藏字幕和視差信息相互鏈接。[每個(gè)流中嵌入視差信息]如上所述,視差信息嵌入字幕流、視頻流或視差信息流中。這里,將描述視差信息嵌入每個(gè)流中。首先,將給出視差信息(視差數(shù)據(jù))嵌入視頻流中的情況。圖71圖示DVB_Subtitling的配置(語法,Syntax)。該配置在ETSI (歐洲電信標(biāo)準(zhǔn)協(xié)會)中標(biāo)準(zhǔn)化(ETSI EN 300743)。圖71中的配置是從PES層來看的。PES_data_field 包含指示字幕數(shù)據(jù)的8位信息,其由“datajdentifier”表示。此外,PES_data_field包含用于標(biāo)識字幕流的8位信息,其由“Subtitle_stream_id”表示。此夕卜,PES_data_field包含"Subtitling_segment,,。然后,"Subtitling_ segment”包括各條信息“Synd_byte”、“segment_type”、“page_id”、“segment_length”和 “Segment_data_field”?!皃agejd”是用于標(biāo)識每頁的標(biāo)識信息。"segment.type"是 8 位信息,并且 “Subtitling—segment” 指示片段的類型 (kind)。圖72圖示“segment_type”的每個(gè)值和片段類型之間的對應(yīng)關(guān)系。例如,“0x10” 代表包含各種字幕元素的“頁成分片段”。此外,“0x40”按照慣例被當(dāng)作保留片段,并且這里新定義為指示包含視差信息的“視差數(shù)據(jù)組片段”。傳統(tǒng)的3D兼容字幕解碼器配置為略過該片段的讀取,因?yàn)椤?x40”用作保留片段。另一方面,3D兼容解碼器識別“0x40”是包含視差信息的“視差數(shù)據(jù)組片段”,并且因此能夠從該片段讀取視差信息。當(dāng)設(shè)置 “segment_type = 0x40” 時(shí),"segment_data_field” 變?yōu)榘ㄓ?“page_ id”指示的頁中的視差信息(視差數(shù)據(jù))。圖73圖示在此情況下的“disparity_data_set_ segment”的示例配置。圖74圖示“disparity_data”的配置(語法,Syntax)的示例。圖75和76圖示圖74中圖示的配置中的每條信息的內(nèi)容?!癝eleCt_View_Shift”是形成偏移目標(biāo)指定信息的2位信息。該“SeleCt_View_Shift”基于要重疊在左眼圖像上的服務(wù)分量和要重疊在右眼圖像上的服務(wù)分量中的視差信息,指定要偏移的服務(wù)分量。例如,假設(shè)“SeleCt_View_ shift = 00”代表保留的。服務(wù)分量是字幕信息、隱藏字幕信息等。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = ‘01”時(shí),指示僅要重疊在右眼圖像上的服務(wù)分量在水平方向偏移對應(yīng)于視差信息(視差)的量。這里,當(dāng)視差信息(視差)是正值時(shí),要重疊在右眼圖像上的服務(wù)分量在右邊方向偏移。相反,當(dāng)視差信息(視差)是負(fù)值時(shí),要重疊在右眼圖像上的服務(wù)分量在左邊方向偏移。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = ‘10,”時(shí),指示僅要重疊在左眼圖像上的服務(wù)分量在水平方向偏移對應(yīng)于視差信息(視差)的量。這里,當(dāng)視差信息(視差)是正值時(shí),要重疊在左眼圖像上的服務(wù)分量在右邊方向偏移。相反,當(dāng)視差信息(視差)是負(fù)值時(shí),要重疊在左眼圖像上的服務(wù)分量在左邊方向偏移。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = ‘11’”時(shí),指示要重疊在左眼圖像上的服務(wù)分量和要重疊在右眼圖像上的服務(wù)分量兩者在水平方向的相反方向上偏移。這里, 在視差信息(視差)是偶數(shù)值的情況下,要重疊在左眼圖像上的服務(wù)分量在是正值時(shí)在右邊方向偏移“視差/2”,并且在是負(fù)值時(shí)在左邊方向偏移“視差/2”。此外,在視差信息(視差)是偶數(shù)值的情況下,要重疊在右眼圖像上的服務(wù)分量在是正值時(shí)在左邊方向偏移“視差/2”,并且在是負(fù)值時(shí)在右邊方向偏移“視差/2”。此外,在視差信息(視差)是奇數(shù)的情況下,要重疊在左眼圖像上的服務(wù)分量在是正值時(shí)在右邊方向偏移“(視差+1) /2”,并且在是負(fù)值時(shí)在左邊方向偏移“(視差+1) /2”。 此外,在視差信息(視差)是奇數(shù)值的情況下,要重疊在右眼圖像上的服務(wù)分量在是正值時(shí)
35在左邊方向偏移“(視差_1)/2”,并且在是負(fù)值時(shí)在右邊方向偏移“(視差_1)/2”?!癲irectjnode”是指示視差信息是通用(一般使用,Generic use)視差信息還是用于如字幕或隱藏字幕的特定服務(wù)使用的視差信息的1位使用信息。當(dāng)設(shè)置“directjnode =1”時(shí),指示視差信息是通用視差信息。在此情況下,視差信息不與特定服務(wù)分量相關(guān)聯(lián)。 當(dāng)設(shè)置“directjnode = 0”時(shí),指示視差信息是用于字幕的視差信息。在此情況下,存在與視差信息相關(guān)聯(lián)的服務(wù)分量(如字幕或隱藏字幕)。"shared disparity”是指示所有區(qū)域(regions)是否共享一條視差信息的共享信息。當(dāng)設(shè)置“shared disparity = 1”時(shí),指示所有區(qū)域(regions)或塊(Blocks)共享一條視差信息。當(dāng)設(shè)置“shared disparity = 0”時(shí),指示存在對應(yīng)于每個(gè)區(qū)域(region)或每個(gè)塊(Block)的視差信息?!皀umber_of_regions_minusl ”是指示 0 到 255 的 8 位數(shù)據(jù),其代表區(qū)域(regions) 或塊(Blocks)的數(shù)目。注意到,從0到255的范圍實(shí)際意味著從1到256的范圍。當(dāng)設(shè)置 “directjnode = 0” 時(shí),“number_of_regions_minusl” 代表顯示屏幕(即,頁)上的區(qū)域 (regions)的數(shù)目。此外,當(dāng)設(shè)置“directjnode= 1 ”時(shí),“number_of_regions_minusl”代表通過劃分屏幕獲得的子區(qū)域的數(shù)目。例如,當(dāng)“number_0f_regi0ns_minusl”是“1”時(shí),不劃分屏幕, 并且指示一塊在整個(gè)屏幕上。此外,例如,當(dāng)“number_0f_regi0ns_minus 1 ”是“ 16 ”時(shí),指示存在16塊,其中屏幕垂直和水平等分為4個(gè)部分。此外,例如,當(dāng)“number_0f_regi0ns_ minusl”是“256”時(shí),指示存在256塊,其中屏幕垂直和水平等分為16個(gè)部分?!皉egi0n_bl0Ck_id”是用于標(biāo)識顯示屏幕上的每個(gè)區(qū)域或通過劃分屏幕獲得的每個(gè)子區(qū)域(塊)的8位標(biāo)識信息?!皌emporal_extension_flag,,是相對于與由"region_block_id” 指示的區(qū)域塊的視差信息的1位標(biāo)記信息。該標(biāo)記信息指示視差信息是在服務(wù)分量(如字幕或隱藏字幕) 的顯示幀時(shí)段期間在各個(gè)幀中共同使用的視差信息,或者在各個(gè)幀中順序更新的視差信息。當(dāng)設(shè)置“temporalextensior^flag = 1”時(shí),指示在顯示幀時(shí)段期間的各個(gè)幀中更新視差信息的值。此外,當(dāng)設(shè)置“temporalextensior^flag = 0”時(shí),使用相同的視差信息而不更新顯示幀時(shí)段期間在各個(gè)幀中更新視差信息的值?!癲isparity”是指示關(guān)于顯示幀時(shí)段期間的第一幀的視差信息的值的8位信息, 并且取范圍從-128到+127的值。當(dāng)設(shè)置上述“temporal_extension_flag = 0”時(shí),對應(yīng)于由“regi0n_bl0Ck_id”指示的區(qū)域(region)或塊(Block)的視差信息僅是8位信息 (即,“disparity”)。相反,設(shè)置上述 “temporal_extension_f lag = 1” 時(shí),作為對應(yīng)于由 “region_block_id” 指示的區(qū)域(region)或塊(Block)的視差信息,除了由 “disparity” 指示的關(guān)于第一幀的8位視差信息外,還存在關(guān)于第二幀和隨后幀的視差信息。給出關(guān)于第二幀和隨后幀的視差信息作為相對于關(guān)于之前幀的視差信息的偏移信息?!皀umber_0f_frame_set”是在顯示幀時(shí)段期間第二幀和隨后幀的數(shù)目以11幀為單位分段的情況下需要多少單位。例如,在顯示幀時(shí)段是30幀的情況下,第二幀和隨后幀的數(shù)目是四,并且由“number_0f_frame_set”指示的單位的數(shù)目是“3”。"offset_sequence"是用作相對于關(guān)于之前幀的視差信息的偏移信息的2位信息?!皁ffset_sequence = 00” 指示偏移值是“0”。"offset_sequence = 01” 指示偏移值是“+1”。"offset_sequence = 10” 指示偏移值是 “_1”。此外,“offset_sequence = 11” 指示沒有偏移信息分配到幀。在上述顯示幀時(shí)段是30幀的情況下,在以11幀為單位分段 30幀的情況下獲得的第三單位中,“offset_sequence_7”和此后設(shè)為“offset_sequence = 11”。“offset_precision” 是指示由上述“offset_sequence” 指示的偏移值中 “1” 的精度,換句話說,使用“1”的像素的數(shù)目。當(dāng)設(shè)置“offseLprecision = 0”時(shí),指示偏移值 “1”代表1個(gè)像素。此外,當(dāng)設(shè)置“offseLprecision = 1”時(shí),偏移值“1”代表2個(gè)像素。圖 77 7^T "segment_type = 0x10" ^ "page_composition_segment"的 $ 例配置。在圖77所示的示例配置中,按照慣例,“pagejtate”之后的2位設(shè)為保留位。這 H,1 ^feidfW^ "disparity_data_association_flag" ^ : "page_state" tj^ift 義的。該標(biāo)記信息指示是否存在與“page_C0mp0Siti0n_Segment”的頁相關(guān)聯(lián)的視差信息 (視差數(shù)據(jù))。當(dāng)設(shè)置“disparity_data_ass0ciati0n_flag = 1”時(shí),指示存在與該頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。相反,當(dāng)設(shè)置“disparity_data_ass0ciati0n_flag = 0”時(shí), 指示不存在與該頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。傳統(tǒng)的3D兼容字幕解碼器跳過該“diSparity_data_aSS0Ciati0n flag”的讀取。 另一方面,3D兼容解碼器可以通過參照“disparity_data_ass0ciati0n_flag”檢測對于該頁是否存在視差信息(視差數(shù)據(jù))。接下來,將描述在視頻流中嵌入視差信息(視差數(shù)據(jù))的情況。在此情況下,視差信息嵌入視頻流的報(bào)頭部分的用戶數(shù)據(jù)區(qū)域中。圖78圖示包括視差信息(視差數(shù)據(jù)) 的用戶數(shù)據(jù)的示例配置。該示例是編碼方法是MPEG4-AVC的情況的示例。在該配置中, 包括如 “ itu—t—t35—country—code,,、“ itu—t—t35—provider—code,,、“user—identifier,,、 “disparity—data—set,,禾口 “end—of—user_data—field—maker,,的信息?!皍serjdentifier”代表用戶數(shù)據(jù)的類型。當(dāng)用戶數(shù)據(jù)是包含視差信息的用戶數(shù)據(jù)時(shí),指示“user_identifier”包含視差信息。圖79圖示“disparity_data_set”的配置。在該配置中,包括如“8}0105^,,、“(1土8口81"徹_861^^_111111^1",,、“口8區(qū)6」(1,,禾口“(1土8口81"徹_ data”的信息。"disparity_service_number^ 8位數(shù)據(jù)。該數(shù)據(jù)是指定在存在視差信息(視差數(shù)據(jù))的情況下使用哪個(gè)頻道以便對應(yīng)于多個(gè)頻道的每個(gè)(如例如,英文和日文)的信息。 “page_id”是用于標(biāo)識每頁的標(biāo)識信息。對于由“disparityjervicejumber”指定的每組頻道和由“page_id”指定的頁存在信息“diSparity_data”。"disparity.data"的配置類似于上述嵌入字幕流的情況(見圖74)。接下來,將描述視差信息(視差數(shù)據(jù))嵌入視差信息流的情況。圖80圖示包括視差信息(視差數(shù)據(jù))的PES_data_fieldno的示例配置。在該配置中,包括如“user_ identifier,,、"disparity_stream_id,\"disparity_data_set" 禾口 “end_of_PES_data_ fieldjnaker,,的信息。圖81圖示“diSparity_data_Set”的配置。在該配置中,包括如 "sync_byte">"disparity_service_number ,\"page_id"禾口 “disparity_data,,白勺 f|f ;§、。 "disparity_data"的配置類似于上述嵌入字幕流的情況(見圖74)。將給出使用上述視差鏈接描述符(見圖62)的視差信息(視差數(shù)據(jù))和字幕之間的關(guān)聯(lián)的進(jìn)一步描述。圖82圖示視差信息嵌入字幕流的情況。這里,例如,將考慮包括在字幕流ESl中的英文的字幕和視差信息相互關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ESl的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。字幕流ESl的PID存在于該環(huán)路中,并且可能通過使用PID標(biāo)識字幕流ESl。此外,在此情況下,視差信息嵌入該字幕流ESl中。因此,視差鏈接描述符的 “disparity_self_c0ntained_flag”設(shè)為“1”。因此,指示字幕流ESl包含視差信息(視差數(shù)據(jù))。因此,字幕和視差信息相互鏈接。在此情況下,由“kgmentjype = 0x10”指示的“頁成分片段”和由“kgmentjype =0x40”指示的“視差數(shù)據(jù)組片段”以可標(biāo)識的方式嵌入字幕流ESl中。在此情況下,“頁成分片段”的“disparity_data_ass0ciati0n_flag”設(shè)為“1”。因此,指示存在與“頁成分片段”的頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。在前面的描述中,已經(jīng)考慮了其中例如字幕流ESl中包括的英文的字幕與視差信息相互關(guān)聯(lián)的情況。例如,也可以以類似方式考慮例如字幕流ES2中包括的日文的字幕與視差信息相互關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ES2 的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。圖83圖示視差信息嵌入視頻流中的情況。這里,例如,將考慮包括在字幕流ESl 中的英文字幕與視差信息相關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ESl的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。字幕流ESl的PID存在于該環(huán)路中,并且可能用該P(yáng)ID標(biāo)識字幕流ESl。此外,在此情況下,視差信息嵌入視頻流中。因此,視差鏈接描述符的“disparity, datajssociatioruflag”設(shè)為“0”。因此,指示字幕流ESl不包含視差信息(視差數(shù)據(jù))。 在此情況下,視差鏈接描述符的“ElementaryPIDjfJerviceJ^mponent”設(shè)計(jì)為代表包含視差信息的視頻基本流(Video ES)的PID。此外,視差鏈接描述符的“disparity_serVice_ number”設(shè)計(jì)為代表包含例如對應(yīng)于英文字幕的視差信息的頻道的“disparity_serVice_ number1"ο在此情況下,字幕流ESl中包括的“頁成分片段,Page Composition segment”的 “disparity_data_ass0ciati0n_flag”設(shè)為“1”。因此,指示存在與“頁成分片段”中的頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。在前面的描述中,例如,已經(jīng)考慮了包括在字幕流ESl中的英文字幕與視差信息相關(guān)聯(lián)的情況。例如,也可以以類似方式考慮包括在字幕流ES2中的例如日文字幕與視差信息相關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ES2的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。此外,視差鏈接描述符的“disparityjervicejumber”設(shè)計(jì)為代表包含例如對應(yīng)于日文字幕的視差信息的頻道的"disparity_service_number2,,。圖84圖示視差信息嵌入視差信息流的情況。這里,例如,將考慮字幕流ESl中包括的英文的字幕與視差信息相關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ESl的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。字幕流ESl的PID存在于該環(huán)路中,并且可能用該P(yáng)ID標(biāo)識字幕流ESl。此外,在此情況下,視差信息嵌入視差信息流中。因此,視差鏈接描述符的 “disparity_data_association_flag”設(shè)為“0”。因此,指示字幕流ESl不包含視差信息 (視差數(shù)據(jù))。在此情況下,視差鏈接描述符的“ElementaryPIDjfJerviceJ^mponent” 設(shè)計(jì)為代表包含視差信息的視差信息基本流(Disparity ES)的PID。此外,視差鏈接描述符的“disparityjervicmumber ”設(shè)計(jì)為代表包含例如對應(yīng)于英文字幕的視差信息的頻道的"disparity_service_numberl,,。在此情況下,字幕流ESl中包括的“頁成分片段”的“disparity_data_ association_flag"設(shè)為“ 1 ”。因此,指示存在與“頁成分片段”中的頁相關(guān)聯(lián)的視差信息 (視差數(shù)據(jù))。在前面的描述中,例如,已經(jīng)考慮了包括在字幕流ESl中的英文字幕與視差信息相關(guān)聯(lián)的情況。例如,也可以以類似方式考慮包括在字幕流ES2中的例如日文字幕與視差信息相關(guān)聯(lián)的情況。在此情況下,視差鏈接描述符安排在對應(yīng)于PMT中的字幕流ES2的字幕基本流環(huán)路(Subtitle ES loop)的描述符(descriptor)部分中。此外,視差鏈接描述符的“disparityjervicejumber”設(shè)計(jì)為代表包含例如對應(yīng)于日文字幕的視差信息的頻道的"disparity_service_number2,,。如上所述,在視差信息嵌入字幕流中的情況下,使用新定義的“視差數(shù)據(jù)組片段”(見圖72)。因此,視差信息可以嵌入字幕流,以便可從如“頁成分片段”的任何其它片段識別。在接收側(cè),可以基于用作標(biāo)識信息的“Segment_type”從字幕流有利地獲取視差信肩、ο注意到,嵌入該字幕流的字幕信息和視差信息之間的關(guān)系也應(yīng)用于例如以類似方式嵌入視頻流的報(bào)頭部分的用戶數(shù)據(jù)區(qū)域的隱藏字幕信息(CC data)與視差信息之間的關(guān)系。如下所述,它們嵌入用戶數(shù)據(jù)區(qū)域中,使得例如可以通過“uSer_data_type_COde”標(biāo)識它們。此外,如上所述,在字幕流中包括的包含字幕信息的片段“頁成分片段”中新定義由“disparity_data_association_flag”指示的1位標(biāo)記信息(見圖77)。該標(biāo)記信息指示是否存在與“page_C0mp0Siti0n_Segment”的頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。因此, 在接收側(cè),可以容易地掌握是否存在與該頁相關(guān)聯(lián)的視差信息(視差數(shù)據(jù))。此外,如上所述,視差信息(視差數(shù)據(jù))嵌入字幕流、視頻流、視差信息流等。該視差信息(視差數(shù)據(jù))例如設(shè)計(jì)為由所有區(qū)域(regions)或塊(Blocks)共享或者對應(yīng)于每個(gè)區(qū)域(region)或每個(gè)塊(Block)。該視差信息已經(jīng)添加指示它們之一的信息(共享信息)“共享的視差(shared disparity) ”(見圖74)。因此,在接收側(cè),使用共享信息,可以容易地確定發(fā)送的視差信息是否由所有區(qū)域(regions)或塊(Blocks)共享,并且可以有效地執(zhí)行視差信息獲取處理等。此外,如上所述,視差信息(視差數(shù)據(jù))嵌入字幕流、視頻流、視差信息流等。該視差信息(視差數(shù)據(jù))設(shè)計(jì)為用于例如特定服務(wù)使用或通用。該視差信息已經(jīng)添加指示任一條視差信息的信息(使用信息)“directjiiode” (見圖74)。因此,在接收側(cè),使用該使用信息,可以確定發(fā)送的視差信息是特定服務(wù)使用視差信息還是通用視差信息,并且可能適當(dāng)?shù)厥褂冒l(fā)送的視差信息。
此外,如上所述,視差信息(視差數(shù)據(jù))嵌入字幕流、視頻流、視差信息流等。該視差信息(視差數(shù)據(jù))設(shè)計(jì)在服務(wù)分量的顯示幀時(shí)段期間在各個(gè)幀中公用或者在各個(gè)幀中順序更新。該視差信息已經(jīng)添加指示任一條視差信息的標(biāo)記信息“temporalextensioru flag”(見圖 74)。在此情況下,可能例如根據(jù)圖像的內(nèi)容,選擇性傳輸在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息。也就是說,在圖像的移動大的情況下,傳輸在各個(gè)幀中順序更新的視差信息,使得在接收側(cè),可以根據(jù)圖像的內(nèi)容的改變動態(tài)改變要給到重疊信息的視差。此外,在圖像的移動小的情況下,傳輸在各個(gè)幀中公用的視差信息,因此允許抑制視差信息的數(shù)據(jù)量。此外,如上所述,當(dāng)視差信息(視差數(shù)據(jù))在各個(gè)幀中順序更新時(shí),視差信息配置為由關(guān)于顯示幀時(shí)段期間的第一幀的視差信息和相對于關(guān)于之前幀的視差信息的關(guān)于第二和隨后幀的偏移信息形成(見圖74)。因此,可能抑制視差信息的數(shù)據(jù)量。此外,如上所述,在傳送流中插入視差鏈接描述符。該描述符安排在例如插入傳送流中的PSI信息的預(yù)定位置。該描述符包含用于標(biāo)識基本流視差信息的標(biāo)識信息 "ElementaryPID_of_Service_Component"0因此,在接收側(cè),可以用該標(biāo)識信息掌握包含視差信息的基本流,并且可以容易地獲取視差信息。此外,如上所述,在插入傳送流的PSI信息或SI信息中的預(yù)定位置安排視差鏈接描述符。然后,該描述符安排在例如包含對其應(yīng)用視差信息的服務(wù)分量的數(shù)據(jù)(重疊信息) 的基本流環(huán)路中。因此,在接收側(cè),可以從其中安排描述符的基本流環(huán)路容易地掌握包含對其應(yīng)用視差信息的服務(wù)分量的數(shù)據(jù)的基本流,并且可以容易地獲取與該視差信息相關(guān)聯(lián)的服務(wù)分量的數(shù)據(jù)。此外,如上所述,在插入傳送流的PSI信息中的預(yù)定位置安排的視差鏈接描述符存儲由“disparity_self_contained_flag,,指示的1為標(biāo)記信息(見圖62)。該標(biāo)記信息指示包含對應(yīng)于安排描述符的位置的服務(wù)分量的數(shù)據(jù)(重疊信息)的基本流是否包括視差信息。因此,在接收側(cè),可以用該標(biāo)記信息確定包含服務(wù)分量的數(shù)據(jù)的基本流是否包括視差信息。然后,當(dāng)包括視差信息時(shí),可以忽略利用包括在上述描述符中的標(biāo)識信息 “ElementaryPID_of—Service_Component,,的石角定。此外,如上所述,在插入傳送流的PSI信息中的預(yù)定位置安排的視差鏈接描述符包含由“disparityjervicejumber ”指示的信息(見圖62)。在視差信息(視差)是通用操作中時(shí),該“Disparity_service_number”設(shè)為“0”,其指示不存在與特定服務(wù)的關(guān)聯(lián)。 換句話說,“Disparityjervicejumber”指示視差信息是用于特定服務(wù)使用還是通用。因此,在接收側(cè),可以用該信息確定發(fā)送的視差信息是特定服務(wù)使用視差信息還是通用視差信息,并且可能適當(dāng)?shù)厥褂冒l(fā)送的視差信息。“傳輸數(shù)據(jù)生成單元的另一示例配置”此外,圖22所示的傳輸數(shù)據(jù)生成單元IlOD配置為發(fā)送在插入圖像數(shù)據(jù)流的狀態(tài)下,由視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組到接收側(cè)。然而,還可以使用這樣的配置,其中由視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組在插入不同于圖像數(shù)據(jù)流的不同數(shù)據(jù)流的狀態(tài)下發(fā)送到接收側(cè)。此外,還可以使用這樣的配置,其中生成包括由視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組的視差矢量基本流(視差矢量流),并且其中視差矢量流與另一流多路復(fù)用,并且傳輸?shù)浇邮諅?cè)。圖85圖示在此情況下的傳輸數(shù)據(jù)生成單元IlOE的示例配置。 在圖85中,對應(yīng)于圖22中那些部分的部分分配相同號碼,并且省略其詳細(xì)描述。類似于圖2所示的傳輸數(shù)據(jù)生成單元110,傳輸數(shù)據(jù)生成單元IlOE配置為包括視差矢量編碼器115。由視差信息組創(chuàng)建單元131創(chuàng)建的預(yù)定組的視差信息組發(fā)送到視差矢量編碼器115。然后,在視差矢量編碼器115中,生成包括預(yù)定組的視差信息組的視差矢量基本流(視差矢量流)。然后,視差矢量流提供到多路復(fù)用器122。在多路復(fù)用器122中, 視差矢量流也與其它數(shù)據(jù)流一起多路復(fù)用,并且生成位流數(shù)據(jù)BSD。在傳輸數(shù)據(jù)生成單元IlOE中,其它配置和操作類似于圖22所示的傳輸數(shù)據(jù)生成單元IlOD的那些,盡管省略了詳細(xì)描述。此外在傳輸數(shù)據(jù)生成單元IlOE中,可以獲得類似于由圖22所示的傳輸數(shù)據(jù)生成單元IlOD的那些優(yōu)點(diǎn)的優(yōu)點(diǎn)?!皞鬏敂?shù)據(jù)生成單元的另一示例配置”在圖22所示的傳輸數(shù)據(jù)生成單元IlOD中,可能傳輸通用視差信息組和特定服務(wù)使用的視差信息組的任一或者兩者作為視差信息組。然而,還可以構(gòu)思如隱藏字幕信息或字幕信息的受限使用的視差信息設(shè)計(jì)為要被傳輸,并且使用能夠容易地與現(xiàn)有廣播標(biāo)準(zhǔn) (如ATSC和CEA)協(xié)調(diào)的簡單數(shù)據(jù)結(jié)構(gòu)。圖86圖示在此情況下傳輸數(shù)據(jù)生成單元IlOF的示例配置。傳輸數(shù)據(jù)生成單元 IlOF配置為創(chuàng)建其使用限制于隱藏字幕信息的示出信息,并且傳輸該視差信息到接收側(cè)。 在圖86中,對應(yīng)于圖22中那些部分的部分分配相同號碼,并且省略其詳細(xì)描述。傳輸數(shù)據(jù)生成單元IlOF包括數(shù)據(jù)提取單元(歸檔單元)130、視差信息創(chuàng)建單元 131、CC(隱藏字幕)編碼器133、視頻編碼器113、音頻編碼器117和多路復(fù)用器122。數(shù)據(jù)記錄介質(zhì)130a以例如可移除的方式附接到數(shù)據(jù)提取單元130。音頻數(shù)據(jù)和視差矢量(視差信息)與包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)一起記錄在數(shù)據(jù)記錄介質(zhì)130a上,以便相互對應(yīng)。數(shù)據(jù)提取單元130從數(shù)據(jù)記錄介質(zhì)130a提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、視差矢量等,并且輸出它們。數(shù)據(jù)記錄介質(zhì)130a是盤形記錄介質(zhì)、半導(dǎo)體存儲器等。這里,記錄在數(shù)據(jù)記錄介質(zhì)130a上的立體圖像數(shù)據(jù)設(shè)計(jì)為對應(yīng)于由圖2所示的傳輸數(shù)據(jù)生成單元110獲得的立體圖像數(shù)據(jù)。此外,記錄在數(shù)據(jù)記錄介質(zhì)130a上的視差矢量例如是形成圖像的基于像素的視差矢量。CC編碼器133是符合CEA-708的編碼器,并且輸出CC數(shù)據(jù)(隱藏字幕信息的數(shù)據(jù)),用于顯示具有隱藏字幕的字幕。在此情況下,CC編碼器133順序輸出要以時(shí)間順序顯示的各條隱藏字幕信息的CC數(shù)據(jù)。視差信息創(chuàng)建單元132對從數(shù)據(jù)提取單元130輸出的視差矢量(即,基于像素的視差矢量)執(zhí)行小型化處理,并且輸出與從CC編碼器133輸出的CC數(shù)據(jù)中包括的每個(gè)窗口 ID(WindoW ID)相關(guān)的視差信息(視差矢量)。視差信息已經(jīng)相加了偏移目標(biāo)指定信息, 其基于要重疊在左眼圖像上的隱藏字幕信息和要重疊在右眼圖像上的隱藏字幕信息中的視差信息,指定要偏移的隱藏字幕信息。這里,視差信息創(chuàng)建單元132根據(jù)從CC編碼器133輸出的每條隱藏字幕信息的CC 數(shù)據(jù),輸出在其期間顯示隱藏字幕信息的一塊預(yù)定數(shù)目的幀期間使用的視差信息。視差信息例如是在其期間顯示隱藏字幕信息的一塊預(yù)定數(shù)目的幀期間在各個(gè)幀中共同使用的視差信息,或者是在各個(gè)幀中順序更新的視差信息。然后,視差信息已經(jīng)添加標(biāo)記信息,其指示視差信息是在各個(gè)中共同使用的還是在各個(gè)幀中順序更新的。例如,視差信息組創(chuàng)建單元132創(chuàng)建在圖像的移動大的情況下在各個(gè)幀中順序使用的視差信息,并且創(chuàng)建在圖像的移動小的情況下在各個(gè)幀中共同使用的
視差信息。視差信息組創(chuàng)建單元132形成在各個(gè)幀中順序更新的視差信息,其例如由關(guān)于第一幀的視差信息和關(guān)于第二和隨后幀相對于之前幀的偏移信息。以此方式,由相對于關(guān)于之前幀的視差信息的偏移信息形成關(guān)于第二和隨后幀的視差信息,因此允許抑制視差信息的數(shù)據(jù)量,并且還允許各個(gè)幀中視差信息的更新的平滑感知。視頻編碼器113使用MPEG4-AVC、MPEG2、VC-I等對從數(shù)據(jù)提取單元130提供的立體圖像數(shù)據(jù)執(zhí)行編碼,以獲得編碼的視頻數(shù)據(jù)。此外,視頻編碼器113使用在其后級提供的流格式化器113a,生成包括在有效載荷部分中的編碼視頻數(shù)據(jù)的視頻基本流。從上述CC編碼器133輸出的CC數(shù)據(jù)和由上述視差信息創(chuàng)建單元131創(chuàng)建的視差信息提供到視頻編碼器113中的流格式化器113a。流格式化器113a將CC數(shù)據(jù)和視差信息作為用戶數(shù)據(jù)嵌入視頻基本流。換句話說,立體圖像數(shù)據(jù)包括在視頻基本流的有效載荷部分,并且CC數(shù)據(jù)以及此外的視差信息包括在報(bào)頭部分的用戶數(shù)據(jù)區(qū)域中。如上圖41所示,在視頻基本流中,在開頭安排包括每個(gè)序列參數(shù)的序列報(bào)頭部分。在該序列報(bào)頭部分之后,安排包括每個(gè)畫面參數(shù)和用戶數(shù)據(jù)的畫面報(bào)頭。在該畫面報(bào)頭部分之后,安排包括畫面數(shù)據(jù)的有效載荷部分。隨后,重復(fù)地安排畫面報(bào)頭部分和有效載荷部分。CC數(shù)據(jù)和上述視差信息嵌入例如畫面報(bào)頭部分的用戶數(shù)據(jù)區(qū)域中。在此情況下, 作為用戶數(shù)據(jù)嵌入的CC數(shù)據(jù)和視差信息設(shè)計(jì)為可通過用戶數(shù)據(jù)類型碼識別。換句話說,添加到視差信息的用戶數(shù)據(jù)類型碼設(shè)計(jì)為與添加到CC數(shù)據(jù)的用戶數(shù)據(jù)類型碼不同。音頻編碼器117對從數(shù)據(jù)提取單元130提供的音頻數(shù)據(jù)執(zhí)行使用MPEG-2 Audio AAC等的編碼,并且生成音頻基本流。多路復(fù)用器122多路復(fù)用從編碼器113和117輸出的分組化基本流。然后,多路復(fù)用器122輸出用作傳輸數(shù)據(jù)的位流數(shù)據(jù)(傳送流)BSD。將簡要描述圖86所述的傳輸數(shù)據(jù)生成單元IlOF的操作。從數(shù)據(jù)提取單元130輸出的立體圖像數(shù)據(jù)提供到視頻編碼器113。在視頻編碼器113中,對立體圖像數(shù)據(jù)執(zhí)行使用 MPEG4-AVC、MPEG2、VC-1等的編碼,并且生成包括編碼的視頻數(shù)據(jù)的視頻基本流。視頻基本流提供到多路復(fù)用器122。此外,在CC編碼器133中,輸出用于顯示具有隱藏字幕的字幕的CC數(shù)據(jù)(隱藏字幕信息的數(shù)據(jù))。在此情況下,在CC編碼器133中,順序輸出要以時(shí)間順序顯示的各條隱藏字幕信息的CC數(shù)據(jù)。此外,從數(shù)據(jù)提取單元130輸出的基于像素的視差矢量提供到視差矢量創(chuàng)建單元 132。在視差矢量創(chuàng)建單元132中,對視差矢量執(zhí)行小型化處理等,并且輸出與從上述CC編碼器133輸出的CC數(shù)據(jù)中包括的每個(gè)窗口 ID(WindoW ID)相關(guān)的視差信息(視差矢量)。從CC編碼器133輸出的CC數(shù)據(jù)和由視差信息創(chuàng)建單元132創(chuàng)建的視差信息提供到視頻編碼器113的流格式化器113a。在流格式化器113a中,CC數(shù)據(jù)和視差信息以這樣的方式嵌入視頻基本流的報(bào)頭部分的用戶數(shù)據(jù)區(qū)域中,使得CC數(shù)據(jù)和視差信息可以通過用戶數(shù)據(jù)標(biāo)識信息(用戶數(shù)據(jù)類型碼)識別。此外,從數(shù)據(jù)提取單元130輸出的音頻數(shù)據(jù)提供到音頻編碼器117。在音頻編碼器117中,對音頻數(shù)據(jù)執(zhí)行使用MPEG-2 Audio AAC等的編碼,并且生成包括編碼的音頻數(shù)據(jù)的音頻基本流。音頻基本流提供到多路復(fù)用器122。在多路復(fù)用器122中,多路復(fù)用從各個(gè)編碼器提供的基本流的分組,并且獲得用作傳輸數(shù)據(jù)的位流數(shù)據(jù)BSD。[包括視差信息(Capti0n_diSparity_data)的用戶數(shù)據(jù)的詳細(xì)配置]接下來,將描述包括視差信息(Capti0n_diSparity_data)的用戶數(shù)據(jù)的詳細(xì)配置。圖87圖示用戶數(shù)據(jù)的示例。圖88圖示圖87所示的配置中的每條信息的內(nèi)容。該示例是在編碼方法是MPEG2的情況下的示例。在32位開始碼(user_data_start_code)之后, 安排用于標(biāo)識廣播標(biāo)準(zhǔn)“ATSC”的32位碼“0x47413934”。此外,在它之后,安排8位用戶數(shù)據(jù)類型碼(uSer_data_type_COde)。當(dāng)設(shè)置 "user_data_type_code = 0x07”時(shí),視差信息(caption_disparity_data)安排為之后的數(shù)據(jù)主體。注意到,當(dāng)設(shè)置“uSer_data_type_COde = 0x03”時(shí),CC數(shù)據(jù)(CC_data)安排為數(shù)據(jù)主體,并且當(dāng)設(shè)置“uSer_data_type_COde = 0x06”時(shí),條數(shù)據(jù)(bar_data)安排為數(shù)據(jù)主體。接下來,將描述視差信息(capti0n_diSparity_data)的詳細(xì)配置。圖89圖示視差信息的示例。圖90和91圖示圖92所示的配置中每條信息的內(nèi)容。“servicejumber” 是指定隱藏字幕的頻道的信息?!皊ervice_number”與CEA-708中的“caption service”相關(guān)。在對于隱藏字幕存在如例如英文和日文的多個(gè)頻道的同時(shí),為每個(gè)頻道安排視差信息。 注意到,“service_number = 0”指示特定模式,其中在多個(gè)字幕窗口(Caption Window)之間共享一條視差信息(視差矢量)?!皊elect_view_shift”是形成偏移目標(biāo)指定信息的2位信息。“select_view_ shift ”基于要重疊在左眼圖像上的隱藏字幕信息和要重疊在右眼圖像上的隱藏字幕信息之間的視差信息,指定要偏移的隱藏字幕信息。例如,“SeleCt_View_Shift = 00”假設(shè)為代表保留的。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = 01”時(shí),指示僅僅要重疊在左眼圖像上的隱藏字幕信息在水平方向上偏移對應(yīng)于視差信息(視差)的量。這里,當(dāng)視差信息(視差)是正值時(shí),要重疊在左眼圖像上的隱藏字幕信息在右邊方向偏移。相反,當(dāng)視差信息 (視差)是負(fù)值時(shí),要重疊在左眼圖像上的隱藏字幕信息在左邊方向偏移。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = 10”時(shí),指示僅僅要重疊在右眼圖像上的隱藏字幕信息在水平方向上偏移對應(yīng)于視差信息(視差)的量。這里,當(dāng)視差信息(視差)是正值時(shí),要重疊在右眼圖像上的隱藏字幕信息在右邊方向偏移。相反,當(dāng)視差信息 (視差)是負(fù)值時(shí),要重疊在右眼圖像上的隱藏字幕信息在左邊方向偏移。此外,例如,當(dāng)設(shè)置“SeleCt_VieW_Shift = 11”時(shí),指示要重疊在左眼圖像上的隱藏字幕信息和要重疊在右眼圖像上的隱藏字幕信息兩者在水平方向的相反方向上偏移。這里,在視差信息(視差)是偶數(shù)值的情況下,要重疊在左眼圖像上的隱藏字幕信息在是正值時(shí)在右邊方向偏移對應(yīng)于“視差/2”的量,并且在是負(fù)值時(shí)在左邊方向偏移對應(yīng)于“視差 /2”的量。此外,在視差信息(視差)是偶數(shù)值的情況下,要重疊在右眼圖像上的隱藏字幕信息在是正值時(shí)在左邊方向偏移對應(yīng)于“視差/2”的量,并且在是負(fù)值時(shí)在右邊方向偏移對應(yīng)于“視差/2”的量。此外,在視差信息(視差)是奇數(shù)的情況下,要重疊在左眼圖像上的隱藏字幕信息在是正值時(shí)在右邊方向偏移對應(yīng)于“(視差+1)/2”的量,并且在是負(fù)值時(shí)在左邊方向偏移對應(yīng)于“(視差+1)/2”的量。此外,在視差信息(視差)是奇數(shù)值的情況下,要重疊在右眼圖像上的隱藏字幕信息在是正值時(shí)在左邊方向偏移對應(yīng)于“(視差-1)/2”的量,并且在是負(fù)值時(shí)在右邊方向偏移對應(yīng)于“(視差_1)/2”的量。"number_of_caption_windows"是指示與視差信息(視差)相關(guān)聯(lián)的字幕窗口 (Caption Window)的數(shù)目的3位信息。字幕窗口的數(shù)目一直到8個(gè)。對于每個(gè)字幕窗口安排視差信息(視差)?!癱aptioruwindowjd”是指示CEA-708的“字幕窗口
,,的3
位信息。"temporal_extension_flag"是用于對應(yīng)于由 ‘‘caption_window_id,,指示的字幕窗口的視差信息的1位標(biāo)記信息。該標(biāo)記信息指示視差信息是在隱藏字幕信息的顯示幀時(shí)段期間在各個(gè)幀中公用,還是在各個(gè)幀中順序更新的視差信息。當(dāng)設(shè)置“temporal extensioruflag= 1”時(shí),指示視差信息的值在顯示幀時(shí)段期間在各個(gè)幀中更新。此外,當(dāng)設(shè)置“temporalextensior^flag = 0”時(shí),使用相同的視差信息,而不用在顯示幀時(shí)段期間在各個(gè)幀中更新視差信息的值?!癲isparity”是指示關(guān)于顯示幀時(shí)段期間的第一幀的視差信息的值的8位信息, 并且取范圍從-128到+127的值。當(dāng)設(shè)置上述“temporal_extension_flag = 0”時(shí),對應(yīng)于由“captioruwindowjd”指示的字幕窗口的視差信息僅是8位信息(即,“disparity”)。 相反,設(shè)置上述“temporal_extension_flag = 1” 時(shí),作為對應(yīng)于由“region_block_id,,指示的字幕窗口的視差信息,除了由“disparity”指示的關(guān)于第一幀的8位“視差”的視差信息外還存在關(guān)于第二幀和隨后幀的視差信息。給出關(guān)于第二幀和隨后幀的視差信息作為相對于關(guān)于之前幀的視差信息的偏移信息?!皀umber_0f_frame_set”是在顯示幀時(shí)段期間第二幀和隨后幀的數(shù)目以11幀為單位分段的情況下需要多少單位的8位信息。例如,在顯示幀時(shí)段是30幀的情況下,第二幀和隨后幀的數(shù)目是29,并且由“nUmber_0f_frame_set”指示的單位的數(shù)目是“3”。"offset_sequence"是用作相對于關(guān)于之前幀的視差信息的偏移信息的2位信息?!皁ffset_sequence = 00” 指示偏移值是“0”。"offset_sequence = 01” 指示偏移值是“+1”。"offset_sequence = 10” 指示偏移值是 “_1”。此外,“offset_sequence = 11” 指示沒有偏移信息分配到幀。在上述顯示幀時(shí)段是30幀的情況下,在以11幀為單位分段 30幀的情況下獲得的第三單位中,“offset_sequence_7”和此后設(shè)為“offset_sequence = 11”?!皁ffset_precision” 是指示由上述“offset_sequence” 指示的偏移值中 “1” 的精度,換句話說,使用“1”的像素的數(shù)目。當(dāng)設(shè)置“offseLprecision = 0”時(shí),指示偏移值 “1”代表1個(gè)像素。此外,當(dāng)設(shè)置“offseLprecision = 1”時(shí),偏移值“1”代表2個(gè)像素。在圖86所示的傳輸數(shù)據(jù)生成單元110F中,包括用于顯示立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù),在包括在視頻基本流的有效載荷部分中的狀態(tài)下傳輸。此外,CC數(shù)據(jù)和用于給出視差到基于CC數(shù)據(jù)的隱藏字幕信息的視差信息,在包括在視
44頻基本流的報(bào)頭部分的用戶數(shù)據(jù)區(qū)域的狀態(tài)下傳輸,以便可通過用戶數(shù)據(jù)標(biāo)識信息(user_ data—type—code)標(biāo)識。因此,在接收側(cè),可以從視頻基本流獲取立體圖像數(shù)據(jù),并且此外可以容易地獲取視差信息和重疊信息的數(shù)據(jù)。此外,在接收側(cè),可以使用視差信息將適當(dāng)?shù)囊暡罱o到要重疊在左眼圖像和右眼圖像上的相同的隱藏字幕信息。因此,在重疊信息的顯示中,重疊信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。此外,在圖86所示的傳輸數(shù)據(jù)生成單元1IOF中,視差信息已經(jīng)添加了偏移目標(biāo)指定信息(SeleCt_View_Shift),其基于要重疊在左眼圖像上的左眼隱藏字幕信息和要重疊在右眼圖像上的右眼隱藏字幕信息之間的視差信息,指定要偏移的隱藏字幕信息。因此,偏移目標(biāo)指定信息使得可能根據(jù)希望僅偏移左眼隱藏字幕信息、僅偏移右眼隱藏字幕信息或偏移兩者。此外,在圖86所示的傳輸數(shù)據(jù)生成單元IlOF中,可以選擇在顯示隱藏字幕信息 (字幕)的預(yù)定數(shù)目的幀中公用的視差信息或者在預(yù)定數(shù)目的幀中順序更新的視差信息作為視差信息。該視差信息添加有指示它們之一的標(biāo)記信息(temporalextensioruflag)。 因此,可能根據(jù)例如圖像的內(nèi)容選擇性地傳輸在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息。也就是說,在圖像的移動大的情況下,傳輸在各個(gè)幀中順序更新的視差信息,并且在接收側(cè),可以根據(jù)圖像的內(nèi)容的改變動態(tài)改變要給到重疊信息的視差。此外,在圖像的移動小的情況下,傳輸在各個(gè)幀中公用的視差信息,因此允許抑制視差信息的數(shù)據(jù)量。此外,在圖92所示的傳輸數(shù)據(jù)生成單元IlOF中,在各個(gè)幀中順序更新的視差信息設(shè)計(jì)為包括關(guān)于預(yù)定數(shù)目的幀的時(shí)段期間的第一幀的視差信息,以及相對于關(guān)于之前的視差信息的關(guān)于第二和隨后幀的偏移信息。因此,可能抑制視差信息的數(shù)據(jù)量。圖92圖示在圖89所示的視差信息(capti0n_diSparity_data)的配置中數(shù)據(jù)量 (數(shù)據(jù)大小)的計(jì)算示例。項(xiàng)目(1-1)代表在這樣情況下的計(jì)算示例,其中對于8個(gè)字幕窗口的每個(gè),在隱藏字幕信息的顯示時(shí)段期間的各個(gè)幀中公用一條視差信息。在此情況下, 視差信息(caption_disparity_data)的數(shù)據(jù)量是18比特。此外,項(xiàng)目(1-2)圖示在這樣情況下的計(jì)算示例,其中使用一個(gè)字幕窗口或者對于所有字幕窗口使用相同的視差信息以及在隱藏字幕信息的顯示時(shí)段期間在各個(gè)幀中公用一條視差信息。在此情況下,視差信息 (caption_disparity_data)的數(shù)據(jù)量是 4 比特。項(xiàng)目( 圖示在這樣情況下的計(jì)算示例,其中對于8個(gè)字幕窗口的每個(gè)使用在使用隱藏字幕信息的顯示時(shí)段的各個(gè)幀中順序更新的視差信息,并且例如顯示時(shí)段是5秒 (150幀)。在此情況下,視差信息(caption_disparity_data)的數(shù)據(jù)量是362比特。注意到,在圖86所示的傳輸數(shù)據(jù)生成單元IlOF已經(jīng)在這樣的上下文中作為示例說明,其中傳輸其使用限制于隱藏字幕信息的視差信息。盡管省略詳細(xì)描述,例如,也可以以類似方式配置傳輸其使用限制于如字幕信息的任何其它重疊信息的視差信息。[機(jī)頂盒的描述]回來參考圖1,機(jī)頂盒200接收從廣播站100經(jīng)由廣播波發(fā)送并且在廣播波上攜帶的位流數(shù)據(jù)(傳送流)。該位流數(shù)據(jù)包含包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、重疊信息數(shù)據(jù),并且還包含視差信息(視差矢量)。這里,重疊信息數(shù)據(jù)例如是字幕數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù))等。機(jī)頂盒200包括位流處理單元201。該位流處理單元201從位流數(shù)據(jù)中提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、重疊信息數(shù)據(jù)、視差矢量等。位流處理單元201使用立體圖像數(shù)據(jù)、重疊信息數(shù)據(jù)(字幕數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù))等生成其上重疊了重疊信息的左眼圖像和右眼圖像的數(shù)據(jù)。這里,在將視差矢量作為數(shù)字信息發(fā)送的情況下,基于視差矢量和重疊信息數(shù)據(jù)生成要重疊在左眼圖像和右眼圖像上的左眼重疊信息和右眼重疊信息。在這種情況下,左眼重疊信息和右眼重疊信息為同一重疊信息。然而,例如,圖像內(nèi)右眼重疊信息的重疊位置配置為在水平方向關(guān)于左眼重疊信息偏移視差矢量的水平方向分量。圖93 (a)圖示在傳輸方法為上述第二傳輸方法(“并排”方法)的情況下左眼圖形信息和右眼圖形信息的重疊位置。要重疊在右眼圖像頂上的右眼圖形信息RGI配置為在水平方向上關(guān)于要重疊在左眼圖像IL上的左眼圖形信息LGI偏移視差矢量的水平方向分量VVT的位置處。注意,IT是空閑偏移值。在位流處理單元201中,生成圖形數(shù)據(jù)使得以如圖93(a)所圖示的方式在圖像IL 和頂上重疊圖形信息LGI和RGI。位流處理單元201將所生成的左眼圖形數(shù)據(jù)和右眼圖形數(shù)據(jù)與從位流數(shù)據(jù)提取的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))進(jìn)行合成,并且獲取處理后的立體圖像數(shù)據(jù)。根據(jù)該立體圖像數(shù)據(jù),如圖93(b)所示,觀察者可以與圖像IL 和IR —起、以視差觀察各條圖形信息LGI和RGI,并且還能夠察覺圖形信息的透視。注意,圖94(a)圖示了在圖像IL和頂上照原樣重疊基于從位流數(shù)據(jù)提取的圖形數(shù)據(jù)的圖形圖像的狀態(tài)。在這種情況下,如圖94(b)所示,觀察者觀察連同左眼圖像IL的左半圖形信息和連同右眼圖像頂?shù)挠野雸D形信息。因而,使得不正確地識別圖形信息。雖然圖93圖示了圖形信息的情況,但類似的適用于其他重疊信息(如隱藏字幕信息、字幕信息或文本信息)。也就是說,在將視差矢量作為數(shù)字信息傳輸?shù)那闆r下,基于視差矢量和重疊信息數(shù)據(jù)生成要分別重疊在左眼圖像和右眼圖像上的左眼重疊信息和右眼重疊信息。在這種情況下,左眼重疊信息和右眼重疊信息為同一重疊信息。然而,例如,圖像內(nèi)右眼重疊信息的重疊位置配置為在水平方向相對于左眼重疊信息偏移視差矢量的水平方向分量。這里,可以構(gòu)思將以下視差矢量用作給出左眼重疊信息與右眼重疊信息之間的視差的視差矢量。例如,可以構(gòu)思將在圖像內(nèi)的多個(gè)位置處檢測到的視差矢量之中,采用就透視而言被識別為最近的位置處的視差矢量作為視差矢量。圖95 (a)、95 (b)、95 (c)和95 (d) 圖示了時(shí)間點(diǎn)TO、Tl、T2和T3處三個(gè)對象位置處的視差矢量(View Vectors)。在時(shí)間點(diǎn)TO處,與對象1對應(yīng)的位置(H0,V0)處的視差矢量VV0-1是最大視差矢量Max VV(TO)。在時(shí)間點(diǎn)Tl處,與對象1對應(yīng)的位置(H1,V1)處的視差矢量VVl-I是最大視差矢量Max VV(Tl)。在時(shí)間點(diǎn)T2處,與對象2對應(yīng)的位置(H2,V2)處的視差矢量VV2-2 是最大視差矢量Max VV (T2)。在時(shí)間點(diǎn)T3處,與對象1對應(yīng)的位置(H3,V3)處的視差矢量VV3-0是最大視差矢量Max VV (T3)。以這種方式,在圖像內(nèi)的多個(gè)位置處檢測到的視差矢量之中,將就透視而言被識別為最近的位置處的視差矢量用作視差矢量,因而允許將重疊信息顯示在就透視而言最近的圖像內(nèi)的對象的前面。
圖96(a)圖示了圖像上的字幕(例如隱藏字幕信息、字幕信息)的顯示示例。在這個(gè)顯示示例中,作為示例,字幕重疊在由背景和前景對象形成的圖像。圖96(b)圖示了背景、前景對象和字幕的透視,其中圖示字幕被辨認(rèn)為位于最近的。圖97 (a)圖示了與圖96(a)相同的、圖像上的字幕(例如隱藏字幕信息、字幕信息)的顯示示例。圖97(b)圖示了用于顯示字幕的左眼字幕信息LGI和右眼字幕信息RGI。 圖97(c)圖示將視差給予每條字幕信息LGI和RGI,以便允許將字幕識別為位于最近的。此外,可以構(gòu)思在圖像內(nèi)多個(gè)位置處檢測到的視差矢量(包括視差信息組中包括的各個(gè)層次的各個(gè)區(qū)域的視差矢量)之中,采用與其重疊位置對應(yīng)的視差矢量作為視差矢量。圖98(a)圖示了基于從位流數(shù)據(jù)中提取的圖形數(shù)據(jù)的圖形信息以及基于從位流數(shù)據(jù)中提取的文本數(shù)據(jù)的文本信息。圖98(b)圖示了將左眼圖形信息LGI和左眼文本信息LTI重疊在左眼圖像上的狀態(tài)。在這種情況下,將左眼圖形信息LGI的重疊位置調(diào)節(jié)在水平方向上的空閑偏移值 (IT-O)。此外,將左眼文本信息LTI的重疊位置調(diào)節(jié)在水平方向的空閑偏移值(IT-I)。圖98(c)圖示了將右眼圖形信息RGI和右眼文本信息RTI重疊在右眼圖像上的狀態(tài)。在這種情況下,將右眼圖形信息RGI的重疊位置調(diào)節(jié)在水平方向上的空閑偏移值 (IT-O),并且相對于左眼圖形信息LGI的重疊位置,進(jìn)一步偏移與重疊位置對應(yīng)的視差矢量的水平方向分量VVT-0。此外,將右眼文本信息RTI的重疊位置調(diào)節(jié)在水平方向上的空閑偏移值(IT-I),并且相對于左眼文本信息LGI的重疊位置,進(jìn)一步偏移與重疊位置對應(yīng)的視差矢量的水平方向分量VVT-I。注意,圖98的示例中,圖示了相對于要重疊在左眼圖像上的相同圖形信息和文本信息的重疊位置,偏移要重疊在右眼圖像上的圖形信息和文本信息的重疊位置。也就是說, 在圖98中的示例中,執(zhí)行處理,用于僅移位要重疊在右眼圖像上的圖形信息和文本信息的重疊位置。然而,還可以構(gòu)思執(zhí)行處理,以便移位左眼圖像和右眼圖像的重疊位置二者。圖99(a)圖示了基于從位流數(shù)據(jù)提取的圖形數(shù)據(jù)的圖形信息以及基于從位流數(shù)據(jù)提取的文本數(shù)據(jù)的文本信息。圖99(b)圖示了在二維顯示中圖形信息GI和文本信息TI 的重疊位置。在這種情況下,文本信息的重疊位置是(xl,yl),而圖形信息的重疊位置是 (x2, y2)。圖99(c)圖示了在左眼圖像上重疊左眼圖形信息LGI和左眼文本信息LTI的狀態(tài)。在這種情況下,關(guān)于二維顯示中圖形信息GI的重疊位置,將左眼圖形信息LGI在右方向上偏移該圖形信息所對應(yīng)的視差矢量Dl的像素?cái)?shù)目的量。此外,關(guān)于二維顯示中文本信息的重疊位置,將左眼文本信息LTI在右方向上偏移該文本信息LT所對應(yīng)的視差矢量DO 的像素?cái)?shù)目的量。圖99(d)圖示了在右眼圖像上重疊右眼圖形信息RGI和右眼文本信息RTI的狀態(tài)。在這種情況下,關(guān)于二維顯示中圖形信息GI的重疊位置,將右眼圖形信息RGI在左方向上偏移該圖形信息GI所對應(yīng)的視差矢量Dl的像素?cái)?shù)目的量。此外,關(guān)于二維顯示中文本信息的重疊位置,將右眼文本信息RTI在左方向上偏移該文本信息LT所對應(yīng)的視差矢量 DO的像素?cái)?shù)目的量。注意,在圖99(c)和(d)的示例中,作為示例,將偏移的擴(kuò)展應(yīng)用到左眼圖像和右眼圖像中的每個(gè),并且額外設(shè)置為提供對應(yīng)于視差矢量的像素?cái)?shù)目的量的移位。實(shí)際上,例如,如上圖M所示,偏移的擴(kuò)展由“VieWS_0ffSet”代表,并且重疊信息關(guān)于視差矢量要移位的量由"Disparity_precision,,代表。此外,圖100(a)圖示從位流數(shù)據(jù)提取的兩個(gè)字幕窗口的各條隱藏字幕信息 Cl( “字幕1”)和C2( “字幕2”)。圖100(b)圖示在二維顯示中各條隱藏字幕信息Cl和 C2的重疊位置。在此情況下,隱藏字幕信息Cl的重疊位置是(xl,yl),并且隱藏字幕信息 C2的重疊位置是(x2, y2)。圖100(c)圖示各條左眼隱藏字幕信息LCl和LC2重疊在左眼圖像上的狀態(tài)。在此情況下,左眼隱藏字幕信息LCl在右邊方向關(guān)于二維顯示中的隱藏字幕信息Cl的重疊位置,偏移對應(yīng)于視差矢量DO的像素?cái)?shù)目的量,視差矢量DO對應(yīng)于隱藏字幕信息。此外,左眼隱藏字幕信息LC2在右邊方向關(guān)于二維顯示中的隱藏字幕信息C2偏移對應(yīng)于視差矢量 Dl的像素?cái)?shù)目的量,視差矢量Dl對應(yīng)于隱藏字幕信息。圖100(d)圖示各條右眼隱藏字幕信息RCl和RC2重疊在右眼圖像上的狀態(tài)。在此情況下,右眼隱藏字幕信息RCl在左邊方向關(guān)于二維顯示中的隱藏字幕信息Cl的重疊位置,偏移對應(yīng)于視差矢量DO的像素?cái)?shù)目的量,視差矢量DO對應(yīng)于隱藏字幕信息。此外,右眼隱藏字幕信息RC2在左邊方向關(guān)于二維顯示中的隱藏字幕信息C2偏移對應(yīng)于視差矢量 Dl的像素?cái)?shù)目的量,視差矢量Dl對應(yīng)于隱藏字幕信息。注意到,在圖100(c)和100(d)的示例中,作為示例,偏移的擴(kuò)展應(yīng)用于左眼圖像和右眼圖像的每個(gè),并且額外設(shè)為提供對應(yīng)于視差矢量的像素?cái)?shù)目的量的移位。實(shí)際上,例如,如上圖89所示,偏移的擴(kuò)展由“select_view_0ffset”代表,并且重疊信息關(guān)于視差矢量要偏移的量由“offset_precision”代表。前面描述已經(jīng)給出了這樣的情況的描述,其中基于從位流數(shù)據(jù)提取的圖形數(shù)據(jù)的圖形信息或基于從位流數(shù)據(jù)提取的文本數(shù)據(jù)的文本信息重疊在左眼圖像和右眼圖像上。此外,還可以構(gòu)思這樣的情況下,其中在機(jī)頂盒200中產(chǎn)生圖形數(shù)據(jù)或文本數(shù)據(jù),并且基于該數(shù)據(jù)的信息重疊在左眼圖像和右眼圖像上。即使在此情況下,通過利用從位流數(shù)據(jù)提取的圖像中預(yù)定位置的視差矢量,也可以將視差引入左眼圖形信息和右眼圖形信息之間,或者左眼文本信息和右眼文本信息之間。因此,可以在圖形信息或文本信息的顯示中給出適當(dāng)?shù)耐敢暎员憔S持信息和圖像中的每個(gè)對象之間透視上的一致性。圖101 (a)圖示了在圖像內(nèi)存在對象A、B和C,并且例如在鄰近對象的位置重疊指示每一個(gè)對象的注釋的文本信息。圖101 (b)圖示了在將視差給予指示對象A、B和C的注釋的文本信息的情況下,利用指示對象A、B和C的位置與其位置處的視差矢量之間的對應(yīng)關(guān)系的視差矢量列表以及各個(gè)視差矢量。例如,在對象A附近重疊文本信息“Text”的同時(shí), 在左眼文本信息與右眼文本信息之間給出與對象A的位置(Ha,Va)處的視差矢量VV_a對應(yīng)的視差。注意,類似的應(yīng)用于要在對象B和C附近重疊的文本信息。注意,圖98和圖99圖示了重疊信息包括圖形信息和文本信息的情況。此外,圖 100圖示了重疊信息是隱藏字幕信息的情況。此外,圖101圖示了重疊信息是文本信息的情況。雖然將省略詳細(xì)描述,但在類似的應(yīng)用于其他重疊信息的情況。接下來,將關(guān)于視差矢量被事先反映在重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息)的數(shù)據(jù)上的同時(shí)傳輸視差矢量的情況進(jìn)行描述。在這種情況下,從位流數(shù)據(jù)中提取的重疊信息數(shù)據(jù)包含使用視差矢量對其給出了視差的左眼重疊信息和右眼重疊信息的數(shù)據(jù)。因而,位流處理單元201關(guān)于從位流數(shù)據(jù)提取的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))簡單地組合從位流數(shù)據(jù)提取的重疊信息數(shù)據(jù),并且獲取處理之后的立體圖像數(shù)據(jù)。注意,對于文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù)),將字符代碼轉(zhuǎn)換為位圖數(shù)據(jù)的處理是必須的。[機(jī)頂盒的示例配置]將描述機(jī)頂盒200的示例配置。圖102圖示了機(jī)頂盒200的示例配置。該機(jī)頂盒 200包括位流處理單元201、HDMI端子202、天線端子203、數(shù)字調(diào)諧器204、視頻信號處理電路205、HDMI傳輸單元206和音頻信號處理電路207。此外,該機(jī)頂盒200包括CPU 211、閃速ROM 212、DRAM 213、內(nèi)部總線214、遙控接收單元215和遙控發(fā)送器216。天線端子203是用于輸入由接收天線(未圖示)接收到的電視廣播信號的端子。 數(shù)字調(diào)諧器204處理輸入到天線端子203的電視廣播信號,并輸出與用戶選擇的頻道對應(yīng)的預(yù)定位流數(shù)據(jù)(傳送流)。如上所述,位流處理單元201從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、重疊信息數(shù)據(jù)、視差信息(視差矢量)等。重疊信息數(shù)據(jù)是字幕數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù))等。如上所述,該位流處理單元201組合重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息)的數(shù)據(jù)和立體圖像數(shù)據(jù),并且獲取顯示立體圖像數(shù)據(jù)。此外,位流處理單元201輸出音頻數(shù)據(jù)。下面將描述位流處理單元201的詳細(xì)配置。視頻信號處理電路205按照需要對從位流處理單元201輸出的立體圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整處理,并且將處理的立體圖像數(shù)據(jù)供應(yīng)到HDMI傳輸單元206。音頻信號處理電路207根據(jù)需要對從位流處理單元201輸出的音頻數(shù)據(jù)執(zhí)行音頻質(zhì)量調(diào)整處理等,并且將處理的音頻數(shù)據(jù)供應(yīng)到HDMI傳輸單元206。HDMI傳輸單元206使用遵循HDMI的通信,從HDMI端子202發(fā)送基帶圖像(視頻) 和音頻的數(shù)據(jù)。在這種情況下,圖像和音頻數(shù)據(jù)被封裝,并且從HDMI傳輸單元206輸出到 HDMI端子202,用于通過HDMI TMDS通道來發(fā)送。下面將描述該HDMI傳輸單元206的細(xì)節(jié)。CPU 211控制機(jī)頂盒200的每個(gè)單元的操作。閃速ROM 212存儲控制軟件并且保持?jǐn)?shù)據(jù)。DRAM 213形成CPU 211的工作區(qū)域。CPU 211將從CPU211讀取的軟件和數(shù)據(jù)擴(kuò)展到DRAM 213,以啟動軟件,并且控制機(jī)頂盒200的每個(gè)單元。遙控接收單元215接收從遙控發(fā)送器216發(fā)送的遙控信號(遙控代碼),并將該遙控信號供應(yīng)到CPU 211。CPU 211基于該遙控代碼控制機(jī)頂盒200的每個(gè)單元。CPU 211、 閃速ROM 212和DRAM 213連接到內(nèi)部總線214。將簡短地描述機(jī)頂盒200的操作。將輸入到天線端子203的電視廣播信號供應(yīng)到數(shù)字調(diào)諧器204。在該數(shù)字調(diào)諧器204中,處理電視廣播信號,并且輸出與用戶選擇的通道對應(yīng)的預(yù)定位流數(shù)據(jù)(傳送流)。將從數(shù)字調(diào)諧器204輸出的位流數(shù)據(jù)供應(yīng)到位流處理單元201。在該位流處理單元201中,從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù)、視差矢量等。此外,在位流處理單元201中,與立體圖像數(shù)據(jù)組合重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息)的數(shù)據(jù),并且生成顯示立體圖像數(shù)據(jù)。按照需要,通過視頻信號處理電路205,使由位流處理單元201生成的顯示立體圖像數(shù)據(jù)經(jīng)歷圖像質(zhì)量調(diào)整處理等,并且此后供應(yīng)到HDMI傳輸單元206。此外,按照需要,通過音頻信號處理電路207,使由位流處理單元201獲得的音頻數(shù)據(jù)經(jīng)歷音頻質(zhì)量調(diào)整處理等,并且此后供應(yīng)到HDMI傳輸單元206。將供應(yīng)到HDMI傳輸單元206的立體圖像數(shù)據(jù)和音頻數(shù)據(jù)通過HDMI TMDS通道從HDMI端子202發(fā)送到HDMI線纜400。[位流處理單元的示例配置]圖103圖示位流處理單元201的示例配置。該位流處理單元201具有這樣的配置, 使得該配置對應(yīng)于在上述圖2和圖85中所圖示的傳輸數(shù)據(jù)生成單元110和110E。該位流處理單元201包括解多路分用器220、視頻解碼器221、字幕/圖形解碼器222、文本解碼器 223、音頻解碼器2 和視差矢量解碼器225。此外,該位流處理單元201包括立體圖像字幕/圖形產(chǎn)生單元226、立體圖像文本產(chǎn)生單元227、視頻重疊單元2 和多聲道揚(yáng)聲器控制單元2四。解多路分用器220從位流數(shù)據(jù)BSD提取視頻、音頻、視差矢量、字幕、圖形、文本等, 并發(fā)送分組到各個(gè)解碼器。視頻解碼器221執(zhí)行與上述傳輸數(shù)據(jù)生成單元110的視頻編碼器113的相反的處理。也就是說,該視頻解碼器221從由解多路分用器220提取的視頻分組重構(gòu)視頻的基本流,執(zhí)行解碼處理,并獲得包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。該立體圖像數(shù)據(jù)的傳輸方法的示例包括第一傳輸方法(“上下”方法)、第二傳輸方法(“并排”方法)、 第三傳輸方法(“幀順序”方法)等(參見圖4(a)至(C))。字幕/圖形解碼器222執(zhí)行與上述傳輸數(shù)據(jù)生成單元110的字幕/圖形編碼器 119相反的處理。也就是說,該字幕/圖形解碼器222從由解多路分用器220提取的字幕或圖形分組重構(gòu)字幕或圖形的基本流。然后,該字幕/圖形解碼器222進(jìn)一步執(zhí)行解碼處理來獲得字幕數(shù)據(jù)或圖形數(shù)據(jù)。文本解碼器223執(zhí)行與上述傳輸數(shù)據(jù)生成單元110的文本編碼器121的相反的處理。也就是說,該文本解碼器223從由解多路分用器220提取的文本分組重構(gòu)文本的基本流,并且執(zhí)行解碼處理來獲得文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù))。音頻解碼器2M執(zhí)行與上述傳輸數(shù)據(jù)生成單元110的音頻編碼器117的相反的處理。也就是說,該音頻解碼器2M從由解多路分用器220提取的音頻分組重構(gòu)音頻的基本流,并且執(zhí)行解碼處理來獲得音頻數(shù)據(jù)。視差矢量解碼器225執(zhí)行與上述傳輸數(shù)據(jù)生成單元110的視差矢量編碼器115相反的處理。也就是說,該視差矢量解碼器225從由解多路分用器220提取的視差矢量分組重構(gòu)視差矢量的基本流,并且執(zhí)行解碼處理來獲得圖像內(nèi)的預(yù)定位置處的視差矢量。立體圖像字幕/圖形產(chǎn)生單元2 生成要分別重疊在左眼圖像和右眼圖像上的左眼和右眼字幕信息或圖形信息?;谟山獯a器222獲得的字幕數(shù)據(jù)或圖形數(shù)據(jù)和由解碼器 225獲得的視差矢量執(zhí)行該生成處理。在這種情況下,左眼和右眼字幕信息項(xiàng)或圖形信息項(xiàng)是同一信息。然而,例如,圖像內(nèi)右眼字幕信息或圖形信息的重疊位置配置為在水平方向關(guān)于左眼字幕信息或圖形信息偏移視差矢量的水平方向分量。然后,立體圖像字幕/圖形產(chǎn)生單元2 輸出所生成的左眼和右眼字幕信息或圖形信息的數(shù)據(jù)(位圖數(shù)據(jù))。立體圖像文本產(chǎn)生單元227基于由解碼器223獲得的文本數(shù)據(jù)和由解碼器225 獲得的視差矢量,生成要分別重疊在左眼圖像和右眼圖像上的左眼文本信息和右眼文本信息。在這種情況下,左眼文本信息和右眼文本信息為同一文本信息。然而,例如,圖像內(nèi)右眼文本信息的重疊位置配置為在水平方向關(guān)于左眼文本信息偏移視差矢量的水平方向分量。 然后,立體圖像文本產(chǎn)生單元227輸出所生成的左眼文本信息和右眼文本信息的數(shù)據(jù)(位圖數(shù)據(jù))。視頻重疊單元228由視頻解碼器221獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上重疊由產(chǎn)生單元2 和227產(chǎn)生的數(shù)據(jù),并且獲得顯示立體圖像數(shù)據(jù)Vout。 注意,使用系統(tǒng)層的時(shí)間戳開始重疊信息數(shù)據(jù)在立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上的重疊。多聲道揚(yáng)聲器控制單元2 對由音頻解碼器2M獲得的音頻數(shù)據(jù)執(zhí)行用于生成多聲道揚(yáng)聲器的音頻數(shù)據(jù)的處理以實(shí)現(xiàn)例如5. 1-聲道環(huán)繞等、用于給出預(yù)定聲場特性的處理等。此外,該多聲道揚(yáng)聲器控制單元2 基于由解碼器225獲得的視差矢量控制多聲道揚(yáng)聲器的輸出。存在以下效果視差矢量的大小越大,立體效果越明顯。按照立體程度控制多聲道的揚(yáng)聲器輸出,因而可以實(shí)現(xiàn)提供進(jìn)一步的立體體驗(yàn)。圖104圖示了在電視顯示器的方向上觀看時(shí)在左手側(cè)的視頻對象具有大視差矢量VVl的情況下?lián)P聲器輸出控制的示例。在這個(gè)控制示例中,多聲道揚(yáng)聲器的左后揚(yáng)聲器音量設(shè)置到高,左前揚(yáng)聲器音量設(shè)置到中,并且進(jìn)一步,右前和右后揚(yáng)聲器音量設(shè)置到低。 以這種方式,將視頻內(nèi)容(立體圖像數(shù)據(jù))的視差矢量應(yīng)用到接收側(cè)上的另一媒體數(shù)據(jù) (如音頻數(shù)據(jù)),因而使得可以允許觀看者體驗(yàn)整體立體效果。將簡要地描述在圖103中圖示的位流處理單元201的操作。將從數(shù)字調(diào)諧器 204(參看圖10 輸出的位流數(shù)據(jù)BSD供應(yīng)到解多路分用器220。在解多路分用器220中, 從位流數(shù)據(jù)BSD提取視頻、音頻、視差矢量、字幕或圖形以及文本的TS分組,并供應(yīng)到各個(gè)解碼器。在視頻解碼器221中,根據(jù)從解多路分用器220提取的視頻分組重構(gòu)視頻的基本流,并且進(jìn)一步執(zhí)行解碼處理,以獲得包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。 將該立體圖像數(shù)據(jù)供應(yīng)到視頻重疊單元228。此外,在視差矢量解碼器225中,從由解多路分用器220提取的視差矢量分組重構(gòu)視差矢量的基本流,并且進(jìn)一步執(zhí)行解碼處理,以獲得圖像內(nèi)的預(yù)定位置處的視差矢量(參看圖8、圖四等)。在字幕/圖形解碼器222中,從由解多路分用器220提取的字幕或圖形分組重構(gòu)字幕或圖形的基本流。在字幕/圖形解碼器222中,對字幕或圖形的基本流進(jìn)一步執(zhí)行解碼處理,并且獲得字幕數(shù)據(jù)或圖形數(shù)據(jù)。將該字幕數(shù)據(jù)或圖形數(shù)據(jù)供應(yīng)到立體圖像字幕/ 圖形產(chǎn)生單元226。也將由視差矢量解碼器225獲得的視差矢量供應(yīng)到立體圖像字幕/圖形產(chǎn)生單元226。在立體圖像字幕/圖形產(chǎn)生單元226中,生成要分別重疊在左眼圖像和右眼圖像上的左眼和右眼字幕信息項(xiàng)或圖形信息項(xiàng)的數(shù)據(jù)?;谟山獯a器222獲得的字幕數(shù)據(jù)或圖形數(shù)據(jù)以及由解碼器225獲得的視差矢量執(zhí)行該生成處理。
在這種情況下,例如,將圖像內(nèi)的右眼字幕信息或圖形信息的重疊位置配置為在水平方向上關(guān)于左眼字幕信息或左眼圖形信息偏移視差矢量的水平方向分量。從該立體圖像字幕/圖形產(chǎn)生單元2 輸出所生成的左眼和右眼字幕信息項(xiàng)或圖形信息項(xiàng)的數(shù)據(jù)(位圖數(shù)據(jù))。此外,在文本解碼器223中,從由多路分用器220提取的文本的TS分組重構(gòu)文本的基本流,并且進(jìn)一步執(zhí)行解碼處理,以獲得文本數(shù)據(jù)。將該文本數(shù)據(jù)供應(yīng)到立體圖像文本產(chǎn)生單元227。也將由視差矢量解碼器225獲得的視差矢量供應(yīng)到該立體圖像文本產(chǎn)生單元 227。在該立體圖像文本產(chǎn)生單元227中,基于由解碼器223獲得的文本數(shù)據(jù)和由解碼器225獲得的視差矢量,生成要分別重疊在左眼圖像和右眼圖像上的左眼文本信息和右眼文本信息。在這種情況下,左眼文本信息和右眼文本信息為同一文本信息。然而,例如圖像內(nèi)右眼文本信息的重疊位置在水平方向上關(guān)于左眼文本信息偏移視差矢量的水平方向分量。從該立體圖像文本產(chǎn)生單元227輸出所生成的左眼文本信息和右眼文本信息的數(shù)據(jù) (位圖數(shù)據(jù))。注意,在由視差矢量解碼器225獲得的視差矢量包括在預(yù)定組視差信息組的情況下,基于標(biāo)識信息(Disparityjequencejd),可以使用適于重疊信息的視差信息組。也就是說,可以使用相關(guān)聯(lián)的視差矢量給出適當(dāng)?shù)囊暡畹蒋B加信息(如隱藏字幕信息或字幕信息)ο除了來自上述視頻解碼器221的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù)) 之外,還將從字幕/圖形產(chǎn)生單元2 和文本產(chǎn)生單元227輸出的數(shù)據(jù)供應(yīng)到視頻重疊單元228。在視頻重疊單元2 中,將由字幕/圖形產(chǎn)生單元2 和文本生成單元227所產(chǎn)生的數(shù)據(jù)重疊在立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上,并獲得顯示立體圖像數(shù)據(jù) Vout。將該顯示立體圖像數(shù)據(jù)Vout作為傳輸圖像數(shù)據(jù)經(jīng)由視頻信號處理電路205供應(yīng)到 HDMI傳輸單元206 (參看圖102)。此外,在音頻解碼器224中,從由解多路分用器220提取的音頻的TS分組重構(gòu)音頻的基本流,并且進(jìn)一步執(zhí)行解碼處理,以獲得音頻數(shù)據(jù)。將該音頻數(shù)據(jù)供應(yīng)到多聲道揚(yáng)聲器控制單元229。在該多聲道揚(yáng)聲器控制單元2 中,對該音頻數(shù)據(jù)執(zhí)行用于生成多聲道揚(yáng)聲器的音頻數(shù)據(jù)以實(shí)現(xiàn)例如5. 1聲道環(huán)繞等的處理等、用于給出預(yù)定聲場特性的處理等。還將由視差矢量解碼器225獲得的視差矢量供應(yīng)到多聲道揚(yáng)聲器控制單元229。 然后,在該多聲道揚(yáng)聲器控制單元229中,基于視差矢量控制多聲道揚(yáng)聲器的輸出。經(jīng)由音頻信號處理電路207將由該多聲道揚(yáng)聲器控制單元2 獲得的多聲道音頻數(shù)據(jù)作為傳輸音頻數(shù)據(jù)供應(yīng)到HDMI傳輸單元206 (參看圖102)。[給出視差到重疊信息]現(xiàn)在,將進(jìn)一步給出在圖103中所示的位流處理單元201的立體圖像字幕/圖形產(chǎn)生單元2 和立體圖像文本產(chǎn)生單元227中給出視差到重疊信息的描述。例如,如圖105和圖106所示,與圖像數(shù)據(jù)流、字幕或圖形數(shù)據(jù)流和文本數(shù)據(jù)流一起,從廣播站100(參見圖1)發(fā)送包括視差矢量的視差矢量流(參見圖8、圖四等)。在這種情況下,與每個(gè)特定時(shí)段對應(yīng)的預(yù)定單元中的視差矢量根據(jù)如編碼視頻的GOP (Group Of Pictures,畫面組)、iantra Picture,幀內(nèi)畫面)畫面、或場景的每個(gè)特定時(shí)段的開始定時(shí)統(tǒng)一發(fā)送??蓸?gòu)思預(yù)定單元例如是畫面(幀)單元、整數(shù)倍畫面的單元等。例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)的視差矢量(視差信息)以預(yù)定單元給出視差到重疊信息。在圖105中添加到字幕(圖形)數(shù)據(jù)流和文本數(shù)據(jù)流的部分的箭頭指示以預(yù)定單元給出視差到重疊信息的定時(shí)。在以此方式給出視差到重疊信息的配置的情況下,可能根據(jù)圖像的內(nèi)容的變化動態(tài)改變要給出重疊信息的視差。此外,例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227 中,在重疊信息的重疊時(shí)段期間,使用從對應(yīng)于重疊時(shí)段的視差矢量選擇的預(yù)定視差矢量 (視差信息),以預(yù)定單元給出視差到重疊信息。例如,預(yù)定視差矢量設(shè)置為展示對應(yīng)于重疊時(shí)間段視差信息中的最大視差的視差信息。在圖106中,添加到字幕(圖形)數(shù)據(jù)流和文本數(shù)據(jù)流的部分的箭頭指示給出視差到重疊信息的定時(shí)。在這種情況下,在重疊時(shí)段開始處,將視差給出重疊信息,隨后使用已經(jīng)對其給出視差的重疊信息作為要重疊在左眼圖像和右眼圖像上的重疊信息。在以此方式給出視差到重疊信息的配置的情況下,例如可以將重疊信息的重疊時(shí)段中的最大視差給出到重疊信息,而不管圖像內(nèi)容。此外,例如,如圖107所示,從廣播站100(參見圖1)發(fā)送圖像數(shù)據(jù)、隱藏字幕數(shù)據(jù)和圖形數(shù)據(jù)。視差信息組(參見圖四、圖31、圖33和圖36)作為視差矢量流發(fā)送。在這種情況下,與各個(gè)特定時(shí)段對應(yīng)的預(yù)定單元中的視差信息組根據(jù)如編碼視頻的GOP、I畫面、 或場景的每個(gè)特定時(shí)段的開始定時(shí)統(tǒng)一發(fā)送??蓸?gòu)思預(yù)定單元例如是畫面(幀)單元、整數(shù)個(gè)畫面的單元等。例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)的視差矢量(視差信息)以預(yù)定單元給出視差到重疊信息。在圖107中,添加到隱藏字幕數(shù)據(jù)和圖形數(shù)據(jù)的部分的箭頭指示以預(yù)定單元給出視差到重疊信息的定時(shí)。在以此方式給出視差到重疊信息的配置的情況下,可能根據(jù)圖像重疊信息的內(nèi)容的變化動態(tài)改變要給出重疊信息的視差。“位流處理單元的另一示例配置”圖108中所示的位流處理單元201A具有這樣的配置,使得其對應(yīng)于在上述圖13 和圖22中所圖示的傳輸數(shù)據(jù)生成單元IlOA和IlOD的配置。在該圖108中,對應(yīng)于圖103 的部分分配同樣標(biāo)號,并且將省略其詳細(xì)描述。該位流處理單元201A提供有視差矢量提取單元231,代替圖103所示的位流處理單元201的視差矢量解碼器255。該視差矢量提取單元231從通過視頻解碼器221獲得的視頻流中提取嵌入其用戶數(shù)據(jù)區(qū)域的視差矢量。然后,該視差矢量提取單元231將所提取的視差矢量供應(yīng)到立體圖像字幕/圖形產(chǎn)生單元226、立體圖像文本產(chǎn)生單元227和多聲道揚(yáng)聲器控制單元229。盡管將省略詳細(xì)描述,但是圖108中所圖示的位流處理單元201A的其他組件以與圖103中所圖示的位流處理單元201類似的方式配置,并且以類似方式工作。[給出視差到重疊信息]這里,將進(jìn)一步給出在圖108中所示的位流處理單元201A的立體圖像字幕/圖形產(chǎn)生單元2 和立體圖像文本產(chǎn)生單元227中給出視差到重疊信息的描述。
例如,如圖109所示,從廣播站100(參見圖1)發(fā)送圖像數(shù)據(jù)流、字幕或圖形數(shù)據(jù)流以及文本數(shù)據(jù)流。然后,在嵌入圖像數(shù)據(jù)流的狀態(tài)下發(fā)送視差矢量(參見圖8、圖四等)。 在這種情況下,以圖像數(shù)據(jù)的預(yù)定單元(例如,以編碼視頻的畫面為單元),在嵌入圖像數(shù)據(jù)流的狀態(tài)下發(fā)送對應(yīng)于預(yù)定單元的視差矢量。在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)的視差矢量(視差信息)以預(yù)定單元給出視差到重疊信息。 在圖109中,添加到字幕(圖形)數(shù)據(jù)流和文本數(shù)據(jù)流的部分的箭頭指示以預(yù)定單元給出視差到重疊信息的定時(shí)。在以此方式給出視差到重疊信息的配置的情況下,可能根據(jù)圖像的內(nèi)容的變化動態(tài)改變要給出重疊信息的視差。此外,例如,如圖110和圖111所示,從廣播站100(參見圖1)發(fā)送圖像數(shù)據(jù)流、字幕或圖形數(shù)據(jù)流以及文本數(shù)據(jù)流。然后,在嵌入圖像數(shù)據(jù)流的狀態(tài)下,發(fā)送視差矢量(參見圖8、圖四等)。在這種情況下,與各個(gè)特定時(shí)段對應(yīng)的每個(gè)預(yù)定單元中的視差信息組根據(jù)如編碼視頻的GOP、I畫面、或場景的每個(gè)特定時(shí)段的開始定時(shí)統(tǒng)一發(fā)送。可構(gòu)思預(yù)定單元例如是畫面(幀)單元、整數(shù)個(gè)畫面的單元等。例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)的視差矢量(視差信息)以預(yù)定單元給出視差到重疊信息。在圖110中,添加到字幕(圖形)數(shù)據(jù)流和文本數(shù)據(jù)流的部分的箭頭指示以預(yù)定單元給出視差到重疊信息的定時(shí)。在以此方式給出視差到重疊信息的配置的情況下,可能根據(jù)圖像內(nèi)容的變化動態(tài)改變要給出重疊信息的視差。此外,例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227 中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)于重疊時(shí)段的視差矢量中選擇的預(yù)定視差矢量 (視差信息),以預(yù)定單元給出視差到重疊信息。預(yù)定視差矢量例如是設(shè)置為展示對應(yīng)于重疊時(shí)段的視差信息中的最大視差的視差信息。在圖111中,添加到字幕(圖形)數(shù)據(jù)流和文本數(shù)據(jù)流的部分的箭頭指示給出視差到重疊信息的定時(shí)。在這種情況下,在重疊時(shí)段開始處,將視差給出重疊信息,隨后使用已經(jīng)對其給出視差的重疊信息作為要重疊在左眼圖像和右眼圖像上的重疊信息。在以此方式給出視差到重疊信息的配置的情況下,可以將重疊信息的重疊時(shí)段中的最大視差給出到重疊信息,而不管圖像內(nèi)容如何。此外,例如,如圖112所示,從廣播站100(參見圖1)發(fā)送圖像數(shù)據(jù)、隱藏字幕數(shù)據(jù)和圖形數(shù)據(jù)。視差信息組(參見圖29、圖31、圖33和圖36)在嵌入圖像數(shù)據(jù)流的狀態(tài)下發(fā)送。在這種情況下,與各個(gè)特定時(shí)段對應(yīng)的預(yù)定單元中的視差信息組根據(jù)如編碼視頻的GOP、I畫面、或場景的每個(gè)特定時(shí)段的開始定時(shí)統(tǒng)一發(fā)送??蓸?gòu)思預(yù)定單元例如是畫面 (幀)單元、整數(shù)個(gè)畫面的單元等。例如,在立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227中,在重疊信息的重疊時(shí)段期間,使用對應(yīng)的視差矢量(視差信息)以預(yù)定單元給出視差到重疊信息。在圖112中,添加到隱藏字幕數(shù)據(jù)和圖形數(shù)據(jù)的部分的箭頭指示以預(yù)定單元給出視差到重疊信息的定時(shí)。在以此方式給出視差到重疊信息的配置的情況下,可能根據(jù)圖像內(nèi)容的變化動態(tài)改變要給出重疊信息的視差?!拔涣魈幚韱卧牧硪慌渲檬纠?br>
圖113中所示的位流處理單元201B具有這樣的配置,使得其對應(yīng)于在上述圖15 中所圖示的傳輸數(shù)據(jù)生成單元IlOB的配置。在該圖113中,對應(yīng)于圖103的部分分配同樣標(biāo)號,并且將省略其詳細(xì)描述。該位流處理單元201B提供有視差矢量提取單元232,代替圖103所示的位流處理單元201的視差矢量解碼器255。該視差矢量提取單元232從通過字幕/圖形解碼器222 獲得的字幕或圖形流中提取嵌入其中的視差矢量。然后,該視差矢量提取單元232將所提取的視差矢量供應(yīng)到立體圖像字幕/圖形產(chǎn)生單元226、立體圖像文本產(chǎn)生單元227和多聲道揚(yáng)聲器控制單元229。盡管將省略詳細(xì)描述,但是圖113中所圖示的位流處理單元201B的其他組件以與圖103中所圖示的位流處理單元201類似的方式配置,并且以類似方式工作。注意到,在圖 113中所示的位流處理單元201B中給予視差到重疊信息類似于上述在圖108中所示的位流處理單元201A中給予視差到重疊信息(參看圖109到112)?!拔涣魈幚韱卧牧硪慌渲檬纠眻D114中所示的位流處理單元201C具有這樣的配置,使得其對應(yīng)于在上述圖21 中所圖示的傳輸數(shù)據(jù)生成單元IlOC的配置。在該圖114中,對應(yīng)于圖103的部分分配同樣標(biāo)號,并且將省略其詳細(xì)描述。配置該位流處理單元201C,使得從圖103中所示的位流處理單元201中移除視差矢量解碼器225、立體圖像字幕/圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227所獲得的單元。在這種情況下,視差矢量預(yù)先反映在字幕信息、圖形信息和文本信息的數(shù)據(jù)上。如上所述,傳輸?shù)淖帜粩?shù)據(jù)或圖形數(shù)據(jù)包括要重疊在左眼圖像上的左眼字幕信息或圖形信息的數(shù)據(jù)以及要重疊在右眼圖像上的右眼字幕信息或圖形信息的數(shù)據(jù)。類似地,如上所述,傳輸?shù)奈谋緮?shù)據(jù)包括要重疊在左眼圖像上的左眼文本信息的數(shù)據(jù)以及要重疊在右眼圖像上的右眼文本信息的數(shù)據(jù)。因此,視差矢量解碼器255、立體圖像字幕和圖形產(chǎn)生單元226以及立體圖像文本產(chǎn)生單元227不必要。注意,因?yàn)橥ㄟ^文本解碼器223獲得的文本數(shù)據(jù)是代碼數(shù)據(jù)(字符代碼),因此需要用于將其轉(zhuǎn)換為位圖數(shù)據(jù)的處理。例如,在文本解碼器223的最終級或者在視頻重疊單元228的輸入級中執(zhí)行該處理?!拔涣魈幚韱卧牧硪慌渲檬纠眻D115中所示的位流處理單元201D具有這樣的配置,使得其對應(yīng)于在上述圖86 中所圖示的傳輸數(shù)據(jù)生成單元IlOF的配置。在該圖115中,對應(yīng)于圖103的部分分配同樣標(biāo)號,并且將省略其詳細(xì)描述。該位流處理單元201D包括解多路分用器220、視頻解碼器221、音頻解碼器224、視頻重疊單元2 和多聲道揚(yáng)聲器控制單元229。此外,該位流處理單元20ID包括視差信息提取單元235、CC解碼器233和立體圖像CC產(chǎn)生單元234。如上所述,CC數(shù)據(jù)和視差信息嵌入從圖86所示的傳輸數(shù)據(jù)生成單元IlOF的視頻編碼器113輸出的視頻基本流的報(bào)頭部分中,使得CC數(shù)據(jù)和視差信息可通過用戶數(shù)據(jù)類型碼(用戶數(shù)據(jù)標(biāo)識信息)標(biāo)識。CC解碼器233從通過視頻解碼器221獲得的視頻基本流提取CC數(shù)據(jù)。此外,CC 解碼器233對于每個(gè)字幕窗口(Caption Window)獲取隱藏字幕信息(字幕的字符碼),并
55且進(jìn)一步從CC數(shù)據(jù)獲取重疊位置和顯示時(shí)間的控制數(shù)據(jù)。然后,CC解碼器233提供隱藏字幕信息和重疊位置和顯示時(shí)間的控制數(shù)據(jù)到立體圖像CC產(chǎn)生單元234。視差矢量提取單元235從通過視頻解碼器221獲得的視頻基本流中提取視差信息。該視差信息與由上述CC解碼器233獲取的每個(gè)字幕窗口(Caption Window)的隱藏字幕信息(字幕的字符碼)有關(guān)。視差信息已經(jīng)添加基于要重疊在左眼圖像的隱藏字幕信息和要重疊在右眼圖像的隱藏字幕信息中的視視差信息,指定要偏移的隱藏字幕信息的偏移目標(biāo)指定信息。視差矢量提取單元235對應(yīng)于由CC解碼器233獲取的每個(gè)字幕窗口的隱藏字幕信息,提取要在基于該數(shù)據(jù)的隱藏字幕信息的顯示幀時(shí)段中使用的視差信息。視差信息是例如在隱藏字幕信息的顯示幀時(shí)段期間在各個(gè)幀中公用的視差信息,或者是在各個(gè)幀中順序更新的視差信息。視差信息已經(jīng)添加了標(biāo)記信息,其指示在顯示幀時(shí)段期間在各個(gè)幀中公用的視差信息或在顯示幀時(shí)段期間在各個(gè)幀中順序更新的視差信息。視差矢量提取單元235提取關(guān)于相對于關(guān)于之前幀的視差信息對于第二和隨后幀的第一幀和偏移信息的視差信息,作為在各個(gè)幀中順序更新的視差信息。如上所述,關(guān)于第二和隨后幀的視差信息設(shè)為相對于關(guān)于之前幀的視差信息的偏移信息。此外,視差矢量提取單元235提取例如關(guān)于第一幀的視差信息作為在各個(gè)幀中公用的視差信息。立體圖像CC產(chǎn)生單元234對于每個(gè)字幕窗口(Caption Window),生成分別要重疊在左眼圖像和右眼圖像上的左眼隱藏字幕信息(caption)和右眼隱藏字幕信息(caption) 的數(shù)據(jù)?;谟蒀C解碼器233獲得的隱藏字幕數(shù)據(jù)和重疊位置控制數(shù)據(jù)和由視差矢量提取單元235提取的視差信息(視差矢量)執(zhí)行該生成處理。立體圖像CC產(chǎn)生單元234執(zhí)行偏移處理,用于基于偏移目標(biāo)指定信息給出視差到左眼隱藏字幕信息和右眼隱藏字幕信息的任一或兩者。此外,立體圖像CC產(chǎn)生單元234取決于由視差矢量提取單元235提取的視差信息是在各個(gè)幀中公用的視差信息還是在各個(gè)幀中順序更新的視差信息,以以下方式給予視差到隱藏字幕信息。也就是說,當(dāng)提取的視差信息是在各個(gè)幀中公用的視差信息時(shí),立體圖像CC產(chǎn)生單元234基于該公共視差信息給予視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息。相反,當(dāng)提取的視差信息是在各個(gè)幀中順序更新的視差信息時(shí),立體圖像CC產(chǎn)生單元 234基于每幀更新的視差信息給予視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信肩、ο如上所述,在各個(gè)幀中順序更新的視差信息例如由關(guān)于該幀的視差信息以及關(guān)于第二和隨后幀相對于之前幀的視差信息的偏移信息構(gòu)成。在此情況下,在第一幀中,基于關(guān)于第一幀的視差信息,給予視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息。然后, 在第二和隨后幀中,通過對應(yīng)于相對于已經(jīng)給予視差到之前幀的狀態(tài)的偏移信息的量,進(jìn)一步給予視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息。圖116圖示了基于在各個(gè)幀中順序更新的視差信息,給予視差到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息的處理。在第一幀(幀N)中,基于關(guān)于第一幀的視差信息 DPO執(zhí)行偏移處理,并且視差給予左眼隱藏字幕信息LC和右眼隱藏字幕信息RC。在下一幀 (幀N+1)中,通過作為相對于幀(幀N)的狀態(tài)的偏移信息(Differential)的“+1”的量對各條信息LC和RC進(jìn)一步執(zhí)行偏移處理。
在下一幀(幀N+幻中,通過作為相對于幀(幀N+1)的狀態(tài)的偏移信息的“+1”的量對各條信息LC和RC進(jìn)一步執(zhí)行偏移處理。在下一幀(幀N+3)中,因?yàn)槠菩畔⑹恰?”, 所以各條信息LC和RC的偏移狀態(tài)保持與幀(幀N+幻的狀態(tài)相同。此外,在下一幀(幀 N+4)中,通過作為相對于幀(幀N+; )的狀態(tài)的偏移信息的“+1”的量對各條信息LC和RC 進(jìn)一步執(zhí)行偏移處理。視頻重疊單元2 將由立體圖像CC產(chǎn)生單元2;34獲得的左眼和右眼隱藏字幕信息項(xiàng)的數(shù)據(jù)重疊在由視頻解碼器221獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù)) 上,并且獲得顯示立體圖像數(shù)據(jù)Vout。注意到,使用系統(tǒng)層中的時(shí)間戳啟動開始隱藏字幕信息的數(shù)據(jù)在立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上的重疊。此外,基于關(guān)于隱藏字幕信息的對于顯示時(shí)間的控制數(shù)據(jù),控制重疊持續(xù)時(shí)間。盡管將省略詳細(xì)描述,但是圖115中所圖示的位流處理單元201D的其他組件以與圖103中所圖示的位流處理單元201類似的方式配置,并且以類似方式工作。將簡要地描述在圖115中圖示的位流處理單元201D的操作。將從數(shù)字調(diào)諧器 204(參看圖10 輸出的位流數(shù)據(jù)BSD供應(yīng)到解多路分用器220。在解多路分用器220中, 從位流數(shù)據(jù)BSD提取視頻和音頻的TS分組,并供應(yīng)到各個(gè)解碼器。在視頻解碼器221中, 根據(jù)從解多路分用器220提取的視頻分組重構(gòu)視頻的基本流,并且進(jìn)一步執(zhí)行解碼處理, 以獲得包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。將該立體圖像數(shù)據(jù)供應(yīng)到視頻重疊單元228。此外,由視頻解碼器221重構(gòu)的視頻基本流供應(yīng)到CC解碼器233。在CC解碼器 233中,從視頻基本流提取CC數(shù)據(jù)。然后,在CC解碼器233中,從CC數(shù)據(jù)獲取隱藏字幕信息(字幕的字符碼)和進(jìn)一步的對于每個(gè)字幕窗口(Caption Window)的重疊位置和顯示時(shí)間的控制數(shù)據(jù)。隱藏字幕信息和對于重疊位置和顯示時(shí)間的控制數(shù)據(jù)供應(yīng)到立體圖像CC 產(chǎn)生單元234。此外,由視頻解碼器221重構(gòu)的視頻基本流供應(yīng)到視差信息提取單元235。在視差信息提取單元235中,從視頻基本流提取視差信息。該視差信息與由上述CC解碼器233獲取的每個(gè)字幕窗口(Caption Window)的隱藏字幕數(shù)據(jù)(字幕的字符碼)相關(guān)。視差信息提供到立體圖像CC產(chǎn)生單元234。在立體圖像CC產(chǎn)生單元234中,對于每個(gè)字幕窗口(Caption Window)生成分別要重疊在左眼圖像和右眼圖像上的左眼隱藏字幕信息(caption)和右眼隱藏字幕信息 (caption)的數(shù)據(jù)?;谟蒀C解碼器233獲得的隱藏字幕數(shù)據(jù)和重疊位置控制數(shù)據(jù),并且基于由視差信息提取單元235提取的視差信息(視差矢量)執(zhí)行該生成處理。在立體圖像CC產(chǎn)生單元234中,基于視差信息中包括的偏移目標(biāo)指定信息,執(zhí)行用于給予視差到左眼隱藏字幕信息和右眼隱藏字幕信息的任一或兩者的偏移處理。在此情況下,當(dāng)由視差信息提取單元235提取的視差信息是在各個(gè)幀中公用的視差信息時(shí),基于公共視差信息將視差給予要重疊在左眼圖像和右眼圖像上的隱藏字幕信息。此外,當(dāng)由視差信息提取單元235提取的視差信息是在各個(gè)幀中順序更新的視差信息時(shí),基于每幀更新的視差信息將視差給予要重疊在左眼圖像和右眼圖像上的隱藏字幕信息(見圖116)。以此方式,由立體圖像CC產(chǎn)生單元2;34為每個(gè)字幕窗口(Caption Window)生成的左眼和右眼隱藏字幕信息項(xiàng)的數(shù)據(jù)(位圖數(shù)據(jù))與用于顯示時(shí)間的控制數(shù)據(jù)一起供應(yīng)到視頻重疊單元228。在視頻重疊單元228中,從立體圖像CC產(chǎn)生單元234供應(yīng)的隱藏字幕信息的數(shù)據(jù)重疊在由視頻解碼器221獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù)) 上,并且獲得顯示立體圖像數(shù)據(jù)Vout。此外,在音頻解碼器224中,從由解多路分用器220提取的音頻的TS分組重構(gòu)音頻的基本流,并且進(jìn)一步執(zhí)行解碼處理,以獲得音頻數(shù)據(jù)。將該音頻數(shù)據(jù)供應(yīng)到多聲道揚(yáng)聲器控制單元229。在該多聲道揚(yáng)聲器控制單元2 中,對該音頻數(shù)據(jù)執(zhí)行用于生成多聲道揚(yáng)聲器的音頻數(shù)據(jù)以實(shí)現(xiàn)例如5. 1聲道環(huán)繞等的處理等、用于給出預(yù)定聲場特性的處理等。 然后,從該多聲道揚(yáng)聲器控制單元2 獲得多聲道揚(yáng)聲器的輸出。在圖115所示的位流處理單元201D中,可以從視頻基本流的有效載荷部分獲取立體圖像數(shù)據(jù),此外,可以從報(bào)頭部分的用戶數(shù)據(jù)區(qū)域獲取CC數(shù)據(jù)和視差信息。在此情況下, CC數(shù)據(jù)和視差信息包括在用戶數(shù)據(jù)區(qū)域中,使得CC數(shù)據(jù)和視差信息可以通過用戶數(shù)據(jù)標(biāo)識信息(uSer_data_type_COde)標(biāo)識。因此,可以基于用戶數(shù)據(jù)標(biāo)識信息從用戶數(shù)據(jù)區(qū)域有利地獲取視差信息以及CC數(shù)據(jù)。此外,在圖115所示的位流處理單元201D中,可以使用適于隱藏字幕信息的視差信息將適當(dāng)?shù)囊暡罱o予到要重疊在左眼圖像和右眼圖像上的隱藏字幕信息。因此,在顯示隱藏字幕信息時(shí),信息和圖像中每個(gè)對象之間的透視的一致性可以保持在最佳狀態(tài)。此外,在圖115所示的位流處理單元201D中,基于添加到視差信息的偏移目標(biāo)指定信息(SeleCt_View_Shift),可以指定僅偏移左眼隱藏字幕信息、僅偏移右眼隱藏字幕信息、或者偏移兩者。換句話說,可以給予反映傳輸側(cè)的強(qiáng)度的視差左眼隱藏字幕信息和右眼隱藏字幕信息。此外,在圖115所示的位流處理單元201D中,接收在隱藏字幕信息的顯示時(shí)段期間在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息??梢允褂脴?biāo)記信息 (temporalextensior^flag)確定已經(jīng)接收它們中的哪個(gè)。然后,在接收的視差信息是在各個(gè)幀中順序更新的視差信息的情況下,可以根據(jù)圖像的內(nèi)容的改變動態(tài)改變要給到隱藏字幕信息的視差。此外,在接收的視差信息是在各個(gè)幀中公用的視差信息的情況下,可以減少處理負(fù)荷,并且還可以抑制存儲視差信息的存儲器的容量,盡管不能根據(jù)圖像的內(nèi)容的改變動態(tài)改變要給到隱藏字幕信息的視差。注意到,作為示例,圖115所示的位流處理單元201D已經(jīng)在其使用限制于隱藏字幕信息的視差信息的接收的背景中說明。盡管省略詳細(xì)描述,例如,也可以以類似方式配置接收和處理其使用限制于如字幕信息的任何其它重疊信息的視差信息的位流處理單元。[機(jī)頂盒的另一配置示例]圖117圖示了機(jī)頂盒200A的另一配置示例。在該圖117中,對應(yīng)于圖102和圖 108的部分分配相同的標(biāo)號,并且將適當(dāng)?shù)厥÷云湓敿?xì)描述。該機(jī)頂盒200A包括位流處理單元201D、HDMI端子202、天線端子203、數(shù)字調(diào)諧器204、視頻和圖形處理電路205A、HDMI 傳輸單元206以及音頻信號處理電路207。此外,該機(jī)頂盒200A包括CPU 211、閃速ROM 212、DRAM 213、內(nèi)部總線214、遙控接收單元215、遙控發(fā)送器216、網(wǎng)絡(luò)端子217和以太網(wǎng)接口 218。注意,“以太網(wǎng)”是注冊商標(biāo)。位流處理單元201D從由數(shù)字調(diào)諧器204獲得的位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、重疊信息數(shù)據(jù)、視差信息(視差矢量)等。在該示例中,重疊信息數(shù)據(jù)是字幕數(shù)據(jù)。該位流處理單元201D具有大體上與圖77中所示的位流處理單元201A類似的配置。位流處理單元201D包括解多路分用器220A、視頻解碼器221、字幕解碼器222k和音頻解碼器224。此外,該位流處理單元201D包括立體圖像字幕產(chǎn)生單元226A、視頻重疊單元2 和視差矢量提取單元231。解多路分用器220A從位流數(shù)據(jù)BSD提取視頻、音頻和字幕的分組,并將分組發(fā)送到各個(gè)解碼器。視頻解碼器221從由解多路分用器220A提取的視頻分組重構(gòu)視頻的基本流,并且執(zhí)行解碼處理,以獲得包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。字幕解碼器 222A從由解多路分用器220A提取的字幕分組重構(gòu)字幕的基本流。接下來,該字幕解碼器 222A進(jìn)一步執(zhí)行解碼處理,以獲得字幕數(shù)據(jù)。音頻解碼器2M從由解多路分用器220A提取的音頻分組重構(gòu)音頻的基本流,執(zhí)行解碼處理,以獲得音頻數(shù)據(jù),并將音頻數(shù)據(jù)輸出到位流處理單元201的外部。視差矢量提取單元231從通過視頻解碼器221獲得的視頻流提取嵌入在其用戶數(shù)據(jù)區(qū)域中的視差矢量(視差信息組)。接下來,該視差矢量提取單元231將提取出的視差矢量提供到立體圖像字幕產(chǎn)生單元226,并且此外將其輸出到位流處理單元201D的外部。立體圖像字幕和圖形產(chǎn)生單元226A生成要疊加在左眼圖像和右眼圖像上的左眼和右眼字幕信息。該生成處理基于由字幕解碼器222A獲得的字幕數(shù)據(jù)以及從視差矢量提取單元231提供的視差矢量(視差信息組)來執(zhí)行。在這種情況下,左眼和右眼字幕信息項(xiàng)是同一信息。然而,例如圖像內(nèi)的右眼字幕信息或圖形信息的重疊位置配置為相對于左眼字幕信息或圖形信息在水平方向上偏移視差矢量的水平方向分量。接下來,該立體圖像字幕生成單元226A輸出左眼和右眼字幕信息項(xiàng)的數(shù)據(jù)(位圖數(shù)據(jù))。視頻重疊單元2 將由字幕產(chǎn)生單元226A產(chǎn)生的左眼和右眼字幕信息項(xiàng)的數(shù)據(jù)重疊在由視頻解碼器221獲得的立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上,并且獲得顯示立體圖像數(shù)據(jù)。注意,使用系統(tǒng)層的時(shí)間戳開始重疊信息數(shù)據(jù)在立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))上的重疊。接下來,該視頻重疊單元2 將顯示立體圖像數(shù)據(jù)輸出到位流處理單元201D的外部。以太網(wǎng)接口 2 經(jīng)由網(wǎng)絡(luò)端子227連接到未示出的網(wǎng)絡(luò)(如,因特網(wǎng))。以太網(wǎng)接口 2 還可以根據(jù)用戶操作,例如使用窗口小部件(Widget)經(jīng)由網(wǎng)絡(luò)獲取要經(jīng)歷圖形顯示的各種信息(如天氣預(yù)報(bào)或股票視場信息)。該以太網(wǎng)接口 2 連接到內(nèi)部總線214。根據(jù)需要,視頻/圖形處理單元205A對從位流處理單元201D輸出的顯示立體圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整處理。此外,該視頻/圖形處理單元205A例如將基于窗口小部件 (Widget)的圖形信息的數(shù)據(jù)重疊在從位流處理單元201D輸出的顯示立體圖像數(shù)據(jù)上。將從上述位流處理單元201D輸出的視差矢量(視差信息組)提供到該視頻/圖形處理單元205A。視頻/圖形處理單元205A基于該視差矢量(視差信息組),將視差給予要重疊在左眼圖像和右眼圖像上的相同圖形信息。因此,在圖像內(nèi)根據(jù)每個(gè)對象的透視經(jīng)歷視差調(diào)整的圖形信息可以用作要重疊在左眼圖像和右眼圖像上的相同圖形信息,并且在該圖形信息的顯示中,可以維持信息和圖像內(nèi)每個(gè)對象之間的透視的一致性。視頻/圖形處理單元205A將處理的顯示立體圖像數(shù)據(jù)提供到HDMI傳輸單元206。根據(jù)需要,音頻信號處理電路207對從位流處理單元201D輸出的音頻數(shù)據(jù)執(zhí)行音頻質(zhì)量調(diào)整處理等,并將處理的音頻數(shù)據(jù)提供到HDMI傳輸單元206。HDMI傳輸單元206使用遵循HDMI的通信,從HDMI端子202傳送基帶圖像(視頻)和音頻的數(shù)據(jù)。在這種情況下, HDMI傳輸單元206封裝封裝圖像和音頻數(shù)據(jù),并且將數(shù)據(jù)輸出到HDMI端子202以便使用 HDMITMDS通道傳輸。盡管將省略詳細(xì)描述,但是圖117中所示的機(jī)頂盒200A的其他組件以與圖102中所示的機(jī)頂盒200A類似的方式配置。將簡要描述圖117中所示的機(jī)頂盒200A的操作。將輸入到天線端子203的電視廣播信號供應(yīng)到數(shù)字調(diào)諧器204。在該數(shù)字調(diào)諧器204中,處理電視廣播信號,并獲得支持用戶選擇的頻道的預(yù)定位流數(shù)據(jù)BSD。將該位流數(shù)據(jù)BSD提供到位流處理單元201D。在該位流處理單元20ID中,從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、字幕數(shù)據(jù)、視差矢量(視差信息組)等。此外,在該位流處理單元 201D中,與立體圖像數(shù)據(jù)組合字幕信息的數(shù)據(jù),并且生成顯示立體圖像數(shù)據(jù)。在這種情況,在位流處理單元201D中,基于視差矢量,將視差給予要重疊在左眼圖像和右眼圖像上的相同的字幕信息。因此,經(jīng)歷了根據(jù)圖像內(nèi)每一個(gè)對象的透視的視差調(diào)整的字幕信息可以用作要重疊在左眼圖像和右眼圖像上的相同的字幕信息,并且在該字幕信息的顯示中,設(shè)計(jì)要維持信息和圖像內(nèi)每個(gè)對象之間的透視的一致性。根據(jù)需要,由位流處理單元201D生成的顯示立體圖像數(shù)據(jù)經(jīng)歷通過視頻/圖像處理電路205A的圖像質(zhì)量調(diào)整處理。此外,在該視頻/圖形處理電路205A中,根據(jù)需要,基于窗口小部件(Widget)的圖形信息的數(shù)據(jù)與由位流處理單元201D生成的顯示立體圖像數(shù)據(jù)組合。在這種情況下,在視頻/圖形處理電路205A中,基于從位流處理單元20ID提供的視差矢量(視差信息組),將視差給予要重疊在左眼圖像和右眼圖像上的相同的圖形信息。 因此,經(jīng)歷了根據(jù)圖像內(nèi)每個(gè)對象的透視的視差調(diào)整的圖形信息可以用作要重疊在左眼圖像和右眼圖像上的相同的圖形信息,并且在該圖形信息的顯示中,設(shè)計(jì)要維持信息和圖像內(nèi)每個(gè)對象之間的透視的一致性。將從視頻/圖形處理電路205A獲得的處理的顯示立體圖像數(shù)據(jù)提供到HDMI傳輸單元206。此外,根據(jù)需要,由位流處理單元201D獲得的音頻數(shù)據(jù)經(jīng)歷通過音頻信號處理電路207的音頻質(zhì)量調(diào)整,此后提供到HDMI傳輸單元206。通過HDMI的TMDS通道,將提供到 HDMI傳輸單元206的立體圖像數(shù)據(jù)和音頻數(shù)據(jù)從HDMI端子202發(fā)送到HDMI線纜400。在圖117中所示的機(jī)頂盒200A中,在位流處理單元201D中,基于由位流處理單元 201D的視差矢量提取單元231提取的視差矢量(視差信息組),將視差給予要重疊在左眼圖像和右眼圖像的相同的字幕信息。此外,在視頻/圖形處理電路205A中,基于視差矢量 (視差信息組),將視差添加到要重疊在左眼圖像和右眼圖像上的相同的圖形信息。因此, 不僅在要從廣播站發(fā)送的字幕信息而且在該機(jī)頂盒200A內(nèi)產(chǎn)生的圖形信息的顯示時(shí),可以設(shè)計(jì)為維持信息和圖像內(nèi)每個(gè)對象之間的透視的一致性。圖118圖示了在圖117中所示的機(jī)頂盒200A中,關(guān)于左眼圖像和右眼圖像的字幕信息和圖形信息的重疊示例。圖118(a)圖示了左眼圖像。在位流處理單元201D中,將字幕信息“Subtitle 1”重疊在位置(xl,yl),并且將字幕信息“Subtitle 2”重疊在位置(x2,y2)。此外,在視頻和圖形處理電路205A中,將圖形信息“Graphics 1”重疊在位置(x3,y3)。圖118(b)圖示了右眼圖像。在位流處理單元201D中,基于對應(yīng)的視差矢量,將字幕信息“Subtitle 1”重疊在關(guān)于左眼圖像的重疊位置偏移了偏移l(0ffset 1)的位置。類似地,在該位流處理單元201D中,基于對應(yīng)的視差矢量,將字幕信息“Subtitle 2”重疊在關(guān)于左眼圖像的重疊位置偏移了偏移2 (Offset 2)的位置。此外,在視頻/圖形處理電路 205A中,將圖形信息“Graphics 1 ”重疊在關(guān)于左眼圖像的重疊偏移了偏移3 (Offset 3)的位置。注意,在圖117中所示的機(jī)頂盒200A中,位流處理單元201D處理字幕信息,并且此外視頻/圖形處理電路205A處理圖形信息。然而,還可以以類似的方式配置處理其他重疊信息的設(shè)備。[電視接收機(jī)的描述]返回參照圖1,電視接收機(jī)300經(jīng)由HDMI線纜400接收從機(jī)頂盒200發(fā)送的立體圖像數(shù)據(jù)。該電視接收機(jī)300包括3D信號處理單元301。該3D信號處理單元301對立體圖像數(shù)據(jù)執(zhí)行與傳輸方法對應(yīng)的處理(解碼處理),并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。也就是說,該3D信號處理單元301執(zhí)行與圖2、圖13、圖15和圖21中所示的傳輸數(shù)據(jù)生成單元110、110A、110B、110C中的視頻成幀單元112相反的處理。接下來,該3D信號處理單元301獲取形成立體圖像數(shù)據(jù)的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。[電視接收機(jī)的示例配置]將描述電視接收機(jī)300的示例配置。圖119圖示了電視接收機(jī)300的示例配置。 該電視接收機(jī)300包括3D信號處理單元301、HDMI端子302、HDMI接收單元303、天線端子 304、數(shù)字調(diào)諧器305和位流處理單元306。此外,該電視接收機(jī)300包括視頻/圖形處理電路307、面板驅(qū)動電路308、顯示面板309、音頻信號處理電路310、音頻放大電路311和揚(yáng)聲器312。此外,該電視接收機(jī)300包括CPU 321、閃速ROM 322、DRAM 323、內(nèi)部總線324、遙控接收單元325和遙控發(fā)送器326。天線端子304是對其輸入由接收天線(未示出)接收的電視廣播信號的端子。數(shù)字調(diào)諧器305處理輸入到天線端子304的電視廣播信號,并輸出與用戶選擇的頻道對應(yīng)的預(yù)定位流數(shù)據(jù)(傳送流)。位流處理單元306配置為具有與圖102中所示的機(jī)頂盒200的位流處理單元201 類似的配置。該位流處理單元306從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、重疊信息數(shù)據(jù)、視差矢量(視差信息)等。重疊信息數(shù)據(jù)包括字幕數(shù)據(jù)、圖形數(shù)據(jù)、文本數(shù)據(jù)(包括隱藏字幕數(shù)據(jù))等。該位流處理單元306組合重疊信息數(shù)據(jù)與立體圖像數(shù)據(jù),并且獲取顯示立體圖像數(shù)據(jù)。此外,位流處理單元306輸出音頻數(shù)據(jù)。HDMI接收單元303使用遵循HDMI兼容的通信,經(jīng)由HDMI線纜400接收提供到 HDMI端子302的未壓縮圖像數(shù)據(jù)和音頻數(shù)據(jù)。該HDMI接收單元303的版本假設(shè)為例如 HDMI 1.4,并且可能處理立體圖像數(shù)據(jù)。稍后將描述該HDMI接收單元303的細(xì)節(jié)。3D信號處理單元301對由HDMI接收單元303接收的、或者由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行解碼處理,并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。在這種情況下, 3D信號處理單元301對由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行與傳輸方法(參見圖 4)對應(yīng)的解碼處理。此外,3D信號處理單元301對由HDMI接收單元303接收的立體圖像數(shù)據(jù)執(zhí)行與稍后描述的TMDS傳輸數(shù)據(jù)結(jié)構(gòu)對應(yīng)的解碼處理。視頻/圖形處理電路307基于由3D信號處理單元301生成的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù),生成用于顯示立體圖像的圖像數(shù)據(jù)。此外,視頻/圖形處理電路307根據(jù)需要, 對圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整處理。此外,視頻/圖形處理電路307根據(jù)需要,與圖像數(shù)據(jù)組合重疊信息(如菜單或節(jié)目指南)的數(shù)據(jù)。面板驅(qū)動電路308基于從視頻/圖形處理電路307輸出的圖像數(shù)據(jù)來驅(qū)動顯示面板309。顯示面板309例如由IXD (液晶顯示器)、 PDP (等離子顯示面板)等構(gòu)成。音頻信號處理電路310對由HDMI接收單元303接收的或者由位流處理單元306 獲得的音頻數(shù)據(jù)執(zhí)行必要的處理(如D/A轉(zhuǎn)換)。音頻放大電路311放大從音頻信號處理電路310輸出的音頻信號,將得到的信號提供到揚(yáng)聲器312。CPU 321控制電視接收機(jī)300的每個(gè)單元的操作。閃速ROM 322存儲控制軟件并且保持?jǐn)?shù)據(jù)。DRAM 323形成CPU 321的工作區(qū)域。CPU 321將從閃速RAM 322讀取的軟件和數(shù)據(jù)擴(kuò)展到DRAM 323,以啟動軟件,并且控制電視接收機(jī)300的每個(gè)單元。遙控接收單元325接收從遙控發(fā)送器3 發(fā)送的遙控信號(遙控代碼),并將遙控信號提供到CPU 321。CPU 321基于該遙控代碼控制電視接收機(jī)300的每個(gè)單元。CPU 321、 閃速ROM 322和DRAM 323連接到內(nèi)部總線324。將簡要描述圖119中所示的電視接收機(jī)300的操作。在HDMI接收單元303中,經(jīng)由HDMI線纜400接收從連接到HDMI端子302的機(jī)頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)和音頻數(shù)據(jù)。將由該HDMI接收單元303接收到的該立體圖像數(shù)據(jù)提供到3D信號處理單元301。此外,將由該HDMI接收單元303接收到的音頻數(shù)據(jù)提供到音頻信號處理單元310。將輸入到天線端子304的電視廣播信號提供到數(shù)字調(diào)諧器305。在該數(shù)字調(diào)諧器 305中,處理電視廣播信號,并輸出與用戶選擇的頻道對應(yīng)的預(yù)定位流數(shù)據(jù)(傳送流)。將從數(shù)字調(diào)諧器305輸出的位流數(shù)據(jù)提供到位流處理單元306。在該位流處理單元306中,從位流數(shù)據(jù)提取立體圖像數(shù)據(jù)(左眼圖像數(shù)據(jù)、右眼圖像數(shù)據(jù))、音頻數(shù)據(jù)、重疊信息數(shù)據(jù)、視差矢量(視差信息)等。此外,在該位流處理單元306中,與立體圖像數(shù)據(jù)組合重疊信息(隱藏字幕信息、字幕信息、圖形信息、文本信息)的數(shù)據(jù),并產(chǎn)生顯示立體圖像數(shù)據(jù)。將由位流處理單元306生成的顯示立體圖像數(shù)據(jù)提供到3D信號處理單元301。此外,將由位流處理單元306獲得的音頻數(shù)據(jù)提供到音頻信號處理電路310。在3D信號處理單元301中,對由HDMI接收單元303接收的或者由位流處理單元 306獲得的立體圖像數(shù)據(jù)執(zhí)行解碼處理,并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。將左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)提供到視頻/圖形處理電路307。在該視頻/圖形處理電路307,基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù),生成用于顯示立體圖像的圖像數(shù)據(jù),并且還根據(jù)需要執(zhí)行圖像質(zhì)量調(diào)整處理或用于組合重疊信息數(shù)據(jù)的處理。將由該視頻/圖形處理電路307獲得的圖像數(shù)據(jù)提供到面板驅(qū)動電路308。因此, 通過使用顯示面板309顯示立體圖像。例如,基于左眼圖像數(shù)據(jù)的左眼圖像和基于右眼圖像數(shù)據(jù)的右眼圖像以時(shí)分方式在顯示面板309上交替地顯示。通過配戴具有與顯示面板 309的顯示同步地交替地打開的左眼快門和右眼快門的快門眼鏡,觀看者可以由左眼僅觀看左眼圖像,并且由右眼僅觀看右眼圖像,并且可以感受立體圖像。
此外,在音頻信號處理電路310中,對由HDMI接收單元303接收的或者由位流處理單元306獲得的音頻數(shù)據(jù)執(zhí)行必要的處理,如D/A轉(zhuǎn)換等。通過音頻放大電路311放大該音頻數(shù)據(jù),然后將其提供到揚(yáng)聲器312。因此,從揚(yáng)聲器312輸出音頻。[HDMI傳輸單元和HDMI接收單元的示例配置]圖120圖示圖1中的立體圖像顯示系統(tǒng)10中機(jī)頂盒200的HDMI傳輸單元(HDMI 源)206和電視接收機(jī)300的HDMI接收單元(HDMI宿)303的配置示例。在有效圖像時(shí)段(在下文中,也適當(dāng)?shù)胤Q為活動視頻時(shí)段)中,HDMI傳輸單元206 通過多個(gè)通道單向傳輸與一個(gè)屏幕的未壓縮圖像的像素?cái)?shù)據(jù)對應(yīng)的差分信號到HDMI接收單元303。這里,有效圖像時(shí)段是從一個(gè)垂直同步信號到下一個(gè)垂直同步信號移除水平消隱時(shí)段和垂直消隱時(shí)段的時(shí)段。此外,在水平消隱時(shí)段或垂直消隱時(shí)段中,HDMI傳輸單元206 通過多個(gè)通道單向向HDMI接收單元303傳輸與至少附接到圖像的音頻數(shù)據(jù)、控制數(shù)據(jù)、其他輔助數(shù)據(jù)等對應(yīng)的差分信號。由HDMI傳輸單元206和HDMI接收單元303形成的HDMI系統(tǒng)的傳輸通道包括以下傳輸通道。也就是說,存在用作用于與像素時(shí)鐘同步的、從HDMI傳輸單元206到HDMI接收單元303的像素?cái)?shù)據(jù)和音頻數(shù)據(jù)的單向串行傳輸?shù)膫鬏斖ǖ赖娜齻€(gè)TMDS通道#0至#2。 此外,存在用作傳輸像素時(shí)鐘的傳輸通道的TMDS時(shí)鐘通道。HDMI傳輸單元206包括HDMI發(fā)送器81。發(fā)送器81例如將未壓縮圖像的像素?cái)?shù)據(jù)轉(zhuǎn)換為對應(yīng)的差分信號,并通過作為多通道的三個(gè)TMDS通道#0、#1和#2將差分信號單向串行傳輸?shù)浇?jīng)由HDMI線纜400連接的HDMI接收單元303。此外,發(fā)送器81將附接到未壓縮圖像的音頻數(shù)據(jù)以及此外必要的數(shù)據(jù)和其他輔助數(shù)據(jù)等轉(zhuǎn)換為對應(yīng)的差分信號,并通過三個(gè)TMDS通道#0、#1和#2將差分信號單向串行傳輸?shù)紿DMI接收單元303。進(jìn)一步,發(fā)送器81通過TMDS時(shí)鐘通道,將與通過三個(gè)TMDS通道#0、#1和#2傳輸?shù)南袼財(cái)?shù)據(jù)同步的像素時(shí)鐘傳輸?shù)浇?jīng)由HDMI線纜400連接的HDMI接收單元303。這里,通過一個(gè)TMDS通道#i (i = 0,1, ,在像素時(shí)鐘的一個(gè)時(shí)鐘期間傳輸10位像素?cái)?shù)據(jù)。HDMI接收單元303接收與通過多個(gè)通道在活動視頻時(shí)段中,從HDMI傳輸單元206 單向傳輸?shù)南袼財(cái)?shù)據(jù)對應(yīng)的差分信號。此外,該HDMI接收單元303接收與通過使用多通道在水平消隱時(shí)段或垂直消隱時(shí)段中,從HDMI傳輸單元206單向傳輸?shù)囊纛l數(shù)據(jù)或控制數(shù)據(jù)對應(yīng)的差分信號。也就是說,HDMI接收單元303包括HDMI接收器82。該HDMI接收器82接收對應(yīng)于像素?cái)?shù)據(jù)的差分信號以及通過TMDS通道#0、#1和#2從HDMI傳輸單元206單向傳輸?shù)膶?yīng)于音頻數(shù)據(jù)或控制數(shù)據(jù)的差分信號。在這種情況下,通過TMDS時(shí)鐘通道與從HDMI傳輸單元206傳輸?shù)南袼貢r(shí)鐘同步地接收差分信號。除了上述TMDS通道#0至#2以及TMDS時(shí)鐘通道之外,HDMI系統(tǒng)的傳輸通道還包括稱為DDC (顯示數(shù)據(jù)通道)83和CEC線84的傳輸通道。DDC 83由未示出的包括在HDMI 線纜400中的兩條信號線形成。DDC 83用于HDMI傳輸單元206從HDMI接收單元303讀出 E-EDID (增強(qiáng)擴(kuò)展顯示標(biāo)識數(shù)據(jù))。也就是說,除了 HDMI接收器81之外,HDMI接收單元303還包括已經(jīng)在其中存儲了作為關(guān)于其性能(配置/容量)的性能信息的E-EDID的EDIDR0M(只讀存儲器)85。HDMI傳輸單元206例如根據(jù)來自CPU 211 (參看圖102)的請求,經(jīng)由DDC 83從經(jīng)由HDMI線纜 400連接的HDMI接收單元303中讀取E-EDID。HDMI傳輸單元206將所讀取的E-EDID發(fā)送到CPU 211。CPU 211在閃速ROM 212 或DRAM 213中存儲該E-EDID。CPU 211可以基于E-EDID識別HDMI接收單元303的性能設(shè)置。例如,CPU 211識別包括HDMI接收單元303的電視接收機(jī)300是否能夠處理立體圖像數(shù)據(jù),而且在能夠處理立體圖像數(shù)據(jù)的情況下,進(jìn)一步識別電視接收機(jī)300可以支持什么TMDS傳輸數(shù)據(jù)結(jié)構(gòu)。CEC線84由未示出的包括在HDMI線纜400中的一條信號線形成,并且用于在HDMI 傳輸單元206與HDMI接收單元303之間的控制使用的數(shù)據(jù)的雙向通信。該CEC線84形成控制數(shù)據(jù)線。此外,HDMI線纜400包含連接到被稱為HPD (Hot Plug Detect,熱插拔檢測)的管腳的線(HPD線)86。源設(shè)備可以通過利用該線86檢測宿設(shè)備的連接。注意,該HPD線86 也用作形成雙向通信路徑的HEAC-線。此外,HDMI線纜400包含用于從源設(shè)備向宿設(shè)備供電的線(電源線)87。此外,HDMI線纜400包含應(yīng)用線88。該應(yīng)用線88還用作形成雙向通信路徑的HEAC+線。圖121圖示了在圖120中的HDMI發(fā)送器81和HDMI接收器82的示例配置。HDMI 發(fā)送器81包括分別與三個(gè)TMDS通道#0、#1和#2對應(yīng)的三個(gè)編碼器/串行化器81A、81B 和81C。然后,編碼器/串行化器81A、81B和81C中的每個(gè)編碼供應(yīng)到其的圖像數(shù)據(jù)、輔助數(shù)據(jù)和控制數(shù)據(jù),將它們從并行數(shù)據(jù)轉(zhuǎn)換成串行數(shù)據(jù),并使用差分信號傳輸?shù)玫降臄?shù)據(jù)。這里,在圖像數(shù)據(jù)包括例如R、G和B三個(gè)分量的情況下,將B分量供應(yīng)到編碼器/串行化器 81A,將G分量供應(yīng)到編碼器/串行化器81B,而將R分量供應(yīng)到編碼器/串行化器81C。此外,輔助數(shù)據(jù)的示例包括音頻數(shù)據(jù)和控制分組。例如,將控制分組供應(yīng)到編碼器 /串行化器81A,而將該音頻數(shù)據(jù)供應(yīng)到編碼器/串行化器81B和81C。進(jìn)一步,控制數(shù)據(jù)包括1-位垂直同步信號(VSYNC)U-位水平同步信號(HSYNC)和1-位控制位CTL0、CTL1、 CTL2和CTL3。將垂直同步信號和水平同步信號供應(yīng)到編碼器/串行化器81A。將控制位 CTLO和CTLl供應(yīng)到編碼器/串行化器81B,而將控制位CTL2和CTL3供應(yīng)到編碼器/串行化器81C。編碼器/串行化器81A以時(shí)分方式發(fā)送供應(yīng)到其的圖像數(shù)據(jù)的B分量、垂直同步信號、水平同步信號和輔助數(shù)據(jù)。也就是說,編碼器/串行化器81A將供應(yīng)到其的圖像數(shù)據(jù)的B分量設(shè)為以8位(其是固定位數(shù))為單元的并行數(shù)據(jù)。進(jìn)一步,編碼器/串行化器81A 編碼并行數(shù)據(jù),將其轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#0傳輸串行數(shù)據(jù)。此外,編碼器/串行化器81A編碼供應(yīng)到其的垂直同步信號和水平同步信號(即, 2-位并行數(shù)據(jù)),將該數(shù)據(jù)轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#0發(fā)送串行數(shù)據(jù)。進(jìn)一步,編碼器/串行化器81A將供應(yīng)到其的輔助數(shù)據(jù)設(shè)為以4位為單元的并行數(shù)據(jù)。然后,編碼器 /串行化器81A編碼并行數(shù)據(jù),將其轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#0傳輸串行數(shù)據(jù)。編碼器/串行化器81B以時(shí)分方式發(fā)送供應(yīng)到其的圖像數(shù)據(jù)的G分量、控制位 CTLO和CTLl以及輔助數(shù)據(jù)。也就是說,編碼器/串行化器81B將供應(yīng)到其的圖像數(shù)據(jù)的G 分量設(shè)為以8位(其是固定位數(shù))為單元的并行數(shù)據(jù)。進(jìn)一步,編碼器/串行化器81B編碼并行數(shù)據(jù),將其轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#1傳輸串行數(shù)據(jù)。
此外,編碼器/串行化器81B編碼供應(yīng)到其的控制位CTLO和CTL1( S卩,2-位并行數(shù)據(jù)),將該數(shù)據(jù)轉(zhuǎn)換為串行數(shù)據(jù),并通過使用TMDS通道#1發(fā)送。進(jìn)一步,編碼器/串行化器81B將供應(yīng)到其的輔助數(shù)據(jù)取為以4位為增量的并行數(shù)據(jù)。然后,編碼器/串行化器 81B編碼其并行數(shù)據(jù),轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#1傳輸串行數(shù)據(jù)。編碼器/串行化器81C以時(shí)分方式發(fā)送供應(yīng)到其的圖像數(shù)據(jù)的R分量、控制位 CTL2和CTL3以及輔助數(shù)據(jù)。也就是說,編碼器/串行化器81C將供應(yīng)到其的圖像數(shù)據(jù)的R 分量設(shè)為以8位(其是固定位數(shù))為單元的并行數(shù)據(jù)。進(jìn)一步,編碼器/串行化器81C編碼并行數(shù)據(jù),將其轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#2傳輸串行數(shù)據(jù)。此外,編碼器/串行化器81C編碼供應(yīng)到其的控制位CTL2和CTL3(即,2-位并行數(shù)據(jù)),將該數(shù)據(jù)轉(zhuǎn)換為串行數(shù)據(jù),并通過TMDS通道#2傳輸串行數(shù)據(jù)。進(jìn)一步,編碼器/串行化器81C將供應(yīng)到其的輔助數(shù)據(jù)設(shè)為以4位為單元的并行數(shù)據(jù)。然后,編碼器/串行化器81C將并行數(shù)據(jù)編碼為串行數(shù)據(jù),并通過TMDS通道#2傳輸串行數(shù)據(jù)。HDMI接收器82包括分別與三個(gè)TMDS通道#0、#1和#2對應(yīng)的三個(gè)恢復(fù)/解碼器 82A、82B和82C。然后,恢復(fù)/解碼器82A、82B和82C中的每個(gè)接收通過TMDS通道#0、#1 和#2中的對應(yīng)一個(gè)使用差分信號傳輸?shù)膱D像數(shù)據(jù)、輔助數(shù)據(jù)和控制數(shù)據(jù)。進(jìn)一步,恢復(fù)/ 解碼器82A、82B和82C中的每個(gè)將圖像數(shù)據(jù)、輔助數(shù)據(jù)和控制數(shù)據(jù)從串行數(shù)據(jù)轉(zhuǎn)換成并行數(shù)據(jù),并進(jìn)一步解碼和輸出它們。也就是說,恢復(fù)/解碼器82A接收通過TMDS通道#0使用差分信號傳輸?shù)膱D像數(shù)據(jù)的B分量、垂直同步信號、水平同步信號和輔助數(shù)據(jù)。然后,恢復(fù)/解碼器82A將該圖像數(shù)據(jù)的B分量、垂直同步信號、水平同步信號和輔助數(shù)據(jù)從串行數(shù)據(jù)轉(zhuǎn)換成并行數(shù)據(jù),并解碼和輸出它們?;謴?fù)/解碼器82B接收通過TMDS通道#1使用差分信號傳輸?shù)膱D像數(shù)據(jù)的G分量、 控制位CTLO和CTLl以及輔助數(shù)據(jù)。然后,恢復(fù)/解碼器82B將該圖像數(shù)據(jù)的G分量、控制位CTLO和CTLl以及輔助數(shù)據(jù)從串行數(shù)據(jù)轉(zhuǎn)換成并行數(shù)據(jù),并解碼和輸出它們?;謴?fù)/解碼器82C接收通過TMDS通道#2使用差分信號傳輸?shù)膱D像數(shù)據(jù)的R分量、 控制位CTL2和CTL3以及輔助數(shù)據(jù)。然后,恢復(fù)/解碼器82C將該圖像數(shù)據(jù)的R分量、控制位CTL2和CTL3以及輔助數(shù)據(jù)從串行數(shù)據(jù)轉(zhuǎn)換成并行數(shù)據(jù),并解碼和輸出它們。圖122圖示了 TMDS傳輸數(shù)據(jù)的示例結(jié)構(gòu)。圖122圖示了在通過TMDS通道#0、#1 和#2傳輸具有水平方向1920像素和垂直方向1080線的圖像數(shù)據(jù)的情況下的各種傳輸數(shù)據(jù)時(shí)段。通過HDMI的三個(gè)TMDS通道#0、#1和#2傳輸?shù)膫鬏敂?shù)據(jù)的視頻場(Video Field), 按照傳輸數(shù)據(jù)的類型,包括三種時(shí)段。該三種時(shí)段是視頻數(shù)據(jù)時(shí)段(Video Data Period), 數(shù)據(jù)島時(shí)段(Data Island Period)和控制時(shí)段(Control Period)。這里,視頻場時(shí)段是從某個(gè)垂直同步信號的上升沿(活動沿)到下一個(gè)垂直同步信號的上升沿的時(shí)段。這個(gè)視頻場時(shí)段可以被分割成水平消隱時(shí)段(水平消隱)、垂直消隱時(shí)段(垂直消隱)和活動視頻時(shí)段(活動視頻)。該活動視頻時(shí)段是通過從視頻場時(shí)段移除水平消隱時(shí)段和垂直消隱時(shí)段獲得的時(shí)段。將視頻數(shù)據(jù)時(shí)段分配給活動視頻時(shí)段。在該視頻數(shù)據(jù)時(shí)段中,傳輸具有1920像素X 1080線的有效像素(Active Pixels)的數(shù)據(jù)(其形成一個(gè)屏幕的未壓縮圖像數(shù)據(jù))。
將數(shù)據(jù)島時(shí)段和控制時(shí)段分配給水平消隱時(shí)段和垂直消隱時(shí)段。在數(shù)據(jù)島時(shí)段和控制時(shí)段中,傳輸輔助數(shù)據(jù)(Auxiliary data)。也就是說,將數(shù)據(jù)島時(shí)段分配給水平消隱時(shí)段和垂直消隱時(shí)段的一部分。在該數(shù)據(jù)島時(shí)段中,在輔助數(shù)據(jù)之中,傳輸與控制無關(guān)的數(shù)據(jù),例如如音頻數(shù)據(jù)的分組。將控制時(shí)段分配給水平消隱時(shí)段和垂直消隱時(shí)段的另外部分。在該控制時(shí)段中, 在輔助數(shù)據(jù)之中,傳輸與控制有關(guān)的數(shù)據(jù),例如如垂直同步信號、水平同步信號和控制分組寸。圖123圖示了 HDMI端子的示例管腳陣列。圖123中所圖示的管腳陣列被稱為A型 (type-A)。使用作為差分線的兩條線傳輸作為TMDS通道#i的差分信號的TMDS數(shù)據(jù)#i+ 和TMDS數(shù)據(jù)#i-。該兩條線連接到TMDS數(shù)據(jù)#i+分配到的管腳(具有管腳號1、4和7的管腳)以及TMDS數(shù)據(jù)#i-分配到的管腳(具有管腳號3、6和9的管腳)。此外,傳輸作為控制使用的數(shù)據(jù)的CEC信號的CEC線84連接到管腳號為13的管腳。此外,經(jīng)由其傳輸諸如E-EDID之類的SDA(Serial Data,串行數(shù)據(jù))信號的線連接到管腳號為16的管腳。經(jīng)由其傳輸作為用于在SDA信號的傳輸和接收期間同步的時(shí)鐘信號的 SCL(Serial Clock,串行時(shí)鐘)信號的線連接到管腳號為15的管腳。上述DDC 83由經(jīng)由其傳輸SDA信號的線和經(jīng)由其傳輸SCL信號的線組成。此外,如上所述,用于源設(shè)備檢測宿設(shè)備的連接的HPD線(HEAC-線)86連接到管腳號為19的管腳。此外,應(yīng)用線(HEAC+線)88連接到管腳號為14的管腳。此外,如上所述,經(jīng)由其供電的線87連接到管腳號為18的管腳。[E-EDID 結(jié)構(gòu)]如上所述,HDMI傳輸單元206例如根據(jù)來自CPU 211 (參看圖102)的請求,經(jīng)由 DDC 83從經(jīng)由HDMI線纜400連接的HDMI接收單元303中讀取E-EDID。然后,CPU 211基于該E-EDID識別HDMI接收單元303的性能設(shè)置,例如,HDMI接收單元303是否能夠處理立體圖像數(shù)據(jù)。圖124圖示了 E-EDID的示例數(shù)據(jù)結(jié)構(gòu)。E-EDID由基本塊和擴(kuò)展塊形成。在基本塊中,在開頭處安排通過以“E-EDID 1.3基本結(jié)構(gòu)”表示的E-EDID 1.3標(biāo)準(zhǔn)定義的數(shù)據(jù)。 在該基本塊中,隨后安排用“優(yōu)選定時(shí)”表示的用于確保與傳統(tǒng)EDID的兼容性的定時(shí)信息。 此外,在該基本塊中,隨后安排用不同于“優(yōu)選定時(shí)”的“第二定時(shí)”表示的、用于保持與傳統(tǒng)EDID的兼容性的定時(shí)信息。此外,在基本塊中,在“第二定時(shí)”之后,安排用“監(jiān)視器名稱”表示的、指示顯示裝置的名稱的信息。在基本塊中,隨后,安排指示在由“監(jiān)視器范圍限制”表示的、高寬比為 4 3和16 9的情況下可顯示的像素?cái)?shù)量的信息。在擴(kuò)展塊的開頭,安排“簡短視頻描述符”。這是指示可顯示圖像大小(分辨率)、 幀速率和隔行還是逐行的信息。隨后,安排“簡短音頻描述符”。這是諸如可再現(xiàn)音頻編碼解碼方法、采樣頻率、截止帶、編碼解碼位數(shù)之類的信息。隨后,安排用“揚(yáng)聲器分配”表示的、關(guān)于左和右揚(yáng)聲器的信息。此外,在擴(kuò)展塊中,在“揚(yáng)聲器分配”之后,安排用“廠商專用”表示的、對于每一個(gè)廠商唯一定義的數(shù)據(jù)。在擴(kuò)展塊中,隨后安排由“第三定時(shí)”表示的、用于確保與傳統(tǒng)EDID 的兼容性的定時(shí)信息。在擴(kuò)展塊中,隨后還安排由“第四定時(shí)”表示的、用于確保與傳統(tǒng)EDID的兼容性的定時(shí)信息。圖125圖示了廠商專用區(qū)域(HDMI廠商專用數(shù)據(jù)塊)的示例數(shù)據(jù)結(jié)構(gòu)。在該廠商專用區(qū)域中,提供作為1-字節(jié)塊的第0塊至第N塊。在第0塊中,安排用“廠商專用標(biāo)簽代碼(=3) ”表示的、指示數(shù)據(jù)“廠商專用”的數(shù)據(jù)區(qū)域的報(bào)頭。此外,在該第0塊中,安排用“長度(=N) ”表示的、指示數(shù)據(jù)“廠商專用” 的長度的信息。此外,在第一塊至第三塊中,安排用“對位IEEE注冊標(biāo)識符(0x000C03)LSB 在前”表示的、指示對于HDMI (R)注冊的號碼“0x0000)3”的信息。此外,在第四塊和第五塊中,安排用“A”、“B”、“C”和“D”表示的、指示宿設(shè)備的24-位物理地址的信息。在第六塊中,安排用“Supports-AI”表示的、指示對應(yīng)于宿設(shè)備的功能的標(biāo)記。此外,在該第六塊中,安排用“DC-48位”,"DC-36位”和“DC-30位”表示的、指定每個(gè)像素的位數(shù)的各條信息。此外,在該第六塊中,還安排用“DC-Y444”表示的、指示宿設(shè)備是否支持 YCbCr 4:4: 4的圖像傳輸?shù)臉?biāo)記。進(jìn)一步,在該第六塊中,安排用“DVI-Dual”表示的、 指示宿設(shè)備是否支持雙重DVI (數(shù)字視頻接口)的標(biāo)記。此外,在第七塊中,安排用“Max-TMDS-Clock”表示的、指示TMDS像素時(shí)鐘的最大頻率的信息。此外,在第八塊的第六位和第七位,安排用“等待時(shí)間”表示的、指示存在/ 不存在視頻和音頻的延遲信息的標(biāo)記。此外,在該第八塊的第五位,安排用“HDMI_Video_ present”表示的、指示附加HDMI視頻格式(3D,4kX^0的處理是否可用的標(biāo)記。此外,在第九塊中,安排用“視頻等待時(shí)間”表示的、逐行視頻的延遲時(shí)間數(shù)據(jù),而在第十塊中,安排用“音頻等待時(shí)間”表示的、伴隨該逐行視頻的音頻的延遲時(shí)間數(shù)據(jù)。此外,在第十一塊中,安排用“隔行視頻等待時(shí)間”表示的、隔行視頻的延遲時(shí)間數(shù)據(jù)。進(jìn)一步, 在第十二塊中,安排用“隔行音頻等待時(shí)間”表示的、伴隨該隔行視頻的音頻的延遲時(shí)間數(shù)據(jù)。此外,在第十三塊的第七位中,安排用“3D_present”表示的、指示是否3D圖像數(shù)據(jù)的處理是否可用的標(biāo)記。此外,在第十四塊的第七至第五位中,安排用“HDMI_VIC_LEN” 表示的、指示安排在未示出的第十五塊及其后中的強(qiáng)制3D數(shù)據(jù)以外的、可以處理的數(shù)據(jù)結(jié)構(gòu)的塊大小信息。此外,在第十四塊的第四至第零位,安排用“HDMI_3D_LEN”表示的、指示安排在未示出的第十五塊及其后中的、可以處理的的視頻格式的塊大小信息。[立體圖像數(shù)據(jù)的TMDS傳輸數(shù)據(jù)結(jié)構(gòu)]圖126圖示了作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的幀封裝(Frame Packing)方法的3D視頻格式(3D Video format)。該3D視頻格式是用于將逐行掃描 (progressive)的左眼(L)和右眼(R)圖像數(shù)據(jù)作為立體圖像數(shù)據(jù)傳輸?shù)母袷?。在?D視頻格式中,傳輸以1920X1080p或1080 X 720p像素格式的圖像數(shù)據(jù)作為左眼(L)和右眼(R)圖像數(shù)據(jù)。注意,在圖93中,圖示了左眼(L)圖像數(shù)據(jù)和右眼(R) 圖像數(shù)據(jù)中的每一個(gè)都具有1920線X 1080像素的示例。使用該3D視頻格式,生成這樣的傳輸數(shù)據(jù)其中,包括水平消隱時(shí)段(Hblank)、 垂直消隱時(shí)段(Vblank)和活動視頻部分(HactiveXVactive)的視頻場時(shí)段用作一個(gè)單元,其由垂直同步信號分割。在該3D視頻格式中,活動視頻時(shí)段具有兩個(gè)活動視頻區(qū)域 (Active Video)和在其間的一個(gè)活動空區(qū)域(Active space) 0左眼(L)圖像數(shù)據(jù)被放置在第一活動視頻區(qū)域,而右眼(R)圖像數(shù)據(jù)被放置在第二活動視頻區(qū)域。
圖127圖示了在作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的行交替(Line alternative)方法的3D視頻格式(3D Video format)。該3D視頻格式是用于將逐行的左眼(L)和右眼(R)圖像數(shù)據(jù)作為立體圖像數(shù)據(jù)發(fā)送的格式。在該3D視頻格式中,作為左眼 (L)和右眼(R)圖像數(shù)據(jù),傳輸以1920X1080p像素格式的圖像數(shù)據(jù)。使用該3D視頻格式,生成這樣的傳輸數(shù)據(jù)其中,包括水平消隱時(shí)段(Hblank)、垂直消隱時(shí)段OXVblank)和活動視頻部分(HactiveX2VactiVe)的視頻場時(shí)段用作一個(gè)單元,其由垂直同步信號分割。在該3D視頻格式中,在活動視頻時(shí)段中,交替地安排左眼圖像數(shù)據(jù)的一行和右眼圖像數(shù)據(jù)的一行。圖128圖示了作為立體圖像數(shù)據(jù)的一種TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的并排 (side-by-side) (Full,全)方法的3D視頻格式(3D Video Format) 0該3D視頻格式是用于將逐行的左眼(L)和右眼(R)圖像數(shù)據(jù)作為立體圖像數(shù)據(jù)傳輸?shù)母袷?。在?D視頻格式中,作為左眼(L)和右眼(R)圖像數(shù)據(jù),傳輸以1920X1080p像素格式的圖像數(shù)據(jù)。使用該3D視頻格式,生成這樣的傳輸數(shù)據(jù)其中,包括水平消隱時(shí)段 QXHblank)、垂直消隱時(shí)段(Vblank)和活動視頻部分QHactiveXVactive)的視頻場時(shí)段用作一個(gè)單元,其由垂直同步信號分割。在該3D視頻格式中,在活動視頻時(shí)段中,在水平方向的前一半中放置左眼(L)圖像數(shù)據(jù),而在水平方向的后一半中放置右眼(R)圖像數(shù)據(jù)。注意,雖然省略了詳細(xì)描述,但是在HDMI 1.4中,除了在上述圖126至128中所圖示的3D視頻格式之外,還定義用作立體圖像數(shù)據(jù)的TMDS傳輸數(shù)據(jù)結(jié)構(gòu)的3D視頻格式。例如,定義了幀封裝(用于隔行格式的幀封裝)方法、場交替(Field alternative)方法、并排(side-by-side) (Half,半)方法等。如上所述,在圖1中所示的立體圖像顯示系統(tǒng)10中,基于關(guān)于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)之一相對于的另一個(gè)的視差信息,將視差給予要重疊在左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上的相同的重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息)。因此, 可以采用根據(jù)圖像內(nèi)的每個(gè)對象的透視而經(jīng)歷了視差調(diào)整的重疊信息用作要重疊在左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上的相同的重疊信息,并且在重疊信息的顯示時(shí),可以維持重疊信息和圖像內(nèi)每個(gè)對象之間的透視的一致性。<2.示例修改〉注意,在以上實(shí)施例中,為了將一個(gè)分量元素ID與多個(gè)視差矢量相關(guān)聯(lián),在DHI內(nèi)安排信息“number_of_mutiple_link,,(圖 54、圖 55)。根據(jù)該“number_of_mutiple_link,,, 預(yù)先指定要與分量元素ID相關(guān)聯(lián)的視差矢量的數(shù)量。然而,例如,還可構(gòu)思這樣的方法其中,將連接標(biāo)記(Connect_flag)添加到分區(qū)位置ID(Partition_position_id),將一個(gè)分量元素ID與多個(gè)視差矢量相關(guān)聯(lián)。圖129圖示了將分量元素ID與視差矢量相關(guān)聯(lián)的方法的示例。這里,隱藏字幕信息的分量元素ID是窗口 ID(Wind0W_id)。此外,字幕信息的分量元素ID是區(qū)域ID(regi0n_ id)。為了將分量元素ID與視差矢量相關(guān)聯(lián),例如,將分量元素ID與指示視差矢量所屬的屏幕區(qū)域的直到13位的分區(qū)位置ID相關(guān)聯(lián)。該分區(qū)位置ID添加有1位連接標(biāo)記(CormeCt_f lag)。在將一個(gè)分量元素ID與一個(gè)視差矢量相關(guān)聯(lián)的情況下,如圖1 所示,該分量元素ID與一個(gè)分區(qū)位置ID相關(guān)聯(lián)。在這種情況下,添加到該一個(gè)分區(qū)位置ID的連接標(biāo)記被設(shè)置為“0”,這指示不存在隨后的分區(qū)位置ID與之相關(guān)聯(lián)。此外,在將一個(gè)分量元素ID與兩個(gè)視差矢量相關(guān)聯(lián)的情況下,如圖1 所示,該分量元素ID與兩個(gè)分區(qū)位置ID相關(guān)聯(lián)。在這種情況下,添加到第一分區(qū)位置ID的連接標(biāo)記被設(shè)置為“1”,這指示存在隨后的分區(qū)位置ID進(jìn)一步相關(guān)聯(lián)。接下來,添加到第二分區(qū)位置 ID的連接標(biāo)記被設(shè)置為“0”,這指示不存在隨后的分區(qū)位置ID與之相關(guān)聯(lián)。注意,盡管在圖1 中未圖示,但是在將一個(gè)分量元素ID與三個(gè)或更多個(gè)視差矢量相關(guān)聯(lián)的情況下,這與上述將一個(gè)分量元素ID與兩個(gè)視差矢量相關(guān)聯(lián)的情況下的處理類似。添加到直至最后分區(qū)位置ID之前的分區(qū)位置ID的連接標(biāo)記設(shè)置為“1”,并且僅將添加到最后分區(qū)位置ID的連接標(biāo)記設(shè)置為“0”。此外,在以上實(shí)施例中,已經(jīng)圖示了這樣的示例其中,立體圖像顯示系統(tǒng)10由廣播站100、機(jī)頂盒200和電視接收機(jī)300構(gòu)成。然而,如圖119中所示,電視接收機(jī)300包括以與機(jī)頂盒200內(nèi)的位流處理單元201等價(jià)的方式運(yùn)行的位流處理單元201。因此,如圖 130所示,也可構(gòu)思由廣播站100和電視接收機(jī)300構(gòu)成的立體圖像顯示系統(tǒng)IOA0此外,在上述實(shí)施例中,已經(jīng)圖示了這樣的示例其中,從廣播站廣播100廣播包括立體圖像數(shù)據(jù)的數(shù)據(jù)流(位流數(shù)據(jù))。然而,當(dāng)然,本發(fā)明也可以類似地應(yīng)用于具有如下配置的系統(tǒng)其中,通過利用網(wǎng)絡(luò)(如因特網(wǎng))將該數(shù)據(jù)流分發(fā)至接收端。此外,在上述實(shí)施例中,圖示了機(jī)頂盒200和電視接收機(jī)300之間經(jīng)由HDMI數(shù)字接口連接。然而,當(dāng)然,本發(fā)明甚至可以應(yīng)用于這樣的情況其中,經(jīng)由類似于HDMI數(shù)字接口的數(shù)字接口(除了有線之外包括無線)將它們相互連接。本申請參照日本專利申請No. 2009-153686。工業(yè)實(shí)用性本發(fā)明可以應(yīng)用于在圖像上重疊重疊信息(如隱藏字幕信息、字幕信息、圖形信息、或文本信息)并且顯示得到的圖像的立體圖像顯示系統(tǒng)等。附圖標(biāo)記列表10,IOA立體圖像顯示系統(tǒng);100廣播站;110,IlOA至100E傳輸數(shù)據(jù)生成單元; 111L,11IR相機(jī);112視頻成幀單元;113視頻編碼器;113a流格式化器;114視差矢量檢測單元;115視差矢量編碼器;116麥克風(fēng);117音頻編碼器;118字幕/圖形產(chǎn)生單元;119 字幕/圖形編碼器;119a流格式化器;120文本產(chǎn)生單元;121文本編碼器;122多路復(fù)用器;IM字幕/圖形處理單元;125文本處理單元;130數(shù)據(jù)提取單元;130a數(shù)據(jù)記錄介質(zhì); 131視差信息組創(chuàng)建單元;132視差信息創(chuàng)建單元;133CC編碼器;200,200A機(jī)頂盒;201, 201A、201B、201C、201D位流處理單元;202HDMI端子;203天線端子;204數(shù)字調(diào)諧器;205視頻信號處理電路;205A視頻/圖形處理單元;206HDMI傳輸單元;207音頻信號處理電路; 21ICPU ;212閃速ROM ;213DRAM ;214內(nèi)部總線;215遙控接收單元;216遙控發(fā)送器;220, 220A解多路分用器;221視頻解碼器;222字幕/圖形解碼器;222A223文本解碼器;2M音頻解碼器;225字幕解碼器,視頻矢量解碼器;2 立體圖像字幕/圖形產(chǎn)生單元;226A立體圖像字幕產(chǎn)生單元;227立體圖像文本產(chǎn)生單元;2 視頻重疊單元;2 多聲道揚(yáng)聲器控制單元;231視差矢量提取單元;232視差信息提取單元;300電視接收機(jī);3013D信號處理單元;302HDMI端子;303HDMI接收單元;304天線端子;305數(shù)字調(diào)諧器;306位流處理單元;307視頻/圖形處理電路;308面板驅(qū)動電路;309顯示面板;310音頻信號處理電路;311音頻放大電路;312揚(yáng)聲器;32ICPU ;322閃速ROM ;323DRAM ;324內(nèi)部總線;325遙控接收單元;3 遙控發(fā)送器;400HDMI線纜。
權(quán)利要求
1.一種立體圖像數(shù)據(jù)傳輸裝置,包括立體圖像數(shù)據(jù)輸出單元,其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù); 重疊信息數(shù)據(jù)輸出單元,其輸出要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù);視差信息輸出單元,其輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及傳輸單元,其傳輸從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)、從重疊信息數(shù)據(jù)輸出單元輸出的重疊信息的數(shù)據(jù)、以及從視差信息輸出單元輸出的視差信息, 其中傳輸單元使用相同的基本流傳輸至少視差信息和重疊信息的數(shù)據(jù),使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。
2.如權(quán)利要求1所述的立體圖像數(shù)據(jù)傳輸裝置,其中重疊信息數(shù)據(jù)已經(jīng)添加了用于指示是否存在與重疊信息的數(shù)據(jù)相關(guān)聯(lián)的視差信息的標(biāo)記信息。
3.如權(quán)利要求1所述的立體圖像數(shù)據(jù)傳輸裝置,其中視差信息包括要在預(yù)定數(shù)目的屏幕區(qū)域中使用的一條或多條視差信息,并且其中視差信息已經(jīng)添加了指示一條視差信息是否由預(yù)定數(shù)目的屏幕區(qū)域共享的共享 fn息ο
4.如權(quán)利要求1所述的立體圖像數(shù)據(jù)傳輸裝置,其中視差信息是特定服務(wù)使用的視差信息或通用視差信息,并且其中視差信息已經(jīng)添加了用于標(biāo)識特定服務(wù)使用的視差信息和通用視差信息的使用 fn息ο
5.如權(quán)利要求4所述的立體圖像數(shù)據(jù)傳輸裝置,其中當(dāng)視差信息是特定服務(wù)使用的視差信息時(shí),視差信息是屬于其中要顯示重疊信息的區(qū)域的視差信息,并且其中當(dāng)視差信息是通用視差信息時(shí),視差信息是屬于通過將屏幕劃分為預(yù)定數(shù)目的部分所獲得的每個(gè)子區(qū)域的視差信息。
6.如權(quán)利要求1所述的立體圖像數(shù)據(jù)傳輸裝置,其中視差信息是在其期間顯示重疊信息的預(yù)定數(shù)目的幀的時(shí)段期間公用的視差信息, 或者是在預(yù)定數(shù)目的幀的時(shí)段期間順序更新的視差信息,并且其中視差信息已經(jīng)添加了指示在各個(gè)幀中公用的視差信息或者在各個(gè)幀中順序更新的視差信息的標(biāo)記信息。
7.如權(quán)利要求6所述的立體圖像數(shù)據(jù)傳輸裝置,其中在各個(gè)幀中順序更新的視差信息包括關(guān)于預(yù)定數(shù)目的幀的時(shí)段期間的第一幀的視差信息,以及關(guān)于第二和隨后幀相對于關(guān)于之前幀的視差信息的偏移信息。
8.如權(quán)利要求1所述的立體圖像數(shù)據(jù)傳輸裝置,其中視差信息已經(jīng)添加了偏移目標(biāo)信息,其基于要重疊在基于左眼圖像數(shù)據(jù)的圖像上的重疊信息以及要重疊在基于右眼圖像數(shù)據(jù)的圖像上的重疊信息中的視差信息,指定要偏移的重疊信息。
9.一種立體圖像數(shù)據(jù)接收裝置,包括接收單元,其接收包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù)、以及用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及圖像數(shù)據(jù)處理單元,其使用由接收單元接收的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)、由接收單元接收的視差信息、以及由接收單元接收的重疊信息的數(shù)據(jù),給出視差到要重疊在左眼圖像和右眼圖像上的相同的重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像的數(shù)據(jù)以及其上已經(jīng)重疊重疊信息的右眼圖像的數(shù)據(jù),其中使用相同的基本流至少傳輸由接收單元接收的視差信息和重疊信息的數(shù)據(jù),使得能夠通過標(biāo)識信息標(biāo)識視差信息和重疊信息的數(shù)據(jù)。
10.一種立體圖像數(shù)據(jù)傳輸裝置,包括立體圖像數(shù)據(jù)輸出單元,其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);重疊信息數(shù)據(jù)輸出單元,其輸出要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù);視差信息輸出單元,其輸出用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息;以及傳輸單元,其傳輸包括從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)、從重疊信息數(shù)據(jù)輸出單元輸出的重疊信息的數(shù)據(jù)、以及從視差信息輸出單元輸出的視差信息的傳送流,其中傳送流中已經(jīng)插入指示傳送流中包括的每個(gè)基本流屬于哪個(gè)節(jié)目的PSI信息和 SI信息,并且其中至少包括用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在PSI信息或SI信息中的預(yù)定位置。
11.如權(quán)利要求10所述的立體圖像數(shù)據(jù)傳輸裝置,其中在基本流環(huán)路中安排描述符,其中安排標(biāo)識包含重疊信息的數(shù)據(jù)的基本流的標(biāo)識 fn息ο
12.如權(quán)利要求10所述的立體圖像數(shù)據(jù)傳輸裝置,其中描述符中已經(jīng)描述指示包含重疊信息的數(shù)據(jù)的基本流是否包含視差信息的標(biāo)記 fn息ο
13.如權(quán)利要求10所述的立體圖像數(shù)據(jù)傳輸裝置,其中視差信息是特定服務(wù)使用的視差信息或通用視差信息,并且其中描述符中已經(jīng)描述了用于標(biāo)識特定服務(wù)使用的視差信息和通用視差信息的使用 fn息ο
14.一種立體圖像數(shù)據(jù)接收裝置,包括數(shù)據(jù)獲取單元,其從傳送流獲取包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)、 要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息的數(shù)據(jù)、以及用于通過偏移要重疊在基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像上的重疊信息給出視差的視差信息; 以及圖像數(shù)據(jù)處理單元,其使用由數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)、由數(shù)據(jù)獲取單元獲取的視差信息、以及由數(shù)據(jù)獲取單元獲取的重疊信息的數(shù)據(jù),給出視差到要重疊在左眼圖像和右眼圖像上的相同的重疊信息,并且獲得其上已經(jīng)重疊重疊信息的左眼圖像的數(shù)據(jù)以及其上已經(jīng)重疊重疊信息的右眼圖像的數(shù)據(jù),其中傳送流中已經(jīng)插入指示傳送流中包括的每個(gè)基本流屬于哪個(gè)節(jié)目的PSi信息和 SI信息,并且其中至少包括用于標(biāo)識包含視差信息的基本流的標(biāo)識信息的描述符安排在PSI信息或SI信息中的預(yù)定位置。
全文摘要
目的是以實(shí)現(xiàn)與字幕信息共存的方式嵌入視差信息到字幕流中。為了嵌入視差信息到字幕流中,“視差數(shù)據(jù)組片段”是新定義為DVB字幕片段。通過使用該新片段,可能與字幕信息共存將視差信息嵌入字幕流。在接收側(cè),可以基于作為標(biāo)識信息的“segment_type”,從字幕流適當(dāng)?shù)孬@取視差信息。此外,在包括字幕信息的“頁成分片段”的片段中,新定義由“disparity_data_association_flag”指示的1位標(biāo)記信息。該標(biāo)記信息指示與頁相關(guān)聯(lián)的視差信息的存在或不存在。在接收側(cè)可以容易地確定與頁相關(guān)聯(lián)的視差信息的存在或不存在。
文檔編號H04N13/00GK102342113SQ20108000986
公開日2012年2月1日 申請日期2010年6月22日 優(yōu)先權(quán)日2009年6月29日
發(fā)明者塚越郁夫 申請人:索尼公司