專利名稱：圖像編碼裝置、圖像解碼裝置、圖像編碼方法及圖像解碼方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像編碼裝置及圖像解碼裝置。特別涉及以位深度比規(guī)定的大小大的圖像為對象的編碼裝置及解碼裝置。
背景技術(shù)：
以往，顯示器裝置、攝像裝置、圖像編碼裝置及圖像解碼裝置等的圖像處理裝置將圖像以稱作像素的單位進(jìn)行處理。并且，像素具有如綠、紅及藍(lán)(RGB)那樣的3個獨(dú)立的副像素。顯示器裝置通過控制各副像素的強(qiáng)度，混合出像素的顏色。各副像素的強(qiáng)度中有各種等級。等級的多樣性依賴于位深度。
位深度表示每一個像素的信息容量，更具體地講，是每一個副像素的位數(shù)。例如，在位深度是8位的情況下，各副像素的強(qiáng)度用256 (2的8次冪)等級表現(xiàn)。并且，在位深度是10位的情況下，各副像素的強(qiáng)度用1024 (2的10次冪)等級表現(xiàn)。此外，在位深度是8位的情況下，I個像素中的3個副像素的等級的組合的數(shù)量是256的3次冪(16，777，216)。并且，在位深度是10位的情況下，I個像素中的3個副像素的等級的組合的數(shù)量是1024的3次冪(1，073，741，824)。即，在位深度是10位的情況下，可再現(xiàn)的顏色的數(shù)量為位深度是8位的情況下的64倍。近年來，面向?qū)I(yè)用戶的顯示器裝置能夠以12位或16位的位深度顯示圖像。此夕卜，面向消費(fèi)者的顯示器裝置也有時能夠以比8位大的位深度顯示圖像。能夠再現(xiàn)更多的顏色的顯示器裝置能夠顯示更平滑的顏色的遷移、以及更接近于實(shí)物的顏色。即，通過使位深度變得更大，能夠?qū)崿F(xiàn)更平滑的顏色的遷移、以及更接近于實(shí)物的顏色。因而，與將圖像以8位的位深度顯示相比，消費(fèi)者更希望以更大的位深度顯示。另外，以8位的位深度顯示的圖像被稱作8位圖像。同樣，以10位的位深度顯示的圖像被稱作10位圖像。S卩，以n位的位深度顯示的圖像一般被稱作n位圖像。這里，為了輸出位深度更大的圖像，可以考慮使用多個能夠大量地得到的8位視頻處理器來輸出位深度更大的圖像。現(xiàn)有技術(shù)文獻(xiàn)非專利文獻(xiàn)非專利文獻(xiàn)I :ITU_T and IS0/IEC JTC1, “Advanced video coding forgeneric audio visual services, ” ITU-T Recommendation H. 264and IS0/IEC14496-10(MPEG-4AVC)，2010.
發(fā)明概要發(fā)明要解決的問題但是，在以往技術(shù)中，有通過編碼而數(shù)據(jù)量增大的問題。例如，在將I張10位圖像用兩個8位視頻處理器分別處理的情況下，必須傳送比本來想要傳送的10位圖像更多的數(shù)據(jù)。結(jié)果，在將圖像向記錄介質(zhì)記錄時需要的記錄容量增加，或者在經(jīng)由網(wǎng)絡(luò)傳送圖像時需要的帶寬增加。

發(fā)明內(nèi)容
所以，本發(fā)明的目的是提供一種進(jìn)一步減少利用在位深度上有限制的編碼器對位深度比編碼器的位深度大的圖像進(jìn)行了編碼時的數(shù)據(jù)量的圖像編碼裝置等。用于解決問題的手段為了解決上述問題，有關(guān)本發(fā)明的圖像編碼裝置的一技術(shù)方案是一種圖像編碼裝置，對表示每一個像素的信息容量的位深度比規(guī)定的大小大的對象圖像進(jìn)行編碼，具備向下變換器，對上述對象圖像實(shí)施向下變換處理而生成基本層圖像，上述向下變換處理使位深度減小第I值，以使該對象圖像的位深度成為上述規(guī)定的大?。坏贗編碼器，將上述基本層圖像編碼，并通過將編碼后的上述基本層圖像解碼而生成重構(gòu)圖像；減法器，對上述重構(gòu)圖像實(shí)施使位深度增大第2值的移位量調(diào)整處理，基于被實(shí)施上述移位量調(diào)整處理后的重 構(gòu)圖像和上述對象圖像，生成增強(qiáng)層圖像，該增強(qiáng)層圖像是用來提高上述基本層圖像的畫質(zhì)的圖像，并且是具有與上述基本層圖像相同的位深度的圖像；第2編碼器，將上述增強(qiáng)層圖像編碼；以及輸出部，輸出被編碼后的上述基本層圖像和被編碼后的上述增強(qiáng)層圖像。據(jù)此，圖像編碼裝置將對象圖像具有的位深度中的第2值的位包含于作為與基本層圖像不同的圖像的增強(qiáng)層圖像中。結(jié)果，在之后的解碼時，能夠使用增強(qiáng)層圖像提高基本層圖像的畫質(zhì)。即，圖像編碼裝置能夠通過第2值調(diào)整應(yīng)作為要生成的增強(qiáng)層圖像傳送的位量。因而，通過將應(yīng)作為增強(qiáng)層圖像傳送的位量利用第2值進(jìn)行優(yōu)化，圖像編碼裝置能夠進(jìn)一步減少利用在位深度中有限制的編碼器將位深度比編碼器的位深度大的圖像編碼時的數(shù)據(jù)量。具體而言，也可以是，上述減法器從使上述對象圖像的位深度減小作為上述第I值與上述第2值之差的第3值而得到的圖像所包含的多個像素的各像素值中，減去實(shí)施上述移位量調(diào)整處理后的重構(gòu)圖像所包含的對應(yīng)的像素的像素值，根據(jù)表示減去結(jié)果的位信息中的、從低位起包含在上述規(guī)定的大小的范圍中的位信息，生成上述增強(qiáng)層圖像。據(jù)此，圖像編碼裝置具備的減法器通過使像素的位移位作為第I值 第3值表示的量，能夠生成增強(qiáng)層圖像。此外，也可以是，上述減法器具有移位量決定部，該移位量決定部基于上述基本層圖像、上述對象圖像或上述重構(gòu)圖像所具有的特性，決定上述第2值；上述輸出部還輸出與由上述移位量決定部決定的上述第2值對應(yīng)的值。據(jù)此，圖像編碼裝置能夠根據(jù)作為編碼對象的圖像信號的特性，適當(dāng)?shù)貨Q定第2值。結(jié)果，能夠消除圖像的向下變換時的畫質(zhì)與數(shù)據(jù)大小的平衡，能夠在抑制畫質(zhì)的劣化的同時使數(shù)據(jù)大小變小。具體而言，也可以是，上述對象圖像或上述基本層圖像的空間頻率成分中的低頻成分在視覺上越占主導(dǎo)地位，上述移位量決定部將上述第2值決定得越大。據(jù)此，利用越是空間頻率成分中的低頻帶成分在視覺上占主導(dǎo)地位的圖像、則由向下變換引起的畫質(zhì)的劣化越容易醒目的認(rèn)識，由此能夠決定適當(dāng)?shù)牡?值。另外，也可以是，上述輸出部還構(gòu)成為多路復(fù)用器，該多路復(fù)用器將編碼上述基本層圖像而得到的基本層比特流和編碼上述增強(qiáng)層圖像而得到的增強(qiáng)層比特流進(jìn)行多路復(fù)用，由此生成MVC (Multiview Video Coding)方式的比特流；上述第I編碼器、上述第2編碼器和上述多路復(fù)用器構(gòu)成為MVC編碼器；上述多路復(fù)用器對上述MVC方式的比特流附加與針對多個上述對象圖像決定的上述第2值對應(yīng)的值。據(jù)此，能夠利用已有的MVC編碼器及MVC解碼器、以及具有MVC構(gòu)造的比特流實(shí)施
圖像編碼裝置。另外，也可以是，上述向下變換器通過將包含在上述對象圖像中的多個像素的各像素值的位下移上述第I值的量的上述向下變換處理，生成上述基本層圖像；上述減法器將包含在上述重構(gòu)圖像中的多個像素的各像素值的位上移上述第2值的量，將包含在上述對象圖像中的多個像素的各像素值的位下移上述第I值與上述第2值之差，根據(jù)下移后的上述對象圖像中包含的多個像素的各像素值與對應(yīng)于它的在上移后的上述重構(gòu)圖像中包含的多個像素的各像素值之差，生成上述增強(qiáng)層圖像。
此外，也可以是，上述向下變換器進(jìn)行將包含在上述對象圖像中的多個像素的各像素值除以規(guī)定的除數(shù)以使該對象圖像的位深度比上述第I值小的上述向下變換處理，，由此生成上述基本層圖像；上述減法器對包含在上述重構(gòu)圖像中的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使上述重構(gòu)圖像的位深度比上述第2值大，將包含在該對象圖像中的多個像素的各像素值除以規(guī)定的除數(shù)，以使該對象圖像的位深度減小上述第I值與上述第2值之差，根據(jù)除法后的上述對象圖像中包含的多個像素的各像素值與對應(yīng)于它的、在乘法后的上述重構(gòu)圖像中包含的多個像素的各像素值之差，生成上述增強(qiáng)層圖像。此外，也可以是，上述減法器將從使位深度減小上述第3值而得到的上述對象圖像中包含的多個像素的各像素值減去在實(shí)施了上述移位量調(diào)整處理后的上述重構(gòu)圖像中包含的對應(yīng)的像素的像素值而得到的值，加上用來使包含在上述增強(qiáng)層圖像中的多個像素的各像素值成為正的值的規(guī)定的值。據(jù)此，在位運(yùn)算的結(jié)果為面向增強(qiáng)層的像素值計(jì)算為負(fù)值的情況下，也能夠保證圖像編碼裝置必定輸出正的值作為像素值。有關(guān)本發(fā)明的圖像解碼裝置的一技術(shù)方案，是一種圖像解碼裝置，從比特流解碼出表示每一個像素的信息容量的位深度比規(guī)定的大小大第I值的對象圖像，具備第I解碼器，從上述比特流解碼出位深度是上述規(guī)定的大小的基本層圖像；第2解碼器，從上述比特流解碼出位深度是上述規(guī)定的大小的增強(qiáng)層圖像；以及加法器，基于從上述比特流取得的第2值，將上述基本層圖像與上述增強(qiáng)層圖像相加，由此生成上述對象圖像。據(jù)此，圖像解碼裝置從比特流取得由圖像編碼裝置決定的第2值，作為應(yīng)作為增強(qiáng)層圖像傳送的位量。然后，圖像解碼裝置能夠使用按每個圖像取得的第2值，使用增強(qiáng)層圖像提高解碼后的基本層圖像的畫質(zhì)。具體而言，也可以是，上述加法器對上述基本層圖像實(shí)施使該圖像的位深度增大上述第2值的向上變換處理，將實(shí)施了上述向上變換處理后的基本層圖像與上述增強(qiáng)層圖像，按每個彼此的圖像中包含的對應(yīng)的像素的像素值分別相加而合成，使合成得到的圖像的位深度增大作為上述第I值與上述第2值之差的第3值，由此生成上述對象圖像。據(jù)此，圖像解碼裝置具備的加法器能夠?qū)獯a后的基本層圖像及增強(qiáng)層圖像實(shí)施與在編碼時對各像素進(jìn)行的位操作對應(yīng)的位操作。此夕卜，也可以是,上述比特流是MVC (Multiview Video Coding)方式的比特流；還具備多路復(fù)用器，該多路復(fù)用器通過將解碼出的上述基本層圖像與解碼出的上述增強(qiáng)層圖像多路復(fù)用而生成圖像序列；上述第I解碼器、上述第2解碼器和上述多路復(fù)用器構(gòu)成為MVC解碼器；上述加法器從上述MVC方式的比特流取得上述第2值。據(jù)此，能夠利用已有的MVC編碼器及MVC解碼器、以及具有MVC構(gòu)造的比特流，實(shí)施圖像解碼裝置。另外，也可以是，上述加法器將包含在上述基本層圖像中的多個像素的各像素值的位上移上述第2值，將包含在上述合成得到的圖像中的多個像素的各像素值的位上移上述第3值，由此生成上述對象圖像。此外，也可以是，上述加法器對包含在上述基本層圖像中的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使該基本層圖像的位深度增大上述第2值，并且對包含在上述合成得到的圖像中的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使該合成得到的圖像的位深度增大 上述第3值，由此生成上述對象圖像。此外，也可以是，上述加法器在將上述基本層圖像與上述增強(qiáng)層圖像合成之前，從包含在上述增強(qiáng)層圖像中的多個像素的各像素值減去在編碼時加上的規(guī)定的值。另外，本發(fā)明不僅能夠作為這樣的圖像編碼裝置及圖像解碼裝置實(shí)現(xiàn)，還能夠作為以包含在圖像編碼裝置及圖像解碼裝置中的特征性的單元為步驟的圖像編碼方法及圖像解碼方法實(shí)現(xiàn)、或作為使計(jì)算機(jī)執(zhí)行這樣的特征性的步驟的程序?qū)崿F(xiàn)。并且，使這樣的程序當(dāng)然可以經(jīng)由⑶一 ROM (Compact Disc Read Only Memory)等的記錄介質(zhì)及因特網(wǎng)等的傳送介質(zhì)流通。進(jìn)而，本發(fā)明能夠作為實(shí)現(xiàn)這樣的圖像編碼裝置及圖像解碼裝置的功能的一部分或全部的半導(dǎo)體集成電路(LSI)實(shí)現(xiàn)、或作為包括這樣的圖像編碼裝置及圖像解碼裝置的影像系統(tǒng)實(shí)現(xiàn)。發(fā)明效果通過本發(fā)明，能夠提供進(jìn)一步減少利用在位深度中有限制的編碼器將位深度比編碼器的位深度大的圖像編碼時的數(shù)據(jù)量的圖像編碼裝置。


圖I是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的MVC編碼器的結(jié)構(gòu)圖。圖2是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的MVC解碼器的結(jié)構(gòu)圖。圖3是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置的結(jié)構(gòu)圖。圖4是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置的具體的結(jié)構(gòu)的圖。圖5是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像解碼裝置的結(jié)構(gòu)圖。圖6是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像解碼裝置的具體的結(jié)構(gòu)的圖。圖7是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置的處理的流程圖。圖8是表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像解碼裝置的處理的流程圖。圖9是表示有關(guān)本發(fā)明的實(shí)施方式I的圖像編碼裝置的功能模塊的圖。圖10是表示減法器的功能模塊的圖。圖11是表示有關(guān)本發(fā)明的實(shí)施方式I的圖像解碼裝置的功能模塊的圖。圖12是表示加法器的詳細(xì)的功能模塊的圖。
圖13是表示移位量決定部根據(jù)基本層圖像的特性決定b的值的結(jié)果的一例的圖。圖14是表示通過在比特流中包含b的值而從圖像編碼裝置向圖像解碼裝置傳送b的值的方法的一例的圖。圖15是表示有關(guān)本發(fā)明的實(shí)施方式2的圖像編碼裝置的功能模塊的圖。圖16是表示有關(guān)本發(fā)明的實(shí)施方式2的圖像解碼裝置的功能模塊的圖。圖17是實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容供給系統(tǒng)的整體結(jié)構(gòu)圖。圖18是數(shù)字廣播用系統(tǒng)的整體結(jié)構(gòu)圖。圖19是表示電視機(jī)的結(jié)構(gòu)例的模塊圖。圖20是表示對作為光盤的記錄介質(zhì)進(jìn)行信息的讀寫的信息再現(xiàn)/記錄部的結(jié)構(gòu)例的模塊圖。 圖21是表示作為光盤的記錄介質(zhì)的構(gòu)造例的圖。圖22A是表示便攜電話的一例的圖。圖22B是表示便攜電話的結(jié)構(gòu)例的模塊圖。圖23是表示多路復(fù)用數(shù)據(jù)的結(jié)構(gòu)的圖。圖24是示意地表示各流在多路復(fù)用數(shù)據(jù)中怎樣被多路復(fù)用的圖。圖25是更詳細(xì)地表示在PES包序列中視頻流怎樣被保存的圖。圖26是表示多路復(fù)用數(shù)據(jù)的TS包和源包的構(gòu)造的圖。圖27是表示PMT的數(shù)據(jù)結(jié)構(gòu)的圖。圖28是表示多路復(fù)用數(shù)據(jù)信息的內(nèi)部結(jié)構(gòu)的圖。圖29是表示流屬性信息的內(nèi)部結(jié)構(gòu)的圖。圖30是表示識別影像數(shù)據(jù)的步驟的圖。圖31是表示實(shí)現(xiàn)各實(shí)施方式的運(yùn)動圖像編碼方法及運(yùn)動圖像解碼方法的集成電路的結(jié)構(gòu)例的模塊圖。圖32是表示切換驅(qū)動頻率的結(jié)構(gòu)的圖。圖33是表示識別影像數(shù)據(jù)、切換驅(qū)動頻率的步驟的圖。圖34是表示將影像數(shù)據(jù)的規(guī)格與驅(qū)動頻率建立了對應(yīng)的查找表的一例的圖。圖35A是表示將信號處理部的模塊共用的結(jié)構(gòu)的一例的圖。圖35B是表示將信號處理部的模塊共用的結(jié)構(gòu)的另一例的圖。
具體實(shí)施例方式以下，使用附圖對本發(fā)明的實(shí)施方式詳細(xì)地說明。另外，以下說明的實(shí)施方式都是表示本發(fā)明的優(yōu)選的一具體例的。在以下的實(shí)施方式中表示的數(shù)值、形狀、構(gòu)成單元、構(gòu)成單元的配置位置及連接方式、步驟、步驟的順序等是一例，并不限定本發(fā)明。本發(fā)明僅由權(quán)利要求書限定。由此，關(guān)于以下的實(shí)施方式的構(gòu)成單元中的、在表示本發(fā)明的最上位概念的獨(dú)立權(quán)利要求中沒有記載的構(gòu)成單元，不是解決本發(fā)明的問題而不可缺少，但作為構(gòu)成更優(yōu)選的形態(tài)的單元進(jìn)行說明。首先，為了使本發(fā)明的意義更加明確，參照圖I 圖8，對作為本發(fā)明的關(guān)聯(lián)技術(shù)的國際公開第2011/037933號的專利文獻(xiàn)中示出的圖像編碼裝置及圖像解碼裝置具體地說明。
圖I是表示典型的MVC編碼器的結(jié)構(gòu)圖。MVC編碼器是用來基于多視點(diǎn)影像編碼方法將多視點(diǎn)影像編碼的編碼器。在MVC (多視視頻編碼Multiview Video Coding)技術(shù)中，將I個視(view)作為基本視進(jìn)行編碼(參照非專利文獻(xiàn)I)。這里，基本視也稱作第I視。并且，將其他視作為非基本視編碼。非基本視也稱作依存視或第2視。被編碼的基本視的比特流能夠獨(dú)立地解碼。例如，基本視用于表示3D影像的2D版本。另一方面，被編碼的非基本視的比特流不能獨(dú)立地解碼。非基本視需要與基本視一起解碼。非基本視用于將基本視強(qiáng)化。例如，通過將與左眼的影像對應(yīng)的基本視和與右眼的影像對應(yīng)的非基本視組合，能夠進(jìn)行立體的3D影像的顯示。圖I所示的MVC編碼器101具備第I編碼器111、第2編碼器112及多路復(fù)用器
113。第I編碼器111接受作為與基本視對應(yīng)的圖像的基本層圖像D11。并且，第I編碼器111通過將基本層圖像Dll編碼，生成作為編碼后的基本層圖像Dll的基本視比特流D14。此外，第I編碼器111通過將編碼后的基本層圖像Dll解碼，生成重構(gòu)圖像D13。重構(gòu)圖像D13用于視間預(yù)測。第2編碼器112接受作為與非基本視對應(yīng)的圖像的非基本層圖像D12。并且，第2編碼器112通過將非基本層圖像D12編碼，生成作為被編碼的非基本層圖像D12的非基本視比特流D15。此時，第2編碼器112也可以參照重構(gòu)圖像D13，利用視間預(yù)測將非基本層圖像D12編碼。由此，編碼效率提高。多路復(fù)用器113將基本視比特流D14和非基本視比特流D15多路復(fù)用，生成MVC比特流D16。典型地講，多路復(fù)用器113以使表示基本視的部分與表示非基本視的部分交替的方式生成MVC比特流D16。這樣，MVC編碼器101接受基本層圖像Dll和非基本層圖像D12，將它們編碼，生成MVC比特流D16。例如，MVC編碼器101通過將3D圖像中的作為左眼圖像的基本層圖像Dll和作為右眼圖像的非基本層圖像D12編碼，能夠?qū)⒈痪幋a的3D圖像作為MVC比特流D16輸出。另外，圖I所示的MVC編碼器101是一例。MVC編碼器101也可以具備3個以上的編碼器、將3個以上的視編碼。此外，也可以I個編碼器將多個視編碼。此外，MVC編碼器101也可以將基本視比特流D14和非基本視比特流D15不進(jìn)行多路復(fù)用而分別各自輸出。在此情況下，MVC編碼器101也可以不具備多路復(fù)用器113。圖2是表示典型的MVC解碼器的結(jié)構(gòu)圖。MVC解碼器是用來將基于多視點(diǎn)影像編碼方法編碼而得到的多視點(diǎn)影像解碼的解碼器。圖2所示的MVC解碼器201具備第I解碼器211、第2解碼器212及多路復(fù)用器213。第I解碼器211接受基本視比特流D21。第I解碼器211可以從圖I所示的MVC比特流D16讀取基本視的部分作為基本視比特流D21。并且，第I解碼器211從基本視比特流D21解碼出基本層圖像D23。即，基本層圖像D23為與重構(gòu)圖像D13相同的圖像。第2解碼器212接受非基本視比特流D22。第2解碼器212可以從圖I所示的MVC比特流D16讀取非基本視的部分作為非基本視比特流D22。并且，第2解碼器212從非基本視比特流D22解碼出非基本層圖像D24。此時，第2解碼器212也可以參照基本層圖像D23，利用視間預(yù)測解碼出非基本層圖像D24。多路復(fù)用器213將基本層圖像D23和非基本層圖像D24進(jìn)行多路復(fù)用，生成圖像序列D25。典型地，多路復(fù)用器213以使表示基本視的部分與表示非基本視的部分交替的方式生成圖像序列D25。這樣，MVC解碼器201接受基本視比特流D21和非基本視比特流D22，從它們解碼出基本層圖像D23和非基本層圖像D24，生成圖像序列D25。例如，MVC解碼器201從對應(yīng)于左眼的基本視比特流D21、及對應(yīng)于右眼的非基本視比特流D22，解碼出作為左眼圖像的基本層圖像D23、及作為右眼圖像的非基本層圖像D24。并且，MVC解碼器201能夠?qū)⒔M合了它們的圖像序列D25作為3D圖像輸出。另外，圖2所示的MVC解碼器201與圖I所示的MVC編碼器101同樣是一例。MVC解碼器201也可以具備3個以上的解碼器，解碼3個以上的視。此外，也可以是I個解碼器 解碼多個視。此外，MVC解碼器201也可以不將基本層圖像D23和非基本層圖像D24進(jìn)行多路復(fù)用，而分別各自輸出。在此情況下，MVC解碼器201也可以不具備多路復(fù)用器213。此外，MVC解碼器201也可以具備將圖I所示的MVC比特流D16分離為基本視的部分和非基本視的部分的多路分尚器。圖I所示的MVC編碼器101及圖2所示的MVC解碼器201是典型的MVC編碼器及MVC解碼器。因此，MVC編碼器101及MVC解碼器201不能將超過8位的位深度的圖像編碼或解碼。所以，有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置及圖像解碼裝置具備追加的構(gòu)成單
J Li o圖3表示有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置的功能模塊。圖3所示的圖像編碼裝置具備圖I所示的MVC編碼器101、向下變換器102及減法器103。向下變換器102通過將作為編碼的對象圖像的10位圖像D31向下變換，生成作為8位圖像的基本層圖像D32。MVC編碼器101將基本層圖像D32作為基本層圖像編碼。并且，MVC編碼器101通過將被編碼的基本層圖像D32解碼，生成作為8位圖像的重構(gòu)圖像D33。減法器103根據(jù)10位圖像D31的特性與重構(gòu)圖像D33的特性的差異，生成用來將基本層圖像D32擴(kuò)展為10位圖像的增強(qiáng)層圖像D34。這里使用的各圖像的特性例如是表示像素值的大小的信息。MVC編碼器101進(jìn)一步將增強(qiáng)層圖像D34作為非基本層圖像編碼。并且，MVC編碼器101將被編碼的基本層圖像D32及被編碼的增強(qiáng)層圖像D34作為MVC比特流D35輸出。圖4是更具體地表示圖3所示的圖像編碼裝置的圖。以下，使用圖4具體地說明有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置。向下變換器102通過將10位圖像D31向下變換，生成作為8位圖像的基本層圖像D32。更具體地講，向下變換器102通過式I所示的運(yùn)算，將10位圖像D31向下變換。B (x, y) = (S (x, y)+2) >>2 ;(式 I)這里，(x，y)表示像素位置。B (x，y)表示基本層圖像D32的像素值。S (x，y)表示10位圖像D31的像素值。符號“〉〉”表示右移位運(yùn)算。S卩，首先，向下變換器102對10位圖像D31的各像素值加2。接著，向下變換器102將各像素值向右移位2位。由此，各像素值的低位2位被四舍五入，生成8位的基本層圖像D32。MVC編碼器101的第I編碼器111通過將基本層圖像D32作為基本層圖像編碼，生成基本層比特流D36。并且，第I編碼器111通過將被編碼的基本層圖像D32解碼，生成重構(gòu)圖像D33。減法器103根據(jù)10位圖像D31與重構(gòu)圖像D33之差，生成增強(qiáng)層圖像D34。更具體地講，減法器103通過式2所示的運(yùn)算，求出10位圖像D31與重構(gòu)圖像D33之差。E (x, y) =S (x, y) — (Br (x, y)〈〈2)+128 ;(式 2)這里，(x，y)表示像素位置。E (x，y)表示增強(qiáng)層圖像D34的像素值。S (x，y)表示10位圖像D31的像素值。Br (x，y)表示重構(gòu)圖像D33的像素值。符號“〈〈”表示左移位運(yùn)算。
即，首先，減法器103將重構(gòu)圖像D33的各像素值向左移位2位。由此，將重構(gòu)圖像D33的位深度變換為10位。接著，減法器103從10位圖像D31的各像素值減去向左移位后的各像素值。并且，減法器103對減法的結(jié)果加上128。這里，減法器103對減法的結(jié)果加上128，但并不限于128，也可以加上將由增強(qiáng)層圖像D34的位深度表現(xiàn)的最大像素值的一半舍入為整數(shù)的值。此外，減法器103也可以對減法的結(jié)果加上用來使增強(qiáng)層圖像D34的各像素值成為正的值的其他值。進(jìn)而，減法器103也可以將E (x，y)裁剪為8位圖像的范圍
。S卩，減法器103也可以將比0小的像素值變換為0，將比255大的像素值變換為255。例如，有時在重構(gòu)圖像D33中包含量化畸變，但基于8位圖像的像素值的范圍
，可以設(shè)想量化畸變再大也在[一 32，31]的范圍內(nèi)。并且，可以設(shè)想該量化畸變在通過左移位運(yùn)算成為4倍的情況下，也在[一 128，127]的范圍內(nèi)，由S (x，y) —(Br (x,y) 2)表示的值的范圍在[一 128，127]的范圍內(nèi)。因而，減法器103即使在對上述差加上128后，將E (x，y)裁剪為8位圖像的范圍
，其影響也限定于異常值。因此，減法器103通過將E (x，y)裁剪為8位圖像的范圍
，能夠僅將致命性的錯誤除去或隱藏。MVC編碼器101的第2編碼器112將由減法器103生成的增強(qiáng)層圖像D34作為非基本層圖像編碼。由此，第2編碼器112生成增強(qiáng)層比特流D37。此時，第2編碼器112也可以參照重構(gòu)圖像D33，利用視間預(yù)測將增強(qiáng)層圖像D34編碼。另外，在重構(gòu)圖像D33與增強(qiáng)層圖像D34之間幾乎沒有相關(guān)關(guān)系的可能性高。但是，視間預(yù)測的利用不受限制，第2編碼器112也可以利用視間預(yù)測將增強(qiáng)層圖像D34編碼。并且，MVC編碼器101的多路復(fù)用器113將基本層比特流036及增強(qiáng)層比特流037多路復(fù)用而生成MVC比特流D35。圖5是表示具有圖2所示的MVC解碼器201的圖像解碼裝置的結(jié)構(gòu)圖。圖5所示的圖像解碼裝置具備MVC解碼器201及加法器202。MVC解碼器201從基本層比特流D51解碼出基本層圖像。此外，MVC解碼器201從增強(qiáng)層比特流D52解碼出增強(qiáng)層圖像。并且，MVC解碼器201生成圖像序列D53。加法器202通過將包含在圖像序列D53中的基本層圖像D54、與包含在圖像序列D53中的增強(qiáng)層圖像D55合成，生成作為解碼的對象圖像的10位圖像D56。圖6是更具體地表示圖5所示的圖像解碼裝置的圖。以下，使用圖6具體地說明有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像解碼裝置。MVC解碼器201的第I解碼器211從基本層比特流D51解碼出基本層圖像D54。MVC解碼器201的第2解碼器212從增強(qiáng)層比特流D52解碼出增強(qiáng)層圖像D55。此時，第2解碼器212也可以參照基本層圖像D54，利用視間預(yù)測解碼出增強(qiáng)層圖像D55。MVC解碼器201的多路復(fù)用器213根據(jù)基本層圖像D54及增強(qiáng)層圖像D55生成圖像序列D53。加法器202通過將包含在圖像序列D53中的基本層圖像D54、與包含在圖像序列D53中的增強(qiáng)層圖像D55合成，生成10位圖像D56。更具體地講，加法器202通過式3所示 的運(yùn)算，將基本層圖像D54與增強(qiáng)層圖像D55合成。V (X, y) = (Br (x, y) 2) + (E (x, y) — 128)；(式 3)這里，(x，y)表示像素位置。V (x，y)表示10位圖像D56的像素值。Br (x，y)表示基本層圖像D54的像素值。E (x，y)表示增強(qiáng)層圖像D55的像素值。符號“〈〈”表示左移位運(yùn)算。即，首先，加法器202將基本層圖像D54的各像素值向左移位2位。由此，將基本層圖像D54的位深度變換為10位。接著，加法器202從增強(qiáng)層圖像D55的各像素值減去128。接著，加法器202對變換為10位的基本層圖像D54的各像素值加上減去了 128后的增強(qiáng)層圖像D55的各像素值。這里，加法器202從各像素值減去128，但并不限于128，也可以減去將由增強(qiáng)層圖像D55的位深度表現(xiàn)的最大像素值的一半舍入為整數(shù)的值。此外，加法器202也可以從各像素值減去在編碼時加上的值。進(jìn)而,加法器202將V (x,y)裁剪為作為10位圖像容許的范圍。例如,加法器202通過式4及式5所示的運(yùn)算將V (x，y)裁剪。V (X，y) = (V (x, y) >maxV10) maxV10 V (x，y);(式 4)V (x, y) = (V (x, y) <minV10) minV10 V (x，y);(式 5)這里，V=A B C ;意味著在滿足條件A的情況下使V的值為B，在其以外的情況下使V的值為C。此外，maxVIO及minVIO分別是作為10位圖像容許的最大值及最小值。典型地，maxVIO是1023，minVIO是O。但是，對于maxVIO及minVIO也可以設(shè)定為其他的值。加法器202通過執(zhí)行上述處理而生成10位圖像D56。圖7是表示圖3所示的圖像編碼裝置的處理的流程圖。首先，向下變換器102通過將10位圖像D31向下變換，生成作為8位圖像的基本層圖像 D32 (SlOl)0接著，MVC編碼器101將基本層圖像D32作為基本層圖像編碼(S102)。并且，MVC編碼器101通過將被編碼的基本層圖像D32解碼而生成重構(gòu)圖像D33。接著，減法器103根據(jù)從10位圖像D31減去重構(gòu)圖像D33而得到的差，生成增強(qiáng)層圖像 D34 (S103)。接著，MVC編碼器101將增強(qiáng)層圖像D34作為非基本層圖像編碼(S104)。并且，MVC編碼器101將被編碼的基本層圖像D32及被編碼的增強(qiáng)層圖像D34作為MVC比特流D35輸出。圖8是表示圖5所示的圖像解碼裝置的處理的流程圖。首先，MVC解碼器201從基本層比特流D51解碼出基本層圖像(S201)。接著，MVC解碼器201從增強(qiáng)層比特流D52解碼出增強(qiáng)層圖像(S202)。并且，MVC解碼器201生成圖像序列D53。接著，加法器202通過將包含在圖像序列D53中的基本層圖像D54與包含在圖像序列D53中的增強(qiáng)層圖像D55相加，生成10位圖像D56 (S203)。如上所述，有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像編碼裝置通過將10位圖像向下變換而生成8位圖像。并且，圖像編碼裝置將8位圖像作為基本層圖像編碼。此外，圖像編碼裝置將10位圖像與8位圖像的差值作為8位的非基本層圖像編碼。由此，10位圖像被分割為作為8位圖像的基本層圖像和作為8位圖像的非基本層圖像而被編碼。 此外，有關(guān)本發(fā)明的關(guān)聯(lián)技術(shù)的圖像解碼裝置解碼出作為8位圖像的基本層圖像和作為8位圖像的非基本層圖像。并且，圖像解碼裝置通過將被解碼的基本層圖像與非基本層圖像合成，生成10位圖像。另外，在本發(fā)明的關(guān)聯(lián)技術(shù)中，作為例子表示了 8位圖像及10位圖像，但位深度并不限于8位或10位。即使位深度是與8位及10位不同的組合，圖像編碼裝置及圖像解碼裝置也能夠?qū)⑽簧疃缺萂VC編碼器101及MVC解碼器201能夠編碼或解碼的位深度大的圖像編碼或解碼。但是，例如將10位圖像分割為作為8位圖像的基本層圖像和作為8位圖像的非基本層圖像而編碼的結(jié)果，根據(jù)本發(fā)明的關(guān)聯(lián)技術(shù)，有應(yīng)傳送的數(shù)據(jù)量增加的問題。本發(fā)明解決該問題。以下，對有關(guān)本發(fā)明的圖像編碼裝置及圖像解碼裝置詳細(xì)地說明。(實(shí)施方式I)圖9表示有關(guān)本發(fā)明的實(shí)施方式I的圖像編碼裝置100的功能模塊。如圖9所示，有關(guān)本實(shí)施方式的圖像編碼裝置100具備MVC編碼器101、向下變換器102A和減法器103A。另外，關(guān)于與圖4相同的結(jié)構(gòu)省略詳細(xì)的說明。圖像編碼裝置100是將位深度比規(guī)定的大小大的對象圖像進(jìn)行編碼的圖像編碼裝置，該位深度表示每一個像素的信息容量。以下，假設(shè)輸入到圖像編碼裝置100中的對象圖像是12位圖像而進(jìn)行說明。即，圖9所示的D31A是12位圖像。此外，假設(shè)規(guī)定的位深度為8位。向下變換器102A通過對對象圖像實(shí)施向下變換處理而生成基本層圖像，該向下變換處理使位深度減小第I值，以使該對象圖像的位深度成為規(guī)定的大小。具體而言，向下變換器102A將作為編碼對象的圖像的12位圖像D31A的位深度向下變換4位量，由此生成作為8位圖像的基本層圖像D32A。MVC編碼器101通過將基本層圖像D32A編碼、并將編碼后的基本層圖像解碼而生成重構(gòu)圖像D33A。MVC編碼器101還將增強(qiáng)層圖像D34A編碼。進(jìn)而，MVC編碼器還作為將被編碼的基本層圖像、被編碼的增強(qiáng)層圖像、和其他附加信息進(jìn)行輸出的輸出部發(fā)揮功能。更詳細(xì)地講，再次參照圖4，MVC編碼器101具有將基本層圖像D32A編碼及解碼的第I編碼器、將增強(qiáng)層圖像D34A編碼的第2編碼器、和多路復(fù)用器。多路復(fù)用器通過將編碼基本層圖像D32A而得到的基本層比特流、與編碼增強(qiáng)層圖像D34A而得到的增強(qiáng)層比特流多路復(fù)用，生成作為MVC (Multiview Video Coding)方式的比特流的MVC比特流D35A。多路復(fù)用器輸出所生成的MVC比特流D35A。此外，第I編碼器、第2編碼器、多路復(fù)用器構(gòu)成為MVC編碼器。減法器103A對重構(gòu)圖像實(shí)施移位量調(diào)整處理，該移位量調(diào)整處理使位深度增大，以使該對象圖像的位深度增大第2值(也稱作b)。然后，基于被實(shí)施移位量調(diào)整處理后的重 構(gòu)圖像和對象圖像，生成增強(qiáng)層圖像，該增強(qiáng)層圖像是用來提高基本層圖像的畫質(zhì)的圖像，并且是具有與基本層圖像相同的位深度的圖像。另外，可以考慮將第2值例如設(shè)為0以上且小于第I值的值。接著，參照圖10，更詳細(xì)地說明減法器103A進(jìn)行的處理。圖10表示減法器103A的功能模塊。減法器103A從使對象圖像的位深度減小作為第I值與第2值之差的第3值后的圖像所包含的多個像素的各像素值中減去被實(shí)施移位量調(diào)整處理后的重構(gòu)圖像所包含的對應(yīng)的像素的像素值，根據(jù)表示減去的結(jié)果的位信息中的從低位起包含在規(guī)定的大小的范圍中的位信息，生成增強(qiáng)層圖像。具體而言，如圖10所示，減法器103A具有移位量決定部151、將位上移規(guī)定的值b位的位移位器152、將位下移4 - b位的位移位器153、在兩個輸入間進(jìn)行減法處理的運(yùn)算器154、和進(jìn)行事先設(shè)定的值的加法處理的運(yùn)算器155。另外，作為第2值的b是滿足第I值一 b=第3值的關(guān)系的常數(shù)。圖像編碼裝置100基于對象圖像、基本層圖像或重構(gòu)圖像，例如按每個該圖像決定b的大小。另外，如上所述，由于減法器103A是生成增強(qiáng)層圖像的構(gòu)成要素，所以將減法器還稱作生成部。位移位器153將輸入到減法器103A中的12位圖像D31A的位深度下移作為第3值的4 一 b位。具體而言，將包含在12位圖像D31A中的多個像素的各像素值向右移位4 -b位。 此外，位移位器152將輸入到減法器103A中的重構(gòu)圖像D33A的位深度上移b(即，第I值一第3值)位。具體而言，將包含在重構(gòu)圖像D33A中的多個像素的各像素值向左移位b位。然后，運(yùn)算器154按每個對應(yīng)的像素，從位移位器153的輸出減去位移位器152的輸出。這里，也可以是，運(yùn)算器155對從使位深度減小第3值而得到的對象圖像所包含的多個像素的各像素值中減去被實(shí)施移位量調(diào)整處理后的重構(gòu)圖像所包含的對應(yīng)的像素的像素值而得到的值，加上用來使增強(qiáng)層圖像所包含的多個像素的各像素值成為正的值的規(guī)定的值。在圖10中，運(yùn)算器155對運(yùn)算器154的輸出按每個像素加上128。該意義如在本發(fā)明的關(guān)聯(lián)技術(shù)中說明。最后，減法器103A從運(yùn)算器155的輸出中按每個像素提取低位8位，生成8位的增強(qiáng)層圖像D34A。這是因?yàn)?，在本?shí)施方式中，將規(guī)定的位深度設(shè)為8位。移位量決定部151基于對象圖像、基本層圖像或重構(gòu)圖像所具有的特性決定第2值。此外，與由移位量決定部151決定的第2值(S卩，b的值)對應(yīng)的值例如通過MVC編碼器101所具有的多路復(fù)用器被附加到MVC方式的比特流中而輸出。
另外，所謂與第2值對應(yīng)的值，除了第2值以外，還包括通過在圖像解碼裝置200中實(shí)施與在圖像編碼裝置100中對第2值實(shí)施的運(yùn)算的逆運(yùn)算而能夠可逆地計(jì)算第2值的值。一般而言，在將位深度向下變換(例如，將位舍去)的情況下，顯示該圖像時的偽像(Artifact)在圖像內(nèi)的比較不復(fù)雜的(S卩，空間頻率成分中的低頻成分在視覺上更占主導(dǎo)地位的)區(qū)域中更顯著。在這些區(qū)域中，如條紋(banding)那樣的眼睛可看到的偽像在向下變換后的圖像中變得醒目。另一方面，在高密度且復(fù)雜的(即，空間頻率成分中的高頻成分在視覺上更站主導(dǎo)地位)區(qū)域中，由位深度的向下變換帶來的偽像不易變得醒目。移位量決定部151利用該特性決定b的值，以能夠解決偽像的發(fā)生和編碼的數(shù)據(jù)大小的權(quán)衡(tradeoff)。具體而言，移位量決定部151對于亮度變化較復(fù)雜的圖像，將b的 值決定得小。此外，對于亮度變化較單純的圖像，將b的值決定得大。S卩，移位量決定部151將作為第2值的b決定為越是在基本層圖像的空間頻率成分中的低頻成分在視覺上占主導(dǎo)地位的情況則越大。結(jié)果，圖像編碼裝置100A能夠在視覺上不醒目的范圍內(nèi)減少包含在12位圖像D31A中的信息量中的、應(yīng)作為增強(qiáng)層圖像D34A傳送的信息量。例如，參照圖10，在設(shè)為b=4 (即，使第3值為0)的情況下，增強(qiáng)層圖像D34A包括12位圖像D31A所包含的各像素的低位4位量的信息。另一方面，在設(shè)為b=0(S卩，使第3值為4)的情況下，增強(qiáng)層圖像D34A不包括12位圖像D31A所包含的信息。另外，正確地講，增強(qiáng)層圖像D34A除了包含在12位圖像D31A中的圖像信息的一部分以外，還包含表示作為編碼前的圖像與編碼后的圖像之差的壓縮畸變的信息。因而，在b=0的情況下，生成增強(qiáng)層圖像D34A這作為向后述的圖像解碼裝置傳送表示壓縮畸變的信息的手段也是有用的。另外，在向下變換器102A及減法器103A通過調(diào)整圖像的位深度分別生成基本層圖像D32A及增強(qiáng)層圖像D34A的方法中，可以使用任意的方法。例如，如在圖10的說明中敘述，向下變換器102A也可以通過將包含在對象圖像中的多個像素的各像素值的位下移第I值的向下變換處理來生成基本層圖像。同樣，減法器103A也可以將包含在對象圖像中的多個像素的各像素值的位下移第3值、將包含在重構(gòu)圖像中的多個像素的各像素值的位上移第2值。在此情況下，減法器103A也可以根據(jù)將位下移后的對象圖像所包含的多個像素的各像素值與對應(yīng)于它的、將位上移后的重構(gòu)圖像所包含的多個像素的各像素值之差，來生成增強(qiáng)層圖像。或者，向下變換器102A也可以通過將包含在該對象圖像中的多個像素的各像素值除以規(guī)定的除數(shù)以使對象圖像的位深度減小第I值的向下變換處理，來生成基本層圖像。同樣，減法器103A也可以通過將包含在該對象圖像中的多個像素的各像素值除以規(guī)定的除數(shù)，以使對象圖像的位深度減小第3值，并且對包含在該重構(gòu)圖像中的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使重構(gòu)圖像的位深度增大第2值。在此情況下，減法器103A也可以根據(jù)除法后的對象圖像所包含的多個像素的各像素值與對應(yīng)于它的、乘法后的重構(gòu)圖像所包含的多個像素的各像素值之差，來生成增強(qiáng)層圖像。以上，對有關(guān)本發(fā)明的實(shí)施方式I的圖像編碼裝置100進(jìn)行了說明。接著，參照圖11及圖12，對有關(guān)本發(fā)明的實(shí)施方式I的圖像解碼裝置200進(jìn)行說明。圖11表示有關(guān)本發(fā)明的實(shí)施方式I的圖像解碼裝置200的功能模塊。圖像解碼裝置200是從比特流解碼出表示每I個像素的信息容量的位深度比規(guī)定的大小大第I值的對象圖像的圖像解碼裝置。如圖11所示，圖像解碼裝置200具備MVC解碼器201和加法器202A。另外，關(guān)于與圖6相同的結(jié)構(gòu)省略詳細(xì)的說明。
MVC解碼器201從基本層比特流D51A解碼出位深度是規(guī)定的大小的基本層圖像D54A。此外，MVC解碼器201從增強(qiáng)層比特流D52A解碼出位深度為規(guī)定的大小的增強(qiáng)層圖像D55A。另外，基本層比特流D51A及增強(qiáng)層比特流D52A例如是從MVC比特流D35A分別分離而得到的。此外，MVC解碼器201也可以將基本層圖像D54A和增強(qiáng)層圖像D55A作為圖像序列D53A輸出。更具體地講，MVC解碼器201具有從基本層比特流D51解碼出基本層圖像D54的第I解碼器、從增強(qiáng)層比特流D52解碼出增強(qiáng)層圖像D55的第2解碼器、和多路復(fù)用器。這里，多路復(fù)用器通過將基本層圖像D54和增強(qiáng)層圖像D55多路復(fù)用而生成圖像序列D53。此夕卜，第I解碼器、第2解碼器和多路復(fù)用器構(gòu)成為MVC解碼器。加法器202A從比特流取得第2值，基于所取得的第2值將基本層圖像D54A與增強(qiáng)層圖像D55A相加，由此生成對象圖像D56A。例如，在加法器202A取得了 MVC方式的比特流的情況下，加法器202A取得被附加在該MVC方式的比特流中的第2值。然后，基于第2值將基本層圖像D54A與增強(qiáng)層圖像D55A相加。圖12表示加法器202A的詳細(xì)的功能模塊。加法器202A對基本層圖像實(shí)施使該圖像的位深度增大b的向上變換處理。換言之，加法器202A對基本層圖像實(shí)施使該圖像的位深度增大第2值的向上變換處理。然后，將被實(shí)施向上變換處理后的基本層圖像與增強(qiáng)層圖像，按每個包含在相互的圖像中的對應(yīng)的像素的像素值分別相加而合成。進(jìn)而，通過使合成得到的圖像的位深度增大第3值而生成對象圖像。具體而言，如圖12所示，加法器202A具有移位量取得部251、將位上移規(guī)定的值b位的位移位器252、進(jìn)行事先設(shè)定的值的減法處理的運(yùn)算器253、在兩輸入間進(jìn)行加法處理的加法器254、和將位上移4 一 b位的位移位器255。位移位器252將輸入到加法器202A中的8位的基本層圖像D54A的位深度上移b位。具體而言，將包含在基本層圖像D54A中的多個像素的各像素值向左移位b位。這對應(yīng)于上述向上變換處理。然后，加法器254將位移位器252的輸出與運(yùn)算器253的輸出按每個對應(yīng)的像素相加。另外，加法器202A具有的運(yùn)算器253在加法器254將基本層圖像與增強(qiáng)層圖像合成之前，從包含在增強(qiáng)層圖像中的多個像素的各像素值減去在編碼時加上的值(例如128)。最后，位移位器255將由加法器254相加后的圖像的位深度上移4 一 b (S卩，第3值)。具體而言，將包含在合成后的圖像中的多個像素的各像素值向左移位4 一 b位。結(jié)果，生成12位的對象圖像D56A。
移位量取得部251取得例如被附加在增強(qiáng)層比特流中的、與第2值對應(yīng)的值。移位量取得部251能夠根據(jù)所取得的與第2值對應(yīng)的值取得第3值。例如，在作為與第2值對應(yīng)的值而取得了第2值的情況下，移位量取得部251能夠取得第I值一第2值而作為第3值。此外，在加法器202A具有的位移位器252及位移位器255調(diào)整圖像的位深度的方法中，可以使用任意的方法。例如，如在圖12的說明中敘述，加法器202A通過將包含在基本層圖像中的多個像素的各像素值的位上移作為第2值的b，對該基本層圖像實(shí)施向上變換處理。此外，將包含在由加法器254合成而得到的圖像中的多個像素的各像素值的位上移第3值?；蛘撸臃ㄆ?02A也可以通過對包含在該基本層圖像中的多個像素的各像素值 乘以規(guī)定的乘數(shù)，對該基本層圖像實(shí)施向上變換處理，以使基本層圖像的位深度增大第2值。此外，也可以對由加法器254合成而得到的圖像所包含的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使通過該合成而得到圖像的位深度增大第3值。另外，在上述說明中，設(shè)想從8位的基本層比特流和8位的增強(qiáng)層比特流生成12位的對象圖像D56A而進(jìn)行了說明。但是，各圖像的位深度是例示，本發(fā)明并不限定于此。接著，參照圖13，對圖像編碼裝置100具備的移位量決定部151的b值的決定方法的一例進(jìn)行說明。圖13表示移位量決定部151根據(jù)基本層圖像的特性決定作為第2值的b的結(jié)果的一例。在圖13中，按每個場景決定了 b的值。另外，所謂場景(scene),是對圖像編碼裝置100作為12位的源影像輸入的連續(xù)的多個圖像。這里，對場景I、場景2、場景3、及場景4分別設(shè)定了 b=0、b=4、b=2、及b=0。另外,如后述,也可以按每個包含在I個場景中的更細(xì)小的單位來設(shè)定不同的b的值。如圖13所示，在場景I及場景4中，在基本層圖像中看不到將位從12位舍入至8位帶來的偽像。因而，移位量決定部151判斷為對場景I及場景4不需要提高基本層圖像的精度，將b的值決定為O。此外，在場景3中，在基本層圖像中可看到一些偽像。因而，移位量決定部151判斷為在場景3中需要使用增強(qiáng)層圖像提高基本層圖像的精度，將b的值決定為2。此外，在場景2中，在基本層圖像中可看到嚴(yán)重的偽像。因而，移位量決定部151在場景3中判斷為需要使用增強(qiáng)層圖像最大限度提高基本層圖像的精度，將b的值決定為4。這樣由移位量決定部151決定的b的值在圖像編碼裝置100中被用于生成增強(qiáng)層圖像。此外，為了解碼而傳送至圖像解碼裝置200。圖14表示通過在比特流中包含b的值，從圖像編碼裝置100向圖像解碼裝置200傳送b的值的方法的一例。這里，使用用來分發(fā)面向高位深度的視頻應(yīng)用的12位影像的MVC構(gòu)造(例如,立體高規(guī)格(stereo high profile)文件)。如圖14所示，基本層比特流(以下，也稱作BL流)被作為MVC構(gòu)造的基本視的比特流來傳送。此外，增強(qiáng)層比特流(以下，也稱作EL流)被作為MVC構(gòu)造的非基本視的比特流來傳送。進(jìn)而，EL流分割為多個單元(在圖14中是單元I 單元U)。這里，向單元的分割方法可以使用任意的方法。例如，也可以以GOP (Group Of Pictures)為單位將EL流分割為單元。這里，圖像編碼裝置100通過對各單元的開頭附加對于包含在該單元中的多個圖像的比特流的位移位數(shù)(即，b的值)作為元數(shù)據(jù)，從而向圖像解碼裝置200傳送b的值。例如，在圖14中，對單元2的開頭(例如圖片頭)附加了包括與單元2所包含的9個圖像的比特流(ELpicO流 ELpic8流)分別對應(yīng)的b的值(b0 b8)的元數(shù)據(jù)。另外，在元數(shù)據(jù)內(nèi)，b的值也可以相互不同。此外，包含在元數(shù)據(jù)中的b的排列順序可以如圖14所示與包含在對應(yīng)的EL單元中的圖像的比特流的排列順序一致，但并不限定于此。例如，即使是應(yīng)用特有的順序，只要是示出b的值與圖像的比特流的對應(yīng)關(guān)系的方式，則b也可以以任意的排列順序附加。
更具體地講，也可以是，圖像編碼裝置100具備的MVC編碼器101從移位量決定部151取得b的值，由MVC編碼器101具有的多路復(fù)用器在增強(qiáng)層比特流中包含與b的值對應(yīng)的值。在此情況下，可以考慮圖像解碼裝置200具有的移位量取得部251從增強(qiáng)層比特流取得b的值，在加法器202A中用于生成對象圖像的處理。如以上所述，根據(jù)有關(guān)本實(shí)施方式的圖像編碼裝置100及圖像解碼裝置200，能夠使用根據(jù)視頻序列中的圖像的信號特性而改變的位移位數(shù)將增強(qiáng)層比特流高效率地發(fā)送。據(jù)此，能夠使用能夠大量獲得的8位視頻處理器進(jìn)一步減少在分發(fā)高位深度視頻時應(yīng)傳送的數(shù)據(jù)量。(實(shí)施方式2)有關(guān)實(shí)施方式I的圖像編碼裝置100及圖像解碼裝置200分別具備MVC編碼器及MVC解碼器。但是，本發(fā)明對于MVC方式的比特流以外的比特流也能夠采用。圖15表示有關(guān)本發(fā)明的實(shí)施方式2的圖像編碼裝置100A的功能模塊。另外，對于與圖9所示的圖像編碼裝置100相同的構(gòu)成單元省略詳細(xì)的說明。如圖15所示，圖像編碼裝置100A代替MVC編碼器101而具備第I編碼器111A、第2編碼器112A、和輸出部115。這里，第I編碼器IllA將基本層圖像D32A編碼及解碼。此夕卜，第2編碼器112A將增強(qiáng)層圖像D34A編碼。輸出部115輸出作為被編碼的基本層圖像D32A的基本層比特流、和作為被編碼的強(qiáng)層圖像D34A的增強(qiáng)層比特流。此時，輸出部115也可以將基本層比特流和增強(qiáng)層比特流多路復(fù)用，作為MVC比特流D35A輸出。進(jìn)而，輸出部115也可以將與移位量決定部151決定的b的值對應(yīng)的值包含在基本層比特流或增強(qiáng)層比特流中而輸出。另外，將有關(guān)本實(shí)施方式的輸出部115作為下述多路復(fù)用器構(gòu)成的就是有關(guān)實(shí)施方式I的MVC編碼器101具有的多路復(fù)用器，上述多路復(fù)用器將編碼基本層圖像而得到的基本層比特流和編碼增強(qiáng)層圖像而得到的增強(qiáng)層比特流作為MVC (Multiview VideoCoding)方式的比特流多路復(fù)用并輸出。另一方面，圖16表示有關(guān)本發(fā)明的實(shí)施方式2的圖像解碼裝置200A的功能模塊。另外，關(guān)于與圖11所示的圖像解碼裝置200相同的構(gòu)成單元省略詳細(xì)的說明。此外，圖16所示的基本層比特流D51A及增強(qiáng)層比特流D52A是事先從多路復(fù)用的MVC比特流D35A分離出的比特流。
如圖16所示，圖像解碼裝置200A代替MVC解碼器201而具備第I解碼器21IA和第2解碼器212A。這里，第I解碼器211A從基本層比特流D51A解碼出基本層圖像D54A。此外，第2解碼器212A從增強(qiáng)層比特流D52解碼出增強(qiáng)層圖像D55。這樣，通過不具備MVC編碼器101的圖像編碼裝置100A及不具備MVC解碼器201的圖像解碼裝置200A也能夠?qū)嵤┍景l(fā)明。以上，對有關(guān)本發(fā)明的實(shí)施方式I及2的圖像編碼裝置進(jìn)行了說明，但有關(guān)本發(fā)明的圖像編碼裝置的實(shí)施方式并不限定于此。例如，在圖10中，設(shè)為減法器103A具備移位量決定部151而進(jìn)行了說明，但減法器103A也可以不具備移位量決定部151。也可以是圖像編碼裝置100具備的移位量決定部151以外的任意的構(gòu)成單元決定b的值?；蛘?，圖像編碼裝置100也可以從處于圖像編碼裝置100以外的外部裝置取得事先設(shè)定的b的值。在此情況下也起到同樣的發(fā)明效果。
此外，在圖12中，設(shè)為加法器202A具備移位量取得部251而進(jìn)行了說明，但加法器202A也可以不具備移位量取得部251。例如，也可以是圖像解碼裝置200具備的移位量取得部251以外的任意的構(gòu)成單元取得b的值。此外，在上述實(shí)施方式中，說明了 MVC編碼器101或輸出部115將b的值附加到增強(qiáng)層比特流中。但是，也可以是MVC編碼器101或輸出部115以外的、圖像編碼裝置具備的構(gòu)成單元將b的值附加到比特流中。此外，包含b的值的比特流并不限于增強(qiáng)層比特流。例如，也可以對基本層比特流附加b的值。另外，在上述實(shí)施方式中，設(shè)要編碼的對象圖像為12位圖像D31A進(jìn)行了說明。但是，例如也可以將10位或8位等具有任意的位深度的對象圖像通過圖像編碼裝置編碼。在此情況下，通過將作為編碼對象的圖像的位深度先移位到12位后向圖像編碼裝置輸入，不對圖像編碼裝置加以變更就能夠進(jìn)行處理。由此，能夠作為畸變更少的數(shù)據(jù)傳送。此外，在b=0的情況下，有關(guān)本發(fā)明的圖像編碼裝置及圖像解碼裝置也是有用的。這是因?yàn)?，在b=0的情況下，也在增強(qiáng)層圖像中包含壓縮畸變的信息。因而，能夠使用該壓縮畸變的信息對基本層圖像實(shí)施畸變更少的解碼處理。具體而言，有關(guān)本發(fā)明的圖像編碼裝置在12位圖像與8位圖像之差的計(jì)算中使用被編碼的基本層圖像的重構(gòu)圖像。由此，圖像編碼裝置在12位圖像的編碼中能夠吸收8位圖像的編碼中的量化畸變。此外，有關(guān)本發(fā)明的圖像解碼裝置還可以通過僅解碼出基本層圖像而生成8位圖像。由此，維持與僅能夠顯示8位圖像的顯示器裝置的互換性。在此情況下，也可以使圖像編碼裝置及圖像解碼裝置構(gòu)成為例如用戶之后能夠下載在因特網(wǎng)上的存儲設(shè)備中保存的增強(qiáng)層圖像那樣的、包含分發(fā)服務(wù)的影像系統(tǒng)。由此，圖像解碼裝置通過取得以記錄介質(zhì)的形式發(fā)布的基本層圖像、和下載取得的增強(qiáng)層圖像，能夠事后將記錄在記錄介質(zhì)中的影像作為更高品質(zhì)的圖像再現(xiàn)。此外，在本發(fā)明的關(guān)聯(lián)技術(shù)中表示的MVC編碼器101及MVC解碼器201不需要分別單獨(dú)具有將12位圖像編碼或解碼的能力。在MVC編碼器101及MVC解碼器201中沒有這樣的能力的情況下，有關(guān)本發(fā)明的圖像編碼裝置及圖像解碼裝置也能夠?qū)?2位圖像編碼或解碼。因而，能夠抑制用來開發(fā)對較大的位深度的圖像進(jìn)行處理的圖像編碼裝置或圖像解碼裝置的費(fèi)用及期間。
此外，在本發(fā)明的關(guān)聯(lián)技術(shù)中表示的MVC編碼器101及MVC解碼器201當(dāng)然也能夠用于3D圖像的編碼或解碼。此外，在本發(fā)明的關(guān)聯(lián)技術(shù)中表示的各計(jì)算式是一例，也可以使用其他計(jì)算式。例如，如上述那樣，右移位運(yùn)算與除以規(guī)定的除數(shù)是相同的。此外，左移位運(yùn)算與乘以規(guī)定的乘數(shù)是相同的。此外，向下變換器102A在向下變換時，將像素值的低位四舍五入、將像素值的低位舍去取整、或進(jìn)位取整都可以。(實(shí)施方式3) 通過將用來實(shí)現(xiàn)在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法(圖像編碼方法)或運(yùn)動圖像解碼方法(圖像解碼方法)的結(jié)構(gòu)的程序記錄到存儲介質(zhì)中，能夠在獨(dú)立的計(jì)算機(jī)系統(tǒng)中簡單地實(shí)施上述各實(shí)施方式中表不的處理。存儲介質(zhì)只要是磁盤、光盤、光磁盤、IC卡、半導(dǎo)體存儲器等能夠記錄程序的介質(zhì)就可以。進(jìn)而，這里說明在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法(圖像編碼方法)及運(yùn)動圖像解碼方法(圖像解碼方法)的應(yīng)用例和使用它的系統(tǒng)。該系統(tǒng)的特征在于，具有由使用圖像編碼方法的圖像編碼裝置及使用圖像解碼方法的圖像解碼裝置構(gòu)成的圖像編碼解碼裝置。關(guān)于系統(tǒng)的其他結(jié)構(gòu)，可以根據(jù)情況而適當(dāng)變更。圖17是表示實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容供給系統(tǒng)exlOO的整體結(jié)構(gòu)的圖。將通信服務(wù)的提供區(qū)分割為希望的大小，在各小區(qū)內(nèi)分別設(shè)置有作為固定無線站的基站exl06、exl07、exl08、exl09、exllO。該內(nèi)容供給系統(tǒng)exlOO在因特網(wǎng)exlOl上經(jīng)由因特網(wǎng)服務(wù)提供商exl02及電話網(wǎng)exl04、以及基站exl06 exllO,與計(jì)算機(jī)exlll、PDA(Personal Digital Assistant)exll2、照相機(jī)exll3、便攜電話exll4、游戲機(jī)exll5等的各設(shè)備。但是，內(nèi)容供給系統(tǒng)exlOO并不限定于圖17那樣的結(jié)構(gòu)，也可以將某些要素組合連接。此外，也可以不經(jīng)由作為固定無線站的基站exlOe'xllO將各設(shè)備直接連接在電話網(wǎng)exl04上。此外，各設(shè)備也可以經(jīng)由近距離無線等直接相互連接。照相機(jī)exll3是數(shù)字?jǐn)z像機(jī)等的能夠進(jìn)行運(yùn)動圖像攝影的設(shè)備，照相機(jī)exll6是數(shù)字照相機(jī)等的能夠進(jìn)行靜止圖像攝影、運(yùn)動圖像攝影的設(shè)備。此外，便攜電話exll4是GSM (注冊商標(biāo))(Global System for Mobile Communications)方式、CDMA (Code DivisionMultiple Access)方式、W — CDMA (Wideband — Code Division Multiple Access)方式、或 LTE (Long Term Evolution)方式、HSPA (High Speed Packet Access)的便攜電話機(jī)、或 PHS (Personal Handyphone System)等，是哪種都可以。在內(nèi)容供給系統(tǒng)exlOO中，通過將照相機(jī)exl 13等經(jīng)由基站exl09、電話網(wǎng)exl04連接在流媒體服務(wù)器exl03上，能夠進(jìn)行現(xiàn)場分發(fā)等。在現(xiàn)場分發(fā)中，對由用戶使用照相機(jī)exll3攝影的內(nèi)容(例如音樂會現(xiàn)場的影像等)如在上述各實(shí)施方式中說明那樣進(jìn)行編碼處理(即，作為本發(fā)明的圖像編碼裝置發(fā)揮功能)，向流媒體服務(wù)器exl03發(fā)送。另一方面，流媒體服務(wù)器exl03將發(fā)送來的內(nèi)容數(shù)據(jù)對有要求的客戶端進(jìn)行流分發(fā)。作為客戶端，有能夠?qū)⑸鲜鼍幋a處理后的數(shù)據(jù)解碼的計(jì)算機(jī)exlll、PDAexll2、照相機(jī)exll3、便攜電話exll4、游戲機(jī)exll5等。在接收到分發(fā)的數(shù)據(jù)的各設(shè)備中，對接收到的數(shù)據(jù)進(jìn)行解碼處理并再現(xiàn)(即，作為本發(fā)明的圖像解碼裝置發(fā)揮功能)。
另外，攝影的數(shù)據(jù)的編碼處理既可以由照相機(jī)exll3進(jìn)行，也可以由進(jìn)行數(shù)據(jù)的發(fā)送處理的流媒體服務(wù)器exl03進(jìn)行，也可以相互分擔(dān)進(jìn)行。同樣，分發(fā)的數(shù)據(jù)的解碼處理既可以由客戶端進(jìn)行，也可以由流媒體服務(wù)器exl03進(jìn)行，也可以相互分擔(dān)進(jìn)行。此外，并不限于照相機(jī)exll3，也可以將由照相機(jī)exll6攝影的靜止圖像及/或運(yùn)動圖像數(shù)據(jù)經(jīng)由計(jì)算機(jī)exlll向流媒體服務(wù)器exl03發(fā)送。此情況下的編碼處理由照相機(jī)exll6、計(jì)算機(jī)exlll、流媒體服務(wù)器exl03的哪個進(jìn)行都可以，也可以相互分擔(dān)進(jìn)行。此外,這些編碼解碼處理一般在計(jì)算機(jī)exlll或各設(shè)備具有的LSIex500中處理。LSIex500既可以是單芯片，也可以是由多個芯片構(gòu)成的結(jié)構(gòu)。另外，也可以將運(yùn)動圖像編碼解碼用的軟件裝入到能夠由計(jì)算機(jī)exlll等讀取的某些記錄介質(zhì)(⑶一 ROM、軟盤、硬盤等)中、使用該軟件進(jìn)行編碼解碼處理。進(jìn)而，在便攜電話exl 14是帶有照相機(jī)的情況下，也可以將由該照相機(jī)取得的運(yùn)動圖像數(shù)據(jù)發(fā)送。此時的運(yùn)動圖像數(shù)據(jù)是由便攜電話exll4具有的LSIex500編碼處理的數(shù)據(jù)。
此外，也可以是，流媒體服務(wù)器exl03是多個服務(wù)器或多個計(jì)算機(jī)，用于將數(shù)據(jù)分散處理、記錄及分發(fā)。如以上這樣，在內(nèi)容供給系統(tǒng)exlOO中，客戶端能夠接收被編碼的數(shù)據(jù)并再現(xiàn)。這樣，在內(nèi)容供給系統(tǒng)exlOO中，客戶端能夠?qū)⒂脩舭l(fā)送的信息實(shí)時地接收、解碼、再現(xiàn)，即使是沒有特別的權(quán)利或設(shè)備的用戶也能夠?qū)崿F(xiàn)個人廣播。另外，并不限定于內(nèi)容供給系統(tǒng)exlOO的例子，如圖18所示，在數(shù)字廣播用系統(tǒng)ex200中，也能夠裝入上述各實(shí)施方式的至少運(yùn)動圖像編碼裝置(圖像編碼裝置)或運(yùn)動圖像解碼裝置(圖像解碼裝置)的某個。具體而言，在廣播站ex201中，將在影像數(shù)據(jù)中多路復(fù)用了音樂數(shù)據(jù)等的多路復(fù)用數(shù)據(jù)經(jīng)由電波通信或向衛(wèi)星ex202傳送。該影像數(shù)據(jù)是通過在上述各實(shí)施方式中說明的運(yùn)動圖像編碼方法編碼的數(shù)據(jù)(即，是由本發(fā)明的圖像編碼裝置編碼的數(shù)據(jù))。接受到它的廣播衛(wèi)星ex202發(fā)送廣播用的電波，能夠進(jìn)行衛(wèi)星廣播的接收的家庭的天線ex204接收該電波。電視機(jī)(接收機(jī))ex300或機(jī)頂盒(STB) ex217等的裝置將接收到的多路復(fù)用數(shù)據(jù)解碼并再現(xiàn)(即，作為本發(fā)明的圖像解碼裝置發(fā)揮功能)。此外，在將記錄在DVD、BD等的記錄介質(zhì)ex215中的多路復(fù)用數(shù)據(jù)讀取并解碼、或者將影像信號編碼、進(jìn)而根據(jù)情況而與音樂信號多路復(fù)用并寫入到記錄介質(zhì)ex215中的讀取器/記錄器ex218中也能夠安裝上述各實(shí)施方式所示的運(yùn)動圖像解碼裝置或運(yùn)動圖像編碼裝置。在此情況下，將再現(xiàn)的影像信號顯示在監(jiān)視器ex219上，能夠通過記錄有多路復(fù)用數(shù)據(jù)的記錄介質(zhì)ex215在其他裝置及系統(tǒng)中將影像信號再現(xiàn)。此外，也可以在連接于有線電視用的電纜ex203或衛(wèi)星/地面波廣播的天線ex204上的機(jī)頂盒ex217內(nèi)安裝運(yùn)動圖像解碼裝置、將其用電視機(jī)的監(jiān)視器ex219顯示。此時，也可以不是在機(jī)頂盒中、而在電視機(jī)內(nèi)裝入運(yùn)動圖像解碼裝置。圖19是表示使用在上述各實(shí)施方式中說明的運(yùn)動圖像解碼方法及運(yùn)動圖像編碼方法的電視機(jī)(接收機(jī))ex300的圖。電視機(jī)ex300具備經(jīng)由接收上述廣播的天線ex204或線纜ex203等取得或輸出在影像數(shù)據(jù)中多路復(fù)用有聲音數(shù)據(jù)的多路復(fù)用數(shù)據(jù)的調(diào)諧器ex301、將接收到的多路復(fù)用數(shù)據(jù)解調(diào)或調(diào)制為向外部發(fā)送的多路復(fù)用數(shù)據(jù)的調(diào)制/解調(diào)部ex302、和將解調(diào)后的多路復(fù)用數(shù)據(jù)分離、或者將由信號處理部ex306編碼的影像數(shù)據(jù)、聲音數(shù)據(jù)多路復(fù)用的多路復(fù)用/分離部ex303。
此外，電視機(jī)ex300具備具有將聲音數(shù)據(jù)、影像數(shù)據(jù)分別解碼、或者將各自的信息編碼的聲音信號處理部ex304、影像信號處理部ex305 (作為本發(fā)明的圖像編碼裝置或圖像解碼裝置發(fā)揮功能)的信號處理部ex306、和具有將解碼后的聲音信號輸出的揚(yáng)聲器ex307、將解碼后的影像信號顯示的顯示器等的顯示部ex308的輸出部ex309。進(jìn)而，電視機(jī)ex300具備具有受理用戶操作的輸入的操作輸入部ex312等的接口部ex317。進(jìn)而，電視機(jī)ex300具有綜合控制各部的控制部ex310、和對各部供給電力的電源電路部ex311。接口部ex317也可以除了操作輸入部ex312以外、還具有與讀取器/記錄器ex218等的外部設(shè)備連接的橋接部ex313、用來能夠安裝SD卡等的記錄介質(zhì)ex216的插槽部ex314、用來與硬盤等的外部記錄介質(zhì)連接的驅(qū)動器ex315、與電話網(wǎng)連接的調(diào)制解調(diào)器ex316等。另外，記錄介質(zhì)ex216是能夠通過收納的非易失性/易失性的半導(dǎo)體存儲元件電氣地進(jìn)行信息的記錄的介質(zhì)。電視機(jī)ex300的各部經(jīng)由同步總線相互連接。首先，對電視機(jī)eX300將通過天線ex204等從外部取得的多路復(fù)用數(shù)據(jù)解碼、再現(xiàn)的結(jié)構(gòu)進(jìn)行說明。電視機(jī)ex300接受來自遙控器ex220等的用戶操作，基于具有CPU等的控制部ex310的控制，將由調(diào)制/解調(diào)部ex302解調(diào)后的多路復(fù)用數(shù)據(jù)用多路復(fù)用/分離部 ex303分離。進(jìn)而，電視機(jī)eX300將分離后的聲音數(shù)據(jù)用聲音信號處理部ex304解碼，將分離后的影像數(shù)據(jù)由影像信號處理部ex305使用在上述各實(shí)施方式中說明的解碼方法解碼。將解碼后的聲音信號、影像信號分別從輸出部ex309朝向外部輸出。在輸出時，可以先將聲音信號和影像信號儲存到緩沖器ex318、ex319等中，以使這些信號同步再現(xiàn)。此外，電視機(jī)ex300也可以不是從廣播等、而從磁/光盤、SD卡等的記錄介質(zhì)ex215、ex216讀出多路復(fù)用數(shù)據(jù)。接著，對電視機(jī)ex300將聲音信號及影像信號編碼、向外部發(fā)送或?qū)懭氲接涗浗橘|(zhì)等中的結(jié)構(gòu)進(jìn)行說明。電視機(jī)ex300接受來自遙控器ex220等的用戶操作，基于控制部ex310的控制，由聲音信號處理部ex304將聲音信號編碼，由影像信號處理部ex305將影像信號使用在上述各實(shí)施方式中說明的編碼方法編碼。將編碼后的聲音信號、影像信號用多路復(fù)用/分離部ex303多路復(fù)用并向外部輸出。在多路復(fù)用時，可以先將聲音信號和影像信號暫時儲存到緩沖器ex320、ex321等中，以使這些信號同步。另外，緩沖器ex318、ex319、ex320、ex321既可以如圖示那樣具備多個，也可以是共用I個以上的緩沖器的結(jié)構(gòu)。進(jìn)而，在圖示以外，也可以例如在調(diào)制/解調(diào)部ex302及多路復(fù)用/分離部ex303之間等也作為避免系統(tǒng)的溢出、下溢的緩沖部而在緩沖器中儲存數(shù)據(jù)。此外，電視機(jī)ex300除了從廣播及記錄介質(zhì)等取得聲音數(shù)據(jù)、影像數(shù)據(jù)以外，也可以具備受理麥克風(fēng)或照相機(jī)的AV輸入的結(jié)構(gòu)，對從它們?nèi)〉玫臄?shù)據(jù)進(jìn)行編碼處理。另外，這里，將電視機(jī)ex300作為能夠進(jìn)行上述編碼處理、多路復(fù)用及外部輸出的結(jié)構(gòu)進(jìn)行了說明，但也可以是不能進(jìn)行這些處理，而僅能夠進(jìn)行上述接收、解碼處理、外部輸出的結(jié)構(gòu)。此外，在由讀取器/記錄器ex218從記錄介質(zhì)將多路復(fù)用數(shù)據(jù)讀出、或?qū)懭氲那闆r下，上述解碼處理或編碼處理由電視機(jī)ex300和讀取器/記錄器ex218的哪個進(jìn)行都可以，也可以是電視機(jī)ex300和讀取器/記錄器ex218相互分擔(dān)進(jìn)行。作為一例，將從光盤進(jìn)行數(shù)據(jù)的讀入或?qū)懭氲那闆r下的信息再現(xiàn)/記錄部ex400的結(jié)構(gòu)表示在圖20中。信息再現(xiàn)/記錄部ex400具備以下說明的單元ex401、ex402、ex403、ex404、ex405、ex406、ex407。光頭ex401對作為光盤的記錄介質(zhì)ex215的記錄面照射激光斑而寫入信息，檢測來自記錄介質(zhì)ex215的記錄面的反射光而讀入信息。調(diào)制記錄部ex402電氣地驅(qū)動內(nèi)置在光頭ex401中的半導(dǎo)體激光器，根據(jù)記錄數(shù)據(jù)進(jìn)行激光的調(diào)制。再現(xiàn)解調(diào)部ex403將由內(nèi)置在光頭ex401中的光檢測器電氣地檢測來自記錄面的反射光得到的再現(xiàn)信號放大，將記錄在記錄介質(zhì)ex215中的信號成分分離并解調(diào)，再現(xiàn)所需要的信息。緩沖器ex404將用于記錄到記錄介質(zhì)ex215中的信息及從記錄介質(zhì)ex215再現(xiàn)的信息臨時保持。盤馬達(dá)ex405使記錄介質(zhì)ex215旋轉(zhuǎn)。伺服控制部ex406 —邊控制盤馬達(dá)ex405的旋轉(zhuǎn)驅(qū)動一邊使光頭ex401移動到規(guī)定的信息軌道，進(jìn)行激光斑的追蹤處理。系統(tǒng)控制部ex407進(jìn)行信息再現(xiàn)/記錄部ex400整體的控制。上述的讀出及寫入的處理由系統(tǒng)控制部ex407利用保持在緩沖器ex404中的各種信息、此外根據(jù)需要進(jìn)行新的信息的生成及追加、并且一邊使調(diào)制記錄部ex402、再現(xiàn)解調(diào)部ex403、伺服控制部ex406協(xié)調(diào)動作、一邊通過光頭ex401進(jìn)行信息的記錄再現(xiàn)來實(shí)現(xiàn)。系統(tǒng)控制部ex407例如由微處理器構(gòu)成，通過執(zhí)行讀出寫入的程序來執(zhí)行這些處理。以上，假設(shè)光頭ex401照射激光斑而進(jìn)行了說明，但也可以是使用接近場光進(jìn)行高密度的記錄的結(jié)構(gòu)。在圖21中表示作為光盤的記錄介質(zhì)ex215的示意圖。在記錄介質(zhì)ex215的記錄面上，以螺旋狀形成有導(dǎo)引槽(溝)，在信息軌道ex230中，預(yù)先通過溝的形狀的變化而記錄有表示盤上的絕對位置的地址信息。該地址信息包括用來確定作為記錄數(shù)據(jù)的單位的記錄塊ex231的位置的信息，通過在進(jìn)行記錄及再現(xiàn)的裝置中將信息軌道ex230再現(xiàn)而讀取地址信息，能夠確定記錄塊。此外，記錄介質(zhì)ex215包括數(shù)據(jù)記錄區(qū)域ex233、內(nèi)周區(qū)域ex232、外周區(qū)域ex234。為了記錄用戶數(shù)據(jù)而使用的區(qū)域是數(shù)據(jù)記錄區(qū)域ex233，配置在比數(shù)據(jù)記 錄區(qū)域ex233靠內(nèi)周或外周的內(nèi)周區(qū)域ex232和外周區(qū)域ex234用于用戶數(shù)據(jù)的記錄以外的特定用途。信息再現(xiàn)/記錄部ex400對這樣的記錄介質(zhì)ex215的數(shù)據(jù)記錄區(qū)域ex233進(jìn)行被編碼的聲音數(shù)據(jù)、影像數(shù)據(jù)或多路復(fù)用了這些數(shù)據(jù)的編碼數(shù)據(jù)的讀寫。以上，舉I層的DVD、BD等的光盤為例進(jìn)行了說明，但并不限定于這些，也可以是多層構(gòu)造、在表面以外也能夠記錄的光盤。此外，也可以是在盤的相同的地方使用各種不同波長的顏色的光記錄信息、或從各種角度記錄不同的信息的層等、進(jìn)行多維的記錄/再現(xiàn)的構(gòu)造的光盤。此外，在數(shù)字廣播用系統(tǒng)ex200中，也可以由具有天線ex205的車ex210從衛(wèi)星ex202等接收數(shù)據(jù)、在車ex210具有的車載導(dǎo)航儀ex211等的顯示裝置上再現(xiàn)運(yùn)動圖像。另夕卜，車載導(dǎo)航儀ex211的結(jié)構(gòu)可以考慮例如在圖19所示的結(jié)構(gòu)中添加GPS接收部的結(jié)構(gòu)，在計(jì)算機(jī)exlll及便攜電話exll4等中也可以考慮同樣的結(jié)構(gòu)。圖22A是表示使用在上述實(shí)施方式中說明的運(yùn)動圖像解碼方法及運(yùn)動圖像編碼方法的便攜電話exl 14的圖。便攜電話exl 14具備用來在與基站exllO之間收發(fā)電波的天線ex350、能夠拍攝影像、靜止圖像的照相機(jī)部ex365、顯示將由照相機(jī)部ex365攝像的影像、由天線ex350接收到的影像等解碼后的數(shù)據(jù)的液晶顯示器等的顯示部ex358。便攜電話exll4還具備具有操作鍵部ex366的主體部、用來輸出聲音的作為揚(yáng)聲器等的聲音輸出部ex357、作為用來輸入聲音的麥克風(fēng)等的聲音輸入部ex356、保存所攝影的影像、靜止圖像、錄音的聲音、或接收到的影像、靜止圖像、郵件等的編碼的數(shù)據(jù)或解碼的數(shù)據(jù)的存儲器部ex367、或者作為與同樣保存數(shù)據(jù)的記錄介質(zhì)的接口部的插槽部ex364。進(jìn)而，使用圖22B對便攜電話exll4的結(jié)構(gòu)例進(jìn)行說明。在便攜電話exll4中，對于綜合控制具備顯示部ex358及操作鍵部ex366的主體部的各部的主控制部ex360，將電源電路部ex361、操作輸入控制部ex362、影像信號處理部ex355、照相機(jī)接口部ex363、LCD(Liquid Crystal Display)控制部ex359、調(diào)制/解調(diào)部ex352、多路復(fù)用/分離部ex353、聲音信號處理部ex354、插槽部ex364、存儲器部ex367經(jīng)由總線ex370相互連接。如果通過用戶的操作將結(jié)束通話及電源鍵設(shè)為開啟狀態(tài)，則電源電路部ex361通過從電池組對各部供給電力，將便攜電話exll4起動為能夠動作的狀態(tài)。便攜電話exl 14基于具有CPU、ROM、RAM等的主控制部ex360的控制，在聲音通話模式時，將由聲音輸入部ex356接收的聲音信號通過聲音信號處理部ex354變換為數(shù)字聲音信號，將其用調(diào)制/解調(diào)部ex352進(jìn)行頻譜擴(kuò)展處理，用發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后經(jīng)由天線ex350發(fā)送。此外，便攜電話exll4在聲音通話模式時，將經(jīng)由天線ex350接收到的接收數(shù)據(jù)放大而實(shí)施頻率變換處理及模擬數(shù)字變換處 理，用調(diào)制/解調(diào)部ex352進(jìn)行頻譜擴(kuò)展處理，用聲音信號處理部ex354變換為模擬聲音信號后，將其從聲音輸出部ex357輸出。進(jìn)而，在數(shù)據(jù)通信模式時發(fā)送電子郵件的情況下，將通過主體部的操作鍵部ex366等的操作輸入的電子郵件的文本數(shù)據(jù)經(jīng)由操作輸入控制部ex362向主控制部ex360送出。主控制部ex360將文本數(shù)據(jù)用調(diào)制/解調(diào)部ex352進(jìn)行頻譜擴(kuò)展處理，用發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后，經(jīng)由天線ex350向基站exllO發(fā)送。在接收電子郵件的情況下，對接收到的數(shù)據(jù)進(jìn)行其大致相反的處理，向顯示部ex358輸出。在數(shù)據(jù)通信模式時發(fā)送影像、靜止圖像、或影像和聲音的情況下，影像信號處理部ex355將從照相機(jī)部ex365供給的影像信號通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法壓縮編碼(即，作為本發(fā)明的圖像編碼裝置發(fā)揮功能)，將編碼后的影像數(shù)據(jù)向多路復(fù)用/分離部ex353送出。此外，聲音信號處理部ex354將在由照相機(jī)部ex365拍攝影像、靜止圖像等過程中由聲音輸入部ex356接收到的聲音信號編碼，將編碼后的聲音數(shù)據(jù)向多路復(fù)用/分尚部ex353送出。多路復(fù)用/分離部ex353將從影像信號處理部ex355供給的編碼后的影像數(shù)據(jù)和從聲音信號處理部ex354供給的編碼后的聲音數(shù)據(jù)用規(guī)定的方式多路復(fù)用，將其結(jié)果得到的多路復(fù)用數(shù)據(jù)用調(diào)制/解調(diào)部(調(diào)制/解調(diào)電路部)ex352進(jìn)行頻譜擴(kuò)展處理，用發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后，經(jīng)由天線ex350發(fā)送。在數(shù)據(jù)通信模式時接收到鏈接在主頁等上的運(yùn)動圖像文件的數(shù)據(jù)的情況下，或者在接收到附帶有影像及或聲音的電子郵件的情況下，為了將經(jīng)由天線ex350接收到的多路復(fù)用數(shù)據(jù)解碼，多路復(fù)用/分離部ex353通過將多路復(fù)用數(shù)據(jù)分離而分為影像數(shù)據(jù)的比特流和聲音數(shù)據(jù)的比特流，經(jīng)由同步總線ex370將編碼后的影像數(shù)據(jù)向影像信號處理部ex355供給，并且將編碼后的聲音數(shù)據(jù)向聲音信號處理部ex354供給。影像信號處理部ex355通過與在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法對應(yīng)的運(yùn)動圖像解碼方法解碼，從而將影像信號解碼(即，作為本發(fā)明的圖像解碼裝置發(fā)揮功能)，經(jīng)由LCD控制部ex359從顯示部ex358顯示例如鏈接在主頁上的運(yùn)動圖像文件所包含的影像、靜止圖像。此夕卜，聲音信號處理部ex354將聲音信號解碼，從聲音輸出部ex357輸出聲音。此外，上述便攜電話exll4等的終端與電視機(jī)ex300同樣，除了具有編碼器、解碼器兩者的收發(fā)型終端以外，還可以考慮只有編碼器的發(fā)送終端、只有解碼器的接收終端這3種安裝形式。進(jìn)而，在數(shù)字廣播用系統(tǒng)ex200中，假設(shè)將在影像數(shù)據(jù)中多路復(fù)用了音樂數(shù)據(jù)等的多路復(fù)用數(shù)據(jù)接收、發(fā)送而進(jìn)行了說明，但也可以是除了聲音數(shù)據(jù)以外還多路復(fù)用了與影像關(guān)聯(lián)的字符數(shù)據(jù)等的數(shù)據(jù)，也可以不是多路復(fù)用數(shù)據(jù)而是影像數(shù)據(jù)自身。這樣，能夠?qū)⒃谏鲜龈鲗?shí)施方式中示出的運(yùn)動圖像編碼方法或運(yùn)動圖像解碼方法用在上述任何設(shè)備、系統(tǒng)中，由此，能夠得到在上述各實(shí)施方式中說明的效果。此外，本發(fā)明并不限定于這樣的上述實(shí)施方式，能夠不脫離本發(fā)明的范圍而進(jìn)行各種變形或修正。(實(shí)施方式4)也可以通過將在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置、與依據(jù)MPEG - 2、MPEG4 — AVC,VC 一 I等不同的規(guī)格的運(yùn)動圖像編碼方 法或裝置根據(jù)需要而適當(dāng)切換,來生成影像數(shù)據(jù)。這里，在生成分別依據(jù)不同的規(guī)格的多個影像數(shù)據(jù)的情況下，在解碼時，需要選擇對應(yīng)于各個規(guī)格的解碼方法。但是，由于不能識別要解碼的影像數(shù)據(jù)依據(jù)哪個規(guī)格，所以產(chǎn)生不能選擇適當(dāng)?shù)慕獯a方法的問題。為了解決該問題，在影像數(shù)據(jù)中多路復(fù)用了聲音數(shù)據(jù)等的多路復(fù)用數(shù)據(jù)采用包含表示影像數(shù)據(jù)依據(jù)哪個規(guī)格的識別信息的結(jié)構(gòu)。以下，說明包括通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)在內(nèi)的多路復(fù)用數(shù)據(jù)的具體的結(jié)構(gòu)。多路復(fù)用數(shù)據(jù)是MPEG - 2傳輸流形式的數(shù)字流。圖23是表示多路復(fù)用數(shù)據(jù)的結(jié)構(gòu)的圖。如圖23所示，多路復(fù)用數(shù)據(jù)通過將視頻流、音頻流、演示圖形流(PG)、交互圖形流中的I個以上進(jìn)行多路復(fù)用而得到。視頻流表示電影的主影像及副影像，音頻流(IG)表示電影的主聲音部分和與該主聲音混合的副聲音，演示圖形流表示電影的字幕。這里，所謂主影像，表示顯示在畫面上的通常的影像，所謂副影像，是在主影像中用較小的畫面顯示的影像。此外，交互圖形流表示通過在畫面上配置GUI部件而制作的對話畫面。視頻流通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置、依據(jù)以往的MPEG - 2、MPEG4 — AVC,VC 一 I等規(guī)格的運(yùn)動圖像編碼方法或裝置編碼。音頻流由杜比AC — 3、Dolby Digital Plus、MLP、DTS、DTS — HD、或線性PCM等的方式編碼。包含在多路復(fù)用數(shù)據(jù)中的各流通過PID被識別。例如，對在電影的影像中使用的視頻流分配0x1011，對音頻流分配0x1100到Oxl 11F，對演示圖形分配0x1200到0xl21F，對交互圖形流分配0x1400到0xl41F,對在電影的副影像中使用的視頻流分配OxlBOO到OxlBlF，對與主聲音混合的副聲音中使用的音頻流分配OxIAOO到OxlAlF。圖24是示意地表示多路復(fù)用數(shù)據(jù)怎樣被多路復(fù)用的圖。首先，將由多個視頻幀構(gòu)成的視頻流ex235、由多個音頻幀構(gòu)成的音頻流ex238分別變換為PES包序列ex236及ex239,并變換為TS包ex237及ex240。同樣，將演示圖形流ex241及交互圖形ex244的數(shù)據(jù)分別變換為PES包序列ex242及ex245，再變換為TS包ex243及ex246。多路復(fù)用數(shù)據(jù)ex247通過將這些TS包多路復(fù)用到I條流中而構(gòu)成。圖25更詳細(xì)地表示在PES包序列中怎樣保存視頻流。圖25的第I段表示視頻流的視頻巾貞序列。第2段表示PES包序列。如圖25的箭頭yyl、yy2、yy3、yy4所示,視頻流中的多個作為Video Presentation Unit的I圖片、B圖片、P圖片按每個圖片被分割并保存到PES包的有效載荷中。各PES包具有PES頭，在PES頭中，保存有作為圖片的顯示時刻的PTS (Presentation Time-Stamp)及作為圖片的解碼時刻的 DTS (Decoding Time-Stamp) 圖26表示最終寫入在多路復(fù)用數(shù)據(jù)中的TS包的形式。TS包是由具有識別流的PID等信息的4字節(jié)的TS頭和保存數(shù)據(jù)的184字節(jié)的TS有效載荷構(gòu)成的188字節(jié)固定長度的包，上述PES包被分割并保存到TS有效載荷中。在BD — ROM的情況下，對于TS包賦予4字節(jié)的TP_Extra_Header,構(gòu)成192字節(jié)的源包,寫入到多路復(fù)用數(shù)據(jù)中。在TP_Extra_Header中記載有ATS (Arrival_Time_Stamp)等信息。ATS表示該TS包向解碼器的PID濾波器的轉(zhuǎn)送開始時刻。在多路復(fù)用數(shù)據(jù)中，源包如圖26下段所示排列，從多路復(fù)用數(shù)據(jù)的開頭起遞增的號碼被稱作SPN (源包號)。此外，在多路復(fù)用數(shù)據(jù)所包含的TS包中，除了影像、聲音、字幕等的各流以外，還有 PAT (Program Association Table)、PMT (Program Map Table)、PCR (Program ClockReference)等。PAT表示在多路復(fù)用數(shù)據(jù)中使用的PMT的PID是什么，PAT自身的PID被登記為O。PMT具有多路復(fù)用數(shù)據(jù)所包含的影像、聲音、字幕等的各流的PID、以及與各PID 對應(yīng)的流的屬性信息，還具有關(guān)于多路復(fù)用數(shù)據(jù)的各種描述符。在描述符中，有指示許可/不許可多路復(fù)用數(shù)據(jù)的復(fù)制的復(fù)制控制信息等。PCR為了取得作為ATS的時間軸的ATC(Arrival Time Clock)與作為 PTS 及 DTS 的時間軸的 STC (System Time Clock)的同步，擁有與該P(yáng)CR包被轉(zhuǎn)送至解碼器的ATS對應(yīng)的STC時間的信息。圖27是詳細(xì)地說明PMT的數(shù)據(jù)構(gòu)造的圖。在PMT的開頭，配置有記述了包含在該P(yáng)MT中的數(shù)據(jù)的長度等的PMT頭。在其后面，配置有多個關(guān)于多路復(fù)用數(shù)據(jù)的描述符。上述復(fù)制控制信息等被記載為描述符。在描述符之后，配置有多個關(guān)于包含在多路復(fù)用數(shù)據(jù)中的各流的流信息。流信息由記載有用來識別流的壓縮編解碼器的流類型、流的PID、流的屬性信息(幀速率、縱橫比等)的流描述符構(gòu)成。流描述符存在多路復(fù)用數(shù)據(jù)中存在的流的數(shù)量。在記錄到記錄介質(zhì)等中的情況下，將上述多路復(fù)用數(shù)據(jù)與多路復(fù)用數(shù)據(jù)信息文件
一起記錄。多路復(fù)用數(shù)據(jù)信息文件如圖28所示，是多路復(fù)用數(shù)據(jù)的管理信息，與多路復(fù)用數(shù)據(jù)一對一地對應(yīng)，由多路復(fù)用數(shù)據(jù)信息、流屬性信息以及入口映射構(gòu)成。多路復(fù)用數(shù)據(jù)信息如圖28所示，由系統(tǒng)速率、再現(xiàn)開始時刻、再現(xiàn)結(jié)束時刻構(gòu)成。系統(tǒng)速率表示多路復(fù)用數(shù)據(jù)的向后述的系統(tǒng)目標(biāo)解碼器的PID濾波器的最大轉(zhuǎn)送速率。包含在多路復(fù)用數(shù)據(jù)中的ATS的間隔設(shè)定為成為系統(tǒng)速率以下。再現(xiàn)開始時刻是多路復(fù)用數(shù)據(jù)的開頭的視頻幀的PTS，再現(xiàn)結(jié)束時刻設(shè)定為對多路復(fù)用數(shù)據(jù)的末端的視頻幀的PTS加上I幀量的再現(xiàn)間隔的值。流屬性信息如圖29所示，按每個PID登記有關(guān)于包含在多路復(fù)用數(shù)據(jù)中的各流的屬性信息。屬性信息具有按視頻流、音頻流、演示圖形流、交互圖形流而不同的信息。視頻流屬性信息具有該視頻流由怎樣的壓縮編解碼器壓縮、構(gòu)成視頻流的各個圖片數(shù)據(jù)的析像度是多少、縱橫比是多少、幀速率是多少等的信息。音頻流屬性信息具有該音頻流由怎樣的壓縮編解碼器壓縮、包含在該音頻流中的聲道數(shù)是多少、對應(yīng)于哪種語言、采樣頻率是多少等的信息。這些信息用于在播放器再現(xiàn)之前的解碼器的初始化等中。在本實(shí)施方式中，使用上述多路復(fù)用數(shù)據(jù)中的、包含在PMT中的流類型。此外，在記錄介質(zhì)中記錄有多路復(fù)用數(shù)據(jù)的情況下，使用包含在多路復(fù)用數(shù)據(jù)信息中的視頻流屬性信息。具體而言，在上述各實(shí)施方式示出的運(yùn)動圖像編碼方法或裝置中，設(shè)置如下步驟或單元，該步驟或單元對包含在PMT中的流類型、或視頻流屬性信息，設(shè)定表示是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)的固有信息。通過該結(jié)構(gòu)，能夠識別通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)、和依據(jù)其他規(guī)格的影像數(shù)據(jù)。此外，在圖30中表示本實(shí)施方式的運(yùn)動圖像解碼方法的步驟。在步驟exSlOO中，從多路復(fù)用數(shù)據(jù)中取得包含在PMT中的流類型、或包含在多路復(fù)用數(shù)據(jù)信息中的視頻流屬性信息。接著，在步驟exSlOl中，判斷流類型、或視頻流屬性信息是否表示是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的多路復(fù)用數(shù)據(jù)。并且，在判斷為流類型、或視頻流屬性信息是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的多路復(fù)用數(shù)據(jù)情況下，在步驟exS102中，通過在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法進(jìn)行解碼。此外，在流類型、或視頻流屬性信息表示是依據(jù)以往的MPEG — 2、M PEG4 — AVC,VC 一 I等的規(guī)格的多路復(fù)用數(shù)據(jù)的情況下，在步驟exS103中，通過依據(jù)以往的規(guī)格的運(yùn)動圖像解碼方法進(jìn)行解碼。這樣，通過在流類型、或視頻流屬性信息中設(shè)定新的固有值，在解碼時能夠判斷是否能夠通過在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法或裝置解碼。因而，在被輸入了依據(jù)不同的規(guī)格的多路復(fù)用數(shù)據(jù)的情況下，也能夠選擇適當(dāng)?shù)慕獯a方法或裝置，所以能夠不發(fā)生錯誤地進(jìn)行解碼。此外，將在本實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置、或者運(yùn)動圖像解碼方法或裝置用在上述任何設(shè)備、系統(tǒng)中。(實(shí)施方式5)在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法及裝置、運(yùn)動圖像解碼方法及裝置典型地可以由作為集成電路的LSI實(shí)現(xiàn)。作為一例，在圖31中表示I芯片化的LSIex500的結(jié)構(gòu)。LSIex500 具備以下說明的單元 ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509，各單元經(jīng)由總線ex510連接。電源電路部ex505通過在電源是開啟狀態(tài)的情況下對各部供給電力，起動為能夠動作的狀態(tài)。例如在進(jìn)行編碼處理的情況下，LSIex500基于具有CPUex502、存儲器控制器ex503、流控制器ex504、驅(qū)動頻率控制部ex512等的控制部ex501的控制，通過AV I/0ex509從麥克風(fēng)exll7及照相機(jī)exll3等輸入AV信號。被輸入的AV信號暫時儲存在SDRAM等的外部的存儲器ex511中?；诳刂撇縠x501的控制，將儲存的數(shù)據(jù)根據(jù)處理量及處理速度適當(dāng)?shù)胤譃槎啻蔚?，向信號處理部ex507發(fā)送，在信號處理部ex507中進(jìn)行聲音信號的編碼及/或影像信號的編碼。這里，影像信號的編碼處理是在上述各實(shí)施方式中說明的編碼處理。在信號處理部ex507中，還根據(jù)情況而進(jìn)行將編碼的聲音數(shù)據(jù)和編碼的影像數(shù)據(jù)多路復(fù)用等的處理，從流I/0ex506向外部輸出。將該輸出的比特流向基站exl07發(fā)送、或?qū)懭氲接涗浗橘|(zhì)ex215中。另外，在多路復(fù)用時，可以暫時將數(shù)據(jù)儲存到緩沖器ex508中以使其同步。另外，在上述中，設(shè)存儲器ex511為LSIex500的外部的結(jié)構(gòu)進(jìn)行了說明，但也可以是包含在LSIex500的內(nèi)部中的結(jié)構(gòu)。緩沖器ex508也并不限定于ー個，也可以具備多個緩沖器。此外，LSIex500既可以形成I個芯片，也可以形成多個芯片。
此外，在上述中，假設(shè)控制部ex510具有CPUex502、存儲器控制器ex503、流控制器ex504、驅(qū)動頻率控制部ex512等,但控制部ex510的結(jié)構(gòu)并不限定于該結(jié)構(gòu)。例如，也可以是信號處理部ex507還具備CPU的結(jié)構(gòu)。通過在信號處理部ex507的內(nèi)部中也設(shè)置CPU，能夠進(jìn)ー步提高處理速度。此外，作為其他例，也可以是CPUex502具備信號處理部ex507、或作為信號處理部ex507的一部分的例如聲音信號處理部的結(jié)構(gòu)。在這樣的情況下，控制部ex501為具備具有信號處理部ex507或其一部分的CPUex502的結(jié)構(gòu)。另外，這里設(shè)為LSI，但根據(jù)集成度的差異，也有稱作1C、系統(tǒng)LSI、超級LSI、超大規(guī)模LSI的情況。
此外，集成電路化的方法并不限定于LSI，也可以由專用電路或通用處理器實(shí)現(xiàn)。也可以利用在LSI制造后能夠編程的FPGA(Field ProgrammableGate Array)、或能夠重構(gòu)LSI內(nèi)部的電路單元的連接及設(shè)定的可重構(gòu)處理器。進(jìn)而，如果因半導(dǎo)體技術(shù)的進(jìn)步或派生的其他技術(shù)而出現(xiàn)代替LSI的集成電路化的技術(shù)，則當(dāng)然也可以使用該技術(shù)進(jìn)行功能模塊的集成化。有可能是生物技術(shù)的應(yīng)用等。(實(shí)施方式6)在將通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的情況下，考慮到與將依據(jù)以往的MPEG — 2、MPEG4 — AVC, VC 一 I等規(guī)格的影像數(shù)據(jù)的情況相比處理量會増加。因此，在LSIex500中，需要設(shè)定為比將依據(jù)以往的規(guī)格的影像數(shù)據(jù)解碼時的CPUex502的驅(qū)動頻率更高的驅(qū)動頻率。但是，如果將驅(qū)動頻率設(shè)得高，則發(fā)生消耗電カ變高的問題。為了解決該問題，電視機(jī)ex300、LSIex500等的運(yùn)動圖像解碼裝置采用識別影像數(shù)據(jù)依據(jù)哪個規(guī)格、并根據(jù)規(guī)格切換驅(qū)動頻率的結(jié)構(gòu)。圖32表示本實(shí)施方式的結(jié)構(gòu)ex800。驅(qū)動頻率切換部ex803在影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的情況下，將驅(qū)動頻率設(shè)定得高。并且，對執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法的解碼處理部ex801指示將影像數(shù)據(jù)解碼。另ー方面，在影像數(shù)據(jù)是依據(jù)以往的規(guī)格的影像數(shù)據(jù)的情況下，與影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的數(shù)據(jù)的情況相比，將驅(qū)動頻率設(shè)定得低。并且，對依據(jù)以往的規(guī)格的解碼處理部ex802指示將影像數(shù)據(jù)解碼。更具體地講，驅(qū)動頻率切換部ex803由圖31的CPUex502和驅(qū)動頻率控制部ex512構(gòu)成。此外，執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法的解碼處理部ex801、以及依據(jù)以往的規(guī)格的解碼處理部ex802對應(yīng)于圖31的信號處理部ex507。CPUex502識別影像數(shù)據(jù)依據(jù)哪個規(guī)格。并且，基于來自CPUex502的信號，驅(qū)動頻率控制部ex512設(shè)定驅(qū)動頻率。此外，基于來自CPUex502的信號，信號處理部ex507進(jìn)行影像數(shù)據(jù)的解碼。這里，可以考慮在影像數(shù)據(jù)的識別中使用例如在實(shí)施方式4中記載的識別信息。關(guān)于識別信息，并不限定于在實(shí)施方式4中記載的信息，只要是能夠識別影像數(shù)據(jù)依據(jù)哪個規(guī)格的信息就可以。例如，在基于識別影像數(shù)據(jù)利用于電視機(jī)還是利用于盤等的外部信號，來能夠識別影像數(shù)據(jù)依據(jù)哪個規(guī)格的情況下，也可以基于這樣的外部信號進(jìn)行識別。此外，CPUex502的驅(qū)動頻率的選擇例如可以考慮如圖34所示的將影像數(shù)據(jù)的規(guī)格與驅(qū)動頻率建立對應(yīng)的查找表進(jìn)行。將查找表預(yù)先保存到緩沖器ex508、或LSI的內(nèi)部存儲器中，CPUex502通過參照該查找表，能夠選擇驅(qū)動頻率。
圖33表示實(shí)施本實(shí)施方式的方法的步驟。首先，在步驟exS200中，在信號處理部ex507中，從多路復(fù)用數(shù)據(jù)中取得識別信息。接著，在步驟exS201中，在CPUex502中，基于識別信息識別影像數(shù)據(jù)是否是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)。在影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況下，在步驟exS202中，CPUex502向驅(qū)動頻率控制部ex512發(fā)送將驅(qū)動頻率設(shè)定得高的信號。并且，在驅(qū)動頻率控制部ex512中設(shè)定為高的驅(qū)動頻率。另一方面，在表示是依據(jù)以往的MPEG —2、MPEG4 - AVC、VC 一 I等的規(guī)格的影像數(shù)據(jù)的情況下，在步驟exS203中，CPUex502向驅(qū)動頻率控制部ex512發(fā)送將驅(qū)動頻率設(shè)定得低的信號。并且，在驅(qū)動頻率控制部ex512中，設(shè)定為與影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況相比更低的驅(qū)動頻率。進(jìn)而，通過與驅(qū)動頻率的切換連動而變更對LSIeX500或包括LSIeX500的裝置施加的電壓，由此能夠進(jìn)一步提高節(jié)電效果。例如，在將驅(qū)動頻率設(shè)定得低的情況下，隨之，可以考慮與將驅(qū)動頻率設(shè)定得高的情況相比，將對LSIex500或包括LSIex500的裝置施加的 電壓設(shè)定得低。此外，驅(qū)動頻率的設(shè)定方法只要是在解碼時的處理量大的情況下將驅(qū)動頻率設(shè)定得高、在解碼時的處理量小的情況下將驅(qū)動頻率設(shè)定得低就可以，并不限定于上述的設(shè)定方法。例如，可以考慮在將依據(jù)MPEG4 — AVC規(guī)格的影像數(shù)據(jù)解碼的處理量大于將通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的處理量的情況下，與上述的情況相反地進(jìn)行驅(qū)動頻率的設(shè)定。進(jìn)而，驅(qū)動頻率的設(shè)定方法并不限定于使驅(qū)動頻率低的結(jié)構(gòu)。例如，也可以考慮在識別信息是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，將對LSIex500或包括LSIex500的裝置施加的電壓設(shè)定得高，在表示是依據(jù)以往的MPEG - 2、MPEG4 一 AVC、VC 一 I等的規(guī)格的影像數(shù)據(jù)的情況下，將對LSIex500或包括LSIex500的裝置施加的電壓設(shè)定得低。此外，作為另一例，也可以考慮在識別信息表示是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，不使CPUex502的驅(qū)動停止，在表示是依據(jù)以往的MPEG — 2、MPEG4 — AVC,VC 一 I等的規(guī)格的影像數(shù)據(jù)的情況下，由于在處理中有富余，所以使CPUex502的驅(qū)動暫停。也可以考慮在識別信息表示是通過在上述各實(shí)施方式中示出的運(yùn)動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，也只要在處理中有富余則使CPUex502的驅(qū)動暫停。在此情況下，可以考慮與表示是依據(jù)以往的MPEG - 2、MPEG4 — AVC, VC 一 I等的規(guī)格的影像數(shù)據(jù)的情況相比，將停止時間設(shè)定得短。這樣，根據(jù)影像數(shù)據(jù)所依據(jù)的規(guī)格來切換驅(qū)動頻率，由此能夠?qū)崿F(xiàn)節(jié)電化。此外，在使用電池來驅(qū)動LSIex500或包括LSIex500的裝置的情況下，能夠隨著節(jié)電而延長電池的壽命。(實(shí)施方式7)在電視機(jī)、便攜電話等上述的設(shè)備、系統(tǒng)中，有時被輸入依據(jù)不同的規(guī)格的多個影像數(shù)據(jù)。這樣，為了使得在被輸入了依據(jù)不同的規(guī)格的多個影像數(shù)據(jù)的情況下也能夠解碼，LSIex500的信號處理部ex507需要對應(yīng)于多個規(guī)格。但是，如果單獨(dú)使用對應(yīng)于各個規(guī)格的信號處理部ex507，則發(fā)生LSIex500的電路規(guī)模變大、此外成本增加的問題。
為了解決該問題，采用將用來執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法的解碼處理部、和依據(jù)以往的MPEG — 2、MPEG4 — AVC, VC 一 I等的規(guī)格的解碼處理部一部分共用的結(jié)構(gòu)。圖35A的ex900表示該結(jié)構(gòu)例。例如，在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法和依據(jù)MPEG4 — AVC規(guī)格的運(yùn)動圖像解碼方法在熵編碼、逆量化、解塊濾波器、運(yùn)動補(bǔ)償?shù)鹊奶幚碇杏幸徊糠痔幚韮?nèi)容共通?？梢钥紤]如下結(jié)構(gòu)關(guān)于共通的處理內(nèi)容，共用對應(yīng)于MPEG4 — AVC規(guī)格的解碼處理部ex902，關(guān)于不對應(yīng)于MPEG4 — AVC規(guī)格的本發(fā)明特有的其他的處理內(nèi)容，使用專用的解碼處理部ex901。關(guān)于解碼處理部的共用，也可以是如下結(jié)構(gòu)關(guān)于共通的處理內(nèi)容，共用用來執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動圖像解碼方法的解碼處理部，關(guān)于MPEG4 — AVC規(guī)格所特有的處理內(nèi)容，使用專用的解碼處理部。此外,用圖35B的exlOOO表示將處理一部分共用的另一例。在該例中，采用使用與本發(fā)明所特有的處理內(nèi)容對應(yīng)的專用的解碼處理部ex 1001、和與其他的以往規(guī)格所特有的處理內(nèi)容對應(yīng)的專用的解碼處理部exl002、和與在本發(fā)明的運(yùn)動圖像解碼方法和其他 的以往規(guī)格的運(yùn)動圖像解碼方法中共通的處理內(nèi)容對應(yīng)的共用的解碼處理部exl003的結(jié)構(gòu)。這里，專用的解碼處理部exlOOl、exl002并不一定是為本發(fā)明、或者其他的以往規(guī)格所特有的處理內(nèi)容而特殊化的，可以是能夠執(zhí)行其他的通用處理的結(jié)構(gòu)。此外，也能夠由LSIex500安裝本實(shí)施方式的結(jié)構(gòu)。這樣，對于在本發(fā)明的運(yùn)動圖像解碼方法和以往的規(guī)格的運(yùn)動圖像解碼方法中共通的處理內(nèi)容，共用解碼處理部，由此能夠減小LSI的電路規(guī)模并且降低成本。エ業(yè)實(shí)用性有關(guān)本發(fā)明的圖像編碼裝置及圖像解碼裝置例如能夠在電視機(jī)、數(shù)字視頻記錄器、汽車導(dǎo)航儀、便攜電話、數(shù)字照相機(jī)、或數(shù)字?jǐn)z像機(jī)等中使用。符號說明100、100A圖像編碼裝置101MVC 編碼器102、102A向下變換器103、103A 減法器111、IllA 第 I 編碼器112、112A 第 2 編碼器113多路復(fù)用器115輸出部151移位量決定部152、153、252、255 位移位器154、155、253 運(yùn)算器200.200A圖像解碼裝置20IMVC 解碼器202、202A 加法器211、21IA 第 I 解碼器212、212A 第 2 解碼器213多路復(fù)用器
251移位量取得部254加法器Dl I、D23、D32、D32A、D54、D54A 基本層圖像D12、D24非基本層圖像D13、D33、D33A 重構(gòu)圖像D14、D21基本視比特流D15、D22非基本視比特流D16、D35、D35AMVC 比特流
D25、D53、D53A 圖像序列D31、D5610 位圖像D31A 12 位圖像D34、D34A、D55、D55A 增強(qiáng)層圖像D36、D51、D51A基本層比特流D37、D52、D52A增強(qiáng)層比特流D56A對象圖像
權(quán)利要求
1.一種圖像編碼裝置，將位深度比規(guī)定的大小大的對象圖像編碼，上述位深度表示每一個像素的信息容量，上述圖像編碼裝置具備 向下變換器，通過對上述對象圖像實(shí)施向下變換處理而生成基本層圖像，上述向下變換處理使位深度減小第I值，以使該對象圖像的位深度成為上述規(guī)定的大??； 第I編碼器，將上述基本層圖像編碼，并通過將編碼后的上述基本層圖像解碼而生成重構(gòu)圖像； 減法器，對上述重構(gòu)圖像實(shí)施使位深度增大第2值的移位量調(diào)整處理，基于被實(shí)施上述移位量調(diào)整處理后的重構(gòu)圖像和上述對象圖像，生成增強(qiáng)層圖像，該增強(qiáng)層圖像是用于提高上述基本層圖像的畫質(zhì)的圖像，并且是具有與上述基本層圖像相同的位深度的圖像；第2編碼器，將上述增強(qiáng)層圖像編碼；以及輸出部，輸出被編碼的上述基本層圖像和被編碼的上述增強(qiáng)層圖像。
2.如權(quán)利要求I所述的圖像編碼裝置， 上述減法器從使上述對象圖像的位深度減小作為上述第I值與上述第2值之差的第3值而得到的圖像所包含的多個像素的各像素值中，減去被實(shí)施上述移位量調(diào)整處理后的重構(gòu)圖像所包含的對應(yīng)的像素的像素值，并根據(jù)表示減去的結(jié)果的位信息中的、從低位起包含在上述規(guī)定的大小的范圍中的位信息，生成上述增強(qiáng)層圖像。
3.如權(quán)利要求I所述的圖像編碼裝置， 上述減法器具有移位量決定部，該移位量決定部基于上述基本層圖像、上述對象圖像、或上述重構(gòu)圖像所具有的特性，決定上述第2值； 上述輸出部還輸出與由上述移位量決定部決定的上述第2值對應(yīng)的值。
4.如權(quán)利要求3所述的圖像編碼裝置， 上述移位量決定部決定上述第2值，以使得上述對象圖像或上述基本層圖像的空間頻率成分中的低頻成分在視覺上越占主導(dǎo)地位，則上述第2值越大。
5.如權(quán)利要求I所述的圖像編碼裝置， 進(jìn)而，上述輸出部構(gòu)成為多路復(fù)用器，該多路復(fù)用器通過將編碼上述基本層圖像而得到的基本層比特流和編碼上述增強(qiáng)層圖像而得到的增強(qiáng)層比特流進(jìn)行多路復(fù)用，生成多視視頻編碼即MVC方式的比特流； 上述第I編碼器、上述第2編碼器和上述多路復(fù)用器構(gòu)成為MVC編碼器； 上述多路復(fù)用器對上述MVC方式的比特流附加與針對多個上述對象圖像決定的上述第2值對應(yīng)的值。
6.如權(quán)利要求I所述的圖像編碼裝置， 上述向下變換器通過將上述對象圖像所包含的多個像素的各像素值的位下移上述第I值的上述向下變換處理，生成上述基本層圖像； 上述減法器進(jìn)行如下處理 將上述重構(gòu)圖像所包含的多個像素的各像素值的位上移上述第2值； 將上述對象圖像所包含的多個像素的各像素值的位下移上述第I值與上述第2值之差; 根據(jù)下移后的上述對象圖像所包含的多個像素的各像素值與相對應(yīng)的上移后的上述重構(gòu)圖像所包含的多個像素的各像素值之差，生成上述增強(qiáng)層圖像。
7.如權(quán)利要求I所述的圖像編碼裝置， 上述向下變換器通過用上述對象圖像所包含的多個像素的各像素值除以規(guī)定的除數(shù)以使該對象圖像的位深度減小上述第I值的上述向下變換處理，生成上述基本層圖像；上述減法器進(jìn)行如下處理 對上述重構(gòu)圖像所包含的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使該重構(gòu)圖像的位深度增大上述第2值； 用上述對象圖像所包含的多個像素的各像素值除以規(guī)定的除數(shù)，以使該對象圖像的位深度減小上述第I值與上述第2值之差； 根據(jù)除法后的上述對象圖像所包含的多個像素的各像素值與相對應(yīng)的乘法后的上述 重構(gòu)圖像所包含的多個像素的各像素值之差，生成上述增強(qiáng)層圖像。
8.如權(quán)利要求2所述的圖像編碼裝置， 上述減法器對從使位深度減小上述第3值而得到的上述對象圖像所包含的多個像素的各像素值中減去被實(shí)施上述移位量調(diào)整處理后的上述重構(gòu)圖像所包含的對應(yīng)的像素的像素值而得到的值，加上用于使上述增強(qiáng)層圖像所包含的多個像素的各像素值成為正的值的規(guī)定的值。
9.一種圖像解碼裝置，從比特流解碼出位深度比規(guī)定的大小大第I值的對象圖像，上述位深度表示每一個像素的信息容量，上述圖像解碼裝置具備 第I解碼器，從上述比特流解碼出位深度為上述規(guī)定的大小的基本層圖像； 第2解碼器，從上述比特流解碼出位深度為上述規(guī)定的大小的增強(qiáng)層圖像；以及加法器，基于從上述比特流取得的第2值，將上述基本層圖像與上述增強(qiáng)層圖像相加，由此生成上述對象圖像。
10.如權(quán)利要求9所述的圖像解碼裝置， 上述加法器對上述基本層圖像實(shí)施使該圖像的位深度增大上述第2值的向上變換處理，并通過將實(shí)施上述向上變換處理后的基本層圖像與上述增強(qiáng)層圖像按彼此的圖像所包含的對應(yīng)的像素的像素值分別相加而合成，使合成得到的圖像的位深度增大作為上述第I值與上述第2值之差的第3值，由此生成上述對象圖像。
11.如權(quán)利要求9所述的圖像解碼裝置， 上述比特流是多視視頻編碼即MVC方式的比特流； 上述圖像解碼裝置還具備多路復(fù)用器，該多路復(fù)用器通過將解碼出的上述基本層圖像與解碼出的上述增強(qiáng)層圖像進(jìn)行多路復(fù)用而生成圖像序列； 上述第I解碼器、上述第2解碼器和上述多路復(fù)用器構(gòu)成為MVC解碼器； 上述加法器從上述MVC方式的比特流取得上述第2值。
12.如權(quán)利要求10所述的圖像解碼裝置， 上述加法器將上述基本層圖像所包含的多個像素的各像素值的位上移上述第2值，將上述合成得到的圖像所包含的多個像素的各像素值的位上移上述第3值，由此生成上述對象圖像。
13.如權(quán)利要求10所述的圖像解碼裝置， 上述加法器對上述基本層圖像所包含的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使該基本層圖像的位深度增大上述第2值，對上述合成得到的圖像所包含的多個像素的各像素值乘以規(guī)定的乘數(shù)，以使該合成得到的圖像的位深度增大上述第3值，由此生成上述對象圖像。
14.如權(quán)利要求9所述的圖像解碼裝置， 上述加法器在將上述基本層圖像與上述增強(qiáng)層圖像合成之前，從上述增強(qiáng)層圖像所包含的多個像素的各像素值中減去在編碼時加上的規(guī)定的值。
15.一種圖像編碼方法，將位深度比規(guī)定的大小大的對象圖像編碼，上述位深度表示每一個像素的信息容量，上述圖像編碼方法包括 向下變換步驟，通過對上述對象圖像實(shí)施向下變換處理而生成基本層圖像，上述向下變換處理使位深度減小第I值，以使該對象圖像的位深度成為上述規(guī)定的大??； 第I編碼步驟，將上述基本層圖像編碼，并通過將編碼后的上述基本層圖像解碼而生成重構(gòu)圖像； 減法步驟，對上述重構(gòu)圖像實(shí)施使位深度增大第2值的移位量調(diào)整處理，基于被實(shí)施上述移位量調(diào)整處理后的重構(gòu)圖像和上述對象圖像，生成增強(qiáng)層圖像，該增強(qiáng)層圖像是用于提高上述基本層圖像的畫質(zhì)的圖像，并且是具有與上述基本層圖像相同的位深度的圖像； 第2編碼步驟，將上述增強(qiáng)層圖像編碼；以及 輸出步驟，輸出被編碼的上述基本層圖像和被編碼的上述增強(qiáng)層圖像。
16.一種程序，使計(jì)算機(jī)執(zhí)行權(quán)利要求15所述的圖像編碼方法。
17.一種集成電路,將位深度比規(guī)定的大小大的對象圖像編碼,上述位深度表示每一個像素的信息容量，上述集成電路具備 向下變換器，通過對上述對象圖像實(shí)施向下變換處理而生成基本層圖像，上述向下變換處理使位深度減小第I值，以使該對象圖像的位深度成為上述規(guī)定的大??； 第I編碼器，將上述基本層圖像編碼，并通過將編碼后的上述基本層圖像解碼而生成重構(gòu)圖像； 減法器，對上述重構(gòu)圖像實(shí)施使位深度增大第2值的移位量調(diào)整處理，基于被實(shí)施上述移位量調(diào)整處理后的重構(gòu)圖像和上述對象圖像，生成增強(qiáng)層圖像，該增強(qiáng)層圖像是用于提高上述基本層圖像的畫質(zhì)的圖像，并且是具有與上述基本層圖像相同的位深度的圖像； 第2編碼器，將上述增強(qiáng)層圖像編碼；以及 輸出部，輸出被編碼的上述基本層圖像和被編碼的上述增強(qiáng)層圖像。
18.一種圖像解碼方法，從比特流解碼出位深度比規(guī)定的大小大第I值的對象圖像，上述位深度表示每一個像素的信息容量，上述圖像解碼方法包括 第I解碼步驟，從上述比特流解碼出位深度為上述規(guī)定的大小的基本層圖像； 第2解碼步驟，從上述比特流解碼出位深度為上述規(guī)定的大小的增強(qiáng)層圖像；以及 加法步驟，基于從上述比特流取得的第2值，將上述基本層圖像與上述增強(qiáng)層圖像相力口，由此生成上述對象圖像。
19.一種程序，使計(jì)算機(jī)執(zhí)行權(quán)利要求18所述的圖像解碼方法。
20.一種集成電路，從比特流解碼出位深度比規(guī)定的大小大第I值的對象圖像，上述位深度表示每一個像素的信息容量，上述集成電路具備 第I解碼器，從上述比特流解碼出位深度為上述規(guī)定的大小的基本層圖像；第2解碼 器，從上述比特流解碼出位深度為上述規(guī)定的大小的增強(qiáng)層圖像；以及加法器，基于從上述比特流取得的第2值，將上述基本層圖像與上述增強(qiáng)層圖像相加，由此生成上述對象圖像。
全文摘要
為了進(jìn)一步減少將位深度比編碼器的位深度大的圖像編碼時的數(shù)據(jù)量，有關(guān)本發(fā)明的圖像編碼裝置(100A)具備向下變換器(102A)，通過對上述對象圖像實(shí)施向下變換處理而生成基本層圖像，上述向下變換處理使位深度減小第1值，以使該對象圖像的位深度成為上述規(guī)定的大小；第1編碼器(111A)，將基本層圖像編碼并解碼，由此生成重構(gòu)圖像；減法器(103A)，對重構(gòu)圖像實(shí)施使位深度增大第2值的處理，基于被實(shí)施該處理后的重構(gòu)圖像和對象圖像，生成用于提高基本層圖像的畫質(zhì)的增強(qiáng)層圖像；第2編碼器(112A)，將增強(qiáng)層圖像編碼；以及輸出部(115)，輸出被編碼的基本層圖像和被編碼的增強(qiáng)層圖像。
文檔編號H04N7/32GK102771127SQ20118001034
公開日2012年11月7日 申請日期2011年12月21日 優(yōu)先權(quán)日2010年12月22日
發(fā)明者柏木吉一郎, 陳濤 申請人:松下電器產(chǎn)業(yè)株式會社