圖像編碼方法、圖像編碼裝置、圖像解碼方法、圖像解碼裝置及圖像編解碼裝置制造方法
【專利摘要】一種圖像編碼方法，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼方法包括：決定步驟（S201），決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第1導(dǎo)出步驟（S202），導(dǎo)出第1合并候選；判定步驟（S204），判定第1合并候選的數(shù)量是否小于最大數(shù)；第2導(dǎo)出步驟（S205），在判定為第1合并候選的數(shù)量小于最大數(shù)的情況下，導(dǎo)出第2合并候選；選擇步驟（S206），從第1合并候選和第2合并候選中選擇在進(jìn)行編碼對象塊的編碼時(shí)使用的合并候選；以及編碼步驟（S207），使用最大數(shù)對用于確定所選擇的合并候選的索引進(jìn)行編碼，將被編碼后的索引附加在比特流中。
【專利說明】圖像編碼方法、圖像編碼裝置、圖像解碼方法、圖像解碼裝置及圖像編解碼裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像編碼方法及圖像解碼方法。
【背景技術(shù)】
[0002]在運(yùn)動(dòng)圖像編碼處理中，通常利用運(yùn)動(dòng)圖像具有的空間方向及時(shí)間方向的冗余性進(jìn)行信息量的壓縮。其中，作為利用空間方向的冗余性的方法通常采用向頻域的變換。另外，作為利用時(shí)間方向的冗余性的方法，采用圖片間預(yù)測(以后稱為幀間(inter)預(yù)測)編碼處理。當(dāng)在幀間預(yù)測編碼處理中對某個(gè)圖片進(jìn)行編碼時(shí)，將按照顯示順序位于編碼對象圖片的前方或者后方的已編碼的圖片用作參照圖片。并且，通過相對于該參照圖片的編碼對象圖片的運(yùn)動(dòng)檢測來導(dǎo)出運(yùn)動(dòng)矢量。并且，根據(jù)所導(dǎo)出的運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)補(bǔ)償，并計(jì)算通過運(yùn)動(dòng)補(bǔ)償而得到的預(yù)測圖像數(shù)據(jù)與編碼對象圖片的圖像數(shù)據(jù)之差分，由此消除時(shí)間方向的冗余性(例如，參照非專利文獻(xiàn)I )。在此，在運(yùn)動(dòng)檢測中，計(jì)算編碼圖片內(nèi)的編碼對象塊與參照圖片內(nèi)的塊的差分值，將差分值為最小的參照圖片內(nèi)的塊決定為參照塊。并且，使用編碼對象塊和參照塊檢測運(yùn)動(dòng)矢量。
[0003]現(xiàn)有技術(shù)文獻(xiàn)
[0004]非專利文獻(xiàn)
[0005]非專利文獻(xiàn)1:1TU_T Recommendation` H.264 “Advanced video coding forgeneric audiovisual services，，，2010 年 3 月
[0006]非專利文獻(xiàn)2:JCT_VC, ^ffDS:Working Draft 3 of High-Efficiency VideoCoding”，JCTVC-E603, March 2011.發(fā)明概要
[0007]發(fā)明要解決的問題
[0008]但是，在上述現(xiàn)有技術(shù)中，期望提高采用幀間預(yù)測的圖像編碼及解碼的錯(cuò)誤容限(error tolerance)。

【發(fā)明內(nèi)容】

[0009]本發(fā)明的目的在于，提供一種圖像編碼方法及圖像解碼方法，能夠提高采用幀間預(yù)測的圖像編碼及解碼的錯(cuò)誤容限。
[0010]用于解決問題的手段
[0011]本發(fā)明的一個(gè)方式的圖像編碼方法，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼方法包括:決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出步驟，導(dǎo)出第I合并候選；判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)；第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選；選擇步驟，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述編碼對象塊的編碼時(shí)使用的合并候選；以及編碼步驟，使用所決定的所述最大數(shù)對用于確定所選擇的所述合并候選的索引進(jìn)行編碼，將被編碼后的所述索引附加在所述比特流中。
[0012]另外，本發(fā)明的全盤或者具體的方式也能夠以系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或者計(jì)算機(jī)能夠讀取的⑶-ROM (Compact Disc Read Only Memory)等存儲(chǔ)介質(zhì)的方式來實(shí)現(xiàn)，還能夠以系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序及存儲(chǔ)介質(zhì)的任意組合的方式來實(shí)現(xiàn)。
[0013]發(fā)明效果
[0014]根據(jù)本發(fā)明的一個(gè)方式，能夠提高采用幀間預(yù)測的圖像編碼及解碼的錯(cuò)誤容限?！緦＠綀D】

【附圖說明】
[0015]圖1A是用于說明B圖片中的參照圖片列表的一例的圖。
[0016]圖1B是表示B圖片中的預(yù)測方向0的參照圖片列表的一例的圖。
[0017]圖1C是表示B圖片中的預(yù)測方向I的參照圖片列表的一例的圖。
[0018]圖2是用于說明時(shí)間預(yù)測運(yùn)動(dòng)矢量模式中的運(yùn)動(dòng)矢量的圖。
[0019]圖3是表示在合并模式中使用的鄰接塊的運(yùn)動(dòng)矢量的一例的圖。
[0020]圖4是用于說明合并塊候選列表的一例的圖。
[0021]圖5是表示合并塊候選尺寸與對合并塊索引分配的比特序列的關(guān)系的圖。
[0022]圖6是表示使用合并模式時(shí)的編碼處理的一例的流程圖。
[0023]圖7是表示使用合并模式對圖像進(jìn)行編碼的圖像編碼裝置的結(jié)構(gòu)的一例的圖。
[0024]圖8是表示使用合并模式時(shí)的解碼處理的一例的流程圖。
[0025]圖9是表示對使用合并模式被編碼后的圖像進(jìn)行解碼的圖像解碼裝置的結(jié)構(gòu)的一例的圖。
[0026]圖10是表示將合并塊索引附加在比特流中時(shí)的句法的圖。
[0027]圖11是表示實(shí)施方式I的圖像編碼裝置的結(jié)構(gòu)的塊圖。
[0028]圖12是表示實(shí)施方式I的圖像編碼裝置的處理動(dòng)作的流程圖。
[0029]圖13是表不實(shí)施方式I的合并塊候選列表的一例的圖。
[0030]圖14是表示實(shí)施方式I的合并塊候選及合并塊候選列表尺寸的計(jì)算處理的流程圖。
[0031]圖15是表示實(shí)施方式I的可合并候選數(shù)的更新處理的流程圖。
[0032]圖16是表示實(shí)施方式I的新候選的追加處理的流程圖。
[0033]圖17是表示實(shí)施方式I的與合并塊候選的選擇相關(guān)的處理的流程圖。
[0034]圖18是表示實(shí)施方式2的圖像編碼裝置的結(jié)構(gòu)的塊圖。
[0035]圖19是表示實(shí)施方式2的圖像編碼裝置的處理動(dòng)作的流程圖。
[0036]圖20是表示實(shí)施方式3的圖像解碼裝置的結(jié)構(gòu)的塊圖。
[0037]圖21是表示實(shí)施方式3的圖像解碼裝置的處理動(dòng)作的流程圖。
[0038]圖22是表示實(shí)施方式3的合并塊候選列表尺寸的設(shè)定處理的流程圖。
[0039]圖23是表示實(shí)施方式3的合并塊候選的計(jì)算處理的流程圖。
[0040]圖24是表示將合并塊索引附加在比特流中時(shí)的句法的一例的圖。
[0041]圖25是表示將合并塊候選列表尺寸固定為合并塊候選數(shù)的最大值時(shí)的句法的一例的圖。
[0042]圖26是表示實(shí)施方式4的圖像解碼裝置的結(jié)構(gòu)的塊圖。
[0043]圖27是表示實(shí)施方式4的圖像解碼裝置的處理動(dòng)作的流程圖。
[0044]圖28是實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容供給系統(tǒng)的整體結(jié)構(gòu)圖。
[0045]圖29是數(shù)字廣播用系統(tǒng)的整體結(jié)構(gòu)圖。
[0046]圖30是表示電視機(jī)的結(jié)構(gòu)例的模塊圖。
[0047]圖31是表示對作為光盤的記錄介質(zhì)進(jìn)行信息的讀寫的信息再現(xiàn)/記錄部的結(jié)構(gòu)例的模塊圖。
[0048]圖32是表示作為光盤的記錄介質(zhì)的構(gòu)造例的圖。
[0049]圖33A是表示便攜電話的一例的圖。
[0050]圖33B是表示便攜電話的結(jié)構(gòu)例的模塊圖。
[0051]圖34是表示復(fù)用數(shù)據(jù)的結(jié)構(gòu)的圖。
[0052]圖35是示意地表示各流在復(fù)用數(shù)據(jù)中怎樣被復(fù)用的圖。
[0053]圖36是更詳細(xì)地表示在PES包序列中視頻流怎樣被保存的圖。
[0054]圖37是表示復(fù)用數(shù)據(jù)的TS包和源包的構(gòu)造的圖。
[0055]圖38是表示PMT的數(shù)據(jù)結(jié)構(gòu)的圖。
[0056]圖39是表示復(fù)用數(shù)據(jù)信息的內(nèi)部結(jié)構(gòu)的圖。
[0057]圖40是表示流屬性信息的內(nèi)部結(jié)構(gòu)的圖。
[0058]圖41是表示識(shí)別影像數(shù)據(jù)的步驟的圖。
[0059]圖42是表示實(shí)現(xiàn)各實(shí)施方式的運(yùn)動(dòng)圖像編碼方法及運(yùn)動(dòng)圖像解碼方法的集成電路的結(jié)構(gòu)例的模塊圖。
[0060]圖43是表示切換驅(qū)動(dòng)頻率的結(jié)構(gòu)的圖。
[0061]圖44是表示識(shí)別影像數(shù)據(jù)、切換驅(qū)動(dòng)頻率的步驟的圖。
[0062]圖45是表示將影像數(shù)據(jù)的標(biāo)準(zhǔn)與驅(qū)動(dòng)頻率建立了對應(yīng)的查找表的一例的圖。
[0063]圖46A是表示將信號(hào)處理部的模塊共用的結(jié)構(gòu)的一例的圖。
[0064]圖46B是表不將信號(hào)處理部的模塊共用的結(jié)構(gòu)的另一例的圖。
【具體實(shí)施方式】
[0065](作為本發(fā)明的基礎(chǔ)的見解)
[0066]在已經(jīng)標(biāo)準(zhǔn)化的被稱為H.264的運(yùn)動(dòng)圖像編碼方式中，為了壓縮信息量而采用I圖片、P圖片、B圖片這三種圖片類型。
[0067]I圖片在幀間預(yù)測編碼處理中不被編碼。也就是說，I圖片是在圖片內(nèi)預(yù)測(以后稱為幀內(nèi)(intra)預(yù)測)編碼處理中被編碼。對于P圖像，參照按照顯示時(shí)間順序位于編碼對象圖片的前方或者后方的已編碼的一個(gè)圖片進(jìn)行幀間預(yù)測編碼。對于B圖片，參照按照顯示事件順序位于編碼對象圖片的前方或者后方的已編碼的兩個(gè)圖片進(jìn)行幀間預(yù)測編碼。
[0068]在幀間預(yù)測編碼中，生成用于確定參照圖片的參照圖片列表。參照圖片列表是對在進(jìn)行幀間預(yù)測時(shí)參照的已編碼的參照圖片分配了參照圖片索引的列表。例如，在B圖片中能夠參照兩個(gè)圖片進(jìn)行編碼，因而生成兩個(gè)參照圖片列表(L0、LI)。
[0069]圖1A是用于說明B圖片中的參照圖片列表的一例的圖。圖1B表示雙向預(yù)測中的預(yù)測方向O的參照圖片列表O (LO)的一例。其中，在參照圖片列表0中，參照圖片索引0的值0被分配給顯示順序2的參照圖片O。并且，參照圖片索引0的值I被分配給顯示順序I的參照圖片I。并且，參照圖片索引0的值2被分配給顯示順序0的參照圖片2。BP,按照顯示順序在時(shí)間上越接近編碼對象圖片的參照圖片，被分配具有越小的值的參照圖片索引。
[0070]另一方面，圖1C表示雙向預(yù)測中的預(yù)測方向I的參照圖片列表I (LI)的一例。其中，在參照圖片列表I中，參照圖片索引I的值0被分配給顯示順序I的參照圖片I。并且，參照圖片索引I的值I被分配給顯示順序2的參照圖片O。并且，參照圖片索引2的值2被分配給顯示順序0的參照圖片2。
[0071]這樣，針對各參照圖片，能夠按照每個(gè)預(yù)測方向分配不同的參照圖片索引的值(圖1A的參照圖片0、1)、或者分配相同的參照圖片索引的值(圖1A的參照圖片2)。
[0072]另外，在被稱為H.264的運(yùn)動(dòng)圖像編碼方式(非專利文獻(xiàn)I)中，B圖片中的各編碼對象塊的幀間預(yù)測的編碼模式采用運(yùn)動(dòng)矢量檢測模式。在運(yùn)動(dòng)矢量檢測模式中，預(yù)測圖像數(shù)據(jù)與編碼對象塊的圖像數(shù)據(jù)的差分值、以及在生成預(yù)測圖像數(shù)據(jù)時(shí)使用的運(yùn)動(dòng)矢量被進(jìn)行編碼。并且，在運(yùn)動(dòng)矢量檢測模式中，關(guān)于預(yù)測方向能夠選擇雙向預(yù)測和單向預(yù)測。在雙向預(yù)測中，參照位于編碼對象圖片的前方或者后方的已經(jīng)被編碼的兩個(gè)圖片來生成預(yù)測圖像。在單向預(yù)測中，參照位于編碼對象圖片的前方或者后方的已經(jīng)被編碼的一個(gè)圖片來生成預(yù)測圖像。
[0073]另外，在被稱為H.264的運(yùn)動(dòng)圖像編碼方式中，當(dāng)在對B圖片進(jìn)行編碼中導(dǎo)出運(yùn)動(dòng)矢量時(shí)，能夠選擇被稱為時(shí)間預(yù)測運(yùn)動(dòng)矢量模式的編碼模式。使用圖2說明時(shí)間預(yù)測運(yùn)動(dòng)矢量模式中的幀間預(yù)測編碼方法。
[0074]圖2是用于說明時(shí)間預(yù)測運(yùn)動(dòng)矢量模式中的運(yùn)動(dòng)矢量的圖。具體地講，圖2表示以時(shí)間預(yù)測運(yùn)動(dòng)矢量模式對圖片B2的塊a進(jìn)行編碼的情況。
[0075]在此，利用了在對位于圖片B2后方的參照圖片即圖片P3中的、位于與塊a相同位置的塊b (以后稱為“co-located塊”)進(jìn)行編碼時(shí)使用的運(yùn)動(dòng)矢量vb。運(yùn)動(dòng)矢量vb是在參照圖片Pl對塊b進(jìn)行編碼時(shí)使用的運(yùn)動(dòng)矢量。
[0076]使用與運(yùn)動(dòng)矢量Vb平行的運(yùn)動(dòng)矢量，從作為前方參照圖片的圖片Pl和作為后方參照圖片的圖片P3取得塊a用的兩個(gè)參照塊。并且，根據(jù)所取得的兩個(gè)參照塊進(jìn)行雙向預(yù)測，由此對塊a進(jìn)行編碼。即，在對塊a進(jìn)行編碼時(shí)使用的運(yùn)動(dòng)矢量，針對圖片Pl是指運(yùn)動(dòng)矢量val，針對圖片P3是指運(yùn)動(dòng)矢量va2。
[0077]另外，關(guān)于B圖片或者P圖片中的各編碼對象塊的幀間預(yù)測模式，正在研究合并模式(非專利文獻(xiàn)2)。在合并模式中，復(fù)制在對編碼對象塊的鄰接塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，來進(jìn)行編碼對象塊的編碼。此時(shí)，在復(fù)制時(shí)使用的矢量塊的索引等被附加在比特流中。因此，能夠在解碼側(cè)選擇在進(jìn)行編碼時(shí)使用的運(yùn)動(dòng)方向、運(yùn)動(dòng)矢量及參照圖片索引。關(guān)于具體示例，參照圖3進(jìn)行說明。
[0078]圖3是表示在合并模式中使用的鄰接塊的運(yùn)動(dòng)矢量的一例的圖。在圖3中，鄰接塊A是編碼對象塊的左側(cè)鄰接的已編碼塊。鄰接塊B是編碼對象塊的上側(cè)鄰接的已編碼塊。鄰接塊C是編碼對象塊的右上側(cè)鄰接的已編碼塊。鄰接塊D是編碼對象塊的左下側(cè)鄰接的已編碼塊。[0079]并且，鄰接塊A是按照預(yù)測方向0的單向預(yù)測被進(jìn)行了編碼的塊。鄰接塊A具有預(yù)測方向0的運(yùn)動(dòng)矢量MvL0_A，作為針對預(yù)測方向0的參照圖片索引RefL0_A所示出的參照圖片的運(yùn)動(dòng)矢量。其中，MvLO表示參照利用參照圖片列表0 (LO)所確定的參照圖片的運(yùn)動(dòng)矢量。并且，MvLl表示參照利用參照圖片列表I (LI)所確定的參照圖片的運(yùn)動(dòng)矢量。
[0080]另外，鄰接塊B是按照預(yù)測方向I的單向預(yù)測被進(jìn)行了編碼的塊。鄰接塊B具有預(yù)測方向I的運(yùn)動(dòng)矢量MvLl_B，作為針對預(yù)測方向I的參照圖片索引RefLl_B所示出的參照圖片的運(yùn)動(dòng)矢量。
[0081]另外，鄰接塊C是按照幀內(nèi)預(yù)測被進(jìn)行了編碼的塊。
[0082]另外，鄰接塊D是按照預(yù)測方向0的單向預(yù)測被進(jìn)行了編碼的塊。鄰接塊D具有預(yù)測方向0的運(yùn)動(dòng)矢量MvL0_D，作為針對預(yù)測方向0的參照圖片索引RefL0_D所示出的參照圖片的運(yùn)動(dòng)矢量。
[0083]在這種情況下，例如從鄰接塊A?D的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引、以及使用co-located塊求出的基于時(shí)間預(yù)測運(yùn)動(dòng)矢量模式的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引中，選擇編碼效率最好的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引，作為編碼對象塊的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引。并且，表示所選擇的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引的塊的合并塊索引被附加在比特流中。
[0084]例如，在選擇了鄰接塊A的情況下，使用預(yù)測方向0的運(yùn)動(dòng)矢量MvL0_A和參照圖片索引RefL0_A對編碼對象塊進(jìn)行編碼。并且，只有表示如圖4所示的使用了鄰接塊A的合并塊索引的值0被附加在比特流中。由此，能夠削減預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引
的信息量。
[0085]并且，如圖4所示，在合并模式中，不能用于編碼的候選(以后稱為“不能合并候選”)、或者預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合彼此一致的候選(以后稱為“重復(fù)候選”)，被從合并塊候選中刪除。
[0086]這樣，通過削減合并塊候選數(shù)量，能夠削減分配給合并塊索引的代碼量。其中，所謂不能進(jìn)行合并是指合并塊候選(I)是按照幀內(nèi)預(yù)測已被編碼后的塊、(2)是包括編碼對象塊的切片(slice)或者圖片的邊界外的塊、或者(3)是尚未被進(jìn)行編碼的塊等。
[0087]在圖4的示例中，按照幀內(nèi)預(yù)測對鄰接塊C進(jìn)行編碼。因此，合并塊索引3的合并塊候選是不能合并候選，被從合并塊候選列表中刪除。另外，鄰接塊D的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引與鄰接塊A—致。因此，合并塊索引4的合并塊候選被從合并塊候選列表中刪除。其結(jié)果是，最終的合并塊候選數(shù)量是3，合并塊候選列表的列表尺寸被設(shè)定為3。
[0088]如圖5所示，合并塊索引按照合并塊候選列表尺寸的大小被分配比特序列，并被實(shí)施可變長度編碼。這樣，在合并模式中，使分配給合并模式索引的比特序列根據(jù)合并塊候選列表尺寸的大小而變化，由此削減代碼量。
[0089]圖6是表示使用合并模式時(shí)的編碼處理的一例的流程圖。在步驟S1001，從鄰接塊和co-located塊取得合并塊候選的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向。在步驟S1002，從合并塊候選中刪除重復(fù)候選和不能合并候選。在步驟S1003，將刪除處理后的合并塊候選數(shù)量設(shè)定為合并塊候選列表尺寸。在步驟S1004，決定在進(jìn)行編碼對象塊的編碼時(shí)使用的合并塊索引。在步驟S1005，使用根據(jù)合并塊候選列表尺寸而決定的比特序列，對所決定的合并塊索引進(jìn)行可變長度編碼。[0090]圖7表示使用合并模式對圖像進(jìn)行編碼的圖像編碼裝置1000的結(jié)構(gòu)的一例。圖像編碼裝置1000具有加法部1001、正交變換部1002、量化部1003、逆量化部1004、逆正交變換部1005、加法部1006、塊存儲(chǔ)器1007、幀存儲(chǔ)器1008、幀內(nèi)預(yù)測部1009、幀間預(yù)測部1010、幀間預(yù)測控制部1011、圖片類型決定部1012、開關(guān)1013、合并塊候選計(jì)算部1014、colPic存儲(chǔ)器1015、和可變長度編碼部1016。
[0091]在圖7中，合并塊候選計(jì)算部1014計(jì)算合并塊候選。并且，合并塊候選計(jì)算部1014將計(jì)算出的合并塊候選數(shù)發(fā)送給可變長度編碼部1016?？勺冮L度編碼部1016將合并塊候選數(shù)設(shè)定為作為編碼參數(shù)的合并塊候選列表尺寸。并且，可變長度編碼部1016對在進(jìn)行編碼時(shí)使用的合并塊索引分配與合并塊候選列表尺寸對應(yīng)的比特序列，并對所分配的比特序列進(jìn)行可變長度編碼。
[0092]圖8是表示使用合并模式時(shí)的解碼處理的一例的流程圖。在步驟S2001，從鄰接塊和co-located塊取得合并塊候選的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向。在步驟S2002，從合并塊候選中刪除重復(fù)候選和不能合并候選。在步驟S2003，將刪除處理后的合并塊候選數(shù)量設(shè)定為合并塊候選列表尺寸。在步驟S2004，使用合并塊候選列表尺寸對比特流中在進(jìn)行解碼對象塊的解碼時(shí)使用的合并塊索引進(jìn)行解碼。在步驟S2005，使用被解碼后的合并塊索引所示出的合并塊候選，生成預(yù)測圖像并進(jìn)行解碼處理。
[0093]圖9表示對使用合并模式被編碼后的圖像進(jìn)行解碼的圖像解碼裝置2000的結(jié)構(gòu)的一例。圖像解碼裝置2000具有可變長度解碼部2001、逆量化部2002、逆正交變換部2003、加法部2004、塊存儲(chǔ)器2005、幀存儲(chǔ)器2006、幀內(nèi)預(yù)測部2007、幀間預(yù)測部2008、幀間預(yù)測控制部2009、開關(guān)2010、合并塊候選計(jì)算部2011和colPic存儲(chǔ)器2012。
[0094]在圖9中，合并塊候選計(jì)算部2011計(jì)算合并塊候選。并且，合并塊候選計(jì)算部2011將計(jì)算出的合并塊候選的數(shù)量(合并塊候選數(shù))發(fā)送給可變長度解碼部2001。可變長度解碼部2001將合并塊候選數(shù)設(shè)定為作為解碼參數(shù)的合并塊候選列表尺寸。并且，可變長度解碼部2001使用合并塊候選列表尺寸對包含于比特流中的合并塊索引進(jìn)行解碼。
[0095]圖10表示將合并塊索引附加在比特流中時(shí)的句法。在圖10中，merge_idx表示合并塊索引。merge_flag表示合并標(biāo)志。NumMergeCand表示合并塊候選列表尺寸。對該NumMergeCand設(shè)定有從合并塊候選中刪除不能合并候選和重復(fù)候選后的合并塊候選數(shù)。
[0096]按照以上所述，使用合并模式對圖像進(jìn)行編碼或者解碼。
[0097]但是，在上述的合并模式中，對于在對合并塊索引進(jìn)行編碼或者解碼時(shí)使用的合并塊候選列表尺寸，設(shè)定合并塊候選數(shù)。該合并塊候選數(shù)能夠在使用包括co-located塊等在內(nèi)的參照圖片信息刪除不能合并候選或者重復(fù)候選后得到。
[0098]因此，當(dāng)在圖像編碼裝置和圖像解碼裝置中產(chǎn)生合并塊候選數(shù)不一致的情況下等，對合并塊索引分配的比特序列在圖像編碼裝置和圖像解碼裝置中產(chǎn)生不一致。其結(jié)果是，存在圖像解碼裝置不能對比特流進(jìn)行正確解碼的情況。
[0099]例如，在作為co-located塊而參照的參照圖片的信息由于在傳輸路徑等中產(chǎn)生的包損耗等而丟失的情況下，將導(dǎo)致co-located塊的運(yùn)動(dòng)矢量或者參照圖片索引不明確。因此，從co-located塊生成的合并塊候選的信息不明確。在這種情況下，在進(jìn)行解碼時(shí)將不能從合并塊候選中準(zhǔn)確刪除不能合并候選或者重復(fù)候選。其結(jié)果是，圖像解碼裝置不能正確求出合并塊候選列表尺寸，進(jìn)而不能正確對合并塊索引進(jìn)行解碼。[0100]因此，本發(fā)明的一個(gè)方式的圖像編碼方法，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼方法包括:決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出步驟，導(dǎo)出第I合并候選；判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)；第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選；選擇步驟，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述編碼對象塊的編碼時(shí)使用的合并候選；以及編碼步驟，使用所決定的所述最大數(shù)對用于確定所選擇的所述合并候選的索引進(jìn)行編碼，將被編碼后的所述索引附加在所述比特流中。
[0101]根據(jù)該方式，能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行編碼。即，能夠在不依據(jù)實(shí)際導(dǎo)出的合并候選的數(shù)量的情況下對索引進(jìn)行編碼。因此，即使是導(dǎo)出合并候選所需要的信息(例如co-located塊等的信息)丟失的情況下，也能夠在解碼側(cè)對索引進(jìn)行解碼，并能夠提高錯(cuò)誤容限。另外，在解碼側(cè)，能夠在不依據(jù)實(shí)際導(dǎo)出的合并候選的數(shù)量的情況下對索引進(jìn)行解碼。即，在解碼側(cè)，不需等待合并候選的導(dǎo)出處理，即可進(jìn)行索引的解碼處理。即，能夠生成能夠并行進(jìn)行合并候選的導(dǎo)出處理和索引的解碼處理的比特流。
[0102]另外，根據(jù)該方式，能夠在判定為第I合并候選的數(shù)量小于最大數(shù)的情況下導(dǎo)出第2合并候選。因此，能夠在不超過最大數(shù)的范圍內(nèi)增加合并候選的數(shù)量，能夠提高編碼效率。
[0103]例如，也可以是，在所述第I導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為所述第I合并候選。
[0104]根據(jù)該方式，能夠?qū)㈩A(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選重復(fù)的合并候選，從第I合并候選中排除。其結(jié)果是，能夠增加第2合并候選的數(shù)量，能夠增加作為合并候選而能選擇的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合的種類。因此，能夠進(jìn)一步提高編碼效率。
[0105]例如，也可以是，在所述第I導(dǎo)出步驟中，根據(jù)在對與所述編碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出所述第I合并候選。
[0106]根據(jù)該方式，能夠根據(jù)在對與編碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出第I合并候選。
[0107]例如，也可以是，在所述第I導(dǎo)出步驟中，導(dǎo)出在對與所述編碼對象塊在空間上鄰接的塊之中、除已按照幀內(nèi)預(yù)測被進(jìn)行了編碼的塊、位于包括所述編碼對象塊的切片或者圖片的邊界外的塊、以及尚未被進(jìn)行編碼的塊之外的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為所述第I合并候選。
[0108]根據(jù)該方式，能夠從適合于得到合并候選的塊導(dǎo)出第I合并候選。
[0109]例如，也可以是，在所述第2導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與所述第I合并候選不同的合并候選，作為所述第2合并候選。
[0110]根據(jù)該方式，能夠?qū)С鲱A(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與第I合并候選不同的合并候選，作為第2合并候選。因此，能夠增加預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合不同的合并候選，能夠進(jìn)一步提高編碼效率。
[0111]例如，也可以是，在所述編碼步驟中，還將表示所決定的所述最大數(shù)的信息附加在所述比特流中。
[0112]根據(jù)該方式，能夠?qū)⒈硎舅鶝Q定的最大數(shù)的信息附加在比特流中。因此，能夠以合適的單位切換最大數(shù)，能夠提高編碼效率。
[0113]例如，也可以是，所述圖像編碼方法還包括:切換步驟，將編碼處理切換為依據(jù)于第I標(biāo)準(zhǔn)的第I編碼處理或者依據(jù)于第2標(biāo)準(zhǔn)的第2編碼處理；以及附加步驟，將表示被切換后的所述編碼處理所依據(jù)的所述第I標(biāo)準(zhǔn)或者所述第2標(biāo)準(zhǔn)的識(shí)別信息附加在所述比特流中，在所述編碼處理被切換為所述第I編碼處理的情況下，作為所述第I編碼處理，執(zhí)行所述決定步驟、所述第I導(dǎo)出步驟、所述判定步驟、所述第2導(dǎo)出步驟、所述選擇步驟、和所述編碼步驟。
[0114]根據(jù)該方式，能夠切換依據(jù)于第I標(biāo)準(zhǔn)的第I編碼處理和依據(jù)于第2標(biāo)準(zhǔn)的第2編碼處理。
[0115]另外，本發(fā)明的一個(gè)方式的圖像解碼方法按照每個(gè)塊對包含于比特流中的編碼圖像進(jìn)行解碼，該圖像解碼方法包括:決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行解碼對象塊的解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出步驟，導(dǎo)出第I合并候選；判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)；第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選；解碼步驟，使用所決定的所述最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在所述比特流中的已被編碼的索引；以及選擇步驟，根據(jù)被解碼后的所述索引，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述解碼對象塊的解碼時(shí)使用的合并候選。
[0116]根據(jù)該方式，能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行解碼。即，能夠在不依據(jù)實(shí)際導(dǎo)出的合并候選的數(shù)量的情況下對索引進(jìn)行解碼。因此，即使是導(dǎo)出合并候選所需要的信息(例如co-located塊等的信息)丟失的情況下，也能夠?qū)λ饕M(jìn)行解碼，并能夠提高錯(cuò)誤容限。另外，不需等待合并候選的導(dǎo)出處理，即可進(jìn)行索引的解碼處理，也能夠并行進(jìn)行合并候選的導(dǎo)出處理和索引的解碼處理。
[0117]另外，根據(jù)該方式，能夠在判定為第I合并候選的數(shù)量小于最大數(shù)的情況下導(dǎo)出第2合并候選。因此，能夠在不超過最大數(shù)的范圍內(nèi)增加合并候選的數(shù)量，能夠適當(dāng)?shù)貙μ岣吡司幋a效率的比特流進(jìn)行解碼。
[0118]例如，也可以是，在所述第I導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為所述第I合并候選。
[0119]根據(jù)該方式，能夠?qū)㈩A(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選重復(fù)的合并候選，從第I合并候選中排除。其結(jié)果是，能夠增加第2合并候選的數(shù)量，能夠增加作為合并候選而能選擇的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合的種類。因此，能夠適當(dāng)?shù)貙M(jìn)一步提高了編碼效率的比特流進(jìn)行解碼。
[0120]例如，也可以是，在所述第I導(dǎo)出步驟中，根據(jù)在對與所述解碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出所述第I合并候選。
[0121]根據(jù)該方式，能夠根據(jù)在對與解碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出第I合并候選。[0122]例如，也可以是，在所述第I導(dǎo)出步驟中，導(dǎo)出在對與所述解碼對象塊在空間上鄰接的塊之中、除已按照幀內(nèi)預(yù)測被進(jìn)行了解碼的塊、位于包括所述解碼對象塊的切片或者圖片的邊界外的塊、以及尚未被進(jìn)行解碼的塊之外的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為所述第I合并候選。
[0123]根據(jù)該方式，能夠從適合于得到合并候選的塊導(dǎo)出第I合并候選。
[0124]例如，也可以是，在所述第2導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與所述第I合并候選不同的合并候選，作為所述第2合并候選。
[0125]根據(jù)該方式，能夠?qū)С鲱A(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與第I合并候選不同的合并候選，作為第2合并候選。因此，能夠增加預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合不同的合并候選，能夠適當(dāng)?shù)貙M(jìn)一步提高了編碼效率的比特流進(jìn)行解碼。
[0126]例如，也可以是，在所述決定步驟中，根據(jù)表示被附加在所述比特流中的最大數(shù)的信息，決定所述最大數(shù)。
[0127]根據(jù)該方式，能夠根據(jù)被附加在比特流中的信息來決定最大數(shù)。因此，能夠以合適的單位切換最大數(shù)，并對已被編碼的圖像進(jìn)行解碼。
[0128]例如，也可以是，所述圖像解碼方法還包括切換步驟，根據(jù)被附加在所述比特流中的表示第I標(biāo)準(zhǔn)或者第2標(biāo)準(zhǔn)的識(shí)別信息，將解碼處理切換為依據(jù)于所述第I標(biāo)準(zhǔn)的第I解碼處理或者依據(jù)于所述第2標(biāo)準(zhǔn)的第2解碼處理，在所述解碼處理被切換為第I解碼處理的情況下，作為所述第I解碼處理，執(zhí)行所述決定步驟、所述第I導(dǎo)出步驟、所述判定步驟、所述第2導(dǎo)出步驟、所述解碼步驟、和所述選擇步驟。
[0129]根據(jù)該方式，能夠切換依據(jù)于第I標(biāo)準(zhǔn)的第I解碼處理和依據(jù)于第2標(biāo)準(zhǔn)的第2解碼處理。
[0130]另外，本發(fā)明的全盤或者具體的方式也能夠以系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或者計(jì)算機(jī)能夠讀取的CD-ROM等存儲(chǔ)介質(zhì)的方式來實(shí)現(xiàn)，還能夠以系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序及存儲(chǔ)介質(zhì)的任意組合的方式來實(shí)現(xiàn)。
[0131]下面，參照附圖具體說明本發(fā)明的一個(gè)方式的圖像編碼裝置和圖像解碼裝置。
[0132]另外，下面說明的實(shí)施方式均用于示出本發(fā)明的一個(gè)具體示例。在下面的實(shí)施方式中示出的數(shù)值、形狀、材料、構(gòu)成要素、構(gòu)成要素的配置位置及連接方式、步驟、步驟的順序等僅是一例，其主旨不是限定本發(fā)明。并且，關(guān)于下面的實(shí)施方式的構(gòu)成要素中、沒有在表示本發(fā)明的最上位概念的獨(dú)立權(quán)利要求中記載的構(gòu)成要素，作為任意的構(gòu)成要素進(jìn)行說明。
[0133](實(shí)施方式I)
[0134]圖11是表示實(shí)施方式I的圖像編碼裝置100的結(jié)構(gòu)的塊圖。圖像編碼裝置100通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流。
[0135]圖像編碼裝置100如圖11所示具有加法部101、正交變換部102、量化部103、逆量化部104、逆正交變換部105、加法部106、塊存儲(chǔ)器107、幀存儲(chǔ)器108、幀內(nèi)預(yù)測部109、幀間預(yù)測部110、幀間預(yù)測控制部111、圖片類型決定部112、開關(guān)113、合并塊候選計(jì)算部114、colPic存儲(chǔ)器115、和可變長度編碼部116。
[0136]加法部101對于每個(gè)塊，從包含于輸入圖像列中的輸入圖像數(shù)據(jù)減去預(yù)測圖像數(shù)據(jù)，由此生成預(yù)測誤差數(shù)據(jù)。
[0137]正交變換部102對所生成的預(yù)測誤差數(shù)據(jù)進(jìn)行從圖像區(qū)域向頻域的變換。
[0138]量化部103對被變換到頻域中的預(yù)測誤差數(shù)據(jù)進(jìn)行量化處理。
[0139]逆量化部104對由量化部103進(jìn)行量化處理后的預(yù)測誤差數(shù)據(jù)進(jìn)行逆量化處理。
[0140]逆正交變換部105對于被實(shí)施逆量化處理后的預(yù)測誤差數(shù)據(jù)，進(jìn)行從頻域向圖像區(qū)域的變換。
[0141]加法部106對于每個(gè)塊，將預(yù)測圖像數(shù)據(jù)、和由逆正交變換部105進(jìn)行逆量化處理后的預(yù)測誤差數(shù)據(jù)相加，由此生成重構(gòu)建圖像數(shù)據(jù)。
[0142]在塊存儲(chǔ)器107中以塊單位保存重構(gòu)建圖像數(shù)據(jù)。
[0143]在幀存儲(chǔ)器108中以幀單位保存重構(gòu)建圖像數(shù)據(jù)。
[0144]圖片類型決定部112決定按照I圖片、B圖片、P圖片中的哪種圖片類型對輸入圖像數(shù)據(jù)進(jìn)行編碼。并且，圖片類型決定部112生成表示所決定的圖片類型的圖片類型信息。
[0145]幀內(nèi)預(yù)測部109使用在塊存儲(chǔ)器107中保存的塊單位的重構(gòu)建圖像數(shù)據(jù)進(jìn)行幀內(nèi)預(yù)測，由此生成編碼對象塊的幀內(nèi)預(yù)測圖像數(shù)據(jù)。
[0146]幀間預(yù)測部110使用在幀存儲(chǔ)器108中保存的幀單位的重構(gòu)建圖像數(shù)據(jù)、和通過運(yùn)動(dòng)檢測等導(dǎo)出的運(yùn)動(dòng)矢量進(jìn)行幀間預(yù)測，由此生成編碼對象塊的幀間預(yù)測圖像數(shù)據(jù)。
[0147]在編碼對象塊被實(shí)施幀內(nèi)預(yù)測編碼的情況下，開關(guān)113將由幀內(nèi)預(yù)測部109生成的幀內(nèi)預(yù)測圖像數(shù)據(jù)作為編碼對象塊的預(yù)測圖像數(shù)據(jù)輸出給加法部101和加法部106。另一方面，在編碼對象塊被實(shí)施了幀間預(yù)測編碼的情況下，開關(guān)113將由幀間預(yù)測部110生成的幀間預(yù)測圖像數(shù)據(jù)作為編碼對象塊的預(yù)測圖像數(shù)據(jù)輸出給加法部101和加法部106。
[0148]合并塊候選計(jì)算部114使用編碼對象塊的鄰接塊的運(yùn)動(dòng)矢量等、以及被存儲(chǔ)在colPic存儲(chǔ)器115中的co-located塊的運(yùn)動(dòng)矢量等(colPic信息)，導(dǎo)出合并模式的合并塊候選。并且，合并塊候選計(jì)算部114利用后述的方法計(jì)算可合并候選數(shù)。
[0149]并且，合并塊候選計(jì)算部114對所導(dǎo)出的合并塊候選分配合并塊索引的值。并且，合并塊候選計(jì)算部114將合并塊候選和合并塊索引發(fā)送給幀間預(yù)測控制部111。并且，合并塊候選計(jì)算部114將計(jì)算出的可合并候選數(shù)發(fā)送給可變長度編碼部116。
[0150]幀間預(yù)測控制部111選擇使用通過運(yùn)動(dòng)檢測而導(dǎo)出的運(yùn)動(dòng)矢量的預(yù)測模式(運(yùn)動(dòng)檢測模式)、和使用從合并塊候選導(dǎo)出的運(yùn)動(dòng)矢量的預(yù)測模式(合并模式)中、能夠得到最小的預(yù)測誤差的預(yù)測模式。并且，幀間預(yù)測控制部111將表示預(yù)測模式是否是合并模式的合并標(biāo)志發(fā)送給可變長度編碼部116。并且，在選擇了合并模式作為預(yù)測模式的情況下，幀間預(yù)測控制部111將與所決定的合并塊候選對應(yīng)的合并塊索引發(fā)送給可變長度編碼部116。另外，幀間預(yù)測控制部111將包括編碼對象塊的運(yùn)動(dòng)矢量等的colPic信息傳輸給COlPiC存儲(chǔ)器115。
[0151]可變長度編碼部116對被實(shí)施量化處理后的預(yù)測誤差數(shù)據(jù)、及合并標(biāo)志和圖片類型信息進(jìn)行可變長度編碼處理，由此生成比特流。并且，可變長度編碼部116將可合并候選數(shù)設(shè)定為合并塊候選列表尺寸。并且，可變長度編碼部116對在進(jìn)行編碼時(shí)使用的合并塊索引分配與合并塊候選列表尺寸對應(yīng)的比特序列，并對所分配的比特序列進(jìn)行可變長度編碼。
[0152]圖12是表示實(shí)施方式I的圖像編碼裝置100的處理動(dòng)作的流程圖。[0153]在步驟S101,合并塊候選計(jì)算部114從編碼對象塊的鄰接塊及co-loctaed塊中導(dǎo)出合并塊候選。并且，合并塊候選計(jì)算部114利用后述的方法計(jì)算合并塊候選列表尺寸。
[0154]例如，在如圖3所示的情況下，合并塊候選計(jì)算部114選擇鄰接塊A?D作為合并塊候選。另外，合并塊候選計(jì)算部114計(jì)算具有按照時(shí)間預(yù)測模式從co-loctaed塊的運(yùn)動(dòng)矢量計(jì)算出的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向的co-loctaed合并塊，作為合并塊候選。
[0155]合并塊候選計(jì)算部114按照圖13 Ca)所示對各合并塊候選分配合并塊索引。并且，合并塊候選計(jì)算部114利用后述的方法進(jìn)行不能合并候選及重復(fù)候選的刪除、和新候選的追加，由此計(jì)算如圖13 (b)所示的合并塊候選列表和合并塊候選列表尺寸。
[0156]合并塊索引在其值越小時(shí)被分配越短的代碼。即，在合并塊索引的值較小的情況下，合并塊索引所需要的信息量減少。
[0157]另一方面，在合并塊索引的值增大時(shí)，合并塊索引所需要的信息量增大。因此，如果對具有精度更高的運(yùn)動(dòng)矢量和參照圖片索引的可能性較大的合并塊候選，分配值較小的合并塊索引，則編碼效率提高。
[0158]因此，也可以是，合并塊候選計(jì)算部114例如對于每個(gè)合并塊候選測定被選擇為合并塊的次數(shù)，對其次數(shù)較多的塊分配值較小的合并塊索引。具體地講，可以考慮確定在鄰接塊中被選擇的合并塊，在進(jìn)行對象塊的編碼時(shí)，減小針對所確定的合并塊的合并塊索引的值。
[0159]另外，在不具有運(yùn)動(dòng)矢量等的信息的情況下(對于按照幀內(nèi)預(yù)測被實(shí)施編碼的塊、位于圖片或切片的邊界外等的塊、或者尚未被實(shí)施編碼的塊等)，合并塊候選不能被用于編碼。
[0160]在本實(shí)施方式中，將不能用于編碼的合并塊候選稱為不能合并候選。并且，將能夠用于編碼的合并塊候選稱為可合并候選。并且，在多個(gè)合并塊候選中，將運(yùn)動(dòng)矢量、參照圖片索引及預(yù)測方向全部與其它任意一個(gè)合并塊候選一致的候選稱為重復(fù)候選。
[0161]在圖3所示的情況下，鄰接塊C是按照幀內(nèi)預(yù)測被實(shí)施編碼的塊，因而設(shè)為不能合并候選。另外，鄰接塊D由于其運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向全部與鄰接塊A—致，因而設(shè)為重復(fù)候選。
[0162]在步驟S102，幀間預(yù)測控制部111利用后述的方法，將使用通過運(yùn)動(dòng)檢測而導(dǎo)出的運(yùn)動(dòng)矢量生成的預(yù)測圖像的預(yù)測誤差、和使用從合并塊候選得到的運(yùn)動(dòng)矢量生成的預(yù)測圖像的預(yù)測誤差進(jìn)行比較，并選擇預(yù)測模式。在此，如果所選擇的預(yù)測模式是合并模式，幀間預(yù)測控制部111將合并標(biāo)志設(shè)定為1，否則將合并標(biāo)志設(shè)定為O。
[0163]在步驟S103，判定合并標(biāo)志是否為I (即，預(yù)測模式是否是合并模式)。
[0164]在此，如果步驟S103的判定結(jié)果為真(S103:是)，在步驟S104，可變長度編碼部116將合并標(biāo)志附加在比特流中。另外，在步驟S105，可變長度編碼部116對在進(jìn)行編碼時(shí)使用的合并塊候選的合并塊索引分配如圖5所示的與合并塊候選列表尺寸對應(yīng)的比特序列。并且，可變長度編碼部116對所分配的比特序列進(jìn)行可變長度編碼。
[0165]另一方面，如果步驟S103的判定結(jié)果為假(S103:否)，在步驟S106，可變長度編碼部116將合并標(biāo)志和運(yùn)動(dòng)檢測矢量模式的信息附加在比特流中。
[0166]在本實(shí)施方式中，如圖13(a)所示，對與鄰接塊A對應(yīng)的合并塊索引的值分配“O”。另外，對與鄰接塊B對應(yīng)的合并塊索引的值分配“ I ”。另外，對與co-loctaed合并塊對應(yīng)的合并塊索引的值分配“2”。另外，對與鄰接塊C對應(yīng)的合并塊索引的值分配“3”。另外，對與鄰接塊D對應(yīng)的合并塊索引的值分配“4”。
[0167]另外，合并塊索引的值的分配方式不限于該示例。例如，在使用后述的方法追加了新候選的情況下等，可變長度編碼部116也可以對原來的合并塊候選分配較小的值，而對新候選分配較大的值。即，可變長度編碼部116也可以優(yōu)先對原來的合并塊候選分配較小的值的合并塊索引。
[0168]另外，合并塊候選不一定局限于鄰接塊A?D的位置。例如，也可以將位于左下鄰接塊D的上方的鄰接塊等用作合并塊候選。另外，不需要一定將所有的鄰接塊用作合并塊候選。例如，也可以僅將鄰接塊A、B用作合并塊候選。
[0169]另外，在本實(shí)施方式中，在圖12的步驟S105，可變長度編碼部116將合并塊索引附加在比特流中，但不需要一定將合并塊索引附加在比特流中。例如，在合并塊候選列表尺寸為“I”的情況下，可變長度編碼部116也可以不將合并塊索引附加在比特流中。由此，能夠削減合并塊索引的信息量。
[0170]圖14是表示圖12的步驟SlOl的具體處理的流程圖。具體地講，圖14表示計(jì)算合并塊候選及合并塊候選列表尺寸的方法。下面，對圖14進(jìn)行說明。
[0171]在步驟S111，合并塊候選計(jì)算部114利用后述的方法判定合并塊候選[N]是否是可合并候選。并且，合并塊候選計(jì)算部114按照判定結(jié)果更新可合并候選數(shù)。
[0172]其中，N是用于表不各合并塊候選的索引值。在本實(shí)施方式中，N取0?4的值。具體地講，對合并塊候選[0]分配圖3的鄰接塊A。并且，對合并塊候選[I]分配圖3的鄰接塊B。并且，對合并塊候選[2]分配co-located合并塊。并且，對合并塊候選[3]分配圖3的鄰接塊C。并且，對合并塊候選[4]分配圖3的鄰接塊D。
[0173]在步驟S112，合并塊候選計(jì)算部114取得合并塊候選[N]的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向，并追加在合并塊候選列表中。
[0174]在步驟S113，合并塊候選計(jì)算部114按照圖13所示從合并塊候選列表中檢索并刪除不能合并候選和重復(fù)候選。
[0175]在步驟SI 14，合并塊候選計(jì)算部114利用后述的方法將新候選追加在合并塊候選列表中。在此，在追加新候選時(shí)，合并塊候選計(jì)算部114也可以進(jìn)行合并塊索引的值的再分配，以便優(yōu)先對原來存在的合并塊候選分配較小的值的合并塊索引。即，也可以是，合并塊候選計(jì)算部114進(jìn)行合并塊索引的值的再分配，使得對新候選分配數(shù)值較大的合并塊索弓I。由此，能夠削減合并塊索引的代碼量。
[0176]在步驟S115，合并塊候選計(jì)算部114將在步驟Slll計(jì)算出的可合并候選數(shù)設(shè)定為合并塊候選列表尺寸。在圖13的示例中，利用后述的方法計(jì)算出可合并候選數(shù)為“4”，合并塊候選列表尺寸被設(shè)定為“4”。
[0177]另外，所謂步驟S114的新候選是指在合并塊候選數(shù)未達(dá)到可合并候選數(shù)的情況下，利用后述的方法重新追加在合并塊候選中的候選。例如，新候選也可以是圖3中位于左下鄰接塊D的上方的鄰接塊。并且，新候選例如也可以是與co-located塊的鄰接塊A?D對應(yīng)的塊。另外，新候選例如也可以是參照圖片的畫面整體或者一定區(qū)域中的具有運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向的統(tǒng)計(jì)值等的塊。這樣，在合并塊候選數(shù)未達(dá)到可合并候選數(shù)的情況下，合并塊候選計(jì)算部114通過追加具有新的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向的新候選，能夠提高編碼效率。
[0178]圖15是表示圖14的步驟Slll的具體處理的流程圖。具體地講，圖15表示判定合并塊候選[N]是否是可合并候選，并更新可合并候選數(shù)的方法。下面，對圖15進(jìn)行說明。
[0179]在步驟S121，合并塊候選計(jì)算部114判定合并塊候選[N]是否是(I)按照幀內(nèi)預(yù)測被實(shí)施了編碼的塊、或者(2)位于包括編碼對象塊的切片或者圖片的邊界外的塊、或者
(3)尚未被實(shí)施編碼的塊。
[0180]在此，如果步驟S121的判定結(jié)果為真(S121:是)，在步驟S122，合并塊候選計(jì)算部114將合并塊候選[N]設(shè)定為不能合并候選。另一方面，如果步驟S121的判定結(jié)果為假(S121:否)，在步驟S123，合并塊候選計(jì)算部114將合并塊候選[N]設(shè)定為可合并候選。
[0181]在步驟S124，合并塊候選計(jì)算部114判定合并塊候選[N]是否是可合并候選或者co-located合并塊候選。在此，如果步驟S124的判定結(jié)果為真(S124:是)，在步驟S125，合并塊候選計(jì)算部114將合并塊候選數(shù)加I來更新合并塊候選數(shù)。另一方面，如果步驟S124的判定結(jié)果為假(S124:否)，合并塊候選計(jì)算部114不更新可合并候選數(shù)。
[0182]這樣，在合并塊候選是co-located合并塊的情況下,無論co-located合并塊是可合并候選還是不能合并候選，合并塊候選計(jì)算部114都將可合并候選數(shù)加I。由此，即使是co-located合并塊的信息由于包損失等而丟失的情況下，在圖像編碼裝置和圖像解碼裝置中也不會(huì)產(chǎn)生可合并候選數(shù)的不一致。
[0183]該可合并候選數(shù)在圖14的步驟S115被設(shè)定為合并塊候選列表尺寸。另外，在圖12的步驟S105，合并塊候選列表尺寸被用于合并塊索引的可變長度編碼中。由此，即使是丟失了包括co-located塊等的參照圖片信息的情況下，圖像編碼裝置100也能夠生成能夠正常對合并塊索引進(jìn)行解碼的比特流。
[0184]圖16是表示圖14的步驟SI 14的具體處理的流程圖。具體地講，圖16表示追加新候選的方法。下面，對圖16進(jìn)行說明。
[0185]在步驟S131，合并塊候選計(jì)算部114判定合并塊候選數(shù)是否小于可合并候選數(shù)。即，合并塊候選計(jì)算部114判定合并塊候選數(shù)是否未達(dá)到可合并候選數(shù)。
[0186]在此，如果步驟S131的判定結(jié)果為真(S131:是)，在步驟S132，合并塊候選計(jì)算部114判定是否存在能夠作為合并塊候選被追加在合并塊候選列表中的新候選。在此，如果步驟S132的判定結(jié)果為真(S132:是)，在步驟S133，合并塊候選計(jì)算部114對新候選分配合并塊索引的值，并將新候選追加在合并塊候選列表中。另外，在步驟S134，合并塊候選計(jì)算部114將合并塊候選數(shù)加I。
[0187]另一方面，如果步驟S131或者步驟S132的判定結(jié)果為假(S131或者S132:否)，結(jié)束新候選追加處理。即，在合并塊候選數(shù)已達(dá)到可合并候選數(shù)的情況下、或者不存在新候選的情況下，結(jié)束新候選追加處理。
[0188]圖17是表示圖12的步驟S102的具體處理的流程圖。具體地講，圖17表示與合并塊候選的選擇相關(guān)的處理。下面，對圖17進(jìn)行說明。
[0189]在步驟S141，幀間預(yù)測控制部111對合并塊候選索引設(shè)定0，對最小預(yù)測誤差設(shè)定運(yùn)動(dòng)矢量檢測模式的預(yù)測誤差(成本)，對合并標(biāo)志設(shè)定O。在此，關(guān)于成本例如利用R-D最優(yōu)化模型的下式進(jìn)行計(jì)算。[0190](式I)
[0191]Cost=D+λ R
[0192]在式I中，D表示編碼失真。例如，D采用使用根據(jù)某個(gè)運(yùn)動(dòng)矢量生成的預(yù)測圖像對編碼對象塊進(jìn)行編碼及解碼而得到的像素值、與編碼對象塊的原來的像素值之差分絕對值和等。另外，R表示產(chǎn)生代碼量。R采用對在生成預(yù)測圖像時(shí)使用的運(yùn)動(dòng)矢量進(jìn)行編碼所需要的代碼量等。另外，λ表示拉格朗日的未定乘數(shù)。
[0193]在步驟S142，幀間預(yù)測控制部111判定合并塊候選索引的值是否小于編碼對象塊的合并塊候選數(shù)。即，幀間預(yù)測控制部111判定是否存在還沒有進(jìn)行下面的步驟S143?S145的處理的合并塊候選。
[0194]在此，如果步驟S142的判定結(jié)果為真(S142:是)，在步驟S143，幀間預(yù)測控制部111計(jì)算被分配了合并塊候選索引的合并塊候選的成本。并且，在步驟S144，幀間預(yù)測控制部111判定計(jì)算出的合并塊候選的成本是否小于最小預(yù)測誤差。
[0195]在此，如果步驟S144的判定結(jié)果為真(S144:是)，在步驟S145，幀間預(yù)測控制部111更新最小預(yù)測誤差、合并塊索引及合并標(biāo)志的值。另一方面，如果步驟S144的判定結(jié)果為假(S144:否)，幀間預(yù)測控制部111不更新最小預(yù)測誤差、合并塊索引及合并標(biāo)志的值。
[0196]在步驟S146，幀間預(yù)測控制部111將合并塊候選索引的值加1，反復(fù)進(jìn)行步驟S142?S146的處理。
[0197]另一方面，如果步驟S142的判定結(jié)果為假(S142:否)，即，如果不存在未處理的合并塊候選，在步驟S147，幀間預(yù)測控制部111確定最終設(shè)定的合并標(biāo)志及合并塊索引的值。
[0198]這樣，根據(jù)本實(shí)施方式的圖像編碼裝置100，能夠利用不依賴于包括co-located塊等的參照圖片信息的方法，計(jì)算在對合并塊索引進(jìn)行編碼或者解碼時(shí)使用的合并塊候選列表尺寸。由此，圖像編碼裝置100能夠提高錯(cuò)誤容限。
[0199]更具體地講，本實(shí)施方式的圖像編碼裝置100無論co-located合并塊是否是可合并候選，只要合并塊候選是co-located合并塊，則始終將可合并候選數(shù)加I。并且，圖像編碼裝置100使用這樣計(jì)算出的可合并候選數(shù)決定對合并塊索引分配的比特序列。因此，即使是丟失了包括co-located塊的參照圖片信息的情況下，圖像編碼裝置100也能夠生成能夠正常將合并塊索引解碼的比特流。
[0200]另外，在合并塊候選數(shù)未達(dá)到可合并候選數(shù)的情況下，本實(shí)施方式的圖像編碼裝置100通過追加具有新的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向的新候選作為合并塊候選，能夠提高編碼效率。
[0201]另外，在本實(shí)施方式中示出了在合并模式時(shí)合并標(biāo)志始終被附加在比特流中的示例，但不限于此。例如，也可以根據(jù)在進(jìn)行編碼對象塊的幀間預(yù)測時(shí)使用的塊形狀等強(qiáng)制選擇合并模式。在這種情況下，也可以不將合并標(biāo)志附加在比特流中，由此削減信息量。
[0202]另外，在本實(shí)施方式中示出了采用合并模式的示例，在該合并模式中，從編碼對象塊的鄰接塊復(fù)制預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引來進(jìn)行編碼對象塊的編碼，但不必限定于此。例如，也可以采用跳躍合并模式。在跳躍合并模式中，使用如圖13 (b)所示生成的合并塊候選列表，與合并模式相同地從編碼對象塊的鄰接塊復(fù)制預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引來進(jìn)行編碼對象塊的編碼。如果其結(jié)果是編碼對象塊的所有預(yù)測誤差數(shù)據(jù)為0，將跳躍標(biāo)志設(shè)定為1，將跳躍標(biāo)志和合并塊索引附加在比特流中。另外，如果預(yù)測誤差數(shù)據(jù)不是O，將跳躍標(biāo)志設(shè)定為O，將跳躍標(biāo)志、合并標(biāo)志、合并塊索引和預(yù)測誤差數(shù)據(jù)附加在比特流中。
[0203]另外，在本實(shí)施方式中示出了采用合并模式的示例，在該合并模式中，從編碼對象塊的鄰接塊復(fù)制預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引來進(jìn)行編碼對象塊的編碼，但不限于此。例如，也可以使用如圖13 (b)所示而生成的合并塊候選列表對運(yùn)動(dòng)矢量檢測模式的運(yùn)動(dòng)矢量進(jìn)行編碼。即，從運(yùn)動(dòng)矢量檢測模式的運(yùn)動(dòng)矢量減去利用合并塊索引指定的合并塊候選的運(yùn)動(dòng)矢量，由此求出差分。并且，也可以將所求出的差分和合并塊索引附加在比特流中。
[0204]另外，也可以是，使用運(yùn)動(dòng)檢測模式的參照圖片索引RefIdx_ME、和合并塊候選的參照圖片索引RefIdx_Merge,對合并塊候選的運(yùn)動(dòng)矢量MV_Merge進(jìn)行調(diào)度,從運(yùn)動(dòng)檢測模式的運(yùn)動(dòng)矢量減去調(diào)度后的合并塊候選的運(yùn)動(dòng)矢量scaledMV_Merge，由此求出差分。并且，也可以將所求出的差分和合并塊索引附加在比特流中。調(diào)度的式子的示例如下所示。
[0205](式2)
[0206]scaledMV_Merge=MV_Merge X (POC (Ref Idx_ME) -curPOC) / (POC (Ref Idx_Merge)-curPOC)
[0207]其中，P0C(RefIdx_ME)表示參照圖片索引RefIdx_ME所示出的參照圖片的顯示順序。POC(RefIdx_Merge)表示參照圖片索引RefIdx_Merge所示出的參照圖片的顯示順序。curPOC表示編碼對象圖片的顯示順序。
[0208](實(shí)施方式2)
[0209]在上述實(shí)施方式I中，只要合并塊候選是co-located合并塊,無論co-located合并塊是否是可合并候選，圖像編碼裝置都使用始終以加I方式計(jì)算出的可合并候選數(shù)來決定分配給合并塊索引的比特序列。但是，也可以是，例如在圖15的步驟S124，對于co-located合并塊以外的合并塊候選，圖像編碼裝置也一定使用始終以加I方式計(jì)算出的可合并候選數(shù)來決定分配給合并塊索引的比特序列。即，圖像編碼裝置也可以使用被固定為合并塊候選數(shù)的最大值N的合并塊候選列表尺寸，對合并塊索引分配比特序列。即，圖像編碼裝置也可以將所有的合并塊候選視為可合并候選，將合并塊候選列表尺寸固定為合并塊候選數(shù)的最大值N，對合并塊索引進(jìn)行編碼。
[0210]例如，在上述實(shí)施方式I中，合并塊候選數(shù)的最大值N是5 (鄰接塊A、鄰接塊B、co-located合并塊、鄰接塊C、鄰接塊D)，因而圖像編碼裝直也可以始終對合并塊候選列表尺寸設(shè)定5，對合并塊索引進(jìn)行編碼。另外，例如在合并塊候選數(shù)的最大值N是4 (鄰接塊A、鄰接塊B、鄰接塊C、鄰接塊D)的情況下，圖像編碼裝置也可以始終對合并塊候選列表尺寸設(shè)定4，對合并塊索引進(jìn)行編碼。
[0211]這樣，圖像編碼裝置也可以根據(jù)合并塊候選數(shù)的最大值來決定合并塊候選列表尺寸。由此，圖像解碼裝置的可變長度解碼部能夠生成不需參照鄰接塊或者co-located塊的信息即可對比特流中的合并塊索引進(jìn)行解碼的比特流，能夠削減可變長度解碼部的處理量。
[0212]下面，將如上所述的實(shí)施方式I的圖像編碼裝置的變形例作為實(shí)施方式2的圖像編碼裝置進(jìn)行具體說明。
[0213]圖18是表示實(shí)施方式2的圖像編碼裝置200的結(jié)構(gòu)的塊圖。該圖像編碼裝置200按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流。圖像編碼裝置200具有合并候選導(dǎo)出部210、預(yù)測控制部220和編碼部230。
[0214]合并候選導(dǎo)出部210對應(yīng)于上述實(shí)施方式I的合并塊候選計(jì)算部114。合并候選導(dǎo)出部210導(dǎo)出合并候選。并且，合并候選導(dǎo)出部210例如生成使被導(dǎo)出的各合并候選、與用于確定該合并候選的索引(下面稱為“合并索引”)相對應(yīng)的合并候選列表。
[0215]所謂合并候選是指在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引的候選。即，合并候選至少包括預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引的一組組合。
[0216]另外，合并候選對應(yīng)于實(shí)施方式I的合并塊候選。合并候選列表對應(yīng)于合并塊候選列表。
[0217]如圖18所示，合并候選導(dǎo)出部210具有決定部211、第I導(dǎo)出部212、確定部213、判定部214和第2導(dǎo)出部215。
[0218]決定部211決定合并候選的最大數(shù)。即，決定部211決定合并塊候選數(shù)的最大值
N0
[0219]例如，決定部211根據(jù)輸入圖像列(序列(sequence)、圖片、切片或者塊等)的特征，決定合并候選的最大數(shù)。另外，例如決定部211也可以將預(yù)先設(shè)定的數(shù)量決定為合并候選的最大數(shù)。
[0220]第I導(dǎo)出部212導(dǎo)出第I合并候選。具體地講，第I導(dǎo)出部212以使第I合并候選的數(shù)量不超過最大數(shù)的方式導(dǎo)出第I合并候選。更具體地講，第I導(dǎo)出部212例如根據(jù)在對與編碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引，導(dǎo)出第I合并候選。并且，第I導(dǎo)出部212例如將這樣導(dǎo)出的第I合并候選與合并索引相對應(yīng)地登記在合并候選列表中。
[0221]所謂在空間上鄰接的塊是指包括編碼對象塊的圖片內(nèi)的塊，是與編碼對象塊鄰接的塊。具體地講，在空間上鄰接的塊例如是指圖3所示的鄰接塊A?D。
[0222]所謂在時(shí)間上鄰接的塊是指與包括編碼對象塊的圖片不同的圖片中所包含的塊，是與編碼對象塊對應(yīng)的塊。具體地講，在時(shí)間上鄰接的塊例如是指co-located塊。
[0223]另外，在時(shí)間上鄰接的塊不需要一定是與編碼對象塊相同位置的塊(co-located塊)。例如，在時(shí)間上鄰接的塊也可以是與co-located塊鄰接的塊。
[0224]另外，第I導(dǎo)出部212例如也可以導(dǎo)出在對與編碼對象塊在空間上鄰接的塊中除不能合并塊以外的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為第I合并候選。所謂不能合并塊是指已按照幀內(nèi)預(yù)測被進(jìn)行了編碼的塊、位于包括編碼對象塊的切片或者圖片的邊界外的塊、或者尚未被進(jìn)行編碼的塊。由此，第I導(dǎo)出部212能夠從適合于得到合并候選的塊導(dǎo)出第I合并候選。
[0225]在導(dǎo)出了多個(gè)第I合并候選的情況下，確定部213確定預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引與其它第I合并候選重復(fù)的第I合并候選(重復(fù)候選)。并且，確定部213將所確定的重復(fù)候選從合并候選列表中刪除。
[0226]判定部214判定第I合并候選的數(shù)量是否小于所決定的最大數(shù)。在此，判定部214判定除所確定的重復(fù)的第I合并候選以外的第I合并候選的數(shù)量是否小于所決定的最大數(shù)。
[0227]在判定為第I合并候選的數(shù)量小于所決定的最大數(shù)的情況下，第2導(dǎo)出部215導(dǎo)出第2合并候選。具體地講，第2導(dǎo)出部215以使第I合并候選的數(shù)量與第2合并候選的數(shù)量之和不超過最大數(shù)的方式導(dǎo)出第2合并候選。在此，第2導(dǎo)出部215以使除重復(fù)候選以外的第I合并候選的數(shù)量與第2合并候選的數(shù)量之和不超過最大數(shù)的方式導(dǎo)出第2合并候選。
[0228]該第2合并候選相當(dāng)于實(shí)施方式I中的新候選。因此，第2導(dǎo)出部215例如也可以根據(jù)在對與第I合并候選不同的鄰接塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出第2合并候選。
[0229]另外，例如也可以是，第2導(dǎo)出部215導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與第I合并候選不同的合并候選，作為第2合并候選。由此，能夠增加預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合不同的合并候選，能夠進(jìn)一步提高編碼效率。
[0230]另外,第2導(dǎo)出部215不需要一定導(dǎo)出與第I合并候選不重復(fù)的合并候選作為第2合并候選。即，第2導(dǎo)出部215也可以導(dǎo)出其結(jié)果是與第I合并候選重復(fù)的合并候選作為第2合并候選。
[0231]另外，第2導(dǎo)出部215例如將這樣導(dǎo)出的第2合并候選與合并索引相對應(yīng)地登記在合并候選列表中。此時(shí)，第2導(dǎo)出部215與實(shí)施方式I相同地，以對第I合并候選分配數(shù)值小于第2合并候選的合并索引的方式，將第2合并候選登記在合并候選列表中。由此，在第I合并候選被選擇為被用于進(jìn)行編碼的合并候選的可能性大于第2合并候選的情況下，圖像編碼裝置200能夠削減代碼量，能夠提高編碼效率。
[0232]另外，第2導(dǎo)出部215不需要一定以使第I合并候選的數(shù)量和第2合并候選的數(shù)量之和與所決定的最大數(shù)一致的方式來導(dǎo)出第2合并候選。也可以是，在第I合并候選的數(shù)量與第2合并候選的數(shù)量之和小于所決定的最大數(shù)的情況下，例如存在不對應(yīng)合并候選的合并索引的值。
[0233]預(yù)測控制部220從第I合并候選和第2合并候選中選擇在進(jìn)行編碼對象塊的編碼時(shí)使用的合并候選。即，預(yù)測控制部220從合并候選列表中選擇在進(jìn)行編碼對象塊的編碼時(shí)使用的合并候選。
[0234]編碼部230使用所決定的最大數(shù)對用于確定所選擇的合并候選的索引(合并索引)進(jìn)行編碼。具體地講，編碼部230按照圖5所示對分配給所選擇的合并候選的索引值的比特序列進(jìn)行可變長度編碼。另外，編碼部230將被編碼后的索引附加在比特流中。
[0235]在此，編碼部230還可以將表示由決定部211決定的最大數(shù)的信息附加在比特流中。具體地講，編碼部230也可以將表示最大數(shù)的信息寫入例如切片頭等中。由此，能夠按照合適的單位切換最大數(shù)，能夠提高編碼效率。
[0236]另外，編碼部230不需要一定將表示最大數(shù)的信息附加在比特流中。例如，在最大數(shù)是預(yù)先按照標(biāo)準(zhǔn)而設(shè)定的情況下、或者最大數(shù)與既定值相同的情況下等，編碼部230也可以不將表示最大數(shù)的信息附加在比特流中。
[0237]下面，對如上所述構(gòu)成的圖像編碼裝置200的各種動(dòng)作進(jìn)行說明。
[0238]圖19是表示實(shí)施方式2的圖像編碼裝置200的處理動(dòng)作的流程圖。
[0239]首先，決定部211決定合并候選的最大數(shù)(S201)。第I導(dǎo)出部212導(dǎo)出第I合并候選(S202)。在導(dǎo)出了多個(gè)第I合并候選的情況下，確定部213確定預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引與其它第I合并候選重復(fù)的第I合并候選(S203)。[0240]判定部214判定除重復(fù)候選以外的第I合并候選的數(shù)量是否小于所決定的最大數(shù)(S204)。在此，在判定為除重復(fù)候選以外的第I合并候選的數(shù)量小于所決定的最大數(shù)的情況下(S204:是)，第2導(dǎo)出部215導(dǎo)出第2合并候選(S205)。另一方面，在判定為除重復(fù)候選以外的第I合并候選的數(shù)量不小于所決定的最大數(shù)的情況下(S204:否)，第2導(dǎo)出部215不導(dǎo)出第2合并候選。這些步驟S204?步驟S205相當(dāng)于實(shí)施方式I的步驟S114。
[0241]預(yù)測控制部220從第I合并候選和第2合并候選中選擇在進(jìn)行編碼對象塊的編碼時(shí)使用的合并候選(S206)。例如,預(yù)測控制部220與實(shí)施方式I相同地從合并候選列表中選擇式I所示的成本為最小的合并候選。
[0242]編碼部230使用所決定的最大數(shù)對用于確定所選擇的合并候選的索引進(jìn)行編碼(S207)。另外，編碼部230將被編碼后的索引附加在比特流中。
[0243]如上所述，根據(jù)本實(shí)施方式的圖像編碼裝置200，能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行編碼。即，能夠與實(shí)際導(dǎo)出的合并候選的數(shù)量無關(guān)地對索引進(jìn)行編碼。因此，即使是丟失了導(dǎo)出合并候選所需要的信息(例如co-located塊等的信息)的情況下，也能夠在解碼側(cè)對索引進(jìn)行解碼，能夠提高錯(cuò)誤容限。并且，在解碼側(cè)能夠與實(shí)際導(dǎo)出的合并候選的數(shù)量無關(guān)地對索引進(jìn)行解碼。即，在解碼側(cè)不需等待合并候選的導(dǎo)出處理即可進(jìn)行索引的解碼處理。即，能夠生成能夠并行進(jìn)行合并候選的導(dǎo)出處理和索引的解碼處理的比特流。
[0244]另外，根據(jù)本實(shí)施方式的圖像編碼裝置200，在判定為第I合并候選的數(shù)量小于最大數(shù)的情況下，能夠?qū)С龅?合并候選。因此，能夠在不超過最大數(shù)的范圍內(nèi)增加合并候選的數(shù)量，能夠提高編碼效率。
[0245]另外，根據(jù)本實(shí)施方式的圖像編碼裝置200，能夠根據(jù)除重復(fù)的第I合并候選以外的第I合并候選的數(shù)量導(dǎo)出第2合并候選。其結(jié)果是，能夠增加第2合并候選的數(shù)量，能夠增加可以被選擇為合并候選的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合的種類。因此，能夠進(jìn)一步提高編碼效率。
[0246]另外，在本實(shí)施方式中，圖像編碼裝置200具有確定部213，但不需要一定具有確定部213。即，在圖19所示的流程圖中不需要一定包含步驟S203。即使是這種情況下，圖像編碼裝置200也能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行編碼，因而能夠提聞錯(cuò)誤容限。
[0247]另外，在本實(shí)施方式中，如圖19所示，在第I導(dǎo)出部212導(dǎo)出第I合并候選后，確定部213確定重復(fù)候選，但不需要一定按照這種順序進(jìn)行處理。例如，也可以是，第I導(dǎo)出部212在導(dǎo)出第I合并候選的過程中確定重復(fù)候選，并以使所確定的重復(fù)候選不包含在第I合并候選中的方式導(dǎo)出第I合并候選。即，也可以是，第I導(dǎo)出部212導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為第I合并候選。更具體地講，例如，在已經(jīng)導(dǎo)出基于左側(cè)鄰接塊的合并候選作為第I合并候選的情況下，如果基于上側(cè)鄰接塊的合并候選與基于左側(cè)鄰接塊的合并候選不重復(fù)，第I導(dǎo)出部212也可以導(dǎo)出基于上側(cè)鄰接塊的合并候選作為第I合并候選。
[0248](實(shí)施方式3)
[0249]圖20是表示實(shí)施方式3的圖像解碼裝置300的結(jié)構(gòu)的塊圖。該圖像解碼裝置300是與實(shí)施方式I的圖像編碼裝置100對應(yīng)的裝置。圖像解碼裝置300例如按照每個(gè)塊對由實(shí)施方式I的圖像編碼裝置100生成的比特流中所包含的編碼圖像進(jìn)行解碼。
[0250]圖像解碼裝置300如圖20所示具有可變長度解碼部301、逆量化部302、逆正交變換部303、加法部304、塊存儲(chǔ)器305、幀存儲(chǔ)器306、幀內(nèi)預(yù)測部307、幀間預(yù)測部308、幀間預(yù)測控制部309、開關(guān)310、合并塊候選計(jì)算部311和colPic存儲(chǔ)器312。
[0251]可變長度解碼部301對所輸入的比特流進(jìn)行可變長度解碼，并生成圖片類型信息、合并標(biāo)志和量化系數(shù)。并且，可變長度解碼部301使用后述的可合并候選數(shù)進(jìn)行合并塊索引的可變長度解碼處理。
[0252]逆量化部302對通過可變長度解碼處理而得到的量化系數(shù)進(jìn)行逆量化處理。
[0253]逆正交變換部303將通過逆量化處理而得到的正交變換系數(shù)從頻域變換到圖像區(qū)域中，由此生成預(yù)測誤差數(shù)據(jù)。
[0254]在塊存儲(chǔ)器305中以塊單位保存將預(yù)測誤差數(shù)據(jù)和預(yù)測圖像數(shù)據(jù)相加而生成的解碼圖像數(shù)據(jù)。
[0255]在幀存儲(chǔ)器306中以幀單位保存解碼圖像數(shù)據(jù)。
[0256]幀內(nèi)預(yù)測部307使用在塊存儲(chǔ)器305中保存的塊單位的解碼圖像數(shù)據(jù)進(jìn)行幀內(nèi)預(yù)測，由此生成解碼對象塊的預(yù)測圖像數(shù)據(jù)。
[0257]幀間預(yù)測部308使用在幀存儲(chǔ)器306中保存的幀單位的解碼圖像數(shù)據(jù)進(jìn)行幀間預(yù)測，由此生成解碼對象塊的預(yù)測圖像數(shù)據(jù)。
[0258]在解碼對象塊將被實(shí)施幀內(nèi)預(yù)測解碼的情況下，開關(guān)310將由幀內(nèi)預(yù)測部307生成的幀內(nèi)預(yù)測圖像數(shù)據(jù)，作為解碼對象塊的預(yù)測圖像數(shù)據(jù)輸出給加法部304。另一方面，在解碼對象塊將被實(shí)施幀間預(yù)測解碼的情況下，開關(guān)310將由幀間預(yù)測部308生成的幀間預(yù)測圖像數(shù)據(jù)，作為解碼對象塊的預(yù)測圖像數(shù)據(jù)輸出給加法部304。
[0259]合并塊候選計(jì)算部311使用解碼對象塊的鄰接塊的運(yùn)動(dòng)矢量等、以及在colPic存儲(chǔ)器312中存儲(chǔ)的co-located塊的運(yùn)動(dòng)矢量等(colPic信息)，利用后述的方法導(dǎo)出合并模式的合并塊候選。并且，合并塊候選計(jì)算部311對所導(dǎo)出的各合并塊候選分配合并塊索引的值。并且，合并塊候選計(jì)算部311將合并塊候選和合并塊索引發(fā)送給幀間預(yù)測控制部309。
[0260]如果被解碼后的合并標(biāo)志為“0”，幀間預(yù)測控制部309使用運(yùn)動(dòng)矢量檢測模式的信息，使幀間預(yù)測部308生成幀間預(yù)測圖像。另一方面，如果合并標(biāo)志為“ 1”，幀間預(yù)測控制部309根據(jù)被解碼后的合并塊索引，從多個(gè)合并塊候選中決定在進(jìn)行幀間預(yù)測時(shí)使用的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向。并且，幀間預(yù)測控制部309使用所決定的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向，使幀間預(yù)測部308生成幀間預(yù)測圖像。并且，幀間預(yù)測控制部309將包括解碼對象塊的運(yùn)動(dòng)矢量等的colPic信息傳輸給colPic存儲(chǔ)器312。
[0261]最后，加法部304將預(yù)測圖像數(shù)據(jù)和預(yù)測誤差數(shù)據(jù)相加，由此生成解碼圖像數(shù)據(jù)。
[0262]圖21是表示實(shí)施方式3的圖像解碼裝置300的處理動(dòng)作的流程圖。
[0263]在步驟S301，可變長度解碼部301對合并標(biāo)志進(jìn)行解碼。
[0264]在步驟S302，如果合并標(biāo)志為“ I ”(S302:是)，在步驟S303，合并塊候選計(jì)算部311利用后述的方法計(jì)算可合并候選數(shù)。并且，合并塊候選計(jì)算部311將計(jì)算出的可合并候選數(shù)設(shè)定為合并塊候選列表尺寸。
[0265]在步驟S304，可變長度解碼部301使用合并塊候選列表尺寸，對比特流中的合并塊索引進(jìn)行可變長度解碼。
[0266]在步驟S305，合并塊候選計(jì)算部311利用后述的方法從解碼對象塊的鄰接塊和co-located塊生成合并塊候選。
[0267]在步驟S306，幀間預(yù)測控制部309使用被解碼后的合并塊索引所示出的合并塊候選的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向，使幀間預(yù)測部308生成幀間預(yù)測圖像。
[0268]在步驟S302，如果合并標(biāo)志為“O” (S302:否)，在步驟S307，幀間預(yù)測部308使用由可變長度解碼部301進(jìn)行解碼后的運(yùn)動(dòng)矢量檢測模式的信息，生成幀間預(yù)測圖像。
[0269]另外，當(dāng)在步驟S303計(jì)算出的合并塊候選列表尺寸為“I”的情況下，也可以不對合并塊索引進(jìn)行解碼，而估計(jì)為“O”。
[0270]圖22是表示圖21的步驟S303的具體處理的流程圖。具體地講，圖22表示判定合并塊候選[N]是否是可合并候選，并計(jì)算可合并候選數(shù)的方法。下面，對圖22進(jìn)行說明。
[0271]在步驟S311，合并塊候選計(jì)算部311判定合并塊候選[N]是否是(I)已按照幀內(nèi)預(yù)測被解碼后的塊、或者(2)位于包括解碼對象塊的切片或者圖片的邊界外的塊、或者(3)尚未被解碼的塊。
[0272]在此，如果步驟S311的判定結(jié)果為真(S311:是)，在步驟S312，合并塊候選計(jì)算部311將合并塊候選[N]設(shè)定為不能合并候選。另一方面，如果步驟S311的判定結(jié)果為假(S311:否)，在步驟S313，合并塊候選計(jì)算部311將合并塊候選[N]設(shè)定為可合并候選。
[0273]在步驟S314，合并塊候選計(jì)算部311判定合并塊候選[N]是可合并候選還是co-located合并塊候選。在此，如果步驟S314的判定結(jié)果為真(S314:是)，在步驟S315，合并塊候選計(jì)算部311將合并塊候選數(shù)加I來更新合并塊候選數(shù)。另一方面，如果步驟S314為假(S314:否)，合并塊候選計(jì)算部311不更新可合并候選數(shù)。
[0274]這樣，在合并塊候選是co-located合并塊的情況下,無論co-located合并塊是可合并候選還是不能合并候選，合并塊候選計(jì)算部311都將可合并候選數(shù)加I。由此，即使是co-located合并塊的信息由于包損失等而丟失的情況下，在圖像編碼裝置和圖像解碼裝置中也不會(huì)產(chǎn)生可合并候選數(shù)的不一致。
[0275]該可合并候選數(shù)在圖21的步驟S303被設(shè)定為合并塊候選列表尺寸。另外，在圖21的步驟S304，合并塊候選列表尺寸被用于合并塊索引的可變長度解碼中。由此，即使是丟失了包括co-located塊等的參照圖片信息的情況下，圖像解碼裝置300也能夠正常對合并塊索引進(jìn)行解碼。
[0276]圖23是表示圖21的步驟S305的具體處理的流程圖。具體地講，圖23表示計(jì)算合并塊候選的方法。下面，對圖23進(jìn)行說明。
[0277]在步驟S321，合并塊候選計(jì)算部311取得合并塊候選[N]的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向，并追加在合并塊候選列表中。
[0278]在步驟S322，合并塊候選計(jì)算部311按照圖13所示從合并塊候選列表中檢索不能合并候選和重復(fù)候選并將其刪除。
[0279]在步驟S323，合并塊候選計(jì)算部311利用與圖16相同的方法將新候選追加在合并塊候選列表中。
[0280]圖24表示將合并塊索引附加在比特流中時(shí)的句法的一例。在圖24中，merge_idx表示合并塊索引，merge_flag表示合并標(biāo)志。NumMergeCand表示合并塊候選列表尺寸,在本實(shí)施方式中被設(shè)定為通過圖22所示的處理流程而計(jì)算出的可合并候選數(shù)。
[0281]這樣，根據(jù)本實(shí)施方式的圖像解碼裝置300，能夠利用不依賴于包括co-located塊等的參照圖片信息的方法，計(jì)算在對合并塊索引進(jìn)行編碼或者解碼時(shí)使用的合并塊候選列表尺寸。因此，圖像解碼裝置300能夠適當(dāng)?shù)貙μ岣吡隋e(cuò)誤容限的比特流進(jìn)行解碼。
[0282]更具體地講,只要合并塊候選是co-located合并塊,無論co-located合并塊是否是可合并候選，本實(shí)施方式的圖像解碼裝置300都始終將可合并候選數(shù)加I。并且，圖像解碼裝置300使用這樣計(jì)算出的可合并候選數(shù)決定分配給合并塊索引的比特序列。因此，即使是丟失了包括co-located塊等的參照圖片信息的情況下，圖像解碼裝置300也能夠正常對合并塊索引進(jìn)行解碼。
[0283]并且，在合并塊候選數(shù)未達(dá)到可合并候選數(shù)的情況下，本實(shí)施方式的圖像解碼裝置300通過將具有新的運(yùn)動(dòng)矢量、參照圖片索引和預(yù)測方向的新候選追加為合并塊候選，能夠適當(dāng)?shù)貙μ岣吡司幋a效率的比特流進(jìn)行解碼。
[0284](實(shí)施方式4)
[0285]在上述實(shí)施方式3中，只要合并塊候選是co-located合并塊,無論co-located合并塊是否是可合并候選，圖像解碼裝置都使用始終以加I方式計(jì)算出的可合并候選數(shù)來決定分配給合并塊索引的比特序列。但是，也可以是，例如在圖22的步驟S314，對于co-located合并塊以外的合并塊候選，圖像解碼裝置也一定始終使用以加I方式計(jì)算出的可合并候選數(shù)來決定分配給合并塊索引的比特序列。即，圖像解碼裝置也可以使用被固定為合并塊候選數(shù)的最大值N的合并塊候選列表尺寸，對合并塊索引分配比特序列。S卩，圖像解碼裝置將所有的合并塊候選視為可合并候選，將合并塊候選列表尺寸固定為合并塊候選數(shù)的最大值N，對合并塊索引進(jìn)行編碼。
[0286]例如，在上述實(shí)施方式3中，合并塊候選數(shù)的最大值N是5 (鄰接塊A、鄰接塊B、co-located合并塊、鄰接塊C、鄰接塊D)，因而圖像解碼裝置也可以始終對合并塊候選列表尺寸設(shè)定5，對合并塊索引進(jìn)行解碼。由此，圖像解碼裝置的可變長度解碼部不需參照鄰接塊或者co-located塊的信息，即可對比特流中的合并塊索引進(jìn)行解碼。其結(jié)果是，例如能夠省略圖22的步驟S314和步驟S315的處理等，能夠削減可變長度解碼部的處理量。
[0287]圖25表示將合并塊候選列表尺寸固定為合并塊候選數(shù)的最大值時(shí)的句法的一例。如圖25所示，在將合并塊候選列表尺寸固定為合并塊候選數(shù)的最大值的情況下，能夠從句法中刪除NumMergeCand。
[0288]下面，將如上所述的實(shí)施方式3的圖像解碼裝置的變形例作為實(shí)施方式4的圖像解碼裝置進(jìn)行具體說明。
[0289]圖26是表示實(shí)施方式4的圖像解碼裝置400的結(jié)構(gòu)的塊圖。該圖像解碼裝置400是與實(shí)施方式2的圖像編碼裝置200對應(yīng)的裝置。具體地講，圖像解碼裝置400例如按照每個(gè)塊對由實(shí)施方式2的圖像編碼裝置200生成的比特流中所包含的編碼圖像進(jìn)行解碼。圖像解碼裝置400具有合并候選導(dǎo)出部410、解碼部420和預(yù)測控制部430。
[0290]合并候選導(dǎo)出部410對應(yīng)于上述實(shí)施方式3的合并塊候選計(jì)算部311。合并候選導(dǎo)出部410導(dǎo)出合并候選。并且，合并候選導(dǎo)出部410例如生成使被導(dǎo)出的各合并候選、與用于確定該合并候選的索引(合并索引)相對應(yīng)的合并候選列表。
[0291]如圖26所示，合并候選導(dǎo)出部410具有決定部411、第I導(dǎo)出部412、確定部413、判定部414和第2導(dǎo)出部415。
[0292]決定部411決定合并候選的最大數(shù)。即，決定部411決定合并塊候選數(shù)的最大值
N0
[0293]例如，決定部411利用與實(shí)施方式2的決定部211相同的方法決定合并候選的最大數(shù)。另外，例如決定部411也可以根據(jù)被附加在比特流中的表示最大數(shù)的信息來決定最大數(shù)。
[0294]另外，在此決定部411被設(shè)于合并候選導(dǎo)出部410中，但也可以設(shè)于解碼部420中。
[0295]第I導(dǎo)出部412導(dǎo)出第I合并候選。具體地講，第I導(dǎo)出部412與實(shí)施方式2的第I導(dǎo)出部212相同地導(dǎo)出第I合并候選。例如，第I導(dǎo)出部412以使第I合并候選的數(shù)量不超過最大數(shù)的方式導(dǎo)出第I合并候選。更具體地講，第I導(dǎo)出部412例如根據(jù)在對與解碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量和參照圖片索引，導(dǎo)出第I合并候選。并且，第I導(dǎo)出部412例如將這樣導(dǎo)出的第I合并候選與合并索引相對應(yīng)地登記在合并候選列表中。
[0296]另外，第I導(dǎo)出部412例如也可以導(dǎo)出在對與解碼對象塊在空間上鄰接的塊中除不能合并塊以外的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為第I合并候選。由此，能夠從適合于得到合并候選的塊導(dǎo)出第I合并候選。
[0297]在導(dǎo)出了多個(gè)第I合并候選的情況下，確定部413確定預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引與其它第I合并候選重復(fù)的第I合并候選(重復(fù)候選)。并且，確定部413將所確定的重復(fù)候選從合并候選列表中刪除。
[0298]判定部414判定第I合并候選的數(shù)量是否小于所確定的最大數(shù)。在此，判定部414判定除所確定的重復(fù)的第I合并候選以外的第I合并候選的數(shù)量是否小于所決定的最大數(shù)。
[0299]在判定為第I合并候選的數(shù)量小于所決定的最大數(shù)的情況下，第2導(dǎo)出部415導(dǎo)出第2合并候選。具體地講，第2導(dǎo)出部415與實(shí)施方式2的第2導(dǎo)出部215相同地導(dǎo)出第2合并候選。
[0300]例如，第2導(dǎo)出部415也可以導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與第I合并候選不同的合并候選，作為第2合并候選。由此，能夠增加預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合不同的合并候選，能夠適當(dāng)?shù)貙M(jìn)一步提高了編碼效率的比特流進(jìn)行解碼。
[0301]另外，第2導(dǎo)出部415例如與實(shí)施方式2的第2導(dǎo)出部215相同地,將這樣導(dǎo)出的第2合并候選與合并索引相對應(yīng)地登記在合并候選列表中。
[0302]解碼部420使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在比特流中的已被編碼的索引。
[0303]預(yù)測控制部430根據(jù)被解碼后的索引，從第I合并候選和第2合并候選中選擇在對解碼對象塊進(jìn)行解碼時(shí)使用的合并候選。即，預(yù)測控制部430從合并候選列表中選擇在對解碼對象塊進(jìn)行解碼時(shí)使用的合并候選。
[0304]下面，對如上所述構(gòu)成的圖像解碼裝置400的各種動(dòng)作進(jìn)行說明。
[0305]圖27是表示實(shí)施方式4的圖像解碼裝置400的處理動(dòng)作的流程圖。[0306]首先，決定部411決定合并候選的最大數(shù)(S401)。第I導(dǎo)出部412導(dǎo)出第I合并候選(S402)。在導(dǎo)出了多個(gè)第I合并候選的情況下，確定部413確定預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引與其它第I合并候選重復(fù)的第I合并候選(S403)。
[0307]判定部414判定除重復(fù)候選以外的第I合并候選的數(shù)量是否小于所決定的最大數(shù)(S404)。在此，在判定為除重復(fù)候選以外的第I合并候選的數(shù)量小于所決定的最大數(shù)的情況下(S404:是),第2導(dǎo)出部415導(dǎo)出第2合并候選(S405)。另一方面,在判定為除重復(fù)候選以外的第I合并候選的數(shù)量不小于所決定的最大數(shù)的情況下(S404:否)，第2導(dǎo)出部415不導(dǎo)出第2合并候選。
[0308]解碼部420使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在比特流中的已被編碼的索引(S406)。
[0309]預(yù)測控制部430根據(jù)被解碼后的索引，從第I合并候選和第2合并候選中選擇在進(jìn)行解碼對象塊的編碼時(shí)使用的合并候選(S407)。例如，預(yù)測控制部430與實(shí)施方式I相同地從合并候選列表中選擇式I所示的成本為最小的合并候選。
[0310]另外，在此是在導(dǎo)出合并候選后進(jìn)行索引的解碼處理(S406)，但不需要一定按照這種順序進(jìn)行處理。例如，也可以在索引的解碼處理(S406)之后進(jìn)行合并候選的導(dǎo)出處理(S402?S405)。另外，還可以并行進(jìn)行索引的解碼處理(S406)和合并候選的導(dǎo)出處理(S402?S405)。由此，能夠提高解碼的處理速度。
[0311]如上所述，根據(jù)本實(shí)施方式的圖像編碼裝置400，能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行編碼。即，能夠與實(shí)際導(dǎo)出的合并候選的數(shù)量無關(guān)地對索引進(jìn)行解碼。因此，即使是丟失了導(dǎo)出合并候選所需要的信息(例如co-located塊等的信息)的情況下，也能夠?qū)λ饕M(jìn)行解碼，能夠提高錯(cuò)誤容限。并且，不需等待合并候選的導(dǎo)出處理即可進(jìn)行索引的解碼處理，也能夠并行進(jìn)行合并候選的導(dǎo)出處理和索引的解碼處理。
[0312]另外，根據(jù)本實(shí)施方式的圖像編碼裝置400，在判定為第I合并候選的數(shù)量小于最大數(shù)的情況下，能夠?qū)С龅?合并候選。因此，能夠在不超過最大數(shù)的范圍內(nèi)增加合并候選的數(shù)量，能夠適當(dāng)?shù)貙μ岣吡司幋a效率的比特流進(jìn)行解碼。
[0313]另外，根據(jù)本實(shí)施方式的圖像編碼裝置400，能夠根據(jù)除重復(fù)的第I合并候選以外的第I合并候選的數(shù)量導(dǎo)出第2合并候選。其結(jié)果是，能夠增加第2合并候選的數(shù)量，能夠增加可以被選擇為合并候選的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合的種類。因此，能夠適當(dāng)?shù)貙M(jìn)一步提高了編碼效率的比特流進(jìn)行解碼。
[0314]另外，在本實(shí)施方式中，圖像解碼裝置400具有確定部413，但與實(shí)施方式2相同地不需要一定具有確定部413。即，在圖27所示的流程圖中不需要一定包含步驟S403。即使是這種情況下，圖像解碼裝置400也能夠使用所決定的最大數(shù)對用于確定合并候選的索引進(jìn)行編碼，因而能夠提高錯(cuò)誤容限。
[0315]另外，在本實(shí)施方式中，如圖27所示，在第I導(dǎo)出部412導(dǎo)出第I合并候選后，確定部413確定重復(fù)候選，但不需要一定按照這種順序進(jìn)行處理。例如，也可以是，第I導(dǎo)出部412導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為第I合并候選。
[0316]以上，根據(jù)實(shí)施方式對本發(fā)明的一個(gè)或者多個(gè)方式涉及的圖像編碼裝置及圖像解碼裝置進(jìn)行了說明，但本發(fā)明不限于這種實(shí)施方式。也可以是，只要不脫離本發(fā)明的宗旨，本實(shí)施方式實(shí)施本行業(yè)人員能夠想到的各種變形而得到的方式、或?qū)⒉煌膶?shí)施方式中的構(gòu)成要素進(jìn)行組合而構(gòu)成的方式，都包含在本發(fā)明的一個(gè)或者多個(gè)方式中。
[0317]另外，在上述各實(shí)施方式中，各構(gòu)成要素也可以利用專用的硬件構(gòu)成、或者通過執(zhí)行適合于各構(gòu)成要素的軟件程序來實(shí)現(xiàn)。各構(gòu)成要素也可以通過由CPU或者處理器等程序執(zhí)行部讀出被記錄在硬盤或者半導(dǎo)體存儲(chǔ)器等記錄介質(zhì)中的軟件程序并執(zhí)行而實(shí)現(xiàn)。其中，用于實(shí)現(xiàn)上述各實(shí)施方式的圖像編碼裝置或者圖像解碼裝置等的軟件是如下所述的程序。
[0318]S卩，該程序使計(jì)算機(jī)執(zhí)行圖像編碼方法，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼方法包括:決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出步驟，導(dǎo)出第I合并候選；判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)；第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選；選擇步驟，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述編碼對象塊的編碼時(shí)使用的合并候選；以及編碼步驟，使用所決定的所述最大數(shù)對用于確定所選擇的所述合并候選的索引進(jìn)行編碼，將被編碼后的所述索引附加在所述比特流中。
[0319]或者，該程序使計(jì)算機(jī)執(zhí)行圖像解碼方法，按照每個(gè)塊對包含于比特流中的編碼圖像進(jìn)行解碼，該圖像解碼方法包括:決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行解碼對象塊的解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出步驟，導(dǎo)出第I合并候選；判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)；第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選；解碼步驟，使用所決定的所述最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在所述比特流中的已被編碼的索引；以及選擇步驟，根據(jù)被解碼后的所述索引，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述解碼對象塊的解碼時(shí)使用的合并候選。
[0320](實(shí)施方式5)
[0321]通過將用來實(shí)現(xiàn)上述各實(shí)施方式所示的運(yùn)動(dòng)圖像編碼方法(圖像編碼方法)或運(yùn)動(dòng)圖像解碼方法(圖像解碼方法)的結(jié)構(gòu)的程序記錄到存儲(chǔ)介質(zhì)中，能夠?qū)⑸鲜龈鲗?shí)施方式所示的處理在獨(dú)立的計(jì)算機(jī)系統(tǒng)中簡單地實(shí)施。存儲(chǔ)介質(zhì)是磁盤、光盤、光磁盤、IC卡、半導(dǎo)體存儲(chǔ)器等，只要是能夠記錄程序的介質(zhì)就可以。
[0322]進(jìn)而，這里說明在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法(圖像編碼方法)及運(yùn)動(dòng)圖像解碼方法(圖像解碼方法)的應(yīng)用例和使用它的系統(tǒng)。該系統(tǒng)的特征在于，具有由使用圖像編碼方法的圖像編碼裝置及使用圖像解碼方法的圖像解碼裝置構(gòu)成的圖像編碼解碼裝置。關(guān)于系統(tǒng)的其他結(jié)構(gòu)，可以根據(jù)情況而適當(dāng)變更。
[0323]圖28是表示實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容供給系統(tǒng)exlOO的整體結(jié)構(gòu)的圖。將通信服務(wù)的提供區(qū)劃分為希望的大小，在各小區(qū)內(nèi)分別設(shè)置有作為固定無線站的基站exl06、exl07、exl08、exl09、exllO。
[0324]該內(nèi)容供給系統(tǒng)exlOO在因特網(wǎng)exlOl上經(jīng)由因特網(wǎng)服務(wù)提供商exl02及電話網(wǎng)exl04、及基站 exl07 ?exllO 連接著計(jì)算機(jī) exlll、PDA (Personal Digital Assistant)exll2、照相機(jī)exll3、便攜電話exll4、游戲機(jī)exll5等的各設(shè)備。[0325]但是，內(nèi)容供給系統(tǒng)exlOO并不限定于圖28那樣的結(jié)構(gòu)，也可以將某些要素組合連接。此外，也可以不經(jīng)由作為固定無線站的基站exl07?exllO將各設(shè)備直接連接在電話網(wǎng)exl04上。此外，也可以將各設(shè)備經(jīng)由近距離無線等直接相互連接。
[0326]照相機(jī)ex113是能夠進(jìn)行數(shù)字?jǐn)z像機(jī)等的運(yùn)動(dòng)圖像攝影的設(shè)備，照相機(jī)exll6是能夠進(jìn)行數(shù)字照相機(jī)等的靜止圖像攝影、運(yùn)動(dòng)圖像攝影的設(shè)備。此外，便攜電話exll4是GSM (Global System for Mobile Communications)方式、CDMA (Code Division MultipleAccess)方式、W-CDMA (ffideband-Code Division Multiple Access)方式、或 LTE (LongTerm Evolution)方式、HSPA(High Speed Packet Access)的便攜電話機(jī)、或 PHS(PersonalHandyphone System)等,是哪種都可以。
[0327]在內(nèi)容供給系統(tǒng)exlOO中，通過將照相機(jī)exl 13等經(jīng)由基站exl09、電話網(wǎng)exl04連接在流媒體服務(wù)器exl03上，能夠進(jìn)行現(xiàn)場轉(zhuǎn)播等。在現(xiàn)場轉(zhuǎn)播中，對用戶使用照相機(jī)exll3攝影的內(nèi)容(例如音樂會(huì)現(xiàn)場的影像等)如在上述各實(shí)施方式中說明那樣進(jìn)行編碼處理(即，作為本發(fā)明的一個(gè)方式的圖像編碼裝置發(fā)揮作用)，向流媒體服務(wù)器exl03發(fā)送。另一方面，流媒體服務(wù)器exl03將發(fā)送來的內(nèi)容數(shù)據(jù)對有請求的客戶端進(jìn)行流分發(fā)。作為客戶端，有能夠?qū)⑸鲜鼍幋a處理后的數(shù)據(jù)解碼的計(jì)算機(jī)eXlll、PDAeX112、照相機(jī)exll3、便攜電話exll4、游戲機(jī)exll5等。在接收到分發(fā)的數(shù)據(jù)的各設(shè)備中，將接收到的數(shù)據(jù)解碼處理而再現(xiàn)(即，作為本發(fā)明的一個(gè)方式的圖像解碼裝置發(fā)揮作用)。
[0328]另外，攝影的數(shù)據(jù)的編碼處理既可以由照相機(jī)exll3進(jìn)行，也可以由進(jìn)行數(shù)據(jù)的發(fā)送處理的流媒體服務(wù)器exl03進(jìn)行，也可以相互分擔(dān)進(jìn)行。同樣，分發(fā)的數(shù)據(jù)的解碼處理既可以由客戶端進(jìn)行，也可以由流媒體服務(wù)器exl03進(jìn)行，也可以相互分擔(dān)進(jìn)行。此外，并不限于照相機(jī)exll3，也可以將由照相機(jī)exll6攝影的靜止圖像及/或運(yùn)動(dòng)圖像數(shù)據(jù)經(jīng)由計(jì)算機(jī)exlll向流媒體服務(wù)器exl03發(fā)送。此情況下的編碼處理由照相機(jī)exll6、計(jì)算機(jī)exlll、流媒體服務(wù)器exl03的哪個(gè)進(jìn)行都可以，也可以相互分擔(dān)進(jìn)行。
[0329]此外，這些編碼解碼處理一般在計(jì)算機(jī)exlll或各設(shè)備具有的LSIex500中處理。LSIex500既可以是單芯片，也可以是由多個(gè)芯片構(gòu)成的結(jié)構(gòu)。另外，也可以將運(yùn)動(dòng)圖像編碼解碼用的軟件裝入到能夠由計(jì)算機(jī)exlll等讀取的某些記錄介質(zhì)(⑶-ROM、軟盤、硬盤等)中、使用該軟件進(jìn)行編碼解碼處理。進(jìn)而，在便攜電話exll4是帶有照相機(jī)的情況下，也可以將由該照相機(jī)取得的運(yùn)動(dòng)圖像數(shù)據(jù)發(fā)送。此時(shí)的運(yùn)動(dòng)圖像數(shù)據(jù)是由便攜電話exll4具有的LSIex500編碼處理的數(shù)據(jù)。
[0330]此外，也可以是，流媒體服務(wù)器exl03是多個(gè)服務(wù)器或多個(gè)計(jì)算機(jī)，是將數(shù)據(jù)分散處理、記錄、及分發(fā)的。
[0331]如以上這樣，在內(nèi)容供給系統(tǒng)exlOO中，客戶端能夠接收編碼的數(shù)據(jù)而再現(xiàn)。這樣，在內(nèi)容供給系統(tǒng)exlOO中，客戶端能夠?qū)⒂脩舭l(fā)送的信息實(shí)時(shí)地接收、解碼、再現(xiàn)，即使是沒有特別的權(quán)利或設(shè)備的用戶也能夠?qū)崿F(xiàn)個(gè)人廣播。
[0332]另外，并不限定于內(nèi)容供給系統(tǒng)exlOO的例子，如圖29所示，在數(shù)字廣播用系統(tǒng)ex200中也能夠裝入上述實(shí)施方式的至少運(yùn)動(dòng)圖像編碼裝置(圖像編碼裝置)或運(yùn)動(dòng)圖像解碼裝置(圖像解碼裝置)的某個(gè)。具體而言，在廣播站ex201中，將對影像數(shù)據(jù)復(fù)用了音樂數(shù)據(jù)等而得到的復(fù)用數(shù)據(jù)經(jīng)由電波向通信或廣播衛(wèi)星ex202傳送。該影像數(shù)據(jù)是通過上述各實(shí)施方式中說明的運(yùn)動(dòng)圖像編碼方法編碼后的數(shù)據(jù)(即，通過本發(fā)明的一個(gè)方式的圖像編碼裝置編碼后的數(shù)據(jù))。接受到該數(shù)據(jù)的廣播衛(wèi)星ex202發(fā)出廣播用的電波，能夠?qū)υ撾姴ㄟM(jìn)行衛(wèi)星廣播接收的家庭的天線ex204接收該電波，通過電視機(jī)(接收機(jī))ex300或機(jī)頂盒(STB) ex217等的裝置將接收到的復(fù)用數(shù)據(jù)解碼并將其再現(xiàn)(S卩，作為本發(fā)明的一個(gè)方式的圖像解碼裝置發(fā)揮作用)。
[0333]此外，也可以是，在將記錄在DVD、BD等的記錄介質(zhì)ex215中的復(fù)用數(shù)據(jù)讀取并解碼、或?qū)⒂跋駭?shù)據(jù)編碼再根據(jù)情況與音樂信號(hào)復(fù)用而寫入記錄介質(zhì)ex215中的讀取器/記錄器ex218中也能夠安裝上述各實(shí)施方式所示的運(yùn)動(dòng)圖像解碼裝置或運(yùn)動(dòng)圖像編碼裝置。在此情況下，可以將再現(xiàn)的影像信號(hào)顯示在監(jiān)視器ex219上，通過記錄有復(fù)用數(shù)據(jù)的記錄介質(zhì)ex215在其他裝置或系統(tǒng)中能夠再現(xiàn)影像信號(hào)。此外，也可以是，在連接在有線電視用的線纜ex203或衛(wèi)星/地面波廣播的天線ex204上的機(jī)頂盒ex217內(nèi)安裝運(yùn)動(dòng)圖像解碼裝置，將其用電視機(jī)的監(jiān)視器ex219顯示。此時(shí)，也可以不是在機(jī)頂盒、而在電視機(jī)內(nèi)裝入運(yùn)動(dòng)圖像解碼裝置。
[0334]圖30是表示使用在上述各實(shí)施方式中說明的運(yùn)動(dòng)圖像解碼方法及運(yùn)動(dòng)圖像編碼方法的電視機(jī)(接收機(jī))ex300的圖。電視機(jī)ex300具備經(jīng)由接收上述廣播的天線ex204或線纜ex203等取得或者輸出對影像數(shù)據(jù)復(fù)用了聲音數(shù)據(jù)的復(fù)用數(shù)據(jù)的調(diào)諧器ex301、將接收到的復(fù)用數(shù)據(jù)解調(diào)或調(diào)制為向外部發(fā)送的編碼數(shù)據(jù)的調(diào)制/解調(diào)部ex302、和將解調(diào)后的復(fù)用數(shù)據(jù)分離為影像數(shù)據(jù)、聲音數(shù)據(jù)或?qū)⒃谛盘?hào)處理部ex306中編碼的影像數(shù)據(jù)、聲音數(shù)據(jù)復(fù)用的復(fù)用/分離部ex303。
[0335]此外，電視機(jī)ex300具備:具有將聲音數(shù)據(jù)、影像數(shù)據(jù)分別解碼、或?qū)⒏髯缘男畔⒕幋a的聲音信號(hào)處理部ex304和影像信號(hào)處理部ex305(即，作為本發(fā)明的一個(gè)方式的圖像編碼裝置或圖像解碼裝置發(fā)揮作用)的信號(hào)處理部ex306 ;具有將解碼后的聲音信號(hào)輸出的揚(yáng)聲器ex307及顯示解碼后的影像信號(hào)的顯示器等的顯示部ex308的輸出部ex309。進(jìn)而，電視機(jī)eX300具備具有受理用戶操作的輸入的操作輸入部ex312等的接口部ex317。進(jìn)而，電視機(jī)ex300具有合并控制各部的控制部ex310、對各部供給電力的電源電路部ex311。接口部ex317也可以除了操作輸入部ex312以外，還具有與讀取器/記錄器ex218等的外部設(shè)備連接的橋接部ex313、用來能夠安裝SD卡等的記錄介質(zhì)ex216的插槽部ex314、用來與硬盤等的外部記錄介質(zhì)連接的驅(qū)動(dòng)器ex315、與電話網(wǎng)連接的調(diào)制解調(diào)器ex316等。另外，記錄介質(zhì)ex216是能夠通過收存的非易失性/易失性的半導(dǎo)體存儲(chǔ)元件電氣地進(jìn)行信息的記錄的結(jié)構(gòu)。電視機(jī)ex300的各部經(jīng)由同步總線相互連接。
[0336]首先，對電視機(jī)ex300將通過天線ex204等從外部取得的復(fù)用數(shù)據(jù)解碼、再現(xiàn)的結(jié)構(gòu)進(jìn)行說明。電視機(jī)ex300接受來自遙控器ex220等的用戶操作，基于具有CPU等的控制部ex310的控制，將由調(diào)制/解調(diào)部ex302解調(diào)的復(fù)用數(shù)據(jù)用復(fù)用/分離部ex303分離。進(jìn)而，電視機(jī)ex300將分離的聲音數(shù)據(jù)用聲音信號(hào)處理部ex304解碼，將分離的影像數(shù)據(jù)用影像信號(hào)處理部ex305使用在上述各實(shí)施方式中說明的解碼方法解碼。將解碼后的聲音信號(hào)、影像信號(hào)分別從輸出部ex309朝向外部輸出。在輸出時(shí)，可以暫時(shí)將這些信號(hào)儲(chǔ)存到緩沖器ex318、ex319等中，以使聲音信號(hào)和影像信號(hào)同步再現(xiàn)。此外，電視機(jī)ex300也可以不是從廣播等、而從磁/光盤、SD卡等的記錄介質(zhì)ex215、ex216讀出編碼的復(fù)用數(shù)據(jù)。接著，對電視機(jī)ex300將聲音信號(hào)或影像信號(hào)編碼、向外部發(fā)送或?qū)懭氲接涗浗橘|(zhì)等中的結(jié)構(gòu)進(jìn)行說明。電視機(jī)ex300接受來自遙控器ex220等的用戶操作，基于控制部ex310的控制，由聲音信號(hào)處理部ex304將聲音信號(hào)編碼，由影像信號(hào)處理部ex305將影像信號(hào)使用在上述各實(shí)施方式中說明的編碼方法編碼。將編碼后的聲音信號(hào)、影像信號(hào)用復(fù)用/分離部ex303復(fù)用，向外部輸出。在復(fù)用時(shí)，可以暫時(shí)將這些信號(hào)儲(chǔ)存到緩沖器ex320、ex321等中，以使聲音信號(hào)和影像信號(hào)同步再現(xiàn)。另外，緩沖器ex318、ex319、ex320、ex321既可以如圖示那樣具備多個(gè)，也可以是共用一個(gè)以上的緩沖器的結(jié)構(gòu)。進(jìn)而，在圖示以外，也可以是，在例如調(diào)制/解調(diào)部ex302或復(fù)用/分離部ex303之間等也作為避免系統(tǒng)的上溢、下溢的緩沖部而在緩沖器中儲(chǔ)存數(shù)據(jù)。
[0337]此外，電視機(jī)ex300除了從廣播等或記錄介質(zhì)等取得聲音數(shù)據(jù)、影像數(shù)據(jù)以外，也可以具備受理麥克風(fēng)或照相機(jī)的AV輸入的結(jié)構(gòu)，對從它們中取得的數(shù)據(jù)進(jìn)行編碼處理。另夕卜，這里，將電視機(jī)ex300作為能夠進(jìn)行上述編碼處理、復(fù)用、及外部輸出的結(jié)構(gòu)進(jìn)行了說明，但也可以是，不能進(jìn)行這些處理，而是僅能夠進(jìn)行上述接收、解碼處理、外部輸出的結(jié)構(gòu)。
[0338]此外，在由讀取器/記錄器ex218從記錄介質(zhì)將復(fù)用數(shù)據(jù)讀出、或?qū)懭氲那闆r下，上述解碼處理或編碼處理由電視機(jī)ex300、讀取器/記錄器ex218的哪個(gè)進(jìn)行都可以，也可以是電視機(jī)ex300和讀取器/記錄器ex218相互分擔(dān)進(jìn)行。
[0339]作為一例，將從光盤進(jìn)行數(shù)據(jù)的讀入或?qū)懭氲那闆r下的信息再現(xiàn)/記錄部ex400的結(jié)構(gòu)表示在圖31中。信息再現(xiàn)/記錄部ex400具備以下說明的單元ex401、ex402、ex403、ex404、ex405、ex406、ex407。光頭ex401對作為光盤的記錄介質(zhì)ex215的記錄面照射激光斑而寫入信息，檢測來自記錄介質(zhì)ex215的記錄面的反射光而讀入信息。調(diào)制記錄部ex402電氣地驅(qū)動(dòng)內(nèi)置在光頭ex401中的半導(dǎo)體激光器，根據(jù)記錄數(shù)據(jù)進(jìn)行激光的調(diào)制。再現(xiàn)解調(diào)部ex403將由內(nèi)置在光頭ex401中的光檢測器電氣地檢測到來自記錄面的反射光而得到的再現(xiàn)信號(hào)放大，將記錄在記錄介質(zhì)ex215中的信號(hào)成分分離并解調(diào)，再現(xiàn)所需要的信息。緩沖器ex404將用來記錄到記錄介質(zhì)ex215中的信息及從記錄介質(zhì)ex215再現(xiàn)的信息暫時(shí)保持。盤馬達(dá)ex405使記錄介質(zhì)ex215旋轉(zhuǎn)。伺服控制部ex406 —邊控制盤馬達(dá)ex405的旋轉(zhuǎn)驅(qū)動(dòng)一邊使光頭ex401移動(dòng)到規(guī)定的信息軌道，進(jìn)行激光斑的追蹤處理。系統(tǒng)控制部ex407進(jìn)行信息再現(xiàn)/記錄部ex400整體的控制。上述的讀出及寫入的處理由系統(tǒng)控制部ex407利用保持在緩沖器ex404中的各種信息、此外根據(jù)需要而進(jìn)行新的信息的生成、追力口、并且一邊使調(diào)制記錄部ex402、再現(xiàn)解調(diào)部ex403、伺服控制部ex406協(xié)調(diào)動(dòng)作、一邊通過光頭ex401進(jìn)行信息的記錄再現(xiàn)來實(shí)現(xiàn)。系統(tǒng)控制部ex407例如由微處理器構(gòu)成，通過執(zhí)行讀出寫入的程序來執(zhí)行它們的處理。
[0340]以上，假設(shè)光頭ex401照射激光斑而進(jìn)行了說明，但也可以是使用近場光進(jìn)行高密度的記錄的結(jié)構(gòu)。
[0341]在圖32中表示作為光盤的記錄介質(zhì)ex215的示意圖。在記錄介質(zhì)ex215的記錄面上，以螺旋狀形成有導(dǎo)引槽(溝)，在信息軌道ex230中，預(yù)先通過溝的形狀的變化而記錄有表示盤上的絕對位置的地址信息。該地址信息包括用來確定作為記錄數(shù)據(jù)的單位的記錄塊ex231的位置的信息，通過在進(jìn)行記錄及再現(xiàn)的裝置中將信息軌道ex230再現(xiàn)而讀取地址信息，能夠確定記錄塊。此外，記錄介質(zhì)ex215包括數(shù)據(jù)記錄區(qū)域ex233、內(nèi)周區(qū)域ex232、外周區(qū)域ex234。為了記錄用戶數(shù)據(jù)而使用的區(qū)域是數(shù)據(jù)記錄區(qū)域ex233，配置在比數(shù)據(jù)記錄區(qū)域ex233靠內(nèi)周或外周的內(nèi)周區(qū)域ex232和外周區(qū)域ex234用于用戶數(shù)據(jù)的記錄以外的特定用途。信息再現(xiàn)/記錄部ex400對這樣的記錄介質(zhì)ex215的數(shù)據(jù)記錄區(qū)域ex233進(jìn)行編碼的聲音數(shù)據(jù)、影像數(shù)據(jù)或復(fù)用了這些數(shù)據(jù)的編碼數(shù)據(jù)的讀寫。
[0342]以上，舉I層的DVD、BD等的光盤為例進(jìn)行了說明，但并不限定于這些，也可以是多層構(gòu)造、在表面以外也能夠記錄的光盤。此外，也可以是在盤的相同的地方使用不同波長的顏色的光記錄信息、或從各種角度記錄不同的信息的層等、進(jìn)行多維的記錄/再現(xiàn)的構(gòu)造的光盤。
[0343]此外，在數(shù)字廣播用系統(tǒng)ex200中，也可以由具有天線ex205的車ex210從衛(wèi)星ex202等接收數(shù)據(jù)、在車ex210具有的車載導(dǎo)航儀ex211等的顯示裝置上再現(xiàn)運(yùn)動(dòng)圖像。另夕卜，車載導(dǎo)航儀ex211的結(jié)構(gòu)可以考慮例如在圖30所示的結(jié)構(gòu)中添加GPS接收部的結(jié)構(gòu)，在計(jì)算機(jī)exlll及便攜電話exll4等中也可以考慮同樣的結(jié)構(gòu)。
[0344]圖33A是表示使用在上述實(shí)施方式中說明的運(yùn)動(dòng)圖像解碼方法和運(yùn)動(dòng)圖像編碼方法的便攜電話exll4的圖。便攜電話exll4具有由用來在與基站exllO之間收發(fā)電波的天線ex350、能夠拍攝影像、靜止圖像的照相機(jī)部ex365、顯示將由照相機(jī)部ex365攝影的影像、由天線ex350接收到的影像等解碼后的數(shù)據(jù)的液晶顯示器等的顯示部ex358。便攜電話exll4還具有包含操作鍵部ex366的主體部、用來進(jìn)行聲音輸出的揚(yáng)聲器等的聲音輸出部ex357、用來進(jìn)行聲音輸入的麥克風(fēng)等的聲音輸入部ex356、保存拍攝到的影像、靜止圖像、錄音的聲音、或者接收到的影像、靜止圖像、郵件等的編碼后的數(shù)據(jù)或者解碼后的數(shù)據(jù)的存儲(chǔ)器部ex367、或者作為與同樣保存數(shù)據(jù)的記錄介質(zhì)之間的接口部的插槽部ex364。
[0345]進(jìn)而，使用圖33B對便攜電話exl 14的結(jié)構(gòu)例進(jìn)行說明。便攜電話exl 14對于合并控制具備顯示部ex358及操作鍵部ex366的主體部的各部的主控制部ex360，將電源電路部ex361、操作輸入控制部ex362、影像信號(hào)處理部ex355、照相機(jī)接口部ex363、LCD (LiquidCrystal Display:液晶顯示器)控制部ex359、調(diào)制/解調(diào)部ex352、復(fù)用/分離部ex353、聲音信號(hào)處理部ex354、插槽部ex364、存儲(chǔ)器部ex367經(jīng)由總線ex370相互連接。
[0346]電源電路部ex361如果通過用戶的操作使通話結(jié)束及電源鍵成為開啟狀態(tài)，則通過從電池組對各部供給電力，便攜電話exll4起動(dòng)為能夠動(dòng)作的狀態(tài)。
[0347]便攜電話exl 14基于具有CPU、ROM及RAM等的主控制部ex360的控制，在語音通話模式時(shí)，將由聲音輸入部ex356集音的聲音信號(hào)通過聲音信號(hào)處理部ex354變換為數(shù)字聲音信號(hào)，將其用調(diào)制/解調(diào)部ex352進(jìn)行波譜擴(kuò)散處理，由發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后經(jīng)由天線ex350發(fā)送。此外，便攜電話exll4在語音通話模式時(shí)，將由天線ex350接收到的接收數(shù)據(jù)放大并實(shí)施頻率變換處理及模擬數(shù)字變換處理，用調(diào)制/解調(diào)部ex352進(jìn)行波譜逆擴(kuò)散處理，通過聲音信號(hào)處理部ex354變換為模擬聲音數(shù)據(jù)后，將其經(jīng)由聲音輸出部ex357輸出。
[0348]進(jìn)而，在數(shù)據(jù)通信模式時(shí)發(fā)送電子郵件的情況下，將通過主體部的操作鍵部ex366等的操作輸入的電子郵件的文本數(shù)據(jù)經(jīng)由操作輸入控制部ex362向主控制部ex360送出。主控制部ex360將文本數(shù)據(jù)用調(diào)制/解調(diào)部ex352進(jìn)行波譜擴(kuò)散處理，由發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后，經(jīng)由天線ex350向基站exllO發(fā)送。在接收電子郵件的情況下，對接收到的數(shù)據(jù)執(zhí)行上述處理的大致逆處理，并輸出到顯示部ex350o
[0349]在數(shù)據(jù)通信模式時(shí)，在發(fā)送影像、靜止圖像、或者影像和聲音的情況下，影像信號(hào)處理部ex355將從照相機(jī)部ex365供給的影像信號(hào)通過上述各實(shí)施方式所示的運(yùn)動(dòng)圖像編碼方法進(jìn)行壓縮編碼(即，作為本發(fā)明的一個(gè)方式的圖像編碼裝置發(fā)揮作用)，將編碼后的影像數(shù)據(jù)送出至復(fù)用/分離部ex353。另外，聲音信號(hào)處理部ex354對通過照相機(jī)部ex365拍攝影像、靜止圖像等的過程中用聲音輸入部ex356集音的聲音信號(hào)進(jìn)行編碼，將編碼后的聲音數(shù)據(jù)送出至復(fù)用/分離部ex353。
[0350]復(fù)用/分離部ex353通過規(guī)定的方式，對從影像信號(hào)處理部ex355供給的編碼后的影像數(shù)據(jù)和從聲音信號(hào)處理部ex354供給的編碼后的聲音數(shù)據(jù)進(jìn)行復(fù)用，將其結(jié)果得到的復(fù)用數(shù)據(jù)用調(diào)制/解調(diào)部(調(diào)制/解調(diào)電路部)ex352進(jìn)行波譜擴(kuò)散處理，由發(fā)送/接收部ex351實(shí)施數(shù)字模擬變換處理及頻率變換處理后，經(jīng)由天線ex350發(fā)送。
[0351]在數(shù)據(jù)通信模式時(shí)接收到鏈接到主頁等的運(yùn)動(dòng)圖像文件的數(shù)據(jù)的情況下，或者接收到附加了影像或者聲音的電子郵件的情況下，為了對經(jīng)由天線ex350接收到的復(fù)用數(shù)據(jù)進(jìn)行解碼，復(fù)用/分離部ex353通過將復(fù)用數(shù)據(jù)分離，分為影像數(shù)據(jù)的比特流和聲音數(shù)據(jù)的比特流，經(jīng)由同步總線ex370將編碼后的影像數(shù)據(jù)向影像信號(hào)處理部ex355供給，并將編碼后的聲音數(shù)據(jù)向聲音信號(hào)處理部ex354供給。影像信號(hào)處理部ex355通過與上述各實(shí)施方式所示的運(yùn)動(dòng)圖像編碼方法相對應(yīng)的運(yùn)動(dòng)圖像解碼方法進(jìn)行解碼，由此對影像信號(hào)進(jìn)行解碼(即，作為本發(fā)明的一個(gè)方式的圖像解碼裝置發(fā)揮作用)，經(jīng)由IXD控制部ex359從顯示部ex358顯示例如鏈接到主頁的運(yùn)動(dòng)圖像文件中包含的影像、靜止圖像。另外，聲音信號(hào)處理部ex354對聲音信號(hào)進(jìn)行解碼,從聲音輸出部ex357輸出聲音。
[0352]此外，上述便攜電話exll4等的終端與電視機(jī)ex300同樣，除了具有編碼器、解碼器兩者的收發(fā)型終端以外，還可以考慮只有編碼器的發(fā)送終端、只有解碼器的接收終端的3種安裝形式。另外，在數(shù)字廣播用系統(tǒng)ex200中，設(shè)為發(fā)送、接收在影像數(shù)據(jù)中復(fù)用了音樂數(shù)據(jù)等得到的復(fù)用數(shù)據(jù)而進(jìn)行了說明，但除聲音數(shù)據(jù)之外復(fù)用了與影像關(guān)聯(lián)的字符數(shù)據(jù)等的數(shù)據(jù)也可以，不是復(fù)用數(shù)據(jù)而是影像數(shù)據(jù)本身也可以。
[0353]這樣，將在上述各實(shí)施方式中表示的運(yùn)動(dòng)圖像編碼方法或運(yùn)動(dòng)圖像解碼方法用在上述哪種設(shè)備、系統(tǒng)中都可以，通過這樣，能夠得到在上述各實(shí)施方式中說明的效果。
[0354]此外，本發(fā)明并不限定于這樣的上述實(shí)施方式，能夠不脫離本發(fā)明的范圍而進(jìn)行各種變形或修正。
[0355](實(shí)施方式6)
[0356]也可以通過將在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置、與依據(jù)MPEG-2、MPEG4-AVC、VC-1等不同的標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像編碼方法或裝置根據(jù)需要而適當(dāng)切換，來生成影像數(shù)據(jù)。
[0357]這里，在生成分別依據(jù)不同的標(biāo)準(zhǔn)的多個(gè)影像數(shù)據(jù)的情況下，在解碼時(shí)，需要選擇對應(yīng)于各個(gè)標(biāo)準(zhǔn)的解碼方法。但是，由于不能識(shí)別要解碼的影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)，所以產(chǎn)生不能選擇適當(dāng)?shù)慕獯a方法的問題。
[0358]為了解決該問題，在影像數(shù)據(jù)中復(fù)用了聲音數(shù)據(jù)等的復(fù)用數(shù)據(jù)采用包含表示影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)的識(shí)別信息的結(jié)構(gòu)。以下，說明包括通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)在內(nèi)的復(fù)用數(shù)據(jù)的具體的結(jié)構(gòu)。復(fù)用數(shù)據(jù)是MPEG-2傳輸流形式的數(shù)字流。
[0359]圖34是表示復(fù)用數(shù)據(jù)的結(jié)構(gòu)的圖。如圖34所示，復(fù)用數(shù)據(jù)通過將視頻流、音頻流、演示圖形流(PG)、交互圖形流中的I個(gè)以上進(jìn)行復(fù)用而得到。視頻流表示電影的主影像及副影像，音頻流(IG)表示電影的主聲音部分和與該主聲音混合的副聲音，演示圖形流表示電影的字幕。這里，所謂主影像，表示顯示在畫面上的通常的影像，所謂副影像，是在主影像中用較小的畫面顯示的影像。此外，交互圖形流表示通過在畫面上配置GUI部件而制作的對話畫面。視頻流通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置、依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像編碼方法或裝置編碼。音頻流由杜比AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或線性 PCM 等的方式編碼。
[0360]包含在復(fù)用數(shù)據(jù)中的各流通過PID被識(shí)別。例如，對在電影的影像中使用的視頻流分配0x1011，對音頻流分配0x1100到OxlllF，對演示圖形分配0x1200到0xl21F，對交互圖形流分配0x1400到0xl41F，對在電影的副影像中使用的視頻流分配OxlBOO到OxlBlF，對與主聲音混合的副聲音中使用的音頻流分配OxIAOO到OxlAlF。
[0361]圖35是示意地表示復(fù)用數(shù)據(jù)怎樣被復(fù)用的圖。首先，將由多個(gè)視頻幀構(gòu)成的視頻流ex235、由多個(gè)音頻幀構(gòu)成的音頻流ex238分別變換為PES包序列ex236及ex239，并變換為TS包ex237及ex240。同樣，將演示圖形流ex241及交互圖形ex244的數(shù)據(jù)分別變換為PES包序列ex242及ex245，再變換為TS包ex243及ex246。復(fù)用數(shù)據(jù)ex247通過將這些TS包復(fù)用到I條流中而構(gòu)成。
[0362]圖36更詳細(xì)地表示在PES包序列中怎樣保存視頻流。圖36的第I段表示視頻流的視頻幀序列。第2段表示PES包序列。如圖36的箭頭yyl、yy2、yy3、yy4所示,視頻流中的多個(gè)作為Video Presentation Unit的I圖片、B圖片、P圖片按每個(gè)圖片被分割并保存到PES包的有效載荷中。各PES包具有PES頭，在PES頭中，保存有作為圖片的顯示時(shí)刻的PTS (Presentation Time-Stamp)及作為圖片的解碼時(shí)刻的 DTS (Decoding Time-Stamp)?
[0363]圖37表示最終寫入在復(fù)用數(shù)據(jù)中的TS包的形式。TS包是由具有識(shí)別流的PID等信息的4字節(jié)的TS頭和保存數(shù)據(jù)的184字節(jié)的TS有效載荷構(gòu)成的188字節(jié)固定長度的包，上述PES包被分割并保存到TS有 效載荷中。在BD-ROM的情況下，對于TS包賦予4字節(jié)的TP_Extra_Header,構(gòu)成192字節(jié)的源包，寫入到復(fù)用數(shù)據(jù)中。在TP_Extra_Header中記載有ATS (Arrival_Time_Stamp)等信息。ATS表示該TS包向解碼器的PID濾波器的轉(zhuǎn)送開始時(shí)刻。在復(fù)用數(shù)據(jù)中，源包如圖37下段所示排列，從復(fù)用數(shù)據(jù)的開頭起遞增的號(hào)碼被稱作SPN (源包號(hào))。
[0364]此外，在復(fù)用數(shù)據(jù)所包含的TS包中，除了影像、聲音、字幕等的各流以外，還有PAT (Program Association Table)、PMT (Program Map Table)、PCR (Program ClockReference)等。PAT表示在復(fù)用數(shù)據(jù)中使用的PMT的PID是什么，PAT自身的PID被登記為
O。PMT具有復(fù)用數(shù)據(jù)所包含的影像、聲音、字幕等的各流的PID、以及與各PID對應(yīng)的流的屬性信息，還具有關(guān)于復(fù)用數(shù)據(jù)的各種描述符。在描述符中，有指示許可/不許可復(fù)用數(shù)據(jù)的拷貝的拷貝控制信息等。PCR為了取得作為ATS的時(shí)間軸的ATC (Arrival Time Clock)與作為PTS及DTS的時(shí)間軸的STC (System Time Clock)的同步，擁有與該P(yáng)CR包被轉(zhuǎn)送至解碼器的ATS對應(yīng)的STC時(shí)間的信息。
[0365]圖38是詳細(xì)地說明PMT的數(shù)據(jù)構(gòu)造的圖。在PMT的開頭，配置有記述了包含在該P(yáng)MT中的數(shù)據(jù)的長度等的PMT頭。在其后面，配置有多個(gè)關(guān)于復(fù)用數(shù)據(jù)的描述符。上述拷貝控制信息等被記載為描述符。在描述符之后，配置有多個(gè)關(guān)于包含在復(fù)用數(shù)據(jù)中的各流的流信息。流信息由記載有用來識(shí)別流的壓縮編解碼器的流類型、流的PID、流的屬性信息(幀速率、縱橫比等)的流描述符構(gòu)成。流描述符存在復(fù)用數(shù)據(jù)中存在的流的數(shù)量。
[0366]在記錄到記錄介質(zhì)等中的情況下，將上述復(fù)用數(shù)據(jù)與復(fù)用數(shù)據(jù)信息文件一起記錄。
[0367]復(fù)用數(shù)據(jù)信息文件如圖39所示，是復(fù)用數(shù)據(jù)的管理信息，與復(fù)用數(shù)據(jù)一對一地對應(yīng)，由復(fù)用數(shù)據(jù)信息、流屬性信息以及入口映射構(gòu)成。
[0368]復(fù)用數(shù)據(jù)信息如圖39所示，由系統(tǒng)速率、再現(xiàn)開始時(shí)刻、再現(xiàn)結(jié)束時(shí)刻構(gòu)成。系統(tǒng)速率表示復(fù)用數(shù)據(jù)的向后述的系統(tǒng)目標(biāo)解碼器的PID濾波器的最大轉(zhuǎn)送速率。包含在復(fù)用數(shù)據(jù)中的ATS的間隔設(shè)定為成為系統(tǒng)速率以下。再現(xiàn)開始時(shí)刻是復(fù)用數(shù)據(jù)的開頭的視頻幀的PTS，再現(xiàn)結(jié)束時(shí)刻設(shè)定為對復(fù)用數(shù)據(jù)的末端的視頻幀的PTS加上I幀量的再現(xiàn)間隔的值。
[0369]流屬性信息如圖40所示，按每個(gè)PID登記有關(guān)于包含在復(fù)用數(shù)據(jù)中的各流的屬性信息。屬性信息具有按視頻流、音頻流、演示圖形流、交互圖形流而不同的信息。視頻流屬性信息具有該視頻流由怎樣的壓縮編解碼器壓縮、構(gòu)成視頻流的各個(gè)圖片數(shù)據(jù)的分辨率是多少、縱橫比是多少、幀速率是多少等的信息。音頻流屬性信息具有該音頻流由怎樣的壓縮編解碼器壓縮、包含在該音頻流中的聲道數(shù)是多少、對應(yīng)于哪種語言、采樣頻率是多少等的信息。這些信息用于在播放器再現(xiàn)之前的解碼器的初始化等中。
[0370]在本實(shí)施方式中，使用上述復(fù)用數(shù)據(jù)中的、包含在PMT中的流類型。此外，在記錄介質(zhì)中記錄有復(fù)用數(shù)據(jù)的情況下，使用包含在復(fù)用數(shù)據(jù)信息中的視頻流屬性信息。具體而言，在上述各實(shí)施方式示出的運(yùn)動(dòng)圖像編碼方法或裝置中，設(shè)置如下步驟或單元，該步驟或單元對包含在PMT中的流類型、或視頻流屬性信息，設(shè)定表示是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)的固有信息。通過該結(jié)構(gòu)，能夠識(shí)別通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)、和依據(jù)其他標(biāo)準(zhǔn)的影像數(shù)據(jù)。
[0371]此外，在圖41中表示本實(shí)施方式的運(yùn)動(dòng)圖像解碼方法的步驟。在步驟exSlOO中，從復(fù)用數(shù)據(jù)中取得包含在PMT中的流類型、或包含在復(fù)用數(shù)據(jù)信息中的視頻流屬性信息。接著，在步驟exSlOl中，判斷流類型、或視頻流屬性信息是否表示是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的復(fù)用數(shù)據(jù)。并且，在判斷為流類型、或視頻流屬性信息是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的復(fù)用數(shù)據(jù)情況下，在步驟exS102中，通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法進(jìn)行解碼。此外，在流類型、或視頻流屬性信息表示是依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的復(fù)用數(shù)據(jù)的情況下，在步驟exS103中，通過依據(jù)以往的標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像解碼方法進(jìn)行解碼。
[0372]這樣，通過在流類型、或視頻流屬性信息中設(shè)定新的固有值，在解碼時(shí)能夠判斷是否能夠通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法或裝置解碼。因而，在被輸入了依據(jù)不同的標(biāo)準(zhǔn)的復(fù)用數(shù)據(jù)的情況下，也能夠選擇適當(dāng)?shù)慕獯a方法或裝置，所以能夠不發(fā)生錯(cuò)誤地進(jìn)行解碼。此外，將在本實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置、或者運(yùn)動(dòng)圖像解碼方法或裝置用在上述任何設(shè)備、系統(tǒng)中。
[0373](實(shí)施方式7)
[0374]在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法及裝置、運(yùn)動(dòng)圖像解碼方法及裝置典型地可以由作為集成電路的LSI實(shí)現(xiàn)。作為一例，在圖42中表示I芯片化的LSIex500的結(jié)構(gòu)ο LSIex500 具備以下說明的單元 ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509，各單元經(jīng)由總線ex510連接。電源電路部ex505通過在電源是開啟狀態(tài)的情況下對各部供給電力，起動(dòng)為能夠動(dòng)作的狀態(tài)。
[0375]例如在進(jìn)行編碼處理的情況下，LSIex500基于具有CPUex502、存儲(chǔ)器控制器ex503、流控制器ex504、驅(qū)動(dòng)頻率控制部ex512等的控制部ex501的控制，通過AV I/0ex509從麥克風(fēng)exl 17及照相機(jī)exl 13等輸入AV信號(hào)。被輸入的AV信號(hào)暫時(shí)儲(chǔ)存在SDRAM等的外部的存儲(chǔ)器ex511中。基于控制部ex501的控制，將儲(chǔ)存的數(shù)據(jù)根據(jù)處理量及處理速度適當(dāng)?shù)胤譃槎啻蔚?，向信?hào)處理部ex507發(fā)送，在信號(hào)處理部ex507中進(jìn)行聲音信號(hào)的編碼及/或影像信號(hào)的編碼。這里，影像信號(hào)的編碼處理是在上述各實(shí)施方式中說明的編碼處理。在信號(hào)處理部ex507中，還根據(jù)情況而進(jìn)行將編碼的聲音數(shù)據(jù)和編碼的影像數(shù)據(jù)復(fù)用等的處理，從流I/0ex506向外部輸出。將該輸出的比特流向基站exl07發(fā)送、或?qū)懭氲接涗浗橘|(zhì)ex215中。另外，在復(fù)用時(shí)，可以暫時(shí)將數(shù)據(jù)儲(chǔ)存到緩沖器ex508中以使其同步。
[0376]另外，在上述中，設(shè)存儲(chǔ)器ex511為LSIex500的外部的結(jié)構(gòu)進(jìn)行了說明，但也可以是包含在LSIex500的內(nèi)部中的結(jié)構(gòu)。緩沖器ex508也并不限定于一個(gè)，也可以具備多個(gè)緩沖器。此外，LSIex500既可以形成I個(gè)芯片，也可以形成多個(gè)芯片。
[0377]此外，在上述中，假設(shè)控制部ex510具有CPUex502、存儲(chǔ)器控制器ex503、流控制器ex504、驅(qū)動(dòng)頻率控制部ex512等,但控制部ex510的結(jié)構(gòu)并不限定于該結(jié)構(gòu)。例如,也可以是信號(hào)處理部ex507還具備CPU的結(jié)構(gòu)。通過在信號(hào)處理部ex507的內(nèi)部中也設(shè)置CPU，能夠進(jìn)一步提高處理速度。此外，作為其他例，也可以是CPUex502具備信號(hào)處理部ex507、或作為信號(hào)處理部ex507的一部分的例如聲音信號(hào)處理部的結(jié)構(gòu)。在這樣的情況下，控制部ex501為具備具有信號(hào)處理部ex507或其一部分的CPUex502的結(jié)構(gòu)。
[0378]另外，這里設(shè)為LSI，但根據(jù)集成度的差異，也有稱作1C、系統(tǒng)LS1、超級(jí)(super)LS1、特級(jí)(ultra)LSI的情況。
[0379]此外，集成電路化的方法并不限定于LSI，也可以由專用電路或通用處理器實(shí)現(xiàn)。也可以利用在LSI制造后能夠編程的FPGA (Field Programmable Gate Array)、或能夠重構(gòu)LSI內(nèi)部的電路單元的連接及設(shè)定的可重構(gòu)處理器。
[0380]進(jìn)而，如果因半導(dǎo)體技術(shù)的進(jìn)步或派生的其他技術(shù)而出現(xiàn)代替LSI的集成電路化的技術(shù)，則當(dāng)然也可以使用該技術(shù)進(jìn)行功能模塊的集成化。有可能是生物技術(shù)的應(yīng)用等。
[0381](實(shí)施方式8)
[0382]在將通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的情況下，考慮到與將依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況相比處理量會(huì)增加。因此，在LSIex500中，需要設(shè)定為比將依據(jù)以往的標(biāo)準(zhǔn)的影像數(shù)據(jù)解碼時(shí)的CPUex502的驅(qū)動(dòng)頻率更高的驅(qū)動(dòng)頻率。但是，如果將驅(qū)動(dòng)頻率設(shè)得高，則發(fā)生消耗電力變高的問題。
[0383]為了解決該問題，電視機(jī)ex300、LSIex500等的運(yùn)動(dòng)圖像解碼裝置采用識(shí)別影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)、并根據(jù)標(biāo)準(zhǔn)切換驅(qū)動(dòng)頻率的結(jié)構(gòu)。圖43表示本實(shí)施方式的結(jié)構(gòu)ex800。驅(qū)動(dòng)頻率切換部ex803在影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的情況下，將驅(qū)動(dòng)頻率設(shè)定得高。并且，對執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法的解碼處理部ex801指示將影像數(shù)據(jù)解碼。另一方面，在影像數(shù)據(jù)是依據(jù)以往的標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況下，與影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的數(shù)據(jù)的情況相比，將驅(qū)動(dòng)頻率設(shè)定得低。并且，對依據(jù)以往的標(biāo)準(zhǔn)的解碼處理部ex802指示將影像數(shù)據(jù)解碼。
[0384]更具體地講，驅(qū)動(dòng)頻率切換部ex803由圖42的CPUex502和驅(qū)動(dòng)頻率控制部ex512構(gòu)成。此外，執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法的解碼處理部ex801、以及依據(jù)以往的標(biāo)準(zhǔn)的解碼處理部ex802對應(yīng)于圖42的信號(hào)處理部ex507。CPUex502識(shí)別影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)。并且，基于來自CPUex502的信號(hào)，驅(qū)動(dòng)頻率控制部ex512設(shè)定驅(qū)動(dòng)頻率。此外，基于來自CPUex502的信號(hào)，信號(hào)處理部ex507進(jìn)行影像數(shù)據(jù)的解碼。這里，可以考慮在影像數(shù)據(jù)的識(shí)別中使用例如在實(shí)施方式6中記載的識(shí)別信息。關(guān)于識(shí)別信息，并不限定于在實(shí)施方式6中記載的信息，只要是能夠識(shí)別影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)的信息就可以。例如，在基于識(shí)別影像數(shù)據(jù)利用于電視機(jī)還是利用于盤等的外部信號(hào)，來能夠識(shí)別影像數(shù)據(jù)依據(jù)哪個(gè)標(biāo)準(zhǔn)的情況下，也可以基于這樣的外部信號(hào)進(jìn)行識(shí)別。此外，CPUex502的驅(qū)動(dòng)頻率的選擇例如可以考慮如圖45所示的將影像數(shù)據(jù)的標(biāo)準(zhǔn)與驅(qū)動(dòng)頻率建立對應(yīng)的查找表進(jìn)行。將查找表預(yù)先保存到緩沖器ex508、或LSI的內(nèi)部存儲(chǔ)器中，CPUex502通過參照該查找表，能夠選擇驅(qū)動(dòng)頻率。
[0385]圖44表示實(shí)施本實(shí)施方式的方法的步驟。首先，在步驟exS200中，在信號(hào)處理部ex507中，從復(fù)用數(shù)據(jù)中取得識(shí)別信息。接著，在步驟exS201中，在CPUex502中，基于識(shí)別信息識(shí)別影像數(shù)據(jù)是否是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)。在影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況下，在步驟exS202中，CPUex502向驅(qū)動(dòng)頻率控制部ex512發(fā)送將驅(qū)動(dòng)頻率設(shè)定得高的信號(hào)。并且，在驅(qū)動(dòng)頻率控制部ex512中設(shè)定為高的驅(qū)動(dòng)頻率。另一方面，在表示是依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況下，在步驟exS203中，CPUex502向驅(qū)動(dòng)頻率控制部ex512發(fā)送將驅(qū)動(dòng)頻率設(shè)定得低的信號(hào)。并且，在驅(qū)動(dòng)頻率控制部ex512中，設(shè)定為與影像數(shù)據(jù)是通過在上述各實(shí)施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況相比更低的驅(qū)動(dòng)頻率。
[0386]進(jìn)而，通過與驅(qū)動(dòng)頻率的切換連動(dòng)而變更對LSIex500或包括LSIex500的裝置施加的電壓，由此能夠進(jìn)一步提高節(jié)電效果。例如，在將驅(qū)動(dòng)頻率設(shè)定得低的情況下，隨之，可以考慮與將驅(qū)動(dòng)頻率設(shè)定得高的情況相比，將對LSIex500或包括LSIex500的裝置施加的電壓設(shè)定得低。
[0387]此外，驅(qū)動(dòng)頻率的設(shè)定方法只要是在解碼時(shí)的處理量大的情況下將驅(qū)動(dòng)頻率設(shè)定得高、在解碼時(shí)的處理量小的情況下將驅(qū)動(dòng)頻率設(shè)定得低就可以，并不限定于上述的設(shè)定方法。例如，可以考慮在將依據(jù)MPEG4-AVC標(biāo)準(zhǔn)的影像數(shù)據(jù)解碼的處理量大于將通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的處理量的情況下，與上述的情況相反地進(jìn)行驅(qū)動(dòng)頻率的設(shè)定。
[0388]進(jìn)而，驅(qū)動(dòng)頻率的設(shè)定方法并不限定于使驅(qū)動(dòng)頻率低的結(jié)構(gòu)。例如，也可以考慮在識(shí)別信息是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，將對LSIex500或包括LSIex500的裝置施加的電壓設(shè)定得高，在表示是依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況下，將對LSIex500或包括LSIex500的裝置施加的電壓設(shè)定得低。此外，作為另一例，也可以考慮在識(shí)別信息表示是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，不使CPUex502的驅(qū)動(dòng)停止，在表示是依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況下，由于在處理中有富余，所以使CPUex502的驅(qū)動(dòng)暫停。也可以考慮在識(shí)別信息表示是通過在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下，也只要在處理中有富余則使CPUex502的驅(qū)動(dòng)暫停。在此情況下，可以考慮與表示是依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的影像數(shù)據(jù)的情況相比，將停止時(shí)間設(shè)定得短。
[0389]這樣，根據(jù)影像數(shù)據(jù)所依據(jù)的標(biāo)準(zhǔn)來切換驅(qū)動(dòng)頻率，由此能夠?qū)崿F(xiàn)節(jié)電化。此外，在使用電池來驅(qū)動(dòng)LSIex500或包括LSIex500的裝置的情況下，能夠隨著節(jié)電而延長電池的壽命。
[0390](實(shí)施方式9)
[0391]在電視機(jī)、便攜電話等上述的設(shè)備、系統(tǒng)中，有時(shí)被輸入依據(jù)不同的標(biāo)準(zhǔn)的多個(gè)影像數(shù)據(jù)。這樣，為了使得在被輸入了依據(jù)不同的標(biāo)準(zhǔn)的多個(gè)影像數(shù)據(jù)的情況下也能夠解碼，LSIex500的信號(hào)處理部ex507需要對應(yīng)于多個(gè)標(biāo)準(zhǔn)。但是，如果單獨(dú)使用對應(yīng)于各個(gè)標(biāo)準(zhǔn)的信號(hào)處理部ex507，則發(fā)生LSIex500的電路規(guī)模變大、此外成本增加的問題。
[0392]為了解決該問題，采用將用來執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法的解碼處理部、和依據(jù)以往的MPEG-2、MPEG4-AVC、VC-1等的標(biāo)準(zhǔn)的解碼處理部一部分共用的結(jié)構(gòu)。圖46A的ex900表示該結(jié)構(gòu)例。例如，在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法和依據(jù)MPEG4-AVC標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像解碼方法在熵編碼、逆量化、解塊濾波器、運(yùn)動(dòng)補(bǔ)償?shù)鹊奶幚碇杏幸徊糠痔幚韮?nèi)容共通。可以考慮如下結(jié)構(gòu):關(guān)于共通的處理內(nèi)容，共用對應(yīng)于MPEG4-AVC標(biāo)準(zhǔn)的解碼處理部ex902，關(guān)于不對應(yīng)于MPEG4-AVC標(biāo)準(zhǔn)的本發(fā)明的一個(gè)方式所特有的其他的處理內(nèi)容，使用專用的解碼處理部ex901。特別是，本發(fā)明在運(yùn)動(dòng)補(bǔ)償方面具有特征，因此可以考慮例如對于運(yùn)動(dòng)補(bǔ)償使用專用的解碼處理部ex901，對于除此之外的熵解碼、逆量化中的某一個(gè)或者全部的處理，共用解碼處理部。關(guān)于解碼處理部的共用，也可以是如下結(jié)構(gòu):關(guān)于共通的處理內(nèi)容，共用用來執(zhí)行在上述各實(shí)施方式中示出的運(yùn)動(dòng)圖像解碼方法的解碼處理部，關(guān)于MPEG4-AVC標(biāo)準(zhǔn)所特有的處理內(nèi)容，使用專用的解碼處理部。
[0393]此外，用圖46B的exlOOO表示將處理一部分共用的另一例。在該例中，采用使用與本發(fā)明的一個(gè)方式所特有的處理內(nèi)容對應(yīng)的專用的解碼處理部exlOOl、和與其他的以往標(biāo)準(zhǔn)所特有的處理內(nèi)容對應(yīng)的專用的解碼處理部exl002、和與在本發(fā)明的一個(gè)方式的運(yùn)動(dòng)圖像解碼方法和其他的以往標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像解碼方法中共通的處理內(nèi)容對應(yīng)的共用的解碼處理部exl003的結(jié)構(gòu)。這里,專用的解碼處理部exl001、exl002并不一定是為本發(fā)明的一個(gè)方式、或者其他的以往標(biāo)準(zhǔn)所特有的處理內(nèi)容而特殊化的，可以是能夠執(zhí)行其他的通用處理的結(jié)構(gòu)。此外，也能夠由LSIeX500安裝本實(shí)施方式的結(jié)構(gòu)。
[0394]這樣，對于在本發(fā)明的一個(gè)方式的運(yùn)動(dòng)圖像解碼方法和以往的標(biāo)準(zhǔn)的運(yùn)動(dòng)圖像解碼方法中共通的處理內(nèi)容，共用解碼處理部，由此能夠減小LSI的電路規(guī)模并且降低成本。
[0395]產(chǎn)業(yè)上的可利用性
[0396]本發(fā)明的一個(gè)方式涉及的圖像編碼方法及圖像解碼方法適合應(yīng)用于運(yùn)動(dòng)圖像的編碼方法及解碼方法。
[0397]標(biāo)號(hào)說明[0398] 100,200圖像編碼裝置；101加法部；102正交變換部；103量化部；104、302逆量化部；105、303逆正交變換部；106、304加法部；107、305塊存儲(chǔ)器；108、306幀存儲(chǔ)器；109,307幀內(nèi)預(yù)測部；110、308幀間預(yù)測部；111、309幀間預(yù)測控制部；112圖片類型決定部；113、310開關(guān)；114、311合并塊候選計(jì)算部；115、312 colPic存儲(chǔ)器；116可變長度編碼部；210、410合并候選導(dǎo)出部；211、411決定部；212、412第I導(dǎo)出部；213、413確定部;214、414判定部;215、415第2導(dǎo)出部;220、430預(yù)測控制部；230編碼部;300、400圖像解碼裝置；301可變長度解碼部；420解碼部。
【權(quán)利要求】
1.一種圖像編碼方法，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼方法包括: 決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選； 第I導(dǎo)出步驟，導(dǎo)出第I合并候選； 判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)； 第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選； 選擇步驟，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述編碼對象塊的編碼時(shí)使用的合并候選；以及 編碼步驟，使用所決定的所述最大數(shù)對用于確定所選擇的所述合并候選的索引進(jìn)行編碼，將被編碼后的所述索引附加在所述比特流中。
2.根據(jù)權(quán)利要求1所述的圖像編碼方法，在所述第I導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為所述第I合并候選。
3.根據(jù)權(quán)利要求1或2所述的圖像編碼方法，在所述第I導(dǎo)出步驟中，根據(jù)在對與所述編碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出所述第I合并候選。
4.根據(jù)權(quán)利要求3所述的圖像編碼方法，在所述第I導(dǎo)出步驟中，導(dǎo)出在對與所述編碼對象塊在空間上鄰接的塊之中、除已按照幀內(nèi)預(yù)測被進(jìn)行了編碼的塊、位于包括所述編碼對象塊的切片或者圖片的邊界外的塊、以及尚未被進(jìn)行編碼的塊之外的塊進(jìn)行編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為所述第I合并候選。
5.根據(jù)權(quán)利要求1~4中任意一項(xiàng)所述的圖像編碼方法，在所述第2導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與所述第I合并候選不同的合并候選，作為所述第2合并候選。
6.根據(jù)權(quán)利要求1~5中任意一項(xiàng)所述的圖像編碼方法，在所述編碼步驟中，還將表示所決定的所述最大數(shù)的信息附加在所述比特流中。
7.根據(jù)權(quán)利要求1所述的圖像編碼方法，所述圖像編碼方法還包括: 切換步驟，將編碼處理切換為依據(jù)于第I標(biāo)準(zhǔn)的第I編碼處理或者依據(jù)于第2標(biāo)準(zhǔn)的第2編碼處理；以及 附加步驟，將表示被切換后的所述編碼處理所依據(jù)的所述第I標(biāo)準(zhǔn)或者所述第2標(biāo)準(zhǔn)的識(shí)別信息附加在所述比特流中， 在所述編碼處理被切換為所述第I編碼處理的情況下，作為所述第I編碼處理，執(zhí)行所述決定步驟、所述第I導(dǎo)出步驟、所述判定步驟、所述第2導(dǎo)出步驟、所述選擇步驟、和所述編碼步驟。
8.一種圖像編碼裝置，通過按照每個(gè)塊對圖像進(jìn)行編碼來生成比特流，該圖像編碼裝置具有: 決定部，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行編碼對象塊的編碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選；第I導(dǎo)出部，導(dǎo)出第I合并候選； 判定部，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)； 第2導(dǎo)出部，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選； 預(yù)測控制部，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述編碼對象塊的編碼時(shí)使用的合并候選；以及 編碼部，使用所決定的所述最大數(shù)對用于確定所選擇的所述合并候選的索引進(jìn)行編碼，將被編碼后的所述索引附加在所述比特流中。
9.一種圖像解碼方法，按照每個(gè)塊對包含于比特流中的編碼圖像進(jìn)行解碼，該圖像解碼方法包括: 決定步驟，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行解碼對象塊的解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選； 第I導(dǎo)出步驟，導(dǎo)出第I合并候選； 判定步驟，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)； 第2導(dǎo)出步驟，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選； 解碼步驟，使用所決定的所述最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在所述比特流中的已被編碼的索引；以及` 選擇步驟，根據(jù)被解碼后的所述索引，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述解碼對象塊的解碼時(shí)使用的合并候選。
10.根據(jù)權(quán)利要求9所述的圖像解碼方法，在所述第I導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引的組合與已經(jīng)導(dǎo)出的第I合并候選不重復(fù)的合并候選，作為所述第I合并候選。
11.根據(jù)權(quán)利要求9或10所述的圖像解碼方法，在所述第I導(dǎo)出步驟中，根據(jù)在對與所述解碼對象塊在空間上或者時(shí)間上鄰接的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，導(dǎo)出所述第I合并候選。
12.根據(jù)權(quán)利要求11所述的圖像解碼方法，在所述第I導(dǎo)出步驟中，導(dǎo)出在對與所述解碼對象塊在空間上鄰接的塊中、除已按照幀內(nèi)預(yù)測被進(jìn)行了解碼的塊、位于包括所述解碼對象塊的切片或者圖片的邊界外的塊、以及尚未被進(jìn)行解碼的塊之外的塊進(jìn)行解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引，作為所述第I合并候選。
13.根據(jù)權(quán)利要求9~12中任意一項(xiàng)所述的圖像解碼方法，在所述第2導(dǎo)出步驟中，導(dǎo)出預(yù)測方向、運(yùn)動(dòng)矢量及參照圖片索引中的至少一個(gè)與所述第I合并候選不同的合并候選，作為所述第2合并候選。
14.根據(jù)權(quán)利要求9~13中任意一項(xiàng)所述的圖像解碼方法，在所述決定步驟中，根據(jù)表示被附加在所述比特流中的最大數(shù)的信息，決定所述最大數(shù)。
15.根據(jù)權(quán)利要求9所述的圖像解碼方法，所述圖像解碼方法還包括切換步驟，根據(jù)被附加在所述比特流中的表示第I標(biāo)準(zhǔn)或者第2標(biāo)準(zhǔn)的識(shí)別信息，將解碼處理切換為依據(jù)于所述第I標(biāo)準(zhǔn)的第I解碼處理或者依據(jù)于所述第2標(biāo)準(zhǔn)的第2解碼處理， 在所述解碼處理被切換為第I解碼處理的情況下，作為所述第I解碼處理，執(zhí)行所述決定步驟、所述第I導(dǎo)出步驟、所述判定步驟、所述第2導(dǎo)出步驟、所述解碼步驟、和所述選擇步驟。
16.一種圖像解碼裝置，按照每個(gè)塊對包含于比特流中的編碼圖像進(jìn)行解碼，該圖像解碼裝置具有: 決定部，決定合并候選的最大數(shù)，該合并候選是在進(jìn)行解碼對象塊的解碼時(shí)使用的預(yù)測方向、運(yùn)動(dòng)矢量、以及參照圖片索引的候選； 第I導(dǎo)出部，導(dǎo)出第I合并候選； 判定部，判定所述第I合并候選的數(shù)量是否小于所述最大數(shù)； 第2導(dǎo)出部，在判定為所述第I合并候選的數(shù)量小于所述最大數(shù)的情況下，導(dǎo)出第2合并候選； 解碼部，使用所決定的所述最大數(shù)對用于確定合并候選的索引進(jìn)行解碼，該索引是被附加在所述比特流中的已被編碼的索引；以及 預(yù)測控制部，根據(jù)被解碼后的所述索引，從所述第I合并候選和所述第2合并候選中選擇在進(jìn)行所述解碼對象塊的解碼時(shí)使用的合并候選。
17.一種圖像編解碼裝置，該圖像編解碼裝置具有權(quán)利要求8所述的圖像編碼裝置、和權(quán)利要求16所述的圖像解碼裝 置 。
【文檔編號(hào)】H04N19/69GK103503450SQ201280021477
【公開日】2014年1月8日 申請日期:2012年5月21日 優(yōu)先權(quán)日:2011年5月24日
【發(fā)明者】杉尾敏康, 西孝啟, 柴原陽司, 谷川京子, 笹井壽郎, 松延徹 申請人:松下電器產(chǎn)業(yè)株式會(huì)社