運(yùn)動(dòng)預(yù)測(cè)部117還將運(yùn)動(dòng)向量信息提供至運(yùn)動(dòng)補(bǔ)償部116。
[0093] 運(yùn)動(dòng)補(bǔ)償部116對(duì)應(yīng)于從運(yùn)動(dòng)預(yù)測(cè)部117所提供的運(yùn)動(dòng)向量信息進(jìn)行運(yùn)動(dòng)補(bǔ)償處 理，生成幀間預(yù)測(cè)圖像信息。運(yùn)動(dòng)補(bǔ)償部116將所生成的預(yù)測(cè)圖像信息提供至預(yù)測(cè)圖像選 擇部118。
[0094] 預(yù)測(cè)圖像選擇部118在進(jìn)行幀內(nèi)編碼的圖像的情況下，將幀內(nèi)預(yù)測(cè)部115的輸出 提供至運(yùn)算部103,并在進(jìn)行幀間編碼的圖像的情況下，將運(yùn)動(dòng)補(bǔ)償部116的輸出提供至運(yùn) 算部103。
[0095] 碼率控制部119根據(jù)存儲(chǔ)緩沖器107中所存儲(chǔ)的壓縮圖像，控制量化部105的量 化操作的碼率，以防止產(chǎn)生溢出或下溢。
[0096] 在MPEG(運(yùn)動(dòng)圖像專家組，MovingPictureExpertsGroup) 2中，運(yùn)動(dòng)預(yù)測(cè)補(bǔ)償/ 處理的單位是運(yùn)動(dòng)補(bǔ)償塊，并且能夠在每個(gè)運(yùn)動(dòng)補(bǔ)償塊中保持獨(dú)立的運(yùn)動(dòng)向量信息。該運(yùn) 動(dòng)補(bǔ)償塊的大小在幀運(yùn)動(dòng)補(bǔ)償模式的情形下是16X16像素，在場(chǎng)運(yùn)動(dòng)補(bǔ)償模式的情況下， 針對(duì)第一場(chǎng)、第二場(chǎng)的各自是16X8像素。
[0097] 另一方面，在AVC(先進(jìn)視頻編碼，AdvancedVideoCoding)中，如圖2上側(cè)所示， 可將由16X16像素所構(gòu)成的一個(gè)宏塊分割成16X16、16X8、8X16或8X8的任一分區(qū)， 且分別具有獨(dú)立的運(yùn)動(dòng)向量信息。進(jìn)而，如圖2下側(cè)所示，一個(gè)8X8分區(qū)可分割成8X8、 8X4、4X8或4X4的任一子分區(qū)，且分別具有獨(dú)立的運(yùn)動(dòng)向量信息。將該運(yùn)動(dòng)補(bǔ)償塊作為 單位進(jìn)行運(yùn)動(dòng)預(yù)測(cè)補(bǔ)償處理。
[0098] 圖3是表示控制信息生成部112的主要構(gòu)成例的框圖。
[0099] 控制信息生成部112生成在自適應(yīng)濾波處理部113中所運(yùn)行的作為環(huán)路濾波器的 自適應(yīng)濾波器（ALF(AdaptiveLoopFilter))所使用的控制信息?？刂菩畔⑸刹?12生 成例如濾波系數(shù)、ALF塊大小、濾波器塊標(biāo)志以及邊界控制標(biāo)志作為該控制信息。
[0100] 控制信息生成部112具有：濾波系數(shù)計(jì)算部131、邊界控制標(biāo)志生成部132以及塊 信息生成部133。
[0101] 濾波系數(shù)計(jì)算部131獲取從解塊濾波器111所提供的解碼圖像和從畫(huà)面重排緩沖 器102所讀出的當(dāng)前的輸入圖像，并針對(duì)每個(gè)幀計(jì)算ALF的濾波系數(shù)。
[0102] 邊界控制標(biāo)志生成部132生成邊界控制標(biāo)志（alf_enable_in_slice_boundary)， 該邊界控制標(biāo)志控制對(duì)在幀中形成多個(gè)的片層的邊界附近的像素如何進(jìn)行濾波處理（指 定濾波處理方法）。詳細(xì)情況將后述。
[0103] 塊信息生成部133根據(jù)從解塊濾波器111所提供的解碼圖像和由濾波系數(shù)計(jì)算部 131所計(jì)算出的濾波系數(shù)，決定ALF塊大小，并針對(duì)要處理的片層內(nèi)的各ALF塊生成濾波器 塊^〇
[0104] 此處，對(duì)ALF塊和濾波器塊標(biāo)志進(jìn)行說(shuō)明。圖4是說(shuō)明ALF塊和濾波器塊標(biāo)志的 圖。
[0105] 如上所述，自適應(yīng)濾波器針對(duì)每個(gè)幀設(shè)定濾波系數(shù)。即，以幀單位進(jìn)行最佳的濾波 處理。但是，一般而言，幀圖像的整體并不均一，局部具有各種特征。因此，局部的最佳的濾 波系數(shù)不同。因此，如上所述，在使用針對(duì)每個(gè)幀所決定的濾波系數(shù)的濾波處理中，存在改 善幀整體的畫(huà)質(zhì)，但局部劣化的可能性。
[0106] 因此，業(yè)界考慮了不對(duì)畫(huà)質(zhì)惡化的局部區(qū)域進(jìn)行濾波處理的BALF(Blockbased AdaptiveLoopFilter，基于塊的自適應(yīng)環(huán)路濾波器）。
[0107] 圖4中的A中的幀151示出解塊濾波處理后的解碼圖像。如圖4的B所示，塊信 息生成部133將分別作為局部所進(jìn)行的自適應(yīng)濾波處理的控制單位的控制塊的多個(gè)ALF塊 152以鋪滿該幀151的整個(gè)區(qū)域的方式無(wú)間隙地配置。配置該ALF塊152的區(qū)域可與幀151 的區(qū)域不同，但至少包括幀的整個(gè)區(qū)域。結(jié)果，幀151的區(qū)域被分割成ALF塊152的區(qū)域 (多個(gè)區(qū)域）。
[0108] 塊信息生成部133決定ALF塊152的水平方向的大小（雙箭頭153)與垂直方向 的大?。p箭頭154)。ALF塊的大小可針對(duì)每個(gè)片層而指定例如8X8、16X16、24X24、 32X32、48X48、64X64、96X96或128X128的任一者。將指定該ALF塊的大小的信息稱為 塊大小指數(shù)（blocksizeindex) 〇
[0109] 若已決定塊大小，則幀大小固定，因此每個(gè)幀的ALF塊數(shù)也被決定。
[0110] 塊信息生成部133如圖4的C所示，針對(duì)每個(gè)ALF塊152,設(shè)定控制是否進(jìn)行濾波 處理的濾波器塊標(biāo)志155。例如，對(duì)于通過(guò)自適應(yīng)濾波器而改善畫(huà)質(zhì)的區(qū)域，生成值為"1" 的濾波器塊標(biāo)志155，對(duì)于因自適應(yīng)濾波器而導(dǎo)致畫(huà)質(zhì)惡化的區(qū)域，生成值為"0"的濾波 器塊標(biāo)志155。在濾波器塊標(biāo)志155中，值"1"是表示要進(jìn)行濾波處理的值，值"0"是表示 不進(jìn)行濾波處理的值。
[0111] 自適應(yīng)濾波處理部113根據(jù)該濾波器塊標(biāo)志155的值控制自適應(yīng)濾波處理。例如， 自適應(yīng)濾波處理部113僅對(duì)濾波器塊標(biāo)志155的值為"1"的ALF塊152的區(qū)域進(jìn)行濾波處 理，而不對(duì)濾波器塊標(biāo)志155的值為"0"的ALF塊152的區(qū)域進(jìn)行濾波處理。
[0112] 另外，上述塊大小指數(shù)與濾波器塊標(biāo)志包括在圖像壓縮信息的片層首部中，并且 從圖像編碼裝置100輸送至圖像解碼裝置。對(duì)應(yīng)于ALF塊的數(shù)量的1個(gè)以上的濾波器塊標(biāo) 志以例如光柵掃描（rasterscan)的順序包括于片層首部中。
[0113] 因此，ALF塊的大小越小，越能夠?qū)崿F(xiàn)更細(xì)致的濾波器控制，而且越能夠?qū)崿F(xiàn)更適 當(dāng)?shù)腁LF濾波。但是，較小的ALF塊的大小會(huì)增加濾波器塊標(biāo)志的比特量。即，ALF塊的大 小越小，圖像壓縮信息的編碼效率越下降。從而，自適應(yīng)濾波器的性能與圖像壓縮信息的編 碼效率處于折衷的關(guān)系。
[0114]A1F塊的數(shù)量按照如下的表達(dá)式（1)而計(jì)算：
[0115][數(shù)學(xué)表達(dá)式1]
[0116]
[0117] 在表達(dá)式⑴中，表示ALF塊的數(shù)量。另外，Nmw表示畫(huà)面的水平方向的 宏塊數(shù)，Nmh表不畫(huà)面的垂直方向的宏塊數(shù)。進(jìn)而，不ALF塊的一邊的大小。另外， floor[x]是將x的小數(shù)點(diǎn)以下舍去而成為整數(shù)的函數(shù)。
[0118] 然而，在H. 264/AVC中，可將1個(gè)幀分割成多個(gè)片層，并對(duì)每個(gè)片層輸出圖像壓縮 信息。圖5是說(shuō)明多片層的例子的圖。在圖5的例子的情況下，幀151被分割成片層0、片 層1和片層2這3個(gè)片層。
[0119] 通過(guò)以比幀更細(xì)小的片層單位輸出圖像壓縮信息，圖像編碼裝置能夠以更短的間 隔生成圖像壓縮信息并將其輸出。即，對(duì)該圖像壓縮信息進(jìn)行解碼的圖像解碼裝置還可以 在更早的階段開(kāi)始圖像壓縮信息的解碼。即，能夠縮短從輸入圖像起，進(jìn)行編碼處理及解碼 處理，直至輸出圖像為止的延遲時(shí)間。
[0120] 在對(duì)BALF進(jìn)行記載的非專利文獻(xiàn)2中，并未公開(kāi)該多片層。即，僅記載有針對(duì)幀 整體設(shè)定ALF塊。然而，在多片層的情況下，對(duì)于片層的邊界附近的像素，有時(shí)無(wú)法進(jìn)行通 常的濾波處理。
[0121] 圖6是表示針對(duì)片層的邊界附近的像素的濾波處理的情況的圖。自適應(yīng)濾波處理 部113在對(duì)要處理的像素進(jìn)行濾波處理的情況下，使用該要處理的像素周邊的特定的范圍 內(nèi)的像素（周邊像素）而進(jìn)行。例如，在圖6的情況下，自適應(yīng)濾波處理部113使用由陰影 所示的9X9的周邊像素162進(jìn)行對(duì)要處理的像素161的濾波處理。
[0122] 但是，如圖6所示，要處理的像素161為片層邊界163附近的像素。此處，片層邊界 163表示當(dāng)前要處理的的片層（當(dāng)前片層）與鄰接于該要處理的片層的片層（相鄰片層） 的邊界。即，片層邊界163表示當(dāng)前片層的外框。
[0123] 如圖6所示，用于針對(duì)該片層邊界163附近的要處理的像素161的濾波處理的周 邊像素162的一部分超過(guò)片層邊界163,而跨越至相鄰片層的區(qū)域。即，為了如例如圖7的 A所示地對(duì)該要處理的像素161進(jìn)行與通常的情形相同的濾波處理，需要相鄰片層的像素 值。
[0124] 在圖7的A的例子的情況下，自適應(yīng)濾波處理部113使用當(dāng)前片層與相鄰片層兩 者的像素AA至像素JJ，對(duì)作為要處理的像素的像素EE進(jìn)行濾波處理。
[0125] 但是，為此必需待機(jī)至相鄰片層的解碼圖像生成為止，因此，在此情況下，編碼處 理的延遲時(shí)間有增大的可能性。
[0126] 另一方面，例如如圖7的B所示，有生成并利用虛擬數(shù)據(jù)的方法。在圖7的B的例 子的情況下，自適應(yīng)濾波處理部113對(duì)相鄰于片層邊界163的像素EA至像素EJ進(jìn)行復(fù)制， 從而生成周邊像素162的相鄰片層內(nèi)的像素（虛擬數(shù)據(jù)）。濾波處理部113使用所生成的 虛擬數(shù)據(jù)進(jìn)行針對(duì)像素EE的濾波處理。
[0127] 從而，自適應(yīng)濾波處理部113無(wú)需等待相鄰片層的像素生成，而能夠比圖7的A的 情形更早地對(duì)像素EE進(jìn)行濾波處理。
[0128]S卩，在使用鄰接片層的像素的圖7的A的方法的情況下，由于自適應(yīng)濾波處理部 113使用實(shí)際的數(shù)據(jù)，因此可進(jìn)行更適合于實(shí)際的圖像的內(nèi)容的濾波處理。即，可期待通過(guò) 濾波處理而使畫(huà)質(zhì)得到更大的改善。
[0129] 另一方面，在圖7的B的方法的情況下，自適應(yīng)濾波處理部113無(wú)需將相鄰片層的 數(shù)據(jù)用于濾波處理，而可僅利用當(dāng)前片層的數(shù)據(jù)進(jìn)行處理，因此還可以更早地進(jìn)行濾波處 理。
[0130] 哪一種方法較理想根據(jù)系統(tǒng)的規(guī)格、用戶的要求等而不同。例如，如果系統(tǒng)重視畫(huà) 質(zhì)，則圖7的A所示的方法更理想，但圖7的A的方法與圖7的B的方法相比存儲(chǔ)器消耗量 更多，且存在延遲時(shí)間增大的可能性。因此，根據(jù)系統(tǒng)中可使用的存儲(chǔ)器的容量和允許的延 遲時(shí)間的長(zhǎng)度，有時(shí)也可能認(rèn)為圖7的B的方法更理想。
[0131] 邊界控制標(biāo)志控制針對(duì)這樣的邊界附近的像素的濾波處理的方法。
[0132] 返回至圖3,邊界控制標(biāo)志生成部132生成這樣的邊界控制標(biāo)志。邊界控制標(biāo)志生 成部132具有：系統(tǒng)規(guī)格管理部141、判斷部142和生成部143。
[0133] 系統(tǒng)規(guī)格管理部141管理包括圖像編碼裝置100的進(jìn)行圖像處理的系統(tǒng)的規(guī)格 (硬件資源或使用目的等）。例如，系統(tǒng)規(guī)格管理部141可安排為管理在圖像編碼裝置100 中經(jīng)編碼的圖像解碼裝置的規(guī)格（硬件資源或使用目的等）。
[0134] 判斷部142判斷要處理的像素是否為邊界附近的像素。生成部143針對(duì)判斷為邊 界附近的像素的要處理的像素生成邊界控制標(biāo)志。
[0135] 圖8是表示圖1的自適應(yīng)濾波處理部113的主要構(gòu)成例的框圖。
[0136]自適應(yīng)濾波處理部113使用自控制信息生成部112所提供的控制信息，對(duì)從解塊 濾波器111所提供的解碼圖像進(jìn)行濾波處理。
[0137] 自適應(yīng)濾波處理部113如圖8所示，包括：控制部171、自適應(yīng)濾波器172和選擇 部 173。
[0138] 控制部171控制自適應(yīng)濾波器172和選擇部173。例如，控制部171從控制信息生 成部112獲取控制信息，并根據(jù)該控制信息而控制濾波處理。
[0139]自適應(yīng)濾波器172使用由控制部171所設(shè)定的濾波系數(shù)，對(duì)自解塊濾波器111所 提供的解碼圖像的由控制部171指定為要處理的ALF塊的區(qū)域進(jìn)行濾波處理。
[0140] 自適應(yīng)濾波器172具有：緩沖器181、片層內(nèi)自適應(yīng)濾波器182、邊界用第1自適應(yīng) 濾波器183和邊界用第2自適應(yīng)濾波器184。
[0141] 緩沖器181臨時(shí)保持從解塊濾波器111所提供的解碼圖像。緩沖器181不僅可保 持要處理的片層，也能夠保持鄰接于要處理的片層的片層（相鄰片層）。
[0142] 片層內(nèi)自適應(yīng)濾波器182在控制部171的控制下，對(duì)周邊像素中不包括相鄰片層 的像素的、并且不是片層邊界附近的要處理的像素進(jìn)行濾波處理。即，片層內(nèi)自適應(yīng)濾波器 182僅使用當(dāng)前片層的像素進(jìn)行濾波處理。
[0143] 邊界用第1自適應(yīng)濾波器183在控制部171的控制下，對(duì)周邊像素中包括相鄰片 層的像素的片層邊界附近的要處理的像素進(jìn)行跨越片層的濾波處理。即，邊界用第1自適 應(yīng)濾波器183以如圖7的A所示的方法，利用當(dāng)前片層和相鄰片層的像素進(jìn)行濾波處理。因 此，邊界用第1自適應(yīng)濾波器183在緩沖器181中存儲(chǔ)有相鄰片層的像素之后開(kāi)始濾波處 理。
[0144] 邊界用第2自適應(yīng)濾波器184在控制部171的控制下，對(duì)周邊像素中包括相鄰片 層的像素的片層邊界附近的要處理的像素進(jìn)行在當(dāng)前片層關(guān)閉的濾波處理。即，邊界用第 2自適應(yīng)濾波器184以如圖7的B所示的方法，僅利用當(dāng)前片層的像素，且根據(jù)需要生成虛 擬數(shù)據(jù)而進(jìn)行濾波處理。因此，邊界用第2自適應(yīng)濾波器184在一旦緩沖器181存儲(chǔ)當(dāng)前 片層的像素時(shí)便開(kāi)始濾波處理。
[0145] 控制部171根據(jù)要處理的像素的位置和控制信息中所包括的邊界控制標(biāo)志的值， 從片層內(nèi)自適應(yīng)濾波器182、邊界用第1自適應(yīng)濾波器183和邊界用第2自適應(yīng)濾波器184 中選擇任一者，并且使所選擇的處理部以各自的方法執(zhí)行濾波處理。
[0146] 另外，控制部171對(duì)應(yīng)于緩沖器181中的圖像的存儲(chǔ)狀況，控制所選擇的處理部 (片層內(nèi)自適應(yīng)濾波器182、邊界用笫1自適應(yīng)濾波器183、或邊界用第2自適應(yīng)濾波器184) 的濾波處理的開(kāi)始時(shí)間點(diǎn)。
[0147] 自適應(yīng)濾波器172 (片層內(nèi)自適應(yīng)濾波器182、邊界用第1自適應(yīng)濾波器183、或邊 界用第2自適應(yīng)濾波器184)將濾波處理結(jié)果提供至選擇部173。
[0148] 在控制部171的控制下，選擇部173從解塊濾波器111所提供的解碼圖像（未經(jīng) 自適應(yīng)濾波處理的解碼圖像）和從自適應(yīng)濾波器172所提供的解碼圖像（經(jīng)自適應(yīng)濾波處 理的解碼圖像）中選擇其中之一，并將其提供至幀存儲(chǔ)器114,使其作為參考圖像而加以存 儲(chǔ)。
[0149] 控制部171根據(jù)控制信息中所包括的濾波器塊標(biāo)志的值，控制選擇部173,使其選 擇未經(jīng)自適應(yīng)濾波處理的解碼圖像、或者經(jīng)自適應(yīng)濾波處理的解碼圖像的其中之一。
[0150] 即，自適應(yīng)濾波處理部113僅對(duì)從解塊濾波器111所提供的解碼圖像的通過(guò)濾波 器塊標(biāo)志表示要進(jìn)行濾波處理的區(qū)域（判斷為通過(guò)濾波處理而使畫(huà)質(zhì)得到改善的區(qū)域）進(jìn) 行濾波處理。
[0151][處理的流程]
[0152] 接下來(lái)，對(duì)使用如上述構(gòu)成的各部分的處理的流程進(jìn)行說(shuō)明。首先，參考圖9的流 程圖說(shuō)明由圖像編碼裝置100所進(jìn)行的編碼處理的流程的例子。
[0153] 在步驟S101中，A/D變換部101將所輸入的圖像從模擬變換為數(shù)字。在步驟S102 中，畫(huà)面重排緩沖器102存儲(chǔ)經(jīng)A/D變換的圖像，并且進(jìn)行各畫(huà)面的從顯示順序向編碼順 序的重排。
[0154] 在步驟S103中，運(yùn)算部103對(duì)通過(guò)步驟S102的處理而重排的圖像與預(yù)測(cè)圖像的 差分進(jìn)行運(yùn)算。預(yù)測(cè)圖像在進(jìn)行幀間預(yù)測(cè)的情況下是從運(yùn)動(dòng)補(bǔ)償部116經(jīng)由預(yù)測(cè)圖像選擇 部118而提供至運(yùn)算部103,而在進(jìn)行幀內(nèi)預(yù)測(cè)的情況下則是從幀內(nèi)預(yù)測(cè)部115經(jīng)由預(yù)測(cè)圖 像選擇部118而提供至運(yùn)算部103。
[0155] 差分?jǐn)?shù)據(jù)與原始圖像數(shù)據(jù)相比數(shù)據(jù)量變小，因此，與對(duì)原始圖像進(jìn)行編碼的情況 相比，可壓縮數(shù)據(jù)量。
[0156] 在步驟S104中，正交變換部104對(duì)通過(guò)步驟S103的處理所生成的差分信息進(jìn)行 正交變換。具體而言，進(jìn)行離散余弦變換、Karhunen-LMve變換等正交變換，并輸出變換系 數(shù)。在步驟S105中，量化部105將變換系數(shù)加以量化。在該量化時(shí)，如后述的步驟S119的 處理中所說(shuō)明的，碼率受到控制。
[0157] 如上所述的量化的差分信息以如下方式被局部解碼。即，在步驟S106中，反量化 部108以與量化部105的特性相對(duì)應(yīng)的特性將通過(guò)量化部105而量化的變換系數(shù)反量化。 在步驟S107中，逆正交變換部109以與正交變換部104的特性相對(duì)應(yīng)的特性對(duì)通過(guò)反量化 部108而反量化的變換系數(shù)進(jìn)行逆正交變換。
[0158] 在步驟S108中，運(yùn)算部110使經(jīng)由預(yù)測(cè)圖像選擇部118而輸入的預(yù)測(cè)圖像與經(jīng)局 部解碼的差分信息相加，生成經(jīng)局部解碼的圖像（與向運(yùn)算部103的輸入相對(duì)應(yīng)的圖像）。 在步驟S109中，解塊濾波器111對(duì)從運(yùn)算部110所輸出的圖像進(jìn)行濾波。從而去除塊噪聲。
[0159] 當(dāng)對(duì)1個(gè)片層進(jìn)行以上的處理時(shí)，則在步驟S110中，控制信息生成部112生成用 于自適應(yīng)濾波處理的控制信息。控制信息的生成處理的詳細(xì)情況將后述。
[0160] 當(dāng)通過(guò)步驟S110的處理，生成濾波系數(shù)、ALF塊大小、及濾波器塊標(biāo)志等控制信息 時(shí)，則自適應(yīng)濾波處理部113在步驟S111中，使用該控制信息，對(duì)通過(guò)步驟S109的處理而 受到解塊濾波處理的解碼圖像進(jìn)行自適應(yīng)濾波處理。該自適應(yīng)濾波處理的詳細(xì)情況將后 述。
[0161] 在步驟S112中，幀存儲(chǔ)器114存儲(chǔ)步驟S111中經(jīng)自適應(yīng)濾波處理的圖像。
[0162] 在步驟S113中，幀內(nèi)預(yù)測(cè)部115進(jìn)行幀內(nèi)預(yù)測(cè)模式的幀內(nèi)預(yù)測(cè)處理。在步驟S114 中，運(yùn)動(dòng)預(yù)測(cè)部117和運(yùn)動(dòng)補(bǔ)償部116進(jìn)行幀間預(yù)測(cè)模式的幀間運(yùn)動(dòng)預(yù)測(cè)/補(bǔ)償處理。
[0163] 在步驟S115中，預(yù)測(cè)圖像選擇部118對(duì)應(yīng)于要處理的幀的預(yù)測(cè)模式，從通過(guò)幀內(nèi) 預(yù)測(cè)處理所生成的預(yù)測(cè)圖像、或者通過(guò)幀間運(yùn)動(dòng)預(yù)測(cè)/補(bǔ)償處理所生成的預(yù)測(cè)圖像中選擇 其中之一。預(yù)測(cè)圖像選擇部118將所選擇的預(yù)測(cè)圖像提供至運(yùn)算部103和110。該預(yù)測(cè)圖 像如上所述，被用于步驟S103和步驟S108的運(yùn)算。
[0164] 在步驟S116中，無(wú)損編碼部106對(duì)從量化部105所輸出的經(jīng)量化的變換系數(shù)進(jìn)行 編碼。特別地，對(duì)差分圖像進(jìn)行可變長(zhǎng)度編碼、算術(shù)編碼等無(wú)損編碼，并加以壓縮。此時(shí)，無(wú) 損編碼部106也對(duì)在步驟S110中所生成的控制信息、步驟S113的幀內(nèi)預(yù)測(cè)處理的幀內(nèi)預(yù) 測(cè)模式信息和步驟S114的幀間運(yùn)動(dòng)預(yù)測(cè)/補(bǔ)償處理的幀間預(yù)測(cè)模式等進(jìn)行編碼。
[0165] 在步驟S117中，無(wú)損編碼部106將經(jīng)編碼的控制信息等的元數(shù)據(jù)嵌入（記述）至 片層首部。該元數(shù)據(jù)在圖像解碼時(shí)被讀出、利用。以這種方式包括（復(fù)用）解碼處理中所 需要的元數(shù)據(jù)，從而能夠以比幀單位更細(xì)小的單位來(lái)執(zhí)行解碼處理，并可抑制延遲時(shí)間的 增大。
[0166] 在步驟S118中，存儲(chǔ)緩沖器107將差分圖像作為壓縮圖像加以存儲(chǔ)。適當(dāng)?shù)刈x出 存儲(chǔ)緩沖器107中所存儲(chǔ)的壓縮圖像，并將其經(jīng)由傳輸路徑而傳輸至解碼側(cè)。
[0167] 在步驟S119中，碼率控制部119根據(jù)存儲(chǔ)緩沖器107中所存儲(chǔ)的壓縮圖像，控制 量化部105的量化操作的碼率，以防止產(chǎn)生溢出或下溢。
[0168] 接下來(lái)，參考圖11的流程圖說(shuō)明圖10的步驟S110中通過(guò)控制信息生成部112所 執(zhí)行的控制信息生成處理的流程的例子。
[0169] 當(dāng)控制信息生成處理開(kāi)始時(shí)，則控制信息生成部112的濾波系數(shù)計(jì)算部131在步 驟S131中，使用從畫(huà)面重排緩沖器102所提供的輸入圖像和從解塊濾波器111所提供的經(jīng) 解塊濾波處理的解碼圖像來(lái)計(jì)算濾波系數(shù)。例如，濾波系數(shù)計(jì)算部131決定濾波系數(shù)的值 以使輸入圖像與解碼圖像的殘差變成最小。
[0170] 當(dāng)計(jì)算出濾波系數(shù)時(shí)，則邊界控制標(biāo)志生成部132在步驟S132中，生成用于控制 針對(duì)邊界附近的像素的自適應(yīng)濾波處理方法的邊界控制標(biāo)志。詳細(xì)情況將后述。
[0171] 當(dāng)生成邊界控制標(biāo)志時(shí)，則塊信息生成部133在步驟S133中，生成包括ALF塊大 小和濾波器塊標(biāo)志的塊信息。ALF塊大小可預(yù)先規(guī)定，也可根據(jù)圖像內(nèi)容而適當(dāng)沒(méi)定。在此 情況下，塊信息生成部133例如使用成本函數(shù)計(jì)算出評(píng)價(jià)濾波處理結(jié)果的成本值，并決定 ALF塊大小以使該成本值變成最小。
[0172] 另外，塊信息生成部133根據(jù)對(duì)要處理的ALF塊實(shí)施濾波處理的情況下畫(huà)質(zhì)是否 得到改善而決定濾波器塊標(biāo)志的值。例如，塊信息生成部133在判斷為通過(guò)實(shí)施濾波處理 而使畫(huà)質(zhì)得到改善的情況下，將濾波器塊標(biāo)志的值設(shè)定為表示進(jìn)行濾波處理的值" 1"，在判 斷為因?qū)嵤V波處理而導(dǎo)致畫(huà)質(zhì)惡化的情況下，將濾波器塊標(biāo)志的值設(shè)定為表示不進(jìn)行濾 波處理的值"0"。
[0173] 當(dāng)生成塊信息時(shí)，則返回至圖9的步驟S110,執(zhí)行步驟S111以后的處理。
[0174] 注意步驟S131中所進(jìn)行的濾波系數(shù)的計(jì)算也可以幀單位進(jìn)行。在此情況下，步驟 S131的處理也可僅在幀內(nèi)的特定的片層（