例如通過編碼器1251對從音頻解碼器1224提供的音頻數(shù)據 進行編碼。另外，記錄/回放部1233通過編碼器1251對從顯示變換器1230的視頻編碼器 1241提供的視頻數(shù)據進行編碼。記錄/回放部1233使用復用器對該音頻數(shù)據的編碼數(shù)據 和視頻數(shù)據的編碼數(shù)據進行合成。記錄/回放部1233對該合成數(shù)據進行信道編碼并將其 放大，然后經由記錄頭而將該數(shù)據寫入至硬盤。
[0416] 記錄/回放部1233經由回放頭對記錄在硬盤的數(shù)據進行回放、放大，并使用解復 用器而將該數(shù)據分離為音頻數(shù)據和視頻數(shù)據。記錄/回放部1233通過解碼器1252使用 MPEG格式對音頻數(shù)據和視頻數(shù)據進行解碼。記錄/回放部1233將經解碼的音頻數(shù)據從數(shù) 字變換至模擬，并將其輸出至監(jiān)視器1260的揚聲器。另外，記錄/回放部1233將經解碼的 視頻數(shù)據從數(shù)字變換至模擬，并將其輸出至監(jiān)視器1260的顯示器。
[0417] 記錄器控制部1226根據經由接收部1221而接收的由來自遙控器的紅外線信號所 表示的用戶指示，從EPG數(shù)據存儲器1227讀出最新的EPG數(shù)據，并將其提供至0SD控制部 1231。0SD控制部1231生成與所輸入的EPG數(shù)據相對應的圖像數(shù)據，并將其輸出至顯示控 制部1232。顯示控制部1232將從0SD控制部1231所輸入的視頻數(shù)據輸出至監(jiān)視器1260 的顯示器而加以顯示。從而，在監(jiān)視器1260的顯示器中顯示EPG(電子節(jié)目表）。
[0418] 另外，硬盤記錄器1200可經由因特網等網絡而獲取從其它裝置所提供的視頻數(shù) 據、音頻數(shù)據和EPG數(shù)據等各種數(shù)據。
[0419] 通信部1235由記錄器控制部1226控制，經由網絡而獲取從其它裝置所發(fā)送的視 頻數(shù)據、音頻數(shù)據和EPG數(shù)據等的編碼數(shù)據，并將其提供至記錄器控制部1226。記錄器控制 部1226例如將所獲取的視頻數(shù)據和音頻數(shù)據的編碼數(shù)據提供至記錄/回放部1233,并存儲 在硬盤。此時，記錄器控制部1226和記錄/回放部1233可以根據需要而進行再編碼等處 理。
[0420] 另外，記錄器控制部1226對所獲取的視頻數(shù)據和音頻數(shù)據的編碼數(shù)據進行解碼， 將所獲得的視頻數(shù)據提供至顯示變換器1230。與從視頻解碼器1225提供的視頻數(shù)據同樣 地，顯示變換器1230對從記錄器控制部1226提供的視頻數(shù)據進行處理，經由顯示控制部 1232而將其提供至監(jiān)視器1260以顯示該圖像。
[0421] 另外，也能夠根據該圖像顯示進行配置，由記錄器控制部1226將經解碼的音頻數(shù) 據經由D/A變換器1234提供至監(jiān)視器1260,并將該音頻從揚聲器輸出。
[0422] 進而，記錄器控制部1226對所獲取的EPG數(shù)據的編碼數(shù)據進行解碼，將經解碼的 EPG數(shù)據提供至EPG數(shù)據存儲器1227。
[0423] 這樣配置的硬盤記錄器1200使用圖像解碼裝置200或圖像解碼裝置400作為 視頻解碼器1225、解碼器1252和內置在記錄器控制部1226的解碼器。因此，視頻解碼器 1225、解碼器1252和內置在記錄器控制部1226的解碼器與圖像解碼裝置200或圖像解碼 裝置400的情形同樣地，提取從圖像編碼裝置100或圖像編碼裝置300所提供的控制信息 并進行解碼，然后使用該控制信息進行自適應濾波控制處理（以及濾波處理）。從而，視頻 解碼器1225、解碼器1252和內置在記錄器控制部1226的解碼器可抑制由濾波處理的局部 控制所引起的效果的降低。
[0424] 因此，硬盤記錄器1200能夠抑制由例如針對經由調諧器或通信部1235而接收的 視頻數(shù)據、和記錄/回放部1233的硬盤中所記錄的視頻數(shù)據的濾波處理的局部控制所引起 的效果降低。
[0425] 例如，硬盤記錄器1200通過進行跨越片層的濾波處理，從而能夠提升濾波處理結 果的畫質，并且能夠實現(xiàn)解碼圖像的高畫質。另外，例如，通過進行在當前片層關閉的濾波 處理，從而硬盤記錄器1200能夠以低延遲進行濾波處理，并且能夠以低延遲對編碼數(shù)據進 行解碼。
[0426] 另外，硬盤記錄器1200使用圖像編碼裝置100或圖像編碼裝置300作為編碼器 1251。因此，編碼器1251與圖像編碼裝置100或圖像編碼裝置300的情形同樣地，能夠抑 制由濾波處理的局部控制所引起的效果的降低。
[0427] 因此，硬盤記錄器1200能夠抑制由例如針對硬盤中所記錄的編碼數(shù)據的濾波處 理的局部控制所引起的效果的降低。
[0428] 例如，硬盤記錄器1200通過進行跨越片層的濾波處理，從而能夠提升濾波處理結 果的畫質，并且能夠將畫質更高的編碼數(shù)據記錄在硬盤中。另外，例如，通過進行在當前片 層關閉的濾波處理，從而硬盤記錄器1200能夠以低延遲進行濾波處理，并且能夠以更低的 延遲生成編碼數(shù)據，并將其記錄在硬盤中。
[0429] 注意，以上對將視頻數(shù)據和音頻數(shù)據記錄在硬盤的硬盤記錄器1200進行了說明， 當然，也能夠采用任意的記錄介質。例如即便為應用快閃存儲器、光盤、或錄影帶等硬盤以 外的記錄介質的記錄器，也能夠與上述硬盤記錄器1200的情形同樣地應用圖像編碼裝置 100和圖像解碼裝置200。
[0430] 〈9?第9實施例〉
[0431][相機]
[0432] 圖27是表示使用應用了本發(fā)明的圖像編碼裝置和圖像解碼裝置機的相機的主要 構成例的框圖。
[0433] 圖27所示的相機1300對被攝體進行攝像，并使被攝體的圖像顯示在LCD1316,并 將其作為圖像數(shù)據而記錄在記錄介質1333。
[0434] 透鏡塊1311將光（即被攝體的畫面）輸入至(XD/CM0S1312。（XD/CM0S1312是 使用有CCD或CMOS的圖像傳感器，其將所接收的光的強度變換為電信號，并提供至相機信 號處理部1313。
[0435] 相機信號處理部1313將從(XD/CM0S1312提供的電信號變換為Y、Cr、Cb的色差 信號，并提供至圖像信號處理部1314。圖像信號處理部1314在控制器1321的控制下，對 從相機信號處理部1313提供的圖像信號實施特定的圖像處理，或由編碼器1341使用例如 MPEG格式對該圖像信號進行編碼。圖像信號處理部1314將對圖像信號進行編碼所生成的 編碼數(shù)據提供至解碼器1315。進而，圖像信號處理部1314獲取在屏幕顯示器（OSD) 1320中 所生成的顯示用數(shù)據，并將其提供至解碼器1315。
[0436] 在以上的處理中，相機信號處理部1313適當?shù)厥褂媒浻煽偩€1317而連接的 DRAM(DynamicRandsAccessMemory，動態(tài)隨機存取存儲器）1318,并根據需要而將圖像數(shù) 據、對該圖像數(shù)據進行編碼所得的編碼數(shù)據等保持在該DRAM1318。
[0437] 解碼器1315對從圖像信號處理部1314所提供的編碼數(shù)據進行解碼，將所獲得的 圖像數(shù)據（解碼圖像數(shù)據）提供至IXD1316。另外，解碼器1315將從圖像信號處理部1314 所提供的顯示用數(shù)據提供至IXD1316。IXD1316適當?shù)貙慕獯a器1315所提供的解碼圖 像數(shù)據的圖像與顯示用數(shù)據的圖像加以合成，并顯示該合成圖像。
[0438] 屏幕顯示器1320在控制器1321的控制下，將包括符號、字符、或圖形的菜單畫面 或圖標等顯示用數(shù)據經由總線1317輸出至圖像信號處理部1314。
[0439] 根據表示由用戶使用操作部1322而指示的內容的信號，控制器1321執(zhí)行各種處 理，并且經由總線1317而控制圖像信號處理部1314、DRAM1318、外部接口 1319、屏幕顯示 器1320和介質驅動器1323等。在FLASHROM1324中存儲控制器1321執(zhí)行各種處理所需 的程序或數(shù)據等。
[0440] 例如，控制器1321可代替圖像信號處理部1314和解碼器1315而對存儲在DRAM 1318的圖像數(shù)據進行編碼、或對存儲在DRAM1318的編碼數(shù)據進行解碼。此時，控制器1321 可使用與圖像信號處理部1314或解碼器1315的編碼和解碼格式相同的格式進行編碼和解 碼處理，也可以使用與圖像信號處理部1314或解碼器1315不對應的格式進行編碼和解碼 處理。
[0441] 另外，例如，在從操作部1322指示開始打印圖像的情況下，控制器1321從DRAM 1318讀出圖像數(shù)據，將其經由總線1317而提供至連接到外部接口 1319的打印機1334并進 行打印。
[0442] 進而，例如，在從操作部1322指示記錄圖像的情況下，控制器1321從DRAM1318 讀出編碼數(shù)據，將其經由總線1317而提供至安裝在介質驅動器1323的記錄介質1333并加 以存儲。
[0443] 記錄介質1333例如為磁盤、磁光盤、光盤、或半導體存儲器等可讀寫的任意的可 移動介質。當然記錄介質1333作為可移動介質的種類也是任意的，相應地也可為磁帶設 備，或者可以是盤片，或者可以是存儲卡。當然，記錄介質1333也可以是非接觸1C卡等。
[0444] 另外，介質驅動器1323和記錄介質1333也可被配置為集成為一個非移動性記錄 介質，例如，如內置型硬盤驅動器或SSD(SolidStateDrive，固態(tài)驅動器）等。
[0445] 外部接口 1319例如由USB輸入/輸出端子等構成，在進行圖像打印的情況下，其 連接到打印機1334。另外，根據需要，驅動器1331連接至外部接口 1319,且適當?shù)匕惭b磁 盤、光盤，或磁光盤等可移動介質1332到驅動器1331，并且從它們所讀出的計算機程序根 據需要而被安裝在FIASHROM1324。
[0446] 進而，外部接口 1319具有連接到如LAN(localareanetwork，局域網絡）或因特 網等特定的網絡的網絡接口。例如根據來自操作部1322的指示，控制器1321能夠從DRAM1318讀出編碼數(shù)據，并將其從外部接口 1319提供至經由網絡而連接的其它裝置。另外，控 制器1321可經由外部接口 1319而獲取經由網絡從其它裝置所提供的編碼數(shù)據或圖像數(shù) 據，并將其保持在DRAM1318或提供至圖像信號處理部1314。
[0447] 如上配置的相機1300使用圖像解碼裝置200或圖像解碼裝置400作為解碼器 1315。因此，與圖像解碼裝置200或圖像解碼裝置400的情形同樣地，解碼器1315提取從 圖像編碼裝置100或圖像編碼裝置300所提供的控制信息并進行解碼，然后使用該控制信 息進行自適應濾波控制處理（以及濾波處理）。從而，解碼器1315能夠抑制濾波處理的由 局部控制所引起的效果的降低。
[0448] 因此，相機1300能夠抑制例如針對(XD/CM0S1312中所生成的圖像數(shù)據、或者從 DRAM1318或記錄介質1333所讀出的視頻數(shù)據的編碼數(shù)據、或者經由網絡而獲取的視頻數(shù) 據的編碼數(shù)據的濾波處理的由局部控制所引起的效果的降低。
[0449] 例如，相機1300通過進行跨越片層的濾波處理，能夠提升濾波處理結果的畫質， 并且能夠實現(xiàn)解碼圖像的高畫質。另外，例如，通過進行在當前片層關閉的濾波處理，從而 相機1300能夠以低延遲進行濾波處理，并且能夠以低延遲對編碼數(shù)據進行解碼。
[0450] 另外，相機1300使用圖像編碼裝置100或圖像編碼裝置300作為編碼器1341。因 此，與圖像編碼裝置100或圖像編碼裝置300的情形同樣地，編碼器1341能夠抑制濾波處 理的由局部控制所引起的效果的降低。
[0451] 因此，相機1300能夠抑制例如針對DRAM1318或記錄介質1333中所記錄的編碼 數(shù)據、或者提供至其它裝置的編碼數(shù)據的濾波處理的由局部控制所引起的效果的降低。
[0452] 例如，相機1300通過進行跨越片層的濾波處理，能夠提升濾波處理結果的畫質， 并且能夠將畫質更高的編碼數(shù)據記錄在DRAM1318或記錄介質1333中、或者提供至其它裝 置。另外，例如，通過進行在當前片層關閉的濾波處理，相機1300能夠以低延遲進行濾波處 理，并且能夠以更低的延遲將編碼數(shù)據記錄在DRAM1318或記錄介質1333中、或者提供至 其它裝置。
[0453] 注意，也可以在控制器1321所進行的解碼處理中應用圖像解碼裝置200或圖像解 碼裝置400的解碼方法。同樣地，也可以在控制器1321所進行的編碼處理中應用圖像編碼 裝置100或圖像編碼裝置300的編碼方法。
[0454]另外，相機1300所拍攝的圖像數(shù)據可以是運動圖像，也可以是靜態(tài)圖像。
[0455] 當然，圖像編碼裝置100、圖像解碼裝置200、圖像編碼裝置300以及圖像解碼裝置 400也可以應用于上述裝置以外的裝置或系統(tǒng)。
[0456] 另外，宏塊的大小也不限定于16X16像素?？蓱糜诶鐖D28所示的32X32像 素等的任何大小的宏塊。
[0457] 以上，對將標志信息等復用（記述）成比特流的情形進行了說明，但也可以除進行 復用以外，傳輸（記錄）標志和圖像數(shù)據（或比特流）。也可以是將標志與圖像數(shù)據（或比 特流）加以鏈接（附加）的形態(tài)。
[0458] 鏈接（附加）是指圖像數(shù)據（或比特流）與標志相互鏈接的狀態(tài)（相關的狀態(tài)）， 而物理性的位置關系是任意的。例如，可以通過分立的傳輸路徑傳輸圖像數(shù)據（或比特流） 和標志。另外，可以將圖像數(shù)據（或比特流）與標志記錄在分立的記錄介質（或同一個記 錄介質內的不同的記錄區(qū)域）。注意，圖像數(shù)據（或比特流）與標志鏈接的單位是任意的， 例如可設定為編碼處理單位（1幀、多個幀等）。
[0459] 附圖標記：
[0460] 100圖像編碼裝置
[0461] 112控制信息生成部
[0462] 113自適應濾波控制部
[0463] 132邊界控制標志生成部
[0464] 141系統(tǒng)規(guī)格管理部
[0465] 142判斷部
[0466] 161要處理的像素
[0467] 162周邊像素
[0468] 163片層邊界
[0469] 171控制部
[0470] 172自適應濾波器
[0471] 173選擇部
[0472] 181緩沖器
[0473] 182片層內自適應濾波器
[0474] 183邊界用第1自適應濾波器
[0475] 184邊界用第2自適應濾波器
[0476] 200圖像解碼裝置
[0477] 201存儲緩沖器
[0478] 202無損解碼部
[0479] 207自適應濾波處理部
[0480] 300圖像編碼裝置
[0481] 301圖像編碼部
[0482] 302輸入部
[0483] 303通信部
[0484] 304信息收集部
[0485] 400圖像解碼裝置
[0486] 401圖像解碼部
[0487] 402信息提供部
[0488] 403通信部
【主權項】
1. 一種圖像處理裝置，包括： 解碼單元，配置為對編碼圖像塊進行解碼；以及 濾波單元，配置為根據濾波塊數(shù)據和邊界控制數(shù)據，對解碼圖像塊進行濾波處理，其中 所述濾波塊數(shù)據用于控制是否對所述解碼圖像塊進行濾波處理，所述邊界控制數(shù)據用于控 制是否跨越包括所述解碼圖像塊的當前片層的邊界來進行所述濾波處理。2. 根據權利要求1所述的圖像處理裝置，其中， 所述濾波處理為自適應濾波處理。3. 根據權利要求1所述的圖像處理裝置，還具備： 電源單元，被配置為在由用戶的操作而結束通話以及使電源鍵成為接通狀態(tài)時，從電 池組對各單元提供電力，從而啟動為可操作的狀態(tài)。4. 根據權利要求1所述的圖像處理裝置，還具備： 顯示控制單元，被配置為將由所述濾波單元進行了濾波處理的圖像在顯示器上顯示。5. 根據權利要求1所述的圖像處理裝置，還具備： 接收單元，被配置為接收圖像數(shù)據， 所述濾波單元被配置為對由所述接收單元所接收的所述圖像數(shù)據的像素塊進行所述 濾波處理。6. 根據權利要求5所述的圖像處理裝置，其中 所述接收單元被配置為接收通過擴頻處理而被調制了的圖像數(shù)據， 其中所述圖像處理裝置還具備解調單元，被配置為通過逆擴頻處理，對由所述接收單 元所接收的、通過所述擴頻處理而被調制了的所述圖像數(shù)據進行解調， 所述濾波單元被配置為對由所述解調單元所解調的所述圖像數(shù)據的像素塊進行所述 濾波處理。7. 根據權利要求6所述的圖像處理裝置，其中 所述接收單元被配置為接收將通過所述擴頻處理而被調制了的圖像數(shù)據和其它數(shù)據 復用了的復用數(shù)據， 所述解調單元被配置為通過所述逆擴頻處理，對由所述接收單元所接收的、通過所述 擴頻處理而被調制了的所述復用數(shù)據進行解調， 其中所述圖像處理裝置還具備分離單元，被配置為將由所述解調單元解調了的所述復 用數(shù)據分離為所述圖像數(shù)據和所述其它數(shù)據， 所述濾波單元被配置為對由所述分離單元分離而得到的所述圖像數(shù)據的像素塊進行 所述濾波處理。8. -種圖像處理方法，包括： 解碼步驟，對編碼圖像塊進行解碼；以及 濾波步驟，根據濾波塊數(shù)據和邊界控制數(shù)據，對解碼圖像塊進行濾波處理，其中所述濾 波塊數(shù)據用于控制是否對所述解碼圖像塊進行濾波處理，所述邊界控制數(shù)據用于控制是否 跨越包括所述解碼圖像塊的當前片層的邊界來進行所述濾波處理。9. 根據權利要求8所述的圖像處理方法，其中， 所述濾波處理為自適應濾波處理。10. 根據權利要求8所述的圖像處理方法，還包括： 在由用戶的操作而結束通話以及使電源鍵成為接通狀態(tài)時，從電池組對各單元提供電 力，從而啟動為可操作的狀態(tài)。11. 根據權利要求8所述的圖像處理方法，還包括： 將進行了所述濾波處理的圖像在顯示器上顯示。12. 根據權利要求8所述的圖像處理方法，還包括： 接收圖像數(shù)據， 對所接收的所述圖像數(shù)據的像素塊進行所述濾波處理。13. 根據權利要求12所述的圖像處理方法，包括： 接收通過擴頻處理而被調制了的圖像數(shù)據， 通過逆擴頻處理，對所接收的、通過所述擴頻處理而被調制了的所述圖像數(shù)據進行解 調， 對所解調的所述圖像數(shù)據的像素塊進行所述濾波處理。14. 根據權利要求13所述的圖像處理方法，包括： 接收將通過所述擴頻處理而被調制了的圖像數(shù)據和其它數(shù)據復用了的復用數(shù)據， 通過所述逆擴頻處理，對所接收的、通過所述擴頻處理而被調制了的所述復用數(shù)據進 行解調， 將解調了的所述復用數(shù)據分離為所述圖像數(shù)據和所述其它數(shù)據， 對分離而得到的所述圖像數(shù)據的像素塊進行所述濾波處理。
【專利摘要】本發(fā)明涉及一種圖像處理裝置及方法，其可抑制由編碼時或解碼時的濾波處理的局部控制所引起的濾波處理的效果的降低?？刂菩畔⑸刹?12的邊界控制標志生成部132根據系統(tǒng)規(guī)格管理部141所管理的系統(tǒng)規(guī)格信息，生成邊界控制標志。自適應濾波處理部113的控制部171根據該邊界控制標志的值，決定針對片層邊界附近的像素進行的濾波處理的處理方法。例如，選擇進行跨越片層的濾波處理、或者進行在當前片層關閉的濾波處理。本發(fā)明例如可應用于圖像處理裝置。
【IPC分類】H04N19/96, H04N19/46, H04N19/513, H04N19/593, H04N19/423, H04N19/152, H04N19/503, H04N19/82, H04N19/186, H04N19/196, H04N19/91, H04N19/119, H04N19/625, H04N19/51, H04N19/00, H04N19/156, H04N19/136, H04N19/86, H04N19/61, H04N19/80, H04N19/70, H04N19/174, H04N19/85, H04N19/117, H04N19/134
【公開號】CN104935937
【申請?zhí)枴緾N201510237331
【發(fā)明人】近藤健治
【申請人】索尼公司
【公開日】2015年9月23日
【申請日】2010年7月23日
【公告號】CN102511165A, CN102511165B, CN103957407A, CN103957408A, EP2461588A1, EP2461588A4, EP2790409A2, EP2790409A3, EP2802150A1, US8774537, US8805085, US20120121188, US20130301942, US20140270559, WO2011013580A1