圖像處理裝置和圖像處理方法
【專利摘要】本發(fā)明公開了一種圖像處理裝置和一種圖像處理方法。所述圖像處理裝置包括:差值計(jì)算部,所述差值計(jì)算部基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),所述差值計(jì)算部基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且所述差值計(jì)算部將計(jì)算出的所述差值在色調(diào)間平滑化;以及校正部,所述校正部在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。根據(jù)本發(fā)明的圖像處理裝置和圖像處理方法,能夠提高對(duì)作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧進(jìn)行校正的精度。
【專利說(shuō)明】圖像處理裝置和圖像處理方法
【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及圖像處理裝置和圖像處理方法。
【背景技術(shù)】
[0002]已經(jīng)日益普及一種裝置,這種裝置在顯示屏上顯示例如與用戶的左眼的視圖對(duì)應(yīng)的圖像(以下,稱作“左眼圖像”)和與用戶的右眼的視圖對(duì)應(yīng)的圖像(以下,稱作“右眼圖像”),從而能夠使用戶將顯示的圖像識(shí)別為立體圖像。上述裝置利用視差(parallax)來(lái)使用戶將顯示的圖像識(shí)別為立體圖像。
[0003]例如,通過(guò)使用兩個(gè)攝像裝置拍攝攝像對(duì)象的圖像,以獲得作為立體圖像的構(gòu)成部分的上述左眼圖像和右眼圖像(下文中有時(shí)統(tǒng)稱為“立體像”)。然而,例如兩個(gè)攝像裝置之間的來(lái)自攝像對(duì)象的反射光的差異、兩個(gè)攝像裝置之間的曝光參數(shù)的差異、或兩個(gè)攝像裝置之間的位置的差異可能導(dǎo)致左眼圖像和右眼圖像之間存在顏色分歧。同時(shí),近年來(lái)盛行的是通過(guò)采用半透明鏡來(lái)進(jìn)行立體像的成像。例如由于半透明鏡與攝像裝置之間形成的角度所引起的光學(xué)特性的差異也會(huì)導(dǎo)致左眼圖像和右眼圖像之間的顏色分歧。
[0004]在這種背景下,已開發(fā)出了用于校正左眼圖像和右眼圖像之間的顏色分歧的技術(shù)。用于校正左眼圖像和右眼圖像之間的顏色分歧的技術(shù)的示例包括專利文獻(xiàn)JP2007-535829A中說(shuō)明的技術(shù)。
[0005]使用了 JP2007-535829A中說(shuō)明的技術(shù)的圖像處理裝置例如計(jì)算出指示左眼圖像(下文中有時(shí)簡(jiǎn)稱作“L”)和右眼圖像(下文有時(shí)簡(jiǎn)稱作“R”)各者的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖(顏色直方圖),并將左眼圖像的直方圖和右眼圖像的直方圖相互關(guān)聯(lián)。然后,使用了 JP2007-535829A中說(shuō)明的技術(shù)的圖像處理裝置例如基于關(guān)聯(lián)結(jié)果來(lái)校正左眼圖像的顏色或右眼圖像的顏色。于是,當(dāng)使用例如JP2007-535829A中說(shuō)明的技術(shù)時(shí),有可能能夠校正左眼圖像和右眼圖像之間的顏色分歧。
[0006]在JP2007-535829A中說(shuō)明的技術(shù)中,所述左眼圖像的直方圖和所述右眼圖像的直方圖例如通過(guò)下列方法而被相互關(guān)聯(lián):使用對(duì)于直方圖的DP (Dynamic Programming,動(dòng)態(tài)規(guī)劃)匹配的方法;或通過(guò)從直方圖中提取諸如峰值等特征色調(diào)值來(lái)將直方圖相互關(guān)聯(lián)的方法。然而,當(dāng)基于通過(guò)簡(jiǎn)單地使用DP匹配的方法進(jìn)行的關(guān)聯(lián)的結(jié)果來(lái)校正所述左眼圖像的顏色或所述右眼圖像的顏色時(shí),校正后的圖像由于色階(gradation)不平滑因而可能會(huì)不自然。當(dāng)基于通過(guò)使用從直方圖提取諸如峰值等特征色調(diào)值的關(guān)聯(lián)方法進(jìn)行的關(guān)聯(lián)的結(jié)果來(lái)校正所述左眼圖像的顏色或所述右眼圖像的顏色時(shí),沒(méi)有以足夠的精度校正未被選作代表的色調(diào)值。
[0007]因此,即使使用例如JP2007-535829A中說(shuō)明的技術(shù),也不一定能夠精確地校正所述左眼圖像和所述右眼圖像之間的顏色分歧。
【發(fā)明內(nèi)容】
[0008]鑒于上述問(wèn)題,需要提供一種新穎的、改進(jìn)的、能夠提高作為立體圖像的構(gòu)成部分的左眼圖像與右眼圖像之間的顏色分歧的校正精度的圖像處理裝置和圖像處理方法。
[0009]本發(fā)明的實(shí)施例提供了一種圖像處理裝置,其包括差值計(jì)算部和校正部。所述差值計(jì)算部基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且將計(jì)算出的所述差值在色調(diào)間平滑化。所述校正部在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
[0010]此外,本發(fā)明的實(shí)施例提供了一種圖像處理方法,其包括如下步驟:基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且將計(jì)算出的所述差值在色調(diào)間平滑化;以及在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
[0011]根據(jù)本發(fā)明的本實(shí)施例,能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
【專利附圖】
【附圖說(shuō)明】
[0012]圖1的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖;
[0013]圖2的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖;
[0014]圖3的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖;
[0015]圖4的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖;
[0016]圖5的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖;
[0017]圖6的A至C是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖;
[0018]圖7的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第三示例的說(shuō)明圖;
[0019]圖8的A和B是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第三示例的說(shuō)明圖;
[0020]圖9的A至E是圖示了本實(shí)施例的處理的概要的說(shuō)明圖和曲線圖;
[0021]圖10是圖示了本實(shí)施例的圖像處理裝置中的本實(shí)施例的圖像處理方法的第一示例的流程圖;
[0022]圖11是圖示了本實(shí)施例的圖像處理裝置中的本實(shí)施例的圖像處理方法的第二示例的流程圖;
[0023]圖12的A和B是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第一示例的說(shuō)明圖;
[0024]圖13的A至C是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第二示例的說(shuō)明圖;
[0025]圖14的A和B是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第三示例的說(shuō)明圖;
[0026]圖15的A和B是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第四示例的說(shuō)明圖;
[0027]圖16的A和B是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第四示例的說(shuō)明圖;
[0028]圖17是圖示了本實(shí)施例的圖像處理裝置的構(gòu)造示例的方框圖;以及
[0029]圖18是圖示了本實(shí)施例的圖像處理裝置的硬件構(gòu)造的示例的說(shuō)明圖。
【具體實(shí)施方式】
[0030]在下文中,將參照附圖詳細(xì)地說(shuō)明本發(fā)明的優(yōu)選實(shí)施例。需要注意的是,在本說(shuō)明書和附圖中,用相同的附圖標(biāo)記表示具有實(shí)質(zhì)上相同的功能和結(jié)構(gòu)的構(gòu)成元件,并且省略了這些構(gòu)成元件的重復(fù)說(shuō)明。
[0031 ] 下面,按照以下順序進(jìn)行說(shuō)明。
[0032]1、本實(shí)施例的圖像處理方法
[0033]2、本實(shí)施例的圖像處理裝置
[0034]3、本實(shí)施例的程序
[0035]1、本實(shí)施例的圖像處理方法
[0036]在說(shuō)明本實(shí)施例的圖像處理裝置的構(gòu)造之前,首先對(duì)本實(shí)施例的圖像處理方法進(jìn)行說(shuō)明。下面將以如下情況作為示例來(lái)說(shuō)明本實(shí)施例的圖像處理方法:在該情況中,本實(shí)施例的圖像處理裝置進(jìn)行本實(shí)施例的圖像處理方法的處理。
[0037][I]在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的示例
[0038]首先,對(duì)在使用諸如JP2007-535829A中說(shuō)明的技術(shù)等現(xiàn)有的圖像處理方法時(shí)可能發(fā)生的問(wèn)題的具體示例進(jìn)行說(shuō)明。
[0039](A)第一示例
[0040]圖1是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖,并且圖示了還未應(yīng)用現(xiàn)有的圖像處理方法的原始圖像。圖1的A圖示了左眼圖像(原始圖像),同時(shí)圖1的B圖示了右眼圖像(原始圖像)。
[0041]圖2是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖,并且圖示了通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)來(lái)校正圖1所示的兩個(gè)圖像中的一者獲得的圖像的示例。圖2的A圖示了校正后的左眼圖像的示例,同時(shí)圖2的B圖示了原始右眼圖像。
[0042]在圖2的A中的正方形中的部分與圖2的B中的正方形中的部分進(jìn)行比較時(shí),圖2的A中的正方形中的部分中的相對(duì)較暗的顏色不清楚,并且左眼圖像和右眼圖像之間存在顏色分歧。圖2中的顏色分歧例如是因?yàn)闊o(wú)法應(yīng)對(duì)局部的顏色分歧而產(chǎn)生的。
[0043]為了應(yīng)對(duì)如圖2所示的局部顏色分歧,可以想到下面的方法。例如,將圖1的A中的左眼圖像(原始圖像)和圖1的B中的右眼圖像(原始圖像)分別分割成一些區(qū)域,并且基于右眼圖像和左眼圖像中相互對(duì)應(yīng)的分割區(qū)域來(lái)校正所述右眼圖像或所述左眼圖像。[0044]圖3是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例的說(shuō)明圖,并且圖示了這樣的圖像的示例:在將圖1的A中的左眼圖像(原始圖像)和圖1的B中的右眼圖像(原始圖像)分別分割成一些區(qū)域之后被校正后的圖像,該圖像是通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)基于相互對(duì)應(yīng)的分割區(qū)域而被校正的。圖3的A圖示了校正后的左眼圖像的示例,同時(shí)圖3的B圖示了原始右眼圖像。圖3圖示了以如下方式獲得的圖像的示例:圖1的A中的左眼圖像(原始圖像)和圖1的B中的右眼圖像(原始圖像)分別在垂直方向上被分割成八個(gè)區(qū)域然后被處理。
[0045]在左眼圖像(原始圖像)和右眼圖像(原始圖像)分別被分割并且通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)基于相應(yīng)的分割區(qū)域而被校正的情況下,如圖3的A中箭頭指出的部分所示,在校正后的圖像中的分割區(qū)域之間的邊界處會(huì)出現(xiàn)線。因此,僅僅在分割區(qū)域的基礎(chǔ)上校正右眼圖像或左眼圖像無(wú)法期望對(duì)左眼圖像和右眼圖像之間顏色分歧的精確校正。
[0046](B)第二示例
[0047]圖4是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖,并且圖示了還未應(yīng)用現(xiàn)有的圖像處理方法的原始圖像。圖4的A圖示了左眼圖像(原始圖像),同時(shí)圖4的B圖示了右眼圖像(原始圖像)。
[0048]圖5是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖,并且圖示了通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)來(lái)校正圖4中的兩個(gè)圖像的一者獲得的圖像的示例。圖5的A圖示了校正后的左眼圖像的示例,同時(shí)圖5的B圖示了原始右眼圖像。
[0049]在圖5的A和圖5的B進(jìn)行比較時(shí),圖5的A中的校正后的左眼圖像的上部偏綠和下部偏紅。也即是,在圖5的第二示例中,左眼圖像和右眼圖像之間在整個(gè)圖像中存在顏色分歧。
[0050]圖6是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第二示例的說(shuō)明圖,并且圖示了這樣的圖像的示例:在將圖4的A中的左眼圖像(原始圖像)和圖4的B中的右眼圖像(原始圖像)分別分割成一些區(qū)域之后被校正的圖像,該圖像是通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)基于相應(yīng)的分割區(qū)域而被校正的。圖6的A圖示了校正后的左眼圖像的示例,同時(shí)圖6的B圖示了原始右眼圖像。此外,圖6的C圖示了圖6的A中所示的正方形中的部分。圖6圖示了以如下方式獲得的圖像的示例:將圖4的A中的左眼圖像(原始圖像)和圖4的B中的右眼圖像(原始圖像)分別在垂直方向上分割成八個(gè)區(qū)域然后進(jìn)行處理。
[0051]在左眼圖像(原始圖像)和右眼圖像(原始圖像)分別被分割并且通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)基于相應(yīng)的分割區(qū)域而被校正的情況下,如圖6的A中箭頭指出的部分所示,在校正后的圖像中的分割區(qū)域之間的邊界處會(huì)出現(xiàn)線。此外,在左眼圖像(原始圖像)和右眼圖像(原始圖像)分別被分割并且通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)基于相應(yīng)的分割區(qū)域而被校正的情況下,還可能發(fā)生如圖6的C所示的粗糙的灰度。因此,僅僅在分割區(qū)域的基礎(chǔ)上校正右眼圖像或左眼圖像無(wú)法期望對(duì)左眼圖像和右眼圖像之間顏色分歧的精確校正。
[0052](C)第三示例[0053]圖7是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第三示例的說(shuō)明圖,并且圖示了還未應(yīng)用現(xiàn)有的圖像處理方法的原始圖像。圖7的A圖示了左眼圖像(原始圖像),同時(shí)圖7的B圖示了右眼圖像(原始圖像)。
[0054]圖8是圖示了在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第三示例的說(shuō)明圖,并且圖示了通過(guò)使用JP2007-535829A中說(shuō)明的技術(shù)來(lái)校正圖7中所示的兩個(gè)圖像的一者而獲得的圖像的示例。圖8的A圖示了校正后的左眼圖像的示例,同時(shí)圖8的B圖示了原始右眼圖像。
[0055]在圖8的A和圖8的B進(jìn)行比較時(shí),圖8的A中的校正后的左眼圖像被校正為整個(gè)圖像偏紅。然而,該圖像的下部過(guò)于偏紅了,并且所述圖像的上部偏綠。也即是,在圖8中的第三示例中,與圖5中的第二示例一樣,在左眼圖像和右眼圖像之間在整個(gè)圖像中存在著顏色分歧。
[0056]如在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題的第一示例至第三示例所示,即便使用諸如JP2007-535829A中說(shuō)明的技術(shù)等現(xiàn)有的圖像處理方法,也無(wú)法期望對(duì)左眼圖像和右眼圖像間的顏色分歧的精確校正。
[0057][2]本實(shí)施例的圖像處理方法
[0058][2-1]本實(shí)施例的圖像處理方法概要
[0059]因此,本實(shí)施例的圖像處理裝置基于色調(diào)計(jì)算左眼圖像和右眼圖像間的差值(顏色差值),并且將計(jì)算出的差值在色調(diào)間平滑化(差值計(jì)算處理)。然后,本實(shí)施例的圖像處理裝置在平滑后的基于色調(diào)的差值的基礎(chǔ)上校正所述兩個(gè)圖像中的一者圖像或另一者圖像。
[0060]這里,將要由本實(shí)施例的所述圖像處理裝置處理的左眼圖像和右眼圖像可以是例如靜止圖像或形成運(yùn)動(dòng)圖像的幀圖像。
[0061 ] 此外,本實(shí)施例的處理對(duì)象的左眼圖像和右眼圖像的示例包括與由本實(shí)施例的圖像處理裝置從存儲(chǔ)部(稍后將要說(shuō)明)或外部記錄介質(zhì)讀取的圖像數(shù)據(jù)對(duì)應(yīng)的圖像。注意,本實(shí)施例的處理對(duì)象的左眼圖像和右眼圖像不限于上述情況。例如,本實(shí)施例的處理對(duì)象的左眼圖像和右眼圖像可以是由通信部(稍后將要說(shuō)明)接收到的信號(hào)所表示的圖像或由攝像部(稍后將要說(shuō)明)拍攝到的圖像。
[0062]圖9是圖示了本實(shí)施例的所述圖像處理方法的處理的概要的說(shuō)明圖。這里,圖9的A圖示了左眼圖像和右眼圖像的原始圖像。圖9的B、圖9的C和圖9的D圖示了本實(shí)施例的差值計(jì)算處理的示例。圖9的E圖示了作為本實(shí)施例的校正處理的結(jié)果而獲得的校正后的圖像的示例。
[0063]在下文中,將適當(dāng)參照?qǐng)D9來(lái)說(shuō)明本實(shí)施例的圖像處理方法的差值計(jì)算處理和校正處理。
[0064](I)差值計(jì)算處理
[0065]例如,如圖9的B所示,本實(shí)施例的所述圖像處理裝置計(jì)算出指示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像各者的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖。在圖9的B中,橫軸表示色調(diào),縱軸表示度數(shù)。
[0066]雖然本實(shí)施例的所述圖像處理裝置通過(guò)使用原始左眼圖像和原始右眼圖像本身計(jì)算出指示每個(gè)色調(diào)的像素?cái)?shù)量的直方圖,但是本實(shí)施例的圖像處理裝置中的直方圖計(jì)算處理并不限于上述情況。例如,本實(shí)施例的所述圖像處理裝置可以用減少原始左眼圖像和原始右眼圖像的色調(diào)位數(shù)的方式計(jì)算所述直方圖。用于減少原始左眼圖像和原始右眼圖像的色調(diào)位數(shù)的方法的示例包括去除原始左眼圖像和原始右眼圖像的色調(diào)位中的較低M(M是正整數(shù))位。
[0067]如上所述,本實(shí)施例的所述圖像處理裝置以減少原始左眼圖像和原始右眼圖像的色調(diào)位數(shù)的方式計(jì)算直方圖,并且因此能夠降低色調(diào)中的度數(shù)的散亂。如上所述的減少了原始左眼圖像和原始右眼圖像的色調(diào)位數(shù)的直方圖計(jì)算減少了所述差值計(jì)算處理的計(jì)算量。
[0068]此外,例如,如圖9的C所示,本實(shí)施例的圖像處理裝置基于色調(diào)將指示左眼圖像和右眼圖像的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián)(匹配處理)。在匹配處理中進(jìn)行了每個(gè)色調(diào)的關(guān)聯(lián)之后,本實(shí)施例的圖像處理裝置將每個(gè)色調(diào)的關(guān)聯(lián)的結(jié)果記錄在例如查找表(顏色查找表)中。
[0069]同時(shí),本實(shí)施例的圖像處理裝置例如通過(guò)使用DP (動(dòng)態(tài)規(guī)劃,DynamicProgramming)來(lái)選擇最低成本組合,從而基于色調(diào)將指示左眼圖像和右眼圖像各者的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián)。注意,本實(shí)施例的差值計(jì)算處理中的匹配處理不限于使用DP的處理。例如,本實(shí)施例的圖像處理裝置能夠通過(guò)使用任意的一維匹配技術(shù),基于色調(diào)將指示左眼圖像和右眼圖像各者的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián)。
[0070]在基于色調(diào)將指示左眼圖像和右眼圖像的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián)后,本實(shí)施例的圖像處理裝置基于色調(diào)計(jì)算右眼圖像和左眼圖像中的一者圖像與另一者圖像的差值。例如,通過(guò)基于關(guān)聯(lián)后的色調(diào)從左眼圖像的度數(shù)中減去右眼圖像的度數(shù),或者通過(guò)基于關(guān)聯(lián)后的色調(diào)從右眼圖像的度數(shù)中減去左眼圖像的度數(shù),本實(shí)施例的圖像處理裝置計(jì)算出每個(gè)關(guān)聯(lián)后的色調(diào)的差值。
[0071]這里,如果通過(guò)使用上述計(jì)算出的差值來(lái)校正左眼圖像(原始圖像)或右眼圖像(原始圖像),則能夠在一定程度上校正左眼圖像和右眼圖像之間的顏色分歧。然而,當(dāng)通過(guò)使用上述計(jì)算出的差值來(lái)校正左眼圖像(原始圖像)或右眼圖像(原始圖像)時(shí),如同上述的在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的問(wèn)題一樣,存在局部顏色分歧的風(fēng)險(xiǎn)。
[0072]因此,本實(shí)施例的所述圖像處理裝置在差值計(jì)算處理中進(jìn)一步將上述計(jì)算出的差值在色調(diào)間平滑化。
[0073]更具體地,例如,本實(shí)施例的圖像處理裝置基于色調(diào)計(jì)算上述計(jì)算出的差值以及比上述計(jì)算出的差值的色調(diào)高的N(N為I以上的整數(shù))個(gè)色調(diào)的差值和比上述計(jì)算出的差值的色調(diào)低的N個(gè)色調(diào)的差值的加權(quán)平均,從而將上述計(jì)算出的差值在色調(diào)間平滑化。注意,由本實(shí)施例的圖像處理裝置進(jìn)行的上述計(jì)算出的差值在色調(diào)間的平滑化不限于使用加權(quán)平均的平滑化,而可以通過(guò)使用諸如算術(shù)平均等能夠?qū)崿F(xiàn)平滑化的另一技術(shù)來(lái)實(shí)現(xiàn)。
[0074]圖9的D圖示了差值的示例(圖9的D中的“L-R”)以及平滑化后的差值的示例(圖9的D中的“平滑化的(L-R),,)。通過(guò)如圖9的D中所示將差值在色調(diào)間平滑化,以及通過(guò)在稍后說(shuō)明的校正處理中使用相應(yīng)的平滑化的差值來(lái)校正左眼圖像(原始圖像)或右眼圖像(原始圖像),能夠進(jìn)一步減小局部顏色分歧。需要注意的是,稍后將會(huì)對(duì)通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的具體示例進(jìn)行說(shuō)明。[0075](2)校正處理
[0076]本實(shí)施例的所述圖像處理裝置以在上述(I)中的處理(差值計(jì)算處理)中平滑化的基于色調(diào)的差值為基礎(chǔ)來(lái)校正左眼圖像或右眼圖像。
[0077]更具體地,本實(shí)施例的圖像處理裝置例如通過(guò)在原始圖像的像素值中加上或減去上述平滑化的差值來(lái)獲得顏色被校正的校正后的圖像。例如,圖9的E圖示了通過(guò)從圖9的A中的左眼圖像(原始圖像)的像素值中減去上述平滑化的差值從而將左眼圖像與右眼圖像匹配的示例。
[0078]本實(shí)施例的圖像處理裝置例如通過(guò)進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述⑵中的處理(校正處理)來(lái)校正左眼圖像或右眼圖像的顏色。
[0079]這里,本實(shí)施例的圖像處理裝置在上述(I)中的處理(差值計(jì)算處理)中基于關(guān)聯(lián)后的色調(diào)計(jì)算左眼圖像和右眼圖像間的差值,并且將計(jì)算出的差值在色調(diào)間平滑化。然后,本實(shí)施例的圖像處理裝置在上述(2)中的處理(校正處理)中以平滑化的基于色調(diào)的差值為基礎(chǔ)來(lái)校正所述左眼圖像或所述右眼圖像。因此,本實(shí)施例的圖像處理裝置能夠進(jìn)一步減小局部顏色分歧,該局部顏色分歧在上述的使用現(xiàn)有的圖像處理方法的情況下是很可能發(fā)生的。
[0080]因此,本實(shí)施例的圖像處理裝置通過(guò)進(jìn)行例如上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理),能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像間的顏色分歧的校正精度。
[0081]需要注意的是,本實(shí)施例的圖像處理方法的處理并不限于上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。
[0082]例如,通過(guò)分別分割左眼圖像和右眼圖像,以及通過(guò)基于相應(yīng)的分割區(qū)域進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理),本實(shí)施例的圖像處理裝置能夠校正左眼圖像或右眼圖像的顏色。
[0083]更具體地,在上述(I)中的處理(差值計(jì)算處理)中,本實(shí)施例的圖像處理裝置分別分割左眼圖像和右眼圖像并且在相應(yīng)的分割區(qū)域的基礎(chǔ)上計(jì)算所述左眼圖像和所述右眼圖像間的差值。在上述(I)中的處理(差值計(jì)算處理)中,本實(shí)施例的圖像處理裝置還基于分割區(qū)域?qū)⑷缟显诜指顓^(qū)域的基礎(chǔ)上計(jì)算出的差值在色調(diào)間平滑化。然后,在上述(2)中的處理(校正處理)中,本實(shí)施例的圖像處理裝置基于分割區(qū)域來(lái)校正所述左眼圖像或所述右眼圖像。
[0084]這里,本實(shí)施例的圖像處理裝置例如在垂直方向上分別分割左眼圖像和右眼圖像。這是因?yàn)榇怪狈较蛏系姆指钅苡行У貞?yīng)對(duì)垂直位置之間的顏色分歧的不同。不言而喻的是,本實(shí)施例的圖像處理裝置可以在水平方向上分別分割左眼圖像和右眼圖像,或在水平方向和垂直方向上分別分割左眼圖像和右眼圖像。
[0085]此外,本實(shí)施例的圖像處理裝置基于“為了獲得足夠高的足以將直方圖相互關(guān)聯(lián)的度數(shù),區(qū)域必須具有大約有幾十至幾百條線”來(lái)設(shè)定分割區(qū)域的數(shù)量。本實(shí)施例的左眼圖像和右眼圖像的分割區(qū)域數(shù)量的示例包括八個(gè)(預(yù)先設(shè)定的分割區(qū)域數(shù)量的示例)。然而,本實(shí)施例的分割區(qū)域數(shù)量的示例并不限于上述的數(shù)量。例如,通過(guò)參照查找表(該查找表中,存儲(chǔ)在存儲(chǔ)部(稍后說(shuō)明)等中的圖像尺寸與分割區(qū)域數(shù)量相互關(guān)聯(lián)),本實(shí)施例的圖像處理裝置可以設(shè)定適合于待處理的左眼圖像和右眼圖像的分割區(qū)域數(shù)量。或者,本實(shí)施例的圖像處理裝置例如可以基于用戶操作設(shè)定分割區(qū)域數(shù)量。
[0086]如上所述,在分割區(qū)域的基礎(chǔ)上進(jìn)行上述(I)中的處理(差值計(jì)算處理)并且在分割區(qū)域的基礎(chǔ)上進(jìn)行上述(2)中的處理(校正處理),這使得能夠進(jìn)一步減小左眼圖像和右眼圖像間的可能存在的局部顏色分歧。
[0087]此外,本實(shí)施例的圖像處理裝置可以在上述(I)中的處理(差值計(jì)算處理)中將上述平滑化的基于色調(diào)的差值在相鄰分割區(qū)域間進(jìn)一步平滑化。
[0088]這里,假設(shè)這樣一種情況:例如,在相鄰分割區(qū)域間存在顏色差值的不同。在此情況下,當(dāng)基于分割區(qū)域在色調(diào)間進(jìn)行平滑化時(shí)并且當(dāng)隨后基于所述分割區(qū)域進(jìn)行上述(2)中的處理(校正處理)時(shí),相鄰分割區(qū)域間的顏色差值的不同可能導(dǎo)致校正后的圖像中出現(xiàn)不自然的間斷。然而,由于本實(shí)施例的圖像處理裝置如上所述將平滑化的基于色調(diào)的差值在相鄰分割區(qū)域間進(jìn)一步平滑化,所以能夠防止因例如分割區(qū)域間的顏色差值的不同而導(dǎo)致的在圖像中可能產(chǎn)生的不自然的間斷。
[0089]此外,本實(shí)施例的圖像處理裝置例如可以生成分別處于與左眼圖像的視點(diǎn)和右眼圖像的視點(diǎn)不同的其它視點(diǎn)的一個(gè)以上圖像(視點(diǎn)圖像生成處理)。
[0090]本實(shí)施例的圖像處理裝置例如將左眼圖像或右眼圖像設(shè)定為基準(zhǔn)圖像,并且生成將基準(zhǔn)圖像偏移了設(shè)定的相位差的圖像。這里,設(shè)定的相位差可以是預(yù)先設(shè)定的固定值或是用戶可改變的可變值。
[0091]需要注意的是,本實(shí)施例的圖像處理裝置中的視點(diǎn)圖像生成處理并不限于上述情況。例如,本實(shí)施例的圖像處理裝置可以通過(guò)根據(jù)任何能夠生成其它視點(diǎn)的圖像的視點(diǎn)圖像生成技術(shù)進(jìn)行處理來(lái)生成其它視點(diǎn)的圖像(例如,多視點(diǎn)圖像生成處理)。
[0092][2-2]本實(shí)施例的圖像處理方法的處理
[0093]接下來(lái),將對(duì)上述的本實(shí)施例的圖像處理方法的處理的具體示例進(jìn)行說(shuō)明。
[0094]在下文中,通過(guò)將以下情況作為示例來(lái)進(jìn)行說(shuō)明:該情況中,本實(shí)施例的圖像處理裝置所處理的左眼圖像(原始圖像)和右眼圖像(原始圖像)分別是例如“RGB,1080p,10位色調(diào)”格式的圖像。注意,本實(shí)施例的圖像處理裝置所處理的左眼圖像(原始圖像)和右眼圖像(原始圖像)不限于上述情況。例如,本實(shí)施例的圖像處理裝置所處理的左眼圖像(原始圖像)和右眼圖像(原始圖像)可以是任意格式的圖像。
[0095]下面還通過(guò)將以下情況作為示例來(lái)進(jìn)行說(shuō)明:該情況中,本實(shí)施例的圖像處理裝置通過(guò)將右眼圖像用作基準(zhǔn)圖像來(lái)校正左眼圖像(使左眼圖像的顏色與右眼圖像的顏色匹配的情況)。注意,本實(shí)施例的圖像處理裝置可通過(guò)將左眼圖像用作基準(zhǔn)圖像來(lái)校正右眼圖像(換言之,可使右眼圖像的顏色與左眼圖像的顏色匹配)。
[0096](I)本實(shí)施例的圖像處理方法的處理的第一示例
[0097]圖10是圖示了本實(shí)施例的圖像處理裝置中的本實(shí)施例的圖像處理方法的處理的第一示例的流程圖。圖10中步驟SlOO至步驟S104的處理對(duì)應(yīng)于上述(I)中的處理(差值計(jì)算處理)。圖10中步驟S106的處理對(duì)應(yīng)于上述(2)中的處理(校正處理)。在圖10中,分別用“L”和“R”表示左眼圖像和右眼圖像。
[0098]本實(shí)施例的所述圖像處理裝置獲得左眼圖像和右眼圖像各者的直方圖(S100)。這里,例如通過(guò)去除左眼圖像和右眼圖像的各像素值的較低二位,本實(shí)施例的圖像處理裝置計(jì)算出使用8位色調(diào)(256色調(diào))的直方圖。需要注意的是,由本實(shí)施例的圖像處理裝置計(jì)算出的各直方圖的色調(diào)位數(shù)并不限于上述數(shù)量。例如,通過(guò)使用左眼圖像的像素值和右眼圖像的像素值,本實(shí)施例的圖像處理裝置可以生成10位色調(diào)(1024色階)的直方圖。例如通過(guò)去除左眼圖像和右眼圖像的各像素值的較低五位或較低四位,本實(shí)施例的圖像處理裝置還可以計(jì)算具有如下色調(diào)位的色調(diào)的直方圖:該色調(diào)位大約是左眼圖像和右眼圖像的色調(diào)位的一半。
[0099]本實(shí)施例的圖像處理裝置基于色調(diào)將在步驟SlOO中計(jì)算出的左眼圖像和右眼圖像各者的直方圖相互關(guān)聯(lián)(S102)。例如,本實(shí)施例的圖像處理裝置進(jìn)行所述DP匹配以將在直方圖中具有相互接近的度數(shù)值的色調(diào)相互關(guān)聯(lián)。本實(shí)施例的圖像處理裝置還將例如每個(gè)色調(diào)的關(guān)聯(lián)的結(jié)果記錄在左眼圖像和右眼圖像的顏色查找表中。
[0100]在步驟S102中的關(guān)聯(lián)之后,本實(shí)施例的圖像處理裝置將左眼圖像和右眼圖像間的通過(guò)上述關(guān)聯(lián)獲得的顏色差值在色調(diào)間平滑化(S104)。
[0101]更具體地說(shuō),例如通過(guò)參照所述查找表,本實(shí)施例的圖像處理裝置基于關(guān)聯(lián)后的色調(diào)計(jì)算出左眼圖像和右眼圖像間的差值。然后,本實(shí)施例的圖像處理裝置例如通過(guò)基于色調(diào)計(jì)算出上述計(jì)算出的差值以及比上述計(jì)算出的差值的色調(diào)高的三個(gè)色調(diào)的差值和比上述計(jì)算出的差值的色調(diào)低的三個(gè)色調(diào)的差值的加權(quán)平均,將基于色調(diào)的所述差值在色調(diào)間平滑化。注意,在色調(diào)間平滑化的接頭(tap)數(shù)可以是固定的,或者基于用戶操作是可變的。
[0102]例如,如果在步驟SlOO中去除了左眼圖像和右眼圖像的各像素值的較低位,那么本實(shí)施例的圖像處理裝置通過(guò)使用例如線性插補(bǔ)將各差值擴(kuò)展到具有原始位數(shù)。例如,如果在SlOO中去除了左眼圖像和右眼圖像的各像素值的較低二位,則本實(shí)施例的圖像處理裝置將各差值從8位(256色調(diào))擴(kuò)展到10位(1024色調(diào))。
[0103]通過(guò)使用在步驟S104中平滑化的差值,本實(shí)施例的圖像處理裝置校正左眼圖像(不是基準(zhǔn)圖像的原始圖像的示例)的顏色,以將所述左眼圖像的顏色與所述右眼圖像(是基準(zhǔn)圖像的原始圖像的示例)的顏色匹配(S106)。這里,在步驟S106中的處理之后的左眼圖像和右眼圖像的示例包括如原始圖像那樣的“RGB,1080p,以及10位色調(diào)”格式的圖像,但是在步驟S106中的處理之后的左眼圖像和右眼圖像并不限于上述那些圖像。例如,在步驟S106中的處理之后的左眼圖像和右眼圖像也可以是任意格式的圖像。
[0104]本實(shí)施例的圖像處理裝置進(jìn)行例如圖10所示的處理作為所述圖像處理方法的第一示例的處理。通過(guò)進(jìn)行圖10所示的處理,實(shí)施了上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。因此,通過(guò)進(jìn)行例如圖10中所示的處理,本實(shí)施例的圖像處理裝置能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0105](II)本實(shí)施例的圖像處理方法的處理的第二示例
[0106]圖11是圖示了本實(shí)施例的圖像處理裝置中的本實(shí)施例的圖像處理方法的處理的第二示例的流程圖。圖11中的步驟S200至步驟S208中的處理對(duì)應(yīng)于上述(I)中的處理(差值計(jì)算處理)。圖11中步驟S210中的處理對(duì)應(yīng)于上述(2)中的處理(校正處理)。圖11中,分別用“L”和“R”表示左眼圖像和右眼圖像。
[0107]本實(shí)施例的圖像處理裝置分割左眼圖像(原始圖像)和右眼圖像(原始圖像)的各者(S200)。需要注意的是,雖然本實(shí)施例的圖像處理裝置例如在垂直方向上將左眼圖像(原始圖像)和右眼圖像(原始圖像)的各者分割成八個(gè)區(qū)域,但是步驟S200中各圖像的分割區(qū)域的數(shù)量并不限于上述數(shù)量。例如,本實(shí)施例的圖像處理裝置可以根據(jù)左眼圖像(原始圖像)和右眼圖像(原始圖像)的圖像尺寸來(lái)分割左眼圖像(原始圖像)和右眼圖像(原始圖像),使得能夠獲得可靠的直方圖所需的任意數(shù)量的分割區(qū)域。更具體地說(shuō),通過(guò)使用例如其中將圖像尺寸和分割區(qū)域數(shù)量相互關(guān)聯(lián)的查找表,本實(shí)施例的圖像處理裝置規(guī)定了左眼圖像(原始圖像)和右眼圖像(原始圖像)的分割區(qū)域數(shù)量。
[0108]本實(shí)施例的圖像處理裝置針對(duì)在步驟S200中分割的各區(qū)域獲得左眼圖像和右眼圖像的直方圖(S202)。這里,本實(shí)施例的圖像處理裝置在各分割區(qū)域中進(jìn)行與例如圖10中的步驟SlOO中相同的處理。
[0109]本實(shí)施例的圖像處理裝置針對(duì)左眼圖像和右眼圖像中的相互對(duì)應(yīng)的各分割區(qū)域,基于色調(diào)將步驟S202中計(jì)算出的左眼圖像和右眼圖像的直方圖相互關(guān)聯(lián)(S204)。這里,本實(shí)施例的圖像處理裝置在各個(gè)相應(yīng)的分割區(qū)域中進(jìn)行與例如圖10中的步驟S102中相同的處理。
[0110]在步驟S204中的所述關(guān)聯(lián)之后,本實(shí)施例的圖像處理裝置在各分割區(qū)域中以與例如圖10中的步驟S104中相同的方式,將左眼圖像和右眼圖像間的通過(guò)所述關(guān)聯(lián)獲得的顏色差值在色調(diào)間平滑化(S206)。
[0111]在步驟S206中將左眼圖像和右眼圖像間的顏色差值平滑化之后,本實(shí)施例的圖像處理裝置將在色調(diào)間平滑化后的基于色調(diào)的差值在相鄰的分割區(qū)域間平滑化(S208)。通過(guò)進(jìn)行步驟S208中的所述處理,能夠使得因各區(qū)域中的處理結(jié)果之間的細(xì)微差別而導(dǎo)致的圖像中的間斷沒(méi)那么明顯。
[0112]這里,例如通過(guò)計(jì)算相鄰分割區(qū)域的算術(shù)平均或加權(quán)平均,本實(shí)施例的圖像處理裝置將平滑化后的基于色調(diào)的差值在相鄰分割區(qū)域間進(jìn)一步平滑化。
[0113]通過(guò)以與例如圖10中的步驟S106中相同的方式使用在步驟S208中平滑化的差值,本實(shí)施例的圖像處理裝置校正左眼圖像(不是基準(zhǔn)圖像的原始圖像的示例)的顏色,從而將左眼圖像的顏色與右眼圖像(是基準(zhǔn)圖像的原始圖像的示例)的顏色相匹配(S210)。
[0114]本實(shí)施例的圖像處理裝置進(jìn)行例如圖11中所示的處理作為所述圖像處理方法的第二示例的處理。通過(guò)進(jìn)行圖11中所示的處理,實(shí)施了上述(I)中的處理(差值計(jì)算處理)以及上述⑵中的處理(校正處理)。因此,通過(guò)進(jìn)行例如圖11中所示的處理,本實(shí)施例的圖像處理裝置能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0115]此外,在例如圖11中的所述處理中,上述(I)中的處理(差值計(jì)算處理)以及上述⑵中的處理(校正處理)是基于分割區(qū)域進(jìn)行的。因此,通過(guò)進(jìn)行例如圖11中的所述處理,本實(shí)施例的圖像處理裝置能夠進(jìn)一步降低左眼圖像和右眼圖像之間可能存在的局部顏色分歧。
[0116]需要注意的是,根據(jù)本實(shí)施例的圖像處理方法的處理并不限于圖10中所示的第一示例的處理和圖11中所示的第二示例的處理。
[0117]例如,本實(shí)施例的圖像處理裝置可以不進(jìn)行圖11中步驟S208中的處理。如果不進(jìn)行步驟S208中的處理,則本實(shí)施例的圖像處理裝置通過(guò)使用在色調(diào)間平滑化后的基于色調(diào)的差值來(lái)進(jìn)行圖11中步驟S210中的處理。[0118]當(dāng)如上所述不進(jìn)行步驟S208中的處理時(shí),還是實(shí)現(xiàn)了上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。因此,例如,當(dāng)如上所述不進(jìn)行步驟S208中的處理時(shí),本實(shí)施例的圖像處理裝置也能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0119][2-3]通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的具體示例
[0120]接下來(lái),示出了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的具體示例。需要注意的是,通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的示例當(dāng)然不限于下面將要示出的示例。
[0121](i)通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第一示例
[0122]圖12是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第一示例的說(shuō)明圖。圖12圖示了在對(duì)圖1中的左眼圖像(原始圖像)和右眼圖像(原始圖像)進(jìn)行本實(shí)施例的圖像處理方法的處理時(shí)被校正的圖像的示例。圖12的A圖示了校正后的左眼圖像的示例,同時(shí)圖12的B圖示了原始右眼圖像。
[0123]更具體地說(shuō),圖12圖示了下述情況的示例:該情況中,將圖1中的左眼圖像(原始圖像)和右眼圖像(原始圖像)分別在垂直方向上分割成八個(gè)區(qū)域,并且隨后基于分割區(qū)域進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。
[0124]在圖12的A中正方形中的部分與圖12的B中正方形中的部分進(jìn)行比較時(shí),左眼圖像和右眼圖像之間沒(méi)有出現(xiàn)如同圖2的A中正方形中的部分和圖2的B中正方形中的部分中那樣的顏色分歧。因此,通過(guò)進(jìn)行本實(shí)施例的圖像處理方法的所述處理,提高了作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0125](ii)通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第二示例
[0126]圖13是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第二示例的說(shuō)明圖。圖13圖示了在對(duì)圖4中的左眼圖像(原始圖像)和右眼圖像(原始圖像)進(jìn)行本實(shí)施例的圖像處理方法的處理時(shí)被校正的圖像的示例。圖13的A圖示了校正后的左眼圖像的示例,同時(shí)圖13的B圖示了原始右眼圖像。此外,圖13的C圖示了圖13的A中正方形中的部分。
[0127]更具體地說(shuō),圖13圖示了下述情況的示例:該情況中,將圖4中的左眼圖像(原始圖像)和右眼圖像(原始圖像)分別在垂直方向上分割成八個(gè)區(qū)域,并且隨后基于分割區(qū)域進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。
[0128]在圖13的A與圖13的B進(jìn)行比較時(shí),左眼圖像和右眼圖像之間沒(méi)有出現(xiàn)如同圖5的A和圖5的B中所示那樣的顏色分歧。同樣,在圖13的C和圖6的C進(jìn)行比較時(shí),當(dāng)使用本實(shí)施例的圖像處理方法時(shí)防止了如圖6的C中那樣的粗糙的灰度。因此,通過(guò)進(jìn)行本實(shí)施例的圖像處理方法的處理,提高了作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0129](iii)通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第三示例
[0130]圖14是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第三示例的說(shuō)明圖。圖14圖示了在對(duì)圖7中的左眼圖像(原始圖像)和右眼圖像(原始圖像)進(jìn)行本實(shí)施例的圖像處理方法的處理時(shí)被校正的圖像的示例。圖14的A圖示了校正后的左眼圖像的示例,同時(shí)圖14的B圖示了原始右眼圖像。[0131]更具體地說(shuō),圖14圖示了下述情況的示例:該情況中,將圖7中的左眼圖像(原始圖像)和右眼圖像(原始圖像)分別在垂直方向上分割成八個(gè)區(qū)域,并且隨后基于分割區(qū)域進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。
[0132]在圖14的A與圖14的B進(jìn)行比較時(shí),圖14的A中的校正后的左眼圖像被校正為使得該圖像的上部偏紅,下部偏綠。也即是,與通過(guò)使用現(xiàn)有的圖像處理方法而被校正的圖8的A中的左眼圖像不同的是,圖14的A中校正后的左眼圖像的下部不會(huì)太偏紅并且上部不會(huì)偏綠,并且因此左眼圖像和右眼圖像間沒(méi)有出現(xiàn)如圖8的A和圖8的B中那樣的顏色分歧。因此,通過(guò)進(jìn)行本實(shí)施例的圖像處理方法的處理,提高了作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0133](iv)通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第四示例
[0134]圖15是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第四示例的說(shuō)明圖。圖15圖示了還未應(yīng)用本實(shí)施例的圖像處理方法的原始圖像。圖15的A圖示了左眼圖像(原始圖像),同時(shí)圖15的B圖示了右眼圖像(原始圖像)。
[0135]圖16是圖示了通過(guò)使用本實(shí)施例的圖像處理方法而被校正的圖像的第四示例的說(shuō)明圖。圖16圖示了在對(duì)圖15中的左眼圖像(原始圖像)和右眼圖像(原始圖像)進(jìn)行本實(shí)施例的圖像處理方法的處理時(shí)被校正的圖像的示例。圖16的A圖示了校正后的左眼圖像的示例,同時(shí)圖16的B圖示了原始右眼圖像。
[0136]更具體地說(shuō),圖16圖示了下述情況的示例:該情況中,將圖15中的左眼圖像(原始圖像)和右眼圖像(原始圖像)分別在垂直方向上分割成八個(gè)區(qū)域,并且隨后基于分割區(qū)域進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。
[0137]在圖16的A與圖16的B進(jìn)行比較時(shí),左眼圖像和右眼圖像間沒(méi)有出現(xiàn)如圖15的A和圖15的B中那樣的顏色分歧。因此,通過(guò)進(jìn)行本實(shí)施例的圖像處理方法的處理,提高了作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0138]2、本實(shí)施例的圖像處理裝置
[0139]接下來(lái)將對(duì)本實(shí)施例的圖像處理裝置的構(gòu)造示例進(jìn)行說(shuō)明,本實(shí)施例的圖像處理裝置能夠進(jìn)行本實(shí)施例的圖像處理方法的上述處理。
[0140]圖17是圖示了本實(shí)施例的圖像處理裝置100的構(gòu)造示例的框圖。圖像處理裝置100例如包括控制部102。
[0141]圖像處理裝置100例如還可包括R0M(未圖示的只讀存儲(chǔ)器)、RAM(未圖示的隨機(jī)存取存儲(chǔ)器)、存儲(chǔ)部(未圖示)、通信部(未圖示)、用戶可操作的操作部(未圖示)以及在顯示屏上顯示各種畫面的顯示部(未圖示)。圖像處理裝置100例如通過(guò)作為數(shù)據(jù)傳輸通道的總線將上述這些部件相互連接。
[0142]這里,所述ROM(未圖示)存儲(chǔ)著全部被控制部102使用的程序和諸如運(yùn)算參數(shù)等控制數(shù)據(jù)。所述RAM(未圖示)臨時(shí)存儲(chǔ)著由控制部102執(zhí)行的程序等。
[0143]所述存儲(chǔ)部(未圖示)是包含于圖像處理裝置100中的存儲(chǔ)器件,并且存儲(chǔ)著諸如圖像數(shù)據(jù)和應(yīng)用程序等各種數(shù)據(jù)。這里,所述存儲(chǔ)部(未圖示)的示例包括諸如硬盤(Hard Disk)等磁性記錄介質(zhì)以及諸如閃存等非易失性存儲(chǔ)器。所述存儲(chǔ)部(未圖示)還可以是相對(duì)于圖像處理裝置100可安裝的和可拆卸的。
[0144]作為所述通信部(未圖示),例舉了稍后描述的通信接口。此外,將稍后描述的操作輸入器件和顯示器件分別例舉為所述操作部(未圖示)和所述顯示部(未圖示)。
[0145][圖像處理裝置100的硬件構(gòu)造示例]
[0146]圖18是圖示了本實(shí)施例的圖像處理裝置100的硬件構(gòu)造的示例的說(shuō)明圖。例如,圖像處理裝置100包括MPU150、ROMl52, RAM154、記錄介質(zhì)156、輸入/輸出接口 158、操作輸入器件160、顯示器件162以及通信接口 164。此外,圖像處理裝置100通過(guò)使用例如用作數(shù)據(jù)傳輸通道的總線166將上述這些部件相互連接
[0147]MPU150例如由MPU (微處理單元)和各種處理電路構(gòu)成,并且用作控制整個(gè)圖像處理裝置100的控制部102。在圖像處理裝置100中,MPU150例如還用作稍后將要說(shuō)明的差值計(jì)算部110、校正部112和圖像處理部114。
[0148]ROMl52存儲(chǔ)著由MPU150使用的程序和諸如運(yùn)算參數(shù)等控制數(shù)據(jù)之類。RAM154暫時(shí)存儲(chǔ)著例如由MPU150執(zhí)行的程序等。
[0149]記錄介質(zhì)156充當(dāng)所述存儲(chǔ)部(未圖示),并且存儲(chǔ)著諸如圖像數(shù)據(jù)和應(yīng)用程序等各種數(shù)據(jù)。這里,記錄介質(zhì)156的示例包括諸如硬盤等磁性記錄介質(zhì)和諸如閃存等非易失性存儲(chǔ)器。記錄介質(zhì)156相對(duì)于圖像處理裝置100還可以是可安裝的和可拆卸的。
[0150]輸入/輸出接口 158例如與操作輸入器件160和顯示器件162進(jìn)行連接。操作輸入器件160和顯示器件162分別用作所述操作部(未圖示)和所述顯示部(未圖示)。這里,輸入/輸出接口 158的示例包括USB (通用串行總線)端子、DVI (數(shù)字視頻接口)端子、HDMI (高清多媒體接口)端子以及各種處理電路。此外,操作輸入器件160例如設(shè)置在圖像處理裝置100上,且連接至圖像處理裝置100內(nèi)部的輸入/輸出接口 158。操作輸入器件160的示例包括按鈕、方向鍵、諸如操控旋鈕(jog dial)等旋轉(zhuǎn)式選擇器以及它們的組合。顯示器件162例如設(shè)置在圖像處理裝置100上,且連接至圖像處理裝置100內(nèi)部的輸入/輸出接口 158。顯示器件162的示例包括液晶顯示器(LCD)、有機(jī)電致發(fā)光顯示器、有機(jī)發(fā)光二極管顯示器(OLED)。
[0151]毋需多言,輸入/輸出接口 158可連接至諸如用作圖像處理裝置100的外部設(shè)備的操作輸入器件(例如鍵盤或鼠標(biāo))和顯示器件等外部設(shè)備。顯示器件162可以是能夠?qū)崿F(xiàn)顯示和用戶操作的諸如觸摸屏等器件。
[0152]通信接口 164是包含于圖像處理裝置100中的通信部件,并用作通過(guò)網(wǎng)絡(luò)(或直接地)與諸如顯示器件、服務(wù)器、攝像裝置等外部設(shè)備進(jìn)行無(wú)線/有線通信的通信部(未圖示)。這里,通信接口 164的示例包括:通信天線和RF(射頻)電路(無(wú)線通信);IEEE802.15.1端口以及發(fā)送和接收電路(無(wú)線通信);IEEE802.1lb端口以及發(fā)送和接收電路(無(wú)線通信);LAN(局域網(wǎng))端子以及發(fā)送和接收電路(有線通信)。根據(jù)本實(shí)施例的網(wǎng)絡(luò)的示例包括:有線網(wǎng)絡(luò),諸如LAN或WAN(廣域網(wǎng));無(wú)線網(wǎng)絡(luò),諸如無(wú)線LAN(WLAN;無(wú)線局域網(wǎng))或具有基站的無(wú)線WANOWAN;無(wú)線廣域網(wǎng));以及使用諸如TCP/IP (傳輸控制協(xié)議/互聯(lián)網(wǎng)協(xié)議)等通信協(xié)議的互聯(lián)網(wǎng)。
[0153]圖像處理裝置100例如以圖18中的構(gòu)造進(jìn)行根據(jù)本實(shí)施例的圖像處理方法的處理。注意,本實(shí)施例的圖像處理裝置100的硬件構(gòu)造不限于圖18中的構(gòu)造。
[0154]例如,圖像處理裝置100可包括攝像器件,所述攝像器件用作拍攝靜止圖像或運(yùn)動(dòng)圖像的攝像部(未圖示)。當(dāng)包括攝像器件時(shí),圖像處理裝置100例如能夠處理由該攝像器件的圖像拍攝過(guò)程生成的拍攝圖像。[0155]這里,根據(jù)本實(shí)施例的攝像器件的示例包括透鏡/攝像元件和信號(hào)處理電路。透鏡/攝像元件例如包括使用多個(gè)光學(xué)系統(tǒng)透鏡和諸如CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)等攝像元件的圖像傳感器。信號(hào)處理電路例如包括AGC(自動(dòng)增益控制)電路和ADC(模擬數(shù)字轉(zhuǎn)換器),并將由攝像元件生成的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)(圖像數(shù)據(jù))以進(jìn)行各種各樣的信號(hào)處理。由信號(hào)處理電路進(jìn)行的信號(hào)處理的不例包括白平衡校正處理、色度(hue)校正處理、伽馬校正處理、YCbCr轉(zhuǎn)換處理以及邊緣增強(qiáng)處理。
[0156]當(dāng)具有例如用于獨(dú)立處理的構(gòu)造時(shí),圖像處理裝置100不一定必須包括通信接口164。圖像處理裝置100還可以具有不設(shè)置操作輸入器件160和顯示器件162的構(gòu)造。
[0157]再次參照?qǐng)D17,說(shuō)明圖像處理裝置100的構(gòu)造示例??刂撇?02例如有MPU構(gòu)成并且起到控制整個(gè)圖像處理裝置100的作用。控制部102包括例如差值計(jì)算部110、校正部112以及圖像處理部114,并且在進(jìn)行本實(shí)施例的圖像處理方法的處理方面起主導(dǎo)作用。
[0158]差值計(jì)算部110在進(jìn)行上述(I)中的處理(差值計(jì)算處理)方面起主導(dǎo)作用。更具體地說(shuō),例如,差值計(jì)算部110基于色調(diào)將表示左眼圖像和右眼圖像各者的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),基于關(guān)聯(lián)后的色調(diào)計(jì)算左眼圖像和右眼圖像間的差值,然后將計(jì)算出的差值在色調(diào)間平滑化。
[0159]差值計(jì)算部110還可以分割并處理例如左眼圖像和右眼圖像每一者。更具體地,差值計(jì)算部110可以例如在左眼圖像和右眼圖像中的相互對(duì)應(yīng)的分割區(qū)域的基礎(chǔ)上計(jì)算差值,并且可以基于分割區(qū)域?qū)⒃诜指顓^(qū)域的基礎(chǔ)上計(jì)算出的差值在色調(diào)間平滑化。此外,當(dāng)基于分割區(qū)域?qū)⑺霾钪翟谏{(diào)間平滑化時(shí),差值計(jì)算部110可以將該平滑化的基于色調(diào)的差值在相鄰分割區(qū)域之間平滑化。
[0160]校正部112在執(zhí)行上述(2)中的處理(校正處理)方面起主導(dǎo)作用,并且在由差值計(jì)算部110平滑化的基于色調(diào)的差值的基礎(chǔ)上校正左眼圖像或右眼圖像。
[0161]此外,當(dāng)差值計(jì)算部110在分割區(qū)域的基礎(chǔ)上計(jì)算所述差值時(shí),校正部112例如依據(jù)由差值計(jì)算部110基于分割區(qū)域在色調(diào)間進(jìn)行了平滑化的差值或依據(jù)由差值計(jì)算部110在相鄰分割區(qū)域間進(jìn)一步平滑化的差值,在分割區(qū)域的基礎(chǔ)上校正左眼圖像或右眼圖像。
[0162]圖像處理部114在進(jìn)行上述視點(diǎn)圖像生成處理方面起主導(dǎo)作用,并且生成如下的一個(gè)以上圖像:所述一個(gè)以上圖像的視點(diǎn)分別與所述左眼圖像的視點(diǎn)和所述右眼圖像的視點(diǎn)不同。圖像處理部114設(shè)定例如左眼圖像或右眼圖像為基準(zhǔn)圖像,并且生成將基準(zhǔn)圖像偏移了設(shè)定的相位差的圖像。需要注意的是,如上所述,圖像處理部114例如可通過(guò)根據(jù)任何能夠生成其它視點(diǎn)的圖像的視點(diǎn)圖像生成技術(shù)進(jìn)行處理(例如,多視點(diǎn)圖像生成處理),來(lái)生成其它視點(diǎn)的圖像。
[0163]控制部102包括例如差值計(jì)算部110、校正部112以及圖像處理部114,并且因此在進(jìn)行本實(shí)施例的圖像處理方法的處理(例如上述(I)中的處理(差值計(jì)算處理)、上述
(2)中的處理(校正處理)、以及上述視點(diǎn)圖像生成處理)方面起到主導(dǎo)作用。
[0164]需要注意的是,本實(shí)施例的控制部的構(gòu)造并不限于圖17中的構(gòu)造。例如,本實(shí)施例的控制部不一定必須包括圖像處理部114。即使當(dāng)不包括圖像處理部114時(shí),本實(shí)施例的控制部仍然能夠進(jìn)行本實(shí)施例的圖像處理方法的上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。因此,即使在不包括圖像處理部114時(shí),本實(shí)施例的控制部仍能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。[0165]利用例如圖17中的構(gòu)造,圖像處理裝置100進(jìn)行上述的本實(shí)施例的圖像處理方法的處理(例如,上述(I)中的處理(差值計(jì)算處理)、上述(2)中的處理(校正處理)、以及上述視點(diǎn)圖像生成處理)。因此,利用例如圖17中的構(gòu)造,圖像處理裝置100能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0166]需要注意的是,本實(shí)施例的圖像處理裝置的構(gòu)造并不限于圖17中的構(gòu)造。
[0167]例如,本實(shí)施例的所述圖像處理裝置可以單獨(dú)地包括圖17中示出的差值計(jì)算部110、校正部112以及圖像處理部114(例如,可以利用各自的處理電路實(shí)現(xiàn))。
[0168]本實(shí)施例的所述圖像處理裝置還可以具有這樣的構(gòu)造:例如,沒(méi)有設(shè)置在進(jìn)行上述視點(diǎn)圖像生成處理方面起主導(dǎo)作用的圖像處理部114。即使當(dāng)具有其中未設(shè)置圖像處理部114的構(gòu)造時(shí),本實(shí)施例的圖像處理裝置仍然能夠根據(jù)本實(shí)施例的圖像處理方法進(jìn)行上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)。因此,即使在不包括圖像處理部114時(shí),本實(shí)施例的圖像處理裝置仍然能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0169]此外,本實(shí)施例的圖像處理裝置可以包括例如攝像部(未圖示)。當(dāng)包括所述攝像部(未圖示)時(shí),本實(shí)施例的圖像處理裝置能夠處理由該攝像部(未圖示)的圖像拍攝過(guò)程生成的拍攝圖像。所述攝像部(未圖示)的示例包括本實(shí)施例的上述攝像器件。
[0170]如上所述,本實(shí)施例的圖像處理裝置進(jìn)行例如上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)作為本實(shí)施例的圖像處理方法的處理。需要注意的是,在上述(I)中的處理(差值計(jì)算處理)中,本實(shí)施例的圖像處理裝置基于關(guān)聯(lián)后的色調(diào)計(jì)算左眼圖像和右眼圖像之間的差值,并且將計(jì)算出的差值在色調(diào)間平滑化。然后,在上述(2)中的處理(校正處理)中,本實(shí)施例的圖像處理裝置在平滑化的基于色調(diào)的差值的基礎(chǔ)上校正左眼圖像或右眼圖像。因此,本實(shí)施例的圖像處理裝置能夠進(jìn)一步減小上述的在使用現(xiàn)有的圖像處理方法的情況下可能發(fā)生的局部顏色分歧。
[0171]因此,本實(shí)施例的圖像處理裝置能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0172]此外,本實(shí)施例的圖像處理方法的處理是簡(jiǎn)單的,因此即使在被實(shí)施為信號(hào)處理電路(硬件)的情況下,仍能夠以不高的成本予以實(shí)現(xiàn)。
[0173]至此,一直將圖像處理裝置作為本實(shí)施例進(jìn)行了說(shuō)明,但本實(shí)施例不限于該形式。本實(shí)施例可適用于能夠進(jìn)行圖像處理的各種設(shè)備,例如:平板裝置;諸如移動(dòng)電話或智能手機(jī)(smartphone)等通信裝置;視頻/音樂(lè)再現(xiàn)裝置(或視頻/音樂(lè)記錄及再現(xiàn)裝置);游戲機(jī);諸如PC (個(gè)人電腦)等計(jì)算機(jī);以及諸如數(shù)碼相機(jī)或數(shù)碼攝像機(jī)等攝像裝置。本實(shí)施例還可適用于例如能夠被裝配至上述設(shè)備中的處理IC(集成電路)。
[0174]3、本實(shí)施例的程序
[0175]通過(guò)用計(jì)算機(jī)執(zhí)行使得該計(jì)算機(jī)起到本實(shí)施例的圖像處理裝置的功能的程序(該程序使得能夠執(zhí)行本實(shí)施例的圖像處理方法的處理,諸如“上述(I)中的處理(差值計(jì)算處理)和上述(2)中的處理(校正處理)”,或者“上述(I)中的處理(差值計(jì)算處理)、上述(2)中的處理(校正處理)以及上述視點(diǎn)圖像生成處理”),能夠提高作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像之間的顏色分歧的校正精度。
[0176]上文中已經(jīng)參照附圖詳述了本發(fā)明的優(yōu)選實(shí)施例,但本發(fā)明的技術(shù)范圍不限于所述示例。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解,在隨附的權(quán)利要求或其等同物的范圍內(nèi),依據(jù)設(shè)計(jì)要求及其他因素可做出各種變形、組合、子組合以及替換。
[0177]例如,以上說(shuō)明表明:提供了使計(jì)算機(jī)起到本實(shí)施例的圖像處理裝置的功能的程序(計(jì)算機(jī)程序)。然而,在本實(shí)施例中,能夠一起提供存儲(chǔ)有該程序的記錄介質(zhì)。
[0178]前述的構(gòu)造僅僅是本實(shí)施例的示例,因而自然屬于本發(fā)明的技術(shù)范圍內(nèi)。
[0179]此外,本發(fā)明還可被構(gòu)造如下。
[0180](I) 一種圖像處理裝置,其包括:
[0181]差值計(jì)算部,所述差值計(jì)算部基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),所述差值計(jì)算部基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且所述差值計(jì)算部將計(jì)算出的所述差值在色調(diào)間平滑化;以及
[0182]校正部,所述校正部在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
[0183](2)根據(jù)(I)所述的圖像處理裝置,其中,
[0184]所述差值計(jì)算部對(duì)所述左眼圖像和所述右眼圖像每一者進(jìn)行區(qū)域分割,依據(jù)所述左眼圖像和所述右眼圖像中的相互對(duì)應(yīng)的分割區(qū)域來(lái)計(jì)算所述差值,且將依據(jù)所述分割區(qū)域計(jì)算出的所述差值基于所述分割區(qū)域在色調(diào)間平滑化,并且
[0185]所述校正部在所述分割區(qū)域的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
[0186](3)根據(jù)(2)所述的圖像處理裝置,其中,所述差值計(jì)算部將平滑化后的基于色調(diào)的所述差值在相鄰分割區(qū)域間進(jìn)一步平滑化。
[0187](4)根據(jù)(I)至(3)中任一項(xiàng)所述的圖像處理裝置,其中,所述差值計(jì)算部以減少所述左眼圖像和所述右眼圖像的色調(diào)位數(shù)的方式計(jì)算所述直方圖。
[0188](5)根據(jù)(I)至(4)中任一項(xiàng)所述的圖像處理裝置,其還包括:
[0189]圖像處理部,所述圖形處理部生成位于與所述左眼圖像的視點(diǎn)和所述右眼圖像的視點(diǎn)不同的其它視點(diǎn)的一個(gè)以上圖像。
[0190](6) 一種圖像處理方法,其包括如下步驟:
[0191]基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且將計(jì)算出的所述差值在色調(diào)間平滑化;以及
[0192]在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
[0193]本申請(qǐng)包含與2012年9月4日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP2012-194539所公開的內(nèi)容相關(guān)的主題,因此將該日本優(yōu)先權(quán)申請(qǐng)的全部?jī)?nèi)容以引用的方式并入本文。
【權(quán)利要求】
1.一種圖像處理裝置,其包括: 差值計(jì)算部,所述差值計(jì)算部基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),所述差值計(jì)算部基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且所述差值計(jì)算部將計(jì)算出的所述差值在色調(diào)間平滑化;以及 校正部,所述校正部在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置,其中, 所述差值計(jì)算部對(duì)所述左眼圖像和所述右眼圖像每一者進(jìn)行區(qū)域分割,依據(jù)所述左眼圖像和所述右眼圖像中的相互對(duì)應(yīng)的分割區(qū)域來(lái)計(jì)算所述差值,且將依據(jù)所述分割區(qū)域計(jì)算出的所述差值基于所述分割區(qū)域在色調(diào)間平滑化,并且 所述校正部在所述分割區(qū)域的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置,其中,所述差值計(jì)算部將平滑化后的基于色調(diào)的所述差值在相鄰分割區(qū)域間進(jìn)一步平滑化。
4.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的圖像處理裝置,其中,所述差值計(jì)算部以減少所述左眼圖像和所述右眼圖像的色調(diào)位數(shù)的方式計(jì)算所述直方圖。
5.根據(jù)權(quán)利要求4所述的圖像處理裝置,其中,如何減少所述左眼圖像和所述右眼圖像的色調(diào)位數(shù)包括刪除所述左眼圖像和所述右眼圖像的色調(diào)位中的較低M位,這里M是正整數(shù)。
6.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的圖像處理裝置,其還包括:圖像處理部,所述圖形處理部生成位于與所述左眼圖像的視點(diǎn)和所述右眼圖像的視點(diǎn)不同的其它視點(diǎn)的一個(gè)以上圖像。`
7.一種圖像處理方法,其包括如下步驟: 進(jìn)行差值計(jì)算處理,在所述差值計(jì)算處理中,基于色調(diào)將分別表示作為立體圖像的構(gòu)成部分的左眼圖像和右眼圖像中的每個(gè)色調(diào)的像素?cái)?shù)量的直方圖相互關(guān)聯(lián),基于關(guān)聯(lián)后的色調(diào)計(jì)算所述左眼圖像和所述右眼圖像之間的差值,并且將計(jì)算出的所述差值在色調(diào)間平滑化;以及 進(jìn)行校正處理,在所述校正處理中,在平滑化后的基于色調(diào)的所述差值的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
8.根據(jù)權(quán)利要求7所述的圖像處理方法,其中, 在所述差值計(jì)算處理中,對(duì)所述左眼圖像和所述右眼圖像每一者進(jìn)行區(qū)域分割,依據(jù)所述左眼圖像和所述右眼圖像中的相互對(duì)應(yīng)的分割區(qū)域來(lái)計(jì)算所述差值,且將依據(jù)所述分割區(qū)域計(jì)算出的所述差值基于所述分割區(qū)域在色調(diào)間平滑化,并且 在所述校正處理中,在所述分割區(qū)域的基礎(chǔ)上校正所述左眼圖像或所述右眼圖像。
9.根據(jù)權(quán)利要求8所述的圖像處理方法,其中,在所述差值計(jì)算處理中,將平滑化后的基于色調(diào)的所述差值在相鄰分割區(qū)域間進(jìn)一步平滑化。
10.根據(jù)權(quán)利要求7至9中任一項(xiàng)所述的圖像處理方法,其中,在所述差值計(jì)算處理中,以減少所述左眼圖像和所述右眼圖像的色調(diào)位數(shù)的方式計(jì)算所述直方圖。
11.根據(jù)權(quán)利要求10所述的圖像處理方法,其中,如何減少所述左眼圖像和所述右眼圖像的色調(diào)位數(shù)包括刪除所述左眼圖像和所述右眼圖像的色調(diào)位中的較低則立,這里M是正整數(shù)。
12.根據(jù)權(quán)利要求7至9中任一項(xiàng)所述的圖像處理方法,其還包括: 進(jìn)行視點(diǎn)圖像生成處理,在所述視點(diǎn)圖像生成處理中,生成位于與所述左眼圖像的視點(diǎn)和所述右眼圖像的視點(diǎn)不同的其它視點(diǎn)的一個(gè)以上圖像。
【文檔編號(hào)】H04N13/02GK103685853SQ201310373719
【公開日】2014年3月26日 申請(qǐng)日期:2013年8月23日 優(yōu)先權(quán)日:2012年9月4日
【發(fā)明者】土場(chǎng)健太郎, 小森谷陽(yáng)多 申請(qǐng)人:索尼公司