圖像處理裝置、圖像處理方法和電子裝置制造方法
【專利摘要】本發(fā)明涉及能夠基于被處理圖像來(lái)調(diào)整視差的圖像處理裝置、圖像處理方法和電子裝置?；谂c被處理圖像相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述被處理圖像相對(duì)應(yīng)的視差變大，其中所述被處理圖像是被處理的移動(dòng)圖像。
【專利說(shuō)明】圖像處理裝置、圖像處理方法和電子裝置

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及圖像處理裝置、圖像處理方法和電子裝置。

【背景技術(shù)】
[0002] 能夠在顯示屏上顯示對(duì)應(yīng)于用戶左眼的圖像（下文中稱為"左眼圖像"）和對(duì)應(yīng)于 用戶右眼的圖像（下文中稱為"右眼圖像"）從而使用戶將所顯示的圖像識(shí)別為三維圖像的 裝置變得越來(lái)越普及。上述這類裝置能夠使用戶利用視差（disparity)將所顯示的圖像識(shí) 別為三維圖像。
[0003] 當(dāng)使用戶將所顯示的圖像識(shí)別為三維圖像時(shí)，優(yōu)選地僅向用戶的左眼呈現(xiàn)左眼圖 像且僅向用戶的右眼呈現(xiàn)右眼圖像。如果用戶用右眼識(shí)別左眼圖像且/或用左眼識(shí)別右眼 圖像，即如果發(fā)生了被稱為串?dāng)_的現(xiàn)象，則三維圖像的質(zhì)量會(huì)下降，例如該圖像看似重疊圖 像或該圖像看似模糊。
[0004] 鑒于這種情況，目前正在研究用于降低串?dāng)_的技術(shù)。日本專利文獻(xiàn)JP4440066B公 開的技術(shù)就是一種用于降低串?dāng)_技術(shù)的一個(gè)示例。
[0005] 作為一個(gè)示例，JP4440066B公開的技術(shù)根據(jù)顯示裝置的尺寸調(diào)整視差以顯示三維 圖像。然而，即使使用JP4440066B公開的技術(shù)，也不能根據(jù)將被顯示在顯示屏上的圖像來(lái) 調(diào)整視差。


【發(fā)明內(nèi)容】

[0006] 本發(fā)明的目的在于提供一種能夠基于被處理圖像來(lái)調(diào)整視差的圖像處理裝置、圖 像處理方法、程序和電子裝置。
[0007] 本發(fā)明的實(shí)施例提供了一種圖像處理裝置，其包括：圖像處理單元，其基于與被處 理圖像相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述被處理圖像相對(duì) 應(yīng)的視差變大，其中所述被處理圖像是被處理的移動(dòng)圖像。
[0008] 本發(fā)明的實(shí)施例提供了一種圖像處理方法，其包括：基于與被處理圖像相對(duì)應(yīng)的 視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述被處理圖像相對(duì)應(yīng)的視差變大， 其中所述被處理圖像是被處理的移動(dòng)圖像。
[0009] 本發(fā)明的實(shí)施例提供一種使計(jì)算機(jī)執(zhí)行以下功能的程序：基于與被處理圖像相對(duì) 應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述被處理圖像相對(duì)應(yīng)的視差變 大，其中所述被處理圖像是被處理的移動(dòng)圖像。
[0010] 本發(fā)明的實(shí)施例提供一種電子裝置，其包括：圖像處理單元，其基于與被處理圖像 相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述被處理圖像相對(duì)應(yīng)的視 差變大，其中所述被處理圖像是被處理的移動(dòng)圖像。
[0011] 根據(jù)本發(fā)明的一個(gè)或多個(gè)實(shí)施例，能夠基于被處理圖像來(lái)調(diào)整視差。

【專利附圖】

【附圖說(shuō)明】
[0012] 圖1是說(shuō)明本發(fā)明的實(shí)施例的圖像處理方法的處理的示意圖。
[0013] 圖2是說(shuō)明本發(fā)明的實(shí)施例的圖像處理方法的處理的示意圖。
[0014] 圖3是說(shuō)明本發(fā)明的實(shí)施例的圖像處理方法的處理的示意圖。
[0015] 圖4是用于說(shuō)明本實(shí)施例的圖像處理方法的處理的流程圖。
[0016] 圖5是說(shuō)明本發(fā)明的實(shí)施例的圖像處理裝置的一個(gè)示例構(gòu)造的框圖。
[0017] 圖6是說(shuō)明本發(fā)明的實(shí)施例的圖像處理裝置的一個(gè)示例硬件構(gòu)造的示意圖。

【具體實(shí)施方式】
[0018] 在下文中，將參考附圖具體說(shuō)明本發(fā)明的優(yōu)選實(shí)施例。應(yīng)注意的是，在說(shuō)明書和附 圖中，使用相同的附圖標(biāo)記表示具有大體相同的功能和結(jié)構(gòu)的結(jié)構(gòu)性元件，并省略了這些 結(jié)構(gòu)性元件的重復(fù)說(shuō)明。
[0019] 下面按照下述順序進(jìn)行說(shuō)明。
[0020] 1.本發(fā)明的實(shí)施例的圖像處理方法
[0021] 2.本發(fā)明的實(shí)施例的圖像處理裝置
[0022] 3.本發(fā)明的實(shí)施例的程序
[0023] 1.本發(fā)明的實(shí)施例的圖像處理方法
[0024] 在說(shuō)明本發(fā)明的實(shí)施例的圖像處理裝置的構(gòu)造之前，首先說(shuō)明本發(fā)明的實(shí)施例的 圖像處理方法。通過(guò)本發(fā)明的實(shí)施例的圖像處理裝置執(zhí)行本實(shí)施例的圖像處理方法的處理 的方式來(lái)說(shuō)明本實(shí)施例的圖像處理方法。
[0025] 本實(shí)施例的圖像處理裝置基于與被處理圖像（其是被處理的移動(dòng)圖像）相對(duì)應(yīng)的 視差來(lái)調(diào)整與此被處理圖像相對(duì)應(yīng)的視差。作為本實(shí)施例的圖像處理方法的處理，本實(shí)施 例的圖像處理裝置基于與被處理圖像相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量進(jìn)行視差調(diào) 整以使被處理圖像相對(duì)應(yīng)的視差變大。
[0026] 這里，作為本實(shí)施例中的被處理圖像的示例，給出了用于表示左眼圖像和右眼圖 像（左眼圖像和右眼圖像構(gòu)成了三維圖像）的移動(dòng)圖像（在下文中有時(shí)將其稱為"立體圖 像"）以及根據(jù)平面圖像（2D圖像）人工生成的立體圖像。在下文中，將移動(dòng)圖像以及人工 生成的立體圖像統(tǒng)稱為"立體圖像"。
[0027] 而且，在本實(shí)施例中，例如，通過(guò)與被處理圖像中的各個(gè)幀相對(duì)應(yīng)的圖像（在下文 中將其稱為"幀圖像"）中的視差量來(lái)表示與被處理圖像相對(duì)應(yīng)的視差的大小。例如，在本 實(shí)施例中，基于各個(gè)幀圖像中的每個(gè)像素的深度（degree of d印th)來(lái)計(jì)算每個(gè)幀圖像的 視差量。應(yīng)注意的是，下面將說(shuō)明與本實(shí)施例的圖像處理裝置執(zhí)行的視差量的計(jì)算相關(guān)的 處理。
[0028] 本實(shí)施例的圖像處理方法中的處理
[0029] 現(xiàn)在將更詳細(xì)地說(shuō)明本實(shí)施例的圖像處理方法中的處理。
[0030] (1)視差量的計(jì)算過(guò)程
[0031] 本實(shí)施例的圖像處理裝置基于與各個(gè)幀圖像中的視差相關(guān)的每個(gè)像素的深度來(lái) 計(jì)算每個(gè)幀圖像的視差量。在下文中，有時(shí)也將各個(gè)幀圖像中的每個(gè)像素的深度稱為"視差 圖"。
[0032] 作為一個(gè)示例，本實(shí)施例的圖像處理裝置通過(guò)比較用于構(gòu)成立體圖像的左眼圖像 和右眼圖像中的相應(yīng)像素來(lái)計(jì)算每個(gè)像素的視差。接著，本實(shí)施例的圖像處理裝置通過(guò)將 每個(gè)像素的計(jì)算視差設(shè)定為本實(shí)施例中的各個(gè)幀圖像中的每個(gè)像素的深度來(lái)執(zhí)行本實(shí)施 例的視差量計(jì)算過(guò)程。這里，本實(shí)施例中的深度對(duì)應(yīng)于視點(diǎn)（viewpoint)之間的距離。
[0033] 應(yīng)注意的是，對(duì)于本實(shí)施例的圖像處理裝置，本實(shí)施例的中用于獲取各個(gè)幀圖像 中的每個(gè)像素的深度的方法并不限于上述方法。
[0034] 例如，本實(shí)施例的圖像處理裝置可使用能夠計(jì)算每個(gè)像素的視差的任意方法來(lái)計(jì) 算每個(gè)像素的視差。
[0035] 作為另一示例，在本實(shí)施例中，圖像處理裝置也可以使用用于表示與被處理圖像 的各個(gè)幀圖像中的每個(gè)像素的視差相對(duì)應(yīng)的視差信息，并將由該視差信息表示的每個(gè)像素 的視差設(shè)定為各個(gè)幀圖像中的各個(gè)像素的深度。這里，作為示例，在本實(shí)施例中，視差信息 可以是被處理圖像的元數(shù)據(jù)，或可以獨(dú)立于被處理圖像的數(shù)據(jù)。作為示例，在本實(shí)施例中， 由視差信息表示的各個(gè)幀圖像中的每個(gè)像素的視差可通過(guò)分析被處理圖像來(lái)進(jìn)行設(shè)定，或 可基于用戶操作等來(lái)進(jìn)行設(shè)定。例如，在本實(shí)施例中，執(zhí)行圖像處理方法的處理之前，在圖 像處理裝置的外部或內(nèi)部的裝置中產(chǎn)生視差信息。
[0036] 本實(shí)施例的圖像處理裝置例如通過(guò)計(jì)算視差圖（各個(gè)幀圖像中的深度）的動(dòng)態(tài)范 圍來(lái)計(jì)算每個(gè)幀圖像中的視差量。
[0037] 作為具體示例，針對(duì)每個(gè)幀，本實(shí)施例的圖像處理裝置通過(guò)執(zhí)行下面的方程式1 來(lái)計(jì)算每個(gè)幀圖像中的視差量。這里，方程式1中的"z(t)"代表幀t的幀圖像中的視差量 (其中，t是1以上的整數(shù)）。另外，方程式1中的"D(x，y，t)"代表由幀t的幀圖像中的坐 標(biāo)（x，y)表示的像素的深度。通過(guò)將幀圖像中的任意位置（例如，幀圖像的左下角位置或 幀圖像的左上角位置）作為原點(diǎn)來(lái)表示幀圖像中的坐標(biāo)。
[0038]

【權(quán)利要求】
1. 一種圖像處理裝置，其包括： 圖像處理單元，其基于與被處理圖像相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視 差調(diào)整以使與所述被處理圖像相對(duì)應(yīng)的視差變大，其中所述被處理圖像是被處理的移動(dòng)圖 像。
2. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述圖像處理單元被構(gòu)造成： 針對(duì)與所述被處理圖像中的每個(gè)幀相對(duì)應(yīng)的每個(gè)幀圖像，基于與各個(gè)所述幀圖像中的 視差相關(guān)的每個(gè)像素的深度，計(jì)算用于表示所述幀圖像中的視差的大小的視差量； 基于所述視差量的隨時(shí)間的變化量，執(zhí)行用于使每個(gè)所述幀圖像中的所述視差量變大 的調(diào)整；且 基于每個(gè)所述幀圖像中的所調(diào)整的所述視差量，調(diào)整各個(gè)所述幀圖像中的每個(gè)像素的 深度。
3. 根據(jù)權(quán)利要求2所述的圖像處理裝置，其中， 所述圖像處理單元被構(gòu)造成基于每個(gè)所述幀圖像中的所述視差量和超調(diào)函數(shù)來(lái)增加 每個(gè)所述幀圖像中的所述視差量，所述超調(diào)函數(shù)是將每個(gè)所述幀圖像中的所述視差量作為 輸入值的函數(shù)，所述超調(diào)函數(shù)保持前一幀中的所述視差量的變化量，并使每個(gè)所述幀圖像 中的所述視差量收斂于目標(biāo)值。
4. 根據(jù)權(quán)利要求3所述的圖像處理裝置，其中，所述圖像處理單元構(gòu)造為： 針對(duì)每個(gè)所述幀圖像，計(jì)算所述超調(diào)函數(shù)的輸出值與所述超調(diào)函數(shù)的輸入值之間的比 率，且 針對(duì)每個(gè)所述幀圖像，通過(guò)將所述幀圖像中的每個(gè)像素的深度乘以所計(jì)算的比率，來(lái) 調(diào)整各個(gè)所述幀圖像中的每個(gè)像素的深度。
5. 根據(jù)權(quán)利要求4所述的圖像處理裝置，其中， 當(dāng)所述超調(diào)函數(shù)的輸出值小于所述超調(diào)函數(shù)的輸入值時(shí)，所述圖像處理單元進(jìn)行操作 以選擇性地將所述超調(diào)函數(shù)的輸出值更新為所述超調(diào)函數(shù)的輸入值，且 所述圖像處理單元被構(gòu)造成針對(duì)每個(gè)所述幀圖像計(jì)算所述超調(diào)函數(shù)的已被選擇性更 新的輸出值與所述超調(diào)函數(shù)的輸入值之間的比率。
6. 根據(jù)權(quán)利要求2-5中任一項(xiàng)所述的圖像處理裝置，其中，每個(gè)所述幀圖像中的所述 視差量是各個(gè)所述幀圖像中的深度的動(dòng)態(tài)范圍。
7. 根據(jù)權(quán)利要求2-5中任一項(xiàng)所述的圖像處理裝置，其中，每個(gè)所述幀圖像中的所述 視差量是各個(gè)所述幀圖像中的深度的最大值。
8. 根據(jù)權(quán)利要求2-5中任一項(xiàng)所述的圖像處理裝置，其中，每個(gè)所述幀圖像中的所述 視差量是各個(gè)所述幀圖像中的深度的平均值。
9. 一種圖像處理方法，其包括： 基于與被處理圖像相對(duì)應(yīng)的視差的大小的隨時(shí)間的變化量，執(zhí)行視差調(diào)整以使與所述 被處理圖像相對(duì)應(yīng)的視差變大，其中所述被處理圖像是被處理的移動(dòng)圖像。
10. -種電子裝置，其包括前述權(quán)利要求1-8中任一項(xiàng)所述的圖像處理單元。
【文檔編號(hào)】G02B27/22GK104104935SQ201410131423
【公開日】2014年10月15日 申請(qǐng)日期:2014年4月2日 優(yōu)先權(quán)日:2013年4月11日
【發(fā)明者】土場(chǎng)健太郎, 小森谷陽(yáng)多 申請(qǐng)人:索尼公司