圖像處理裝置、攝像裝置、程序及圖像處理方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像處理裝置、攝像裝置、程序及圖像處理方法，尤其是涉及生成并顯示用于確認(rèn)被攝體像的對焦?fàn)顟B(tài)的圖像的圖像處理裝置、顯示用于確認(rèn)上述對焦?fàn)顟B(tài)的圖像和被攝體像的攝像裝置、由上述圖像處理裝置執(zhí)行的程序及生成并顯示用于確認(rèn)上述對焦?fàn)顟B(tài)的圖像的圖像處理方法。
【背景技術(shù)】
[0002]以往，數(shù)碼相機(jī)或帶相機(jī)的便攜電話等攝像裝置的用戶期望開發(fā)一種能夠在確認(rèn)被攝體像的對焦?fàn)顟B(tài)的同時進(jìn)行調(diào)焦的技術(shù)。為了滿足該期望，使用如下方法:在攝像裝置的顯示單元上放大顯示被攝體像中想要對焦的部位，從而容易確認(rèn)對焦?fàn)顟B(tài)。
[0003]然而，在使用了該方法的情況下，在確認(rèn)對焦?fàn)顟B(tài)時無法目視確認(rèn)被攝體像整體，因此難以在參照被攝體像整體的同時確認(rèn)對焦?fàn)顟B(tài)。
[0004]另一方面，在這些攝像裝置中，為了使手動調(diào)焦的操作容易進(jìn)行，一直以來使用將分裂圖像顯示在即時預(yù)覽圖像(實(shí)時取景圖像)內(nèi)的技術(shù)。另外，所謂分裂圖像是指將與預(yù)定區(qū)域?qū)?yīng)的左眼圖像的一部分和右眼圖像的一部分合成而成的圖像。在該分裂圖像中，根據(jù)對焦?fàn)顟B(tài)，在左眼圖像和右眼圖像之間產(chǎn)生相對于視差產(chǎn)生方向的偏差。利用該技術(shù)，用戶通過目視確認(rèn)分裂圖像中的左眼圖像和右眼圖像的偏差來確認(rèn)對焦?fàn)顟B(tài)。
[0005]作為利用該技術(shù)的攝像裝置，在日本特開2001-309210號公報中公開了一種攝像裝置，具備:攝影部，經(jīng)由光學(xué)系統(tǒng)獲取被攝體的圖像作為圖像信號；檢測部，檢測與光學(xué)系統(tǒng)中相對于被攝體的像面和攝像部的受光面之間的距離相當(dāng)?shù)钠盍?；顯示單元，基于由攝像部獲取的圖像信號將被攝體的圖像顯示于顯示畫面；及顯示變更單元，利用被攝體的圖像并根據(jù)偏差量變更作為顯示畫面的一部分的區(qū)域的顯示變更區(qū)域的顯示內(nèi)容。根據(jù)該攝像裝置，在進(jìn)行手動調(diào)焦時，能夠以與利用分裂圖像的調(diào)焦相同的感覺進(jìn)行調(diào)焦。
[0006]另外，在日本特開2009-147665號公報中公開了一種攝像裝置，具有:圖像獲取單元，對由來自攝像光學(xué)系統(tǒng)的光束中的、被光瞳分割單元分割的光束形成的第一被攝體像及第二被攝體像分別進(jìn)行光電轉(zhuǎn)換而生成第一圖像及第二圖像，并且對由未被光瞳分割單元分割的光束形成的第三被攝體像進(jìn)行光電轉(zhuǎn)換而生成第三圖像；顯示單元，顯示第三圖像；及分裂圖像生成單元，生成在第三圖像內(nèi)顯示的分裂圖像。該攝像裝置是通過分裂圖像生成單元利用第一圖像及第二圖像生成分裂圖像，并將從第三圖像提取出的顏色信息附加到分裂圖像的攝像裝置。根據(jù)該攝像裝置，能夠提高進(jìn)行手動調(diào)焦時的使用便利性。
[0007]另外，在日本特開2009-163220號公報中公開了一種攝像裝置，具有:圖像獲取單元，對由來自攝像光學(xué)系統(tǒng)的光束中的、被光瞳分割單元分割的光束形成的第一被攝體像及第二被攝體像分別進(jìn)行光電轉(zhuǎn)換而生成第一圖像及第二圖像；顯示單元，顯示圖像；及處理單元，在上述顯示單元顯示使上述第一圖像及第二圖像重疊而成的重疊圖像。根據(jù)該攝像裝置，能夠提高分裂圖像的目視確認(rèn)性。

【發(fā)明內(nèi)容】

[0008]發(fā)明要解決的課題
[0009]但是，在日本特開2001-309210號公報、日本特開2009-147665號公報及日本特開2009-163220號公報所公開的技術(shù)中，根據(jù)被攝體像，在用于顯示分裂圖像的預(yù)先規(guī)定的顯示區(qū)域內(nèi)僅顯示分裂圖像。在該情況下，會存在用戶無法準(zhǔn)確地判斷分裂圖像中的上述偏差的偏差量的情況。在該情況下，存在用戶無法高精度地進(jìn)行調(diào)焦的可能性。
[0010]本發(fā)明提供能夠高精度地進(jìn)行手動調(diào)焦的圖像處理裝置、攝像裝置、程序及圖像處理方法。
[0011]用于解決課題的方案
[0012]為了達(dá)到上述目的，本發(fā)明涉及的圖像處理裝置具備:生成單元，基于從具有第一像素組及第二像素組的攝像元件輸出的圖像信號生成第一顯示用圖像，且根據(jù)基于從上述第一像素組及第二像素組輸出的圖像信號的第一圖像及第二圖像生成用于對焦確認(rèn)的第二顯示用圖像，上述第一像素組及第二像素組對通過了攝像鏡頭中的第一區(qū)域及第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像；視差計(jì)算單元，算出表示上述第一圖像的各像素與上述第二圖像的對應(yīng)的各像素之間的偏差量的視差；顯示單元，顯示圖像；及顯示控制單元，對上述顯示單元進(jìn)行如下控制:使上述顯示單元顯示由上述生成單元生成的上述第一顯示用圖像，且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述生成單元生成的上述第二顯示用圖像，上述生成單元生成將第一分割圖像和第二分割圖像如下配置而得到的上述第二顯示用圖像，上述第一分割圖像是對上述第一圖像在預(yù)先規(guī)定的分割方向上進(jìn)行分割而得到的多個分割圖像的一部分，上述第二分割圖像是對上述第二圖像與上述第一圖像同樣地進(jìn)行分割而得到的多個分割圖像的除與上述第一分割圖像對應(yīng)的區(qū)域以外的圖像，將上述第一分割圖像和上述第二分割圖像向與上述分割方向交叉的交叉方向的相反方向錯開與上述視差相應(yīng)的量而配置。
[0013]根據(jù)本發(fā)明涉及的圖像處理裝置，由生成單元基于從具有第一像素組及第二像素組的攝像元件輸出的圖像信號生成第一顯示用圖像，且根據(jù)基于從上述第一像素組及第二像素組輸出的圖像信號的第一圖像及第二圖像生成用于對焦確認(rèn)的第二顯示用圖像，上述第一像素組及第二像素組對通過了攝像鏡頭中的第一區(qū)域及第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像。另外，由視差計(jì)算單元算出表示上述第一圖像的各像素與上述第二圖像的對應(yīng)的各像素之間的偏差量的視差。進(jìn)而，由顯示控制單元對顯示單元進(jìn)行如下控制:使顯示單元顯示由上述生成單元生成的上述第一顯示用圖像，且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述生成單元生成的上述第二顯示用圖像。
[0014]在此，在本發(fā)明中，由上述生成單元生成將第一分割圖像和第二分割圖像如下配置而得到的上述第二顯示用圖像，上述第一分割圖像是對上述第一圖像在預(yù)先規(guī)定的分割方向上進(jìn)行分割而得到的多個分割圖像的一部分，上述第二分割圖像是對上述第二圖像與上述第一圖像同樣地進(jìn)行分割而得到的多個分割圖像的除與上述第一分割圖像對應(yīng)的區(qū)域以外的圖像，將上述第一分割圖像和上述第二分割圖像向與上述分割方向交叉的交叉方向的相反方向錯開與上述視差相應(yīng)的量而配置。
[0015]這樣一來，本發(fā)明涉及的圖像處理裝置生成將第一圖像的一部分及第二圖像的一部分向相反的方向錯開配置而得到的第一顯示用圖像(與用于確認(rèn)上述對焦?fàn)顟B(tài)的圖像對應(yīng))。因此，根據(jù)本發(fā)明涉及的圖像處理裝置，能夠容易地目視確認(rèn)第一圖像及第二圖像的偏差，因此與未適用本發(fā)明的情況相比，能夠高精度地進(jìn)行手動調(diào)焦。
[0016]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元將上述第一分割圖像和上述第二分割圖像在上述分割方向上交替地配置來生成上述第一顯示用圖像。由此，能夠提高對第一顯示用圖像的目視確認(rèn)性。
[0017]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述視差計(jì)算單元算出包含上述第一分割圖像及上述第二分割圖像的邊界在內(nèi)的預(yù)先規(guī)定的區(qū)域中的上述視差。由此，能夠以與錯開位置對應(yīng)的偏差量將上述第一圖像及第二圖像錯開。
[0018]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元在上述第一圖像和上述第二圖像的至少一方提取相鄰像素間的像素值之差為預(yù)先規(guī)定的第一閾值以上且在同一方向上連續(xù)配置了預(yù)先規(guī)定的第二閾值以上的像素組，將提取出的像素組中各像素連續(xù)配置的方向的任一方向作為上述分割方向來生成上述第二顯示用圖像。由此，能夠更尚精度地進(jìn)彳丁手動調(diào)焦。
[0019]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元將由上述視差計(jì)算單元算出的上述視差乘以預(yù)先規(guī)定的大于I的系數(shù)而得到的值作為與上述視差相應(yīng)的量來生成上述第二顯示用圖像。由此，即使在第一圖像與第二圖像的視差的視差量小的情況下，也能夠容易地目視確認(rèn)偏差。
[0020]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元將由上述視差計(jì)算單元算出的上述視差乘以大于I的系數(shù)而得到的值作為與上述視差相應(yīng)的量來生成上述第二顯示用圖像，其中上述視差越大，則上述系數(shù)越大，并且上述視差越大，則上述系數(shù)變大的程度越小。由此，即使在第一圖像與第二圖像的視差的視差量小的情況下，也能夠更容易地目視確認(rèn)偏差。
[0021]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元在上述第一圖像和上述第二圖像的至少一方提取相鄰像素間的像素值之差大于預(yù)先規(guī)定的閾值的像素組，將預(yù)先規(guī)定的尺寸的區(qū)域即該區(qū)域內(nèi)所包含的上述像素組的面積的總和為最大的區(qū)域作為成為上述第二顯示用圖像的生成對象的區(qū)域來生成上述第二顯示用圖像。由此，能夠更尚精度地進(jìn)彳丁手動調(diào)焦。
[0022]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，還具備臉部區(qū)域提取單元，該臉部區(qū)域提取單元從上述第一圖像和上述第二圖像的至少一方提取與臉部對應(yīng)的臉部區(qū)域，上述生成單元將由上述臉部區(qū)域提取單元提取出的臉部區(qū)域作為成為上述第二顯示用圖像的生成對象的區(qū)域來生成上述第二顯示用圖像。由此，能夠利用一般不想要對焦的區(qū)域即臉部的區(qū)域進(jìn)行對焦。
[0023]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述生成單元通過將第三分割圖像和第四分割圖像向上述交叉方向的相反方向錯開與上述視差相應(yīng)的距離而配置來生成上述第二顯示用圖像，上述第三分割圖形是對基于從第三像素組輸出的圖像信號的第三圖像在上述分割方向上進(jìn)行分割而得到的多個分割圖像的一部分，上述第四分割圖像是該多個分割圖像中的除與上述第三分割圖像對應(yīng)的區(qū)域以外的圖像，上述第三像素組不對被攝體像進(jìn)行光瞳分割而成像并輸出表示上述第三圖像的上述圖像信號。由此，能夠使用未對被攝體像進(jìn)行光瞳分割而成像所得到的圖像進(jìn)行對焦。
[0024]另外，在本發(fā)明涉及的圖像處理裝置中，上述生成單元生成基于從第三像素組輸出的圖像信號的第三圖像作為上述第二顯示用圖像，上述第三像素組不對被攝體像進(jìn)行光瞳分割而成像并輸出表示上述第三圖像的上述圖像信號。由此，能夠顯示未對被攝體像進(jìn)行光瞳分割而成像所得到的圖像。
[0025]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，上述顯示控制單元進(jìn)行如下控制:在上述顯示單元進(jìn)一步顯示表示上述第二顯示用圖像的上述交叉方向的端部的圖像。由此，能夠更高精度地目視確認(rèn)第一圖像及第二圖像的偏差。
[0026]另外，在本發(fā)明涉及的圖像處理裝置中，也可以是，在上述顯示單元的顯示區(qū)域中的除顯示上述第二顯示用圖像的預(yù)先規(guī)定的第一顯示用區(qū)域以外的顯示區(qū)域即第二顯示用區(qū)域中，使上述第二顯示用圖像與該第一顯示用圖像重疊地顯示的情況下，上述顯示控制單元通過將上述第一分割圖像和上述第二分割圖像錯開配置，將上述第一顯示用區(qū)域中不存在與上述第二顯示用圖像對應(yīng)的像素的區(qū)域的像素的像素值作為上述第一顯示用圖像中與該區(qū)域?qū)?yīng)的像素的像素值來顯示上述第二顯示用圖像。由此，能夠提高第一顯示用圖像的美觀。
[0027]進(jìn)而，為了達(dá)到上述目的，本發(fā)明所記載的攝像裝置具備:本發(fā)明的圖像處理裝置、上述攝影鏡頭及經(jīng)由上述攝影鏡頭獲取被攝體像作為圖像信號的攝像元件。
[0028]因此，根據(jù)本發(fā)明涉及的攝像裝置，能夠與本發(fā)明涉及的圖像處理裝置同樣地發(fā)揮作用，因此與本發(fā)明涉及的圖像處理裝置同樣地，與未適用本發(fā)明的情況相比，能夠高精度地進(jìn)行手動調(diào)焦。
[0029]另一方面，為了達(dá)到上述目的，本發(fā)明涉及的程序用于使計(jì)算機(jī)作為如下單元發(fā)揮功能:生成單元，基于從具有第一像素組及第二像素組的攝像元件輸出的圖像信號生成第一顯示用圖像，且根據(jù)基于從上述第一像素組及第二像素組輸出的圖像信號的第一圖像及第二圖像生成用于對焦確認(rèn)的第二顯示用圖像，上述第一像素組及第二像素組對通過了攝像鏡頭中的第一區(qū)域及第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像；視差計(jì)算單元，算出表示上述第一圖像的各像素與上述第二圖像的對應(yīng)的各像素之間的偏差量的視差；及顯示控制單元，進(jìn)行如下控制:使顯示單元顯示由上述生成單元生成的上述第一顯示用圖像，且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述生成單元生成的上述第二顯示用圖像，上述生成單元生成將第一分割圖像和第二分割圖像如下配置而得到的上述第二顯示用圖像，上述第一分割圖像是對上述第一圖像在預(yù)先規(guī)定的分割方向上進(jìn)行分割而得到的多個分割圖像的一部分，上述第二分割圖像是對上述第二圖像與上述第一圖像同樣地進(jìn)行分割而得到的多個分割圖像的除與上述第一分割圖像對應(yīng)的區(qū)域以外的圖像，將上述第一分割圖像和上述第二分割圖像向與上述分割方向交叉的交叉方向的相反方向錯開與上述視差相應(yīng)的量而配置。
[0030]因此，根據(jù)本發(fā)明涉及的程序，能夠使計(jì)算機(jī)與本發(fā)明涉及的圖像處理裝置同樣地發(fā)揮作用，因此與本發(fā)明涉及的圖像處理裝置同樣地，與未適用本發(fā)明的情況相比，能夠尚精度地進(jìn)彳丁手動調(diào)焦。
[0031]進(jìn)而，為了達(dá)到上述目的，本發(fā)明涉及的圖像處理方法具有:生成步驟，基于從具有第一像素組及第二像素組的攝像元件輸出的圖像信號生成第一顯示用圖像，且根據(jù)基于從上述第一像素組及第二像素組輸出的圖像信號的第一圖像及第二圖像生成用于對焦確認(rèn)的第二顯示用圖像，上述第一像素組及第二像素組對通過了攝像鏡頭中的第一區(qū)域及第二區(qū)域的被攝體像進(jìn)行光瞳分割而分別成像；視差計(jì)算步驟，算出表示上述第一圖像的各像素與上述第二圖像的對應(yīng)的各像素之間的偏差量的視差；及顯示控制步驟，進(jìn)行如下控制:使顯示單元顯示由上述生成步驟生成的上述第一顯示用圖像，且在該第一顯示用圖像的顯示區(qū)域內(nèi)顯示由上述生成單元生成的上述第二顯示用圖像，在上述生成步驟中生成將第一分割圖像和第二分割圖像如下配置而得到的上述第二顯示用圖像，上述第一分割圖像是對上述第一圖像在預(yù)先規(guī)定的分割方向上進(jìn)行分割而得到的多個分割圖像的一部分，上述第二分割圖像是對上述第二圖像與上述第一圖像同樣地進(jìn)行分割而得到的多個分割圖像的除與上述第一分割圖像對應(yīng)的區(qū)域以外的圖像，將上述第一分割圖像和上述第二分割圖像向與上述分割方向交叉的交叉方向的相反方向錯開與上述視差相應(yīng)的量而配置。
[0032]因此，根據(jù)本發(fā)明涉及的圖像處理方法，能夠與本發(fā)明涉及的圖像處理裝置