圖像處理裝置、方法以及攝像裝置制造方法
【專利摘要】對I×J(I、J：2以上的整數(shù))像素的重復(fù)周期的馬賽克圖像，與I×J像素內(nèi)的像素位置建立關(guān)聯(lián)地將混色率存儲于存儲器部(26)，從存儲器部(26)讀出與混色校正的對象像素的I×J像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率A，基于混色率A和對象像素的色信號而除去對象像素所含的混色成分，并基于混色校正后的馬賽克圖像的各像素的色信號而算出白平衡增益。
【專利說明】圖像處理裝置、方法以及攝像裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像處理裝置及方法以及攝像裝置，尤其涉及對與單板的攝像元件上配置的濾色器排列對應(yīng)的馬賽克圖像的各像素間的混色等的影響進(jìn)行排除的技術(shù)。
【背景技術(shù)】
[0002]通常，在具有馬賽克狀的濾色器排列的攝像元件中，發(fā)生由來自相鄰的像素的光的漏入引起的混色。另外，在具有每預(yù)定的像素組共有放大器的元件構(gòu)造的攝像元件中，輸出特性會根據(jù)放大器與各像素的位置關(guān)系而產(chǎn)生差異。
[0003]在根據(jù)受到混色等的影響的RGB的色信號來算出白平衡(WB)校正用的WB增益的情況下，存在無法算出精度良好的WB增益的問題。
[0004]以往，作為從包含混色成分的色信號除去混色成分的技術(shù)，具有專利文獻(xiàn)I所記載的內(nèi)容。
[0005]專利文獻(xiàn)I記載的攝像裝置具有系數(shù)表，該系數(shù)表將多個像素沿行方向以及列方向排列而得到的像素排列中的每個像素位置和與從周邊像素向該像素混入的信號成分相關(guān)的校正系數(shù)建立對應(yīng)地存儲。并且，專利文獻(xiàn)I記載的攝像裝置設(shè)為，根據(jù)校正對象像素的位置從所述系數(shù)表讀出對應(yīng)的校正系數(shù)，并使用校正對象像素的周邊像素的信號和校正系數(shù)來對校正對象像素的信號進(jìn)行校正。
[0006]另外，公知有以簡便的方法對因傾斜入射到攝像元件的光而在攝像圖像產(chǎn)生的混色有效地進(jìn)行校正而進(jìn)行白平衡校正的技術(shù)(專利文獻(xiàn)2)。
[0007]專利文獻(xiàn)2記載的圖像處理裝置在預(yù)定的色度坐標(biāo)空間中，以黑體放射軸為基準(zhǔn)而設(shè)定白檢測區(qū)域，根據(jù)該白檢測區(qū)域所含的像素的每個色成分的積分值來推定環(huán)境光源。專利文獻(xiàn)2記載的圖像處理裝置的特征在于，特別是由于混色成分的量依賴于光圈的尺寸，因此根據(jù)光圈值(F值)對白檢測區(qū)域進(jìn)行切換。
[0008]另一方面，作為攝像元件的濾色器排列而公知的拜耳排列中，R(紅)像素在左右方向所相鄰的Gr (R行的綠)像素和B (藍(lán))在左右方向所相鄰的Gb (B行的綠)像素原本應(yīng)答應(yīng)該相等。然而，存在“Gr”和“Gb”中產(chǎn)生不均衡的課題。另外，存在在攝像區(qū)域的周邊部產(chǎn)生著色的課題。專利文獻(xiàn)3記載的彩色固體攝像裝置為了解決該課題，使在濾色器上以像素為單位設(shè)置的聚光用的微透鏡的尺寸(面積)以像素為單位發(fā)生變化。
[0009]專利文獻(xiàn)1:特開2010 - 130583號公報(bào)
[0010]專利文獻(xiàn)2:特開2011 - 234231號公報(bào)
[0011]專利文獻(xiàn)3:特開2009 - 88255號公報(bào)

【發(fā)明內(nèi)容】

[0012]發(fā)明要解決的課題
[0013] 專利文獻(xiàn)I記載的發(fā)明設(shè)置系數(shù)表，所述系數(shù)表將傳感器面內(nèi)的每個像素位置和與從周邊像素向該像素混入的信號成分相關(guān)的校正系數(shù)建立對應(yīng)而存儲。由此，能夠?qū)鞲衅髅鎯?nèi)的每個像素位置使用適當(dāng)?shù)男Ｕ禂?shù)。然而，這種情況下，存在校正系數(shù)的數(shù)據(jù)量變得龐大的問題。另外，在專利文獻(xiàn)I具有替代系數(shù)表而存儲關(guān)系式來降低數(shù)據(jù)量的記載。然而，在專利文獻(xiàn)I中存在如下問題:在校正系數(shù)的傳感器面內(nèi)的變化不適于特定的關(guān)系式的情況下，無法算出適當(dāng)?shù)男Ｕ禂?shù)。
[0014]專利文獻(xiàn)2記載的圖像處理裝置中，由于混色成分的量依賴于光圈的尺寸，因此與光圈值對應(yīng)而切換白檢測區(qū)域，并將與該白檢測區(qū)域?qū)?yīng)的像素的色信號按每色進(jìn)行加算平均而算出色平均值。然而，在專利文獻(xiàn)2中存在如下問題:沒有考慮并非是由光圈的尺寸所引起的混色成分(例如，對象像素的周邊像素的顏色產(chǎn)生的影響等)，白平衡校正的精度變得較低。
[0015]另外，專利文獻(xiàn)3記載的發(fā)明由于使以像素為單位設(shè)置在濾色器上的微透鏡的尺寸(面積)以像素為單位變化，因此微透鏡的制造較為困難。另外，專利文獻(xiàn)3記載的發(fā)明中，無法應(yīng)對每個攝像元件特性產(chǎn)生偏差的情況。
[0016]本發(fā)明鑒于這種情形而提出，目的在于提供圖像處理裝置及方法以及攝像裝置，即使是復(fù)雜的濾色器排列的馬賽克圖像，也能夠容易地將該馬賽克圖像的各像素間的混色等的影響排除，由此能夠良好地進(jìn)行白平衡校正。
[0017]用于解決課題的方法
[0018]為了達(dá)到所述目的，本發(fā)明的一方面所涉及的圖像處理裝置具備:圖像獲取單元，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J(1、J為2以上的整數(shù)且至少一方為3以上)像素的重復(fù)周期的像素構(gòu)造的攝像元件；存儲單元，將與IX J像素的各像素分別對應(yīng)的 混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲；混色校正單元，是從由圖像獲取單元取得的馬賽克圖像的各像素的色信號除去該色信號所含的來自周邊像素的混色成分的混色校正單元，從存儲單元讀出與任意的混色校正的對象像素的IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，基于讀出的混色率和對象像素的色信號除去對象像素所含的混色成分；計(jì)算單元，基于由混色校正單元進(jìn)行了混色校正的馬賽克圖像的各像素的色信號而算出每色的平均值；白平衡增益計(jì)算單元，基于由計(jì)算單元算出的每色的平均值而算出白平衡增益；及白平衡校正單元，基于由白平衡增益計(jì)算單元算出的白平衡增益，對馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
[0019]混色校正的對象像素受到來自相鄰的多個周邊像素的混色等的影響，其影響的程度因周邊像素的方位方向(例如上下左右方向)、周邊像素的顏色等而不同。在由包含具有IXJ像素的重復(fù)周期的像素構(gòu)造的攝像元件的攝像單元拍攝到的馬賽克圖像的情況下，相對于任意的對象像素的多個周邊像素的顏色等的組合(重復(fù)序列)的數(shù)目存在較多。由此，即使是相同的色的對象像素，這些對象像素的周邊像素的顏色等的組合也分別不同。其結(jié)果為，相同色的對象像素之間，輸出特性不同。
[0020]根據(jù)本發(fā)明的一方面，將與IXJ像素的各像素分別對應(yīng)的混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲于存儲單元。該情況下，優(yōu)選為以如下方式設(shè)定混色率:接受了相同的光的相同顏色的像素即使其周邊像素的顏色等的組合不同也能夠得到相同的輸出。并且設(shè)為，在進(jìn)行任意的混色校正的對象像素的混色校正的情況下，從存儲單元讀出與該對象像素的IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，并基于讀出的混色率和對象像素的色信號除去對象像素所含的混色成分?；谌绱诉M(jìn)行了混色校正的馬賽克圖像的各像素的色信號來算出白平衡增益。由此，能夠算出精度高的白平衡增益。另外，通過基于算出的白平衡增益對馬賽克圖像的各像素的色信號進(jìn)行白平衡校正，從而能夠?qū)崿F(xiàn)良好的白平衡校正。
[0021]本發(fā)明的另一方面所涉及的圖像處理裝置具備:圖像獲取單元，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IXJ(1、J為2以上的整數(shù)且至少一方為3以上)像素的重復(fù)周期的像素構(gòu)造的攝像元件；存儲單元，將與IXJ像素的各像素分別對應(yīng)的混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲；第一計(jì)算單元，算出由圖像獲取單元取得的馬賽克圖像的各像素的色信號的IXJ像素內(nèi)的每個像素位置的積算值；積算值校正單元，基于與IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率而對由第一計(jì)算單元算出的IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行校正；第二計(jì)算單元，按照每色對由積算值校正單元進(jìn)行了校正的IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行加算，算出每色的平均值；白平衡增益計(jì)算單元，基于由第二計(jì)算單元算出的每色的平均值而算出白平衡增益；及白平衡校正單元，基于由白平衡增益計(jì)算單元算出的白平衡增益，對馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
[0022]本發(fā)明的另一方面中，先算出馬賽克圖像的各像素的色信號的IXJ像素內(nèi)的每個像素位置的積算值，對各積算值基于分別對應(yīng)的混色率來進(jìn)行校正。接下來，對相同的顏色的進(jìn)行了校正的積算值進(jìn)行加算而算出每色的平均值。基于這些每色的平均值而算出白平衡增益。如此算出的白平衡增益能 夠成為與本發(fā)明的一方面的白平衡增益相同的值，使得能夠?qū)崿F(xiàn)良好的白平衡校正。
[0023]本發(fā)明的又一方面所涉及的圖像處理方法裝置中，馬賽克圖像包含由具有多個顏色的色像素的MXN(M< I, J)像素構(gòu)成的基本排列圖案的像素組，是該基本排列圖案的像素組在水平以及垂直方向上重復(fù)配置而得到的圖像。
[0024]本發(fā)明的又一方面所涉及的圖像處理裝置中，馬賽克圖像是從具有每預(yù)定的像素組共有放大器的元件構(gòu)造的攝像元件輸出的圖像，預(yù)定的像素組具有KXL(K ^ M, L ^ N,K、L是自然數(shù))像素的尺寸。
[0025]本發(fā)明的又一方面所涉及的圖像處理裝置中，優(yōu)選為，存儲單元對應(yīng)將馬賽克圖像的整個區(qū)域分割為多個分割區(qū)域時的每個分割區(qū)域存儲混色率。
[0026]本發(fā)明的又一方面所涉及的圖像處理方法包括:圖像獲取工序，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IXJ(1、J為2以上的整數(shù)且至少一方為3以上)像素的重復(fù)周期的像素構(gòu)造攝像元件；準(zhǔn)備存儲單元的工序，所述存儲單元將與IXJ像素的各像素分別對應(yīng)的混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲；混色校正工序，是從由圖像獲取單元取得的馬賽克圖像的各像素的色信號除去該色信號所含的來自周邊像素的混色成分的混色校正單元，從存儲單元讀出與任意的混色校正的對象像素的IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，基于讀出的混色率和對象像素的色信號除去對象像素所含的混色成分；計(jì)算工序，基于由混色校正工序進(jìn)行了混色校正的馬賽克圖像的各像素的色信號而算出每色的平均值；白平衡增益計(jì)算工序，基于由計(jì)算工序算出的每色的平均值，算出白平衡增益；及白平衡校正工序，基于由白平衡增益計(jì)算工序算出的白平衡增益，對馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
[0027]本發(fā)明的又一方面所涉及的圖像處理方法包括:圖像獲取工序，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J(1、J為2以上的整數(shù)且至少一方為3以上)像素的重復(fù)周期的像素構(gòu)造的攝像元件；準(zhǔn)備存儲單元的工序，所述存儲單元將與IXJ像素的各像素分別對應(yīng)的混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲；第一計(jì)算工序，算出由圖像獲取工序取得的馬賽克圖像的各像素的色信號的IX J像素內(nèi)的每個像素位置的積算值；積算值校正工序，基于與IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，對由第一計(jì)算工序算出的IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行校正；第二計(jì)算工序，按照每色對由積算值校正工序進(jìn)行了校正的IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行加算，算出每色的平均值；白平衡增益計(jì)算工序，基于由第二計(jì)算工序算出的每色的平均值而算出白平衡增益；及白平衡校正工序，基于由白平衡增益計(jì)算工序算出的白平衡增益，對馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
[0028]本發(fā)明的又一方面所涉及的攝像裝置具備:攝像單元，包含攝影光學(xué)系統(tǒng)和經(jīng)由該攝影光學(xué)系統(tǒng)使被拍攝體像成像的攝像元件；圖像獲取單元，取得從攝像單元輸出的馬賽克圖像；以及前述的圖像處理裝置。
[0029]本發(fā)明的又一方面所涉及的攝像裝置中，攝像元件在由排列于水平方向以及垂直方向的光電轉(zhuǎn)換元件構(gòu)成的多個像素上配置預(yù)定的濾色器排列的濾色器，所述濾色器排列包含第一濾光片和第二濾光片排列而成的預(yù)定的基本排列圖案，第一濾光片與一種顏色以上的第一色對應(yīng)，第二濾光片與用于獲得亮度信號的貢獻(xiàn)率比第一色低的兩種顏色以上的第二色對應(yīng)，該基本排列圖案在水平以及垂直方向上重復(fù)配置，基本排列圖案是與MXN(M≤I，N≤J)像素對應(yīng)的排列圖案。
[0030]本發(fā)明的又一方面所涉及的攝像裝置中，優(yōu)選為，第一濾光片在濾色器排列的水平、垂直、斜右上及斜右下方向的各行內(nèi)配置I個以上，與第二色的各色對應(yīng)的第二濾光片在基本排列圖案內(nèi)在 濾色器排列的水平及垂直方向的各行內(nèi)配置I個以上，與第一濾光片對應(yīng)的第一色的像素?cái)?shù)的比率比與第二濾光片對應(yīng)的第二色的各色的像素?cái)?shù)的比率大。
[0031]若將上述濾色器排列做成攝像元件，由于設(shè)為將與最有助于獲得亮度信號的第一色對應(yīng)的第一濾光片配置在濾色器排列的水平、垂直、斜右上及傾斜右下方向的各行內(nèi)，因此能夠提高高頻區(qū)域中的去馬賽克算法處理的再現(xiàn)精度。另外，即使對于與第一色以外的兩種顏色以上的第二色對應(yīng)的第二濾光片，由于也設(shè)為在基本排列圖案內(nèi)在濾色器排列的水平以及垂直方向的各行內(nèi)配置I個以上，因此能夠降低彩色莫爾條紋(偽色)的產(chǎn)生并實(shí)現(xiàn)高分辨率化。另外，濾色器排列中，將預(yù)定的基本排列圖案在水平方向以及垂直方向重復(fù)配置，因此進(jìn)行后段的去馬賽克算法處理時，能夠按照重復(fù)圖案而進(jìn)行處理。此外，也可以使與第一濾光片對應(yīng)的第一色的像素?cái)?shù)和與第二濾光片對應(yīng)的第二色的各色的像素?cái)?shù)的比率不同，特別是使最有助于獲得亮度信號的第一色的像素?cái)?shù)的比率比與第二濾光片對應(yīng)的第二色的各色的像素?cái)?shù)的比率大。由此，能夠抑制混疊現(xiàn)象，高頻再現(xiàn)性也良好。
[0032]本發(fā)明的又一方面所涉及的攝像裝置中，優(yōu)選為，基本排列圖案是與3 X 3像素對應(yīng)的正方排列圖案，在中心和4角配置有第一濾光片。
[0033]本發(fā)明的又一方面所涉及的攝像裝置中，優(yōu)選為，第一色是綠(G)色，第二色是紅(R)色以及藍(lán)⑶色，預(yù)定的基本排列圖案是與6X6像素對應(yīng)的正方排列圖案，濾光片排列將第一排列和第二排列交替地排列于水平方向以及垂直方向而構(gòu)成，第一排列與3X3像素對應(yīng)，在中心和4角配置有G濾光片，隔著中心的G濾光片上下配置有B濾光片，左右排列有R濾光片，第二排列與3 X 3像素對應(yīng)，在中心和4角配置有G濾光片，隔著中心的G濾光片上下配置有R濾光片，左右排列有B濾光片。
[0034]本發(fā)明的又一方面所涉及的攝像裝置中，優(yōu)選為，攝像元件具有每預(yù)定的像素組共有放大器的元件構(gòu)造，預(yù)定的像素組具有KX L (K SM，L^N, K、L是自然數(shù)像素)的尺寸。
[0035]本發(fā)明的又一方面所涉及的攝像裝置中，攝像元件的IXJ像素的重復(fù)周期的像素構(gòu)造是周期為MXN像素的基本排列圖案和KXL像素的預(yù)定的像素組的最小公倍數(shù)的像素構(gòu)造。
[0036]發(fā)明效果
[0037]根據(jù)本發(fā)明，設(shè)為將具有IXJ像素的周期性的馬賽克圖像的與IXJ像素的各像素分別對應(yīng)的混色率與IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲于存儲單元，基于根據(jù)所述混色率進(jìn)行了校正的馬賽克圖像的每色的平均值而算出白平衡增益，因此能夠算出精度高的白平衡增益，由此能夠進(jìn)行良好的白平衡校正。
【專利附圖】

【附圖說明】
[0038]圖1是表示本發(fā)明所涉及的攝像裝置的實(shí)施方式的框圖。
[0039]圖2是表示配置于攝像元件的馬賽克狀的新型的濾色器排列的圖。
[0040]圖3是關(guān)于將圖2所示的基本排列圖案四分為3X3像素的狀態(tài)而表示的圖。 [0041]圖4是表示圖1所示的圖像處理部的第一實(shí)施方式的內(nèi)部結(jié)構(gòu)的主要部分框圖。
[0042]圖5是表示基本排列圖案內(nèi)的36個各像素的位置的圖。
[0043]圖6是表示2 X 2的4像素共有一個放大器的攝像元件的一例的圖。
[0044]圖7是對表不混色率的校正表的一例進(jìn)行表不的圖表。
[0045]圖8是表示馬賽克圖像的8X8的分割區(qū)域的圖。
[0046]圖9是對圖4所示的混色校正部的內(nèi)部結(jié)構(gòu)的實(shí)施方式進(jìn)行表示的框圖。
[0047]圖10是表示本發(fā)明所涉及的圖像處理方法的實(shí)施方式的流程圖。
[0048]圖11是表示圖1所示的圖像處理部的第二實(shí)施方式的內(nèi)部結(jié)構(gòu)的主要部分框圖。
[0049]圖12是表示圖11所示的RGB積算部的內(nèi)部結(jié)構(gòu)的實(shí)施方式進(jìn)行表示的框圖。
[0050]圖13是表示具備R濾光片(紅濾光片)、Gl濾光片(第一綠濾光片)、G2濾光片(第二綠濾光片)以及B濾光片(藍(lán)濾光片)的攝像元件的分光靈敏度特性的曲線圖。
[0051]圖14是表示具備R濾光片、G濾光片、B濾光片以及W濾光片(透明濾光片)的攝像元件的分光靈敏度特性的曲線圖。
[0052]圖15是表示具備R濾光片、G濾光片、B濾光片以及E濾光片(翠綠濾光片)的攝像元件的分光靈敏度特性的曲線圖。
【具體實(shí)施方式】
[0053]以下，根據(jù)附圖對本發(fā)明所涉及的圖像處理裝置及方法以及攝像裝置的實(shí)施方式進(jìn)行詳細(xì)說明。
[0054]〔攝像裝置的實(shí)施方式〕
[0055]圖1是表示本發(fā)明所涉及的攝像裝置的實(shí)施方式的框圖。[0056]該攝像裝置10是將拍攝到的圖像記錄在內(nèi)部存儲器(存儲器部26)或外部的記錄介質(zhì)(未圖示)的數(shù)碼相機(jī)，裝置整體的動作由中央處理裝置(CPU) 12統(tǒng)一控制。
[0057]在攝像裝置10設(shè)有包含快門按鈕(快門開關(guān))、模式盤、重放按鈕，MENU/ΟΚ鍵、十字鍵、變焦按鈕、BACK鍵等的操作部14。來自該操作部14的信號被輸入到CPU12，CPU12基于輸入信號而對攝像裝置10的各電路進(jìn)行控制，例如，經(jīng)由設(shè)備控制部16對透鏡部18、快門20、作為圖像獲取單元而發(fā)揮功能的攝像元件22進(jìn)行控制，并且進(jìn)行攝影動作控制、圖像處理控制、圖像數(shù)據(jù)的記錄/重放控制、顯示部25的顯示控制等。
[0058]透鏡部18包含聚焦透鏡、變焦透鏡、光圈等，通過了透鏡部18及快門20的光束在攝像元件22的受光面成像。
[0059]攝像兀件22 是 CMOS (Complementary Metal-Oxide Semiconductor:互補(bǔ)金屬氧化物半導(dǎo)體)型、XY選址型、或CO) (Charge Coupled Device:荷稱合元件)型的彩色圖像傳感器。在攝像元件22的受光面，將多個受光元件(光電二極管)二維排列。在各光電二極管的受光面上成像的被拍攝體像被轉(zhuǎn)換為與其入射光量對應(yīng)的量的信號電壓(或電荷)。
[0060]<攝像元件的實(shí)施方式>
[0061]圖2是表示上述攝像元件22的實(shí)施方式的圖，特別是關(guān)于在攝像元件22的受光面上配置的新型的濾色器排列而表示。
[0062]該攝像元件22的濾色器排列包含由與MXN(6X6)像素對應(yīng)的正方排列圖案構(gòu)成的基本排列圖案P (粗 線框所示的圖案)。在攝像元件22的受光面上，該基本排列圖案P在水平方向以及垂直方向上重復(fù)配置。即，該濾色器排列中，將紅(R)、綠(G)、藍(lán)(B)的各色的濾光片(R濾光片、G濾光片、B濾光片)以預(yù)定的周期性而排列。如此，由于將R濾光片、G濾光片、B濾光片以預(yù)定的周期性而排列，因此進(jìn)行從攝像元件22讀出的RGB的RAW數(shù)據(jù)(馬賽克圖像)的圖像處理等時，能夠按照重復(fù)圖案而進(jìn)行處理。
[0063]圖2所示的濾色器排列中，與最有助于獲得亮度信號的顏色(該實(shí)施方式中為G的顏色)對應(yīng)的G濾光片在濾色器排列的水平、垂直、斜右上(NE)及斜左上(NW)方向的各行內(nèi)配置I以上。
[0064]NE表示斜右上方向，NW表示斜右下方向。例如，正方形的像素的排列的情況下，斜右上以及斜右下方向成為分別相對于水平方向?yàn)?5°的方向。若是長方形的像素的排列，則是長方形的對角線的方向，其角度能夠根據(jù)長邊/短邊的長度而變化。
[0065]與亮度系像素對應(yīng)的G濾光片在濾色器排列的水平、垂直、以及傾斜(NE，NW)方向的各行內(nèi)配置，因此能夠不依靠成為高頻的方向而提高高頻區(qū)域的去馬賽克算法處理的再現(xiàn)精度。
[0066]另外，圖2所示的濾色器排列中，與上述G的色以外的兩種顏色以上的其他色(該實(shí)施方式中為R、B的色)對應(yīng)的R濾光片、B濾光片分別在基本排列圖案的水平及垂直方向的各行內(nèi)配置一個以上。
[0067]R濾光片、B濾光片在濾色器排列的水平及垂直方向的各行內(nèi)配置，因此能夠降低偽色(彩色莫爾條紋)的發(fā)生。由此，能夠?qū)⒂糜诮档?抑制)偽色的發(fā)生的光學(xué)低通濾光片省略。另外，即使在適用光學(xué)低通濾光片的情況下也能夠適用旨在防止偽色發(fā)生的截止高頻成分的作用較弱的器件，能夠不損害分辨率。
[0068]此外，圖2所示的濾色器排列的基本排列圖案P中，其基本排列圖案中的與R、G、B濾光片對應(yīng)的R像素、G像素、B像素的像素?cái)?shù)分別為8像素、20像素、8像素。即，RGB像素的各像素?cái)?shù)的比率成為2:5:2，最有助于獲得亮度信號的G像素的像素?cái)?shù)的比率比其他色的R像素、B像素的各自的像素?cái)?shù)的比率大。
[0069]如上述那樣，G像素的像素?cái)?shù)和R、B像素的像素?cái)?shù)的比率不同，特別是設(shè)為，最有助于獲得亮度信號的G像素的像素?cái)?shù)的比率比R、B像素的像素?cái)?shù)的比率大。由此，能夠抑制去馬賽克算法處理時的混疊現(xiàn)象,并且也能夠使高頻再現(xiàn)性良好。
[0070]圖3示出將圖1所示的基本排列圖案P四分割為3X3像素后的狀態(tài)。
[0071]如圖3所示，基本排列圖案P也可以看作是:由實(shí)線的框圍成的3X3像素的A排列和由虛線的框圍成的3X3像素的B排列在水平、垂直方向上交替地排列而得到的排列。
[0072]A排列以及B排列中，G濾光片分別配置于4角和中央，并配置于兩對角線上。另外，A排列中，R濾光片隔著中央的G濾光片排列于水平方向上，B濾光片排列于垂直方向上。另一方面，B排列中，B濾光片隔著中央的G濾光片排列于水平方向上，R濾光片排列于垂直方向上。即，A排列和B排列中，R濾光片和B濾光片的位置關(guān)系逆轉(zhuǎn)，但是其他的配置是同樣。
[0073]另外，通過將A排列和B排列在水平、垂直方向交替地配置，A排列和B排列的4角的G濾光片成為與2X2像素對應(yīng)的正方排列的G濾光片。
[0074]蓄積于上述構(gòu)成的攝像元件22的信號電荷基于從設(shè)備控制部16施加的讀出信號而作為與信號電荷對應(yīng)的電壓信號而被讀出。從攝像元件22讀出的電壓信號，被施加到A/D轉(zhuǎn)換器24，在此被順次轉(zhuǎn)換為與濾色器排列對應(yīng)的數(shù)字的R、G、B信號，暫時保存在存儲器部26。
[0075]存儲器部26包括作為易失性存儲器的SDRAM (Synchronous DynamicRandom Access Memory:同步動態(tài)存取存儲器)、作為可改寫的非易失性存儲器的EEPROM(ElectricalIy Erasable Programmable Read-Only Memory:電可擦寫可編程只讀存儲器；存儲單元)等。SDRAM作為CPU12對程序的執(zhí)行時的工作區(qū)域，并且，作為將拍攝而取得的數(shù)字圖像信號暫時保持的存儲區(qū)域而使用。另一方面，在EEPROM存儲包含圖像處理程序的相機(jī)控制程序、攝像元件22的像素的缺陷信息、包含混色校正的圖像處理等中所使用的各種的參數(shù)、表等。
[0076]圖像處理部28對暫時存儲在存儲器部26的數(shù)字的圖像信號進(jìn)行混色校正、白平衡校正、伽馬校正處理、去馬賽克算法處理(去馬賽克處理)、RGB/YC轉(zhuǎn)換等預(yù)定的信號處理。這里，所謂去馬賽克算法處理，是根據(jù)與單板式的彩色攝像元件的濾色器排列對應(yīng)的馬賽克圖像對每個像素算出全部的顏色信息的處理，也稱作顏色插值處理或去馬賽克處理。例如，在由RGB這三色的濾色器構(gòu)成的攝像元件的情況下，是根據(jù)由RGB構(gòu)成的馬賽克圖像對每個像素算出RGB全部的顏色信息的處理。另外，后面將對本發(fā)明所涉及的圖像處理裝置(圖像處理部28)的詳細(xì)內(nèi)容進(jìn)行描述。
[0077]由圖像處理部28處理后的圖像數(shù)據(jù)在編碼器30中被編碼為圖像顯示用的數(shù)據(jù)，并經(jīng)由驅(qū)動器32輸出到設(shè)于相機(jī)背面的顯示部25。由此，被拍攝體像連續(xù)地顯示于顯示部25的顯示畫面上。
[0078]若存在操作部14的快門按鈕的第一階段的按下(半按)，則CPU12進(jìn)行控制以使AF(Automatic Focus)動作以及 AE (Automatic Exposure Adjustment)動作開始，并經(jīng)由設(shè)備控制部16使透鏡部18的聚焦透鏡沿光軸方向移動，聚焦透鏡到達(dá)對焦位置。
[0079]CPU12基于快門按鈕的半按時從A/D轉(zhuǎn)換器24輸出的圖像數(shù)據(jù)來算出被拍攝體的明亮度(攝影Ev值)，根據(jù)該攝影Ev值而決定曝光條件(F值、快門速度)。
[0080]若AE動作以及AF動作結(jié)束，且存在快門按鈕的第二階段的按下(全按)，則根據(jù)所述決定的曝光條件，對光圈、快門20以及攝像元件22的電荷蓄積時間進(jìn)行控制而進(jìn)行本拍攝。在本拍攝時，從攝像元件22讀出且由A/D轉(zhuǎn)換器24進(jìn)行了 A/D轉(zhuǎn)換的RGB的馬賽克圖像(與圖2所示的濾色器排列對應(yīng)的圖像)的圖像數(shù)據(jù)暫時地存儲在存儲器部26。
[0081]由圖像處理部28適當(dāng)讀出暫時存儲于存儲器部26的圖像數(shù)據(jù)，在此，進(jìn)行包括混色校正、白平衡校正、伽馬校正、去馬賽克算法處理、RGB/YC轉(zhuǎn)換等預(yù)定的信號處理。進(jìn)行了 RGB/YC轉(zhuǎn)換的圖像數(shù)據(jù)(YC數(shù)據(jù))按照預(yù)定的壓縮格式(例如，JPEGQointPhotographic Experts Group)方式)被壓縮。被壓縮的圖像數(shù)據(jù)以預(yù)定的圖像文件(例如，Exif (Exchangeable image file format)文件)形式被記錄于內(nèi)部存儲器、外部存儲器。
[0082][圖像處理]
[0083]<第一實(shí)施方式>
[0084]圖4是表示圖1所示的圖像處理部28的第一實(shí)施方式的內(nèi)部結(jié)構(gòu)的主要部分框圖。
[0085]如圖4所示，圖像處理部28具備:混色校正部(混色校正單元)100 ；白平衡(WB)校正部(白平衡校正單元)200 ;進(jìn)行伽馬校正、去馬賽克算法處理、RGB/YC轉(zhuǎn)換等的信號處理的信號處理部300;RGB積 算部(計(jì)算單元)400;以及白平衡(WB)增益計(jì)算部(白平衡增益計(jì)算單元)500。
[0086]如前述的那樣，在攝影時從攝像元件22輸出的濾色器排列的原樣的RAW數(shù)據(jù)(馬賽克圖像)暫時被存儲在存儲器部26。圖像處理部28從存儲器部26取得馬賽克圖像(RGB的色信號)。
[0087]所取得的RGB的色信號以點(diǎn)順序施加于混色校正部100?；焐Ｕ?00除去以點(diǎn)順序輸入的混色校正的對象像素的色信號所含的來自周邊像素的混色成分。另外，后面將對混色校正部100的詳細(xì)內(nèi)容進(jìn)行描述。
[0088]由混色校正部100除去了混色成分的馬賽克圖像的各像素的色信號被施加于WB校正部200，并且被施加于RGB積算部400。
[0089]RGB積算部400對應(yīng)將I畫面分割為8X8后的每個分割區(qū)域(參照圖8)對每個RGB的色信號進(jìn)行積算，并算出其積算平均值。由RGB積算部400按照每個分割區(qū)域所算出的每個RGB的積算平均值被施加于WB增益計(jì)算部500。
[0090]WB增益計(jì)算部500對應(yīng)每個分割區(qū)域算出由RGB的積算平均值的比(R/G、B/G)構(gòu)成的色信息。在將I畫面分割為8X8的64個分割區(qū)域的情況下，算出64個色信息(R/G、B/G)(計(jì)算工序)。
[0091]WB增益計(jì)算部500基于這些分割區(qū)域的每個分割區(qū)域的色信息(R/G，B/G)算出WB增益。具體來說，算出64個分割區(qū)域的每個分割區(qū)域的色信息的R/G、B/G軸坐標(biāo)的色空間上的分布的重心位置，根據(jù)該重心位置所表示的色信息來推定環(huán)境光的色溫。另外，也可以替代色溫，求出具有該重心位置所表示的色信息的光源種類例如藍(lán)天、背陰、晴天、熒光燈(晝光色、晝白色、白色、暖白色)、鎢燈、低鎢燈等來推定攝影時的光源種類(參照特開2007 - 53499號公報(bào))。另外，也可以根據(jù)推定出的光源種類來推定色溫。
[0092]在WB增益計(jì)算部500預(yù)先對應(yīng)于環(huán)境光的色溫或光源種而準(zhǔn)備用于進(jìn)行適當(dāng)?shù)陌灼胶庑Ｕ拿總€RGB或每個RB的WB增益。WB增益計(jì)算部500基于所述推定出的環(huán)境光的色溫或光源種類而讀出對應(yīng)的每個RGB或每個RB的WB增益，并將該讀出的WB增益輸出到WB校正部200 (白平衡增益計(jì)算工序)。
[0093]WB校正部200通過對從混色校正部100輸入的每個R、G、B的色信號分別乘以從WB增益計(jì)算部500輸入的每種色的WB增益來進(jìn)行白平衡校正(白平衡校正工序)。
[0094]從WB校正部200輸出的R、G、B的色信號被施加于信號處理部300，在此，進(jìn)行:伽馬校正、對與攝像元件22的濾色器排列相伴的R、G、B的色信號的空間上的偏差進(jìn)行插值而將R、G、B的色信號轉(zhuǎn)換為去馬賽克型的去馬賽克算法處理、將進(jìn)行了去馬賽克算法處理的R、G、B的色信號轉(zhuǎn)換為亮度信號Y、色差信號Cr、Cb的RGB/YC轉(zhuǎn)換等的信號處理。并且，信號處理部300將進(jìn)行了信號處理的亮度信號Y、色差信號Cr、Cb輸出。
[0095]從圖像處理部28輸 出的亮度數(shù)據(jù)Y以及色差數(shù)據(jù)Cr、Cb被壓縮處理后，記錄在內(nèi)部存儲器、外部存儲器。
[0096]〈混色校正〉
[0097]圖5是表示圖2所示的與6X6像素對應(yīng)的基本排列圖案的圖，該基本排列圖案與36個像素組對應(yīng)。
[0098]如圖5所示，將基本排列圖案內(nèi)的36個各像素的位置作為⑴~(36)。另外，基本排列圖案內(nèi)的左上角的G像素的位置用(I)表示，右下角的G像素的位置用(36)表示。
[0099]基本排列圖案內(nèi)的位置(I)~(18)的18個像素與圖3所示的A排列和B排列的像素對應(yīng)，位置(19)~位置(36)的18個像素與圖3所示的B排列和A排列對應(yīng)。
[0100]現(xiàn)在，若將位置(16)的G像素作為混色校正的對象像素，則與該對象像素相鄰的上下左右的周邊像素(上像素、下像素、左像素、右像素)的顏色分別為B、G、G及R。并且，3X3像素的A排列的9像素以及B排列的9像素(位置(I)~(18)的18個像素)中，即使在將其中任一個像素作為對象像素的情況下，與該對象像素的上下左右相鄰的4個像素的色的組合也將不同。
[0101]來自周邊像素的混色對對象像素的影響，因該周邊像素的方位方向(上下左右)、以及周邊像素的顏色(RGB)而不同。
[0102]對象像素的四個周邊像素的顏色也能夠采取RGB的3色的任一色，因此四個周邊像素的色的組合(重復(fù)序列)存在34 = 81種。另外，該實(shí)施方式的濾色器排列的情況下，四個周邊像素的組合有與A排列以及B排列的18像素對應(yīng)的18種。
[0103]若基本排列圖案的像素尺寸變大，3色的RGB的像素的排列的自由度升高，則相鄰的周邊像素的顏色配置的組合增加。另外，在除了 RGB這3色以外還存在翠綠、黃色的像素的情況下，顏色配置的組合能夠進(jìn)一步增加。
[0104]另一方面，該實(shí)施方式的攝像元件22是CMOS型的攝像元件，如圖6所示在CMOS的基底埋入像素共有放大器A，KXL(2X 2)像素共有一個放大器A。由于該攝像元件22的元件構(gòu)造，輸出電平根據(jù)像素相對于放大器A的位置I~4(相對于放大器A左上、右上、左下、右下的位置)而產(chǎn)生差異。
[0105]在圖5中，虛線所圍成的2X2像素表示共有一個放大器A的4像素。[0106]在圖5中，位置⑶的G像素和位置(29)的G像素分別是3X3像素的A排列(參照圖3)的中心的G像素，這些像素的上下左右的周邊像素的顏色為B、B、R、R，成為相同的顏色的組合，但是像素相對于放大器A的位置不同。即，位置(8)的G像素、以及位置(29)的G像素的相對于放大器A的像素的位置如圖6所示分別與4和I對應(yīng)。
[0107]因此，位置(8)的G像素和位置(29)的G像素即使周邊像素的顏色的組合相同，輸出電平也能夠產(chǎn)生差異。
[0108]現(xiàn)在，基本排列圖案為MXN像素(MXN像素內(nèi)的顏色的配置為非對稱的情況下的MXN像素)的情況下，MXN個全部的像素的周邊像素的顏色的組合成為不同的組合。另外，共有放大器的像素組為KXL(K ^ M, L ^ N)像素的情況下，KXL個像素分別相對于放大器的像素的位置不同，輸出電平產(chǎn)生差。
[0109]因此，基本排列圖案內(nèi)的MXN像素的各像素的位置和共有放大器的像素組的KXL像素內(nèi)的像素的位置的組合存在MXN像素和KXL像素的最小公倍數(shù)的數(shù)量。
[0110]本例的圖3所示的6X6像素的基本排列圖案中，6 X 6像素內(nèi)的顏色的配置成為對稱(Α排列和B排列相互交錯地配置)。由此，4個周邊像素的顏色的組合不同的最小的排列圖案的像素尺寸為3X6像素。
[0111]另一方面，本例的圖6所示的共有一個放大器A的像素組是2X2像素。并且，3X6像素和2X2像素的最小公倍數(shù)為36( = 6X6)。
[0112]即，圖5所示的基本排列圖案內(nèi)的36個像素即使在以基本排列圖案內(nèi)的任一位置的像素為對象像素的情 況下，該對象像素的4個周邊像素的顏色的組合和共有放大器A的像素組內(nèi)的位置中的至少一方變得不同。
[0113]圖7是表示存儲在存儲器部26中的混色率的校正表。在該校正表存儲有與基本排列圖案內(nèi)的像素的位置⑴~(36)對應(yīng)的36個混色率(校正系數(shù))A1~Α36。
[0114]這些混色率A1~A36，例如在均勻的白色光(例如日光D50)入射到攝像元件22的各像素的情況下，設(shè)定成以使相同的顏色的像素(本例的情況下，為8個R像素、20個G像素，8個B像素)的輸出電平一致的方式，更優(yōu)選為使36個所有像素的輸出電平一致的方式進(jìn)行校正的系數(shù)。
[0115]關(guān)于校正表向存儲器部26的保存，優(yōu)選為預(yù)先在產(chǎn)品發(fā)貨前的檢查時求算上述混色率A1~A36,并按產(chǎn)品類別進(jìn)行保存(準(zhǔn)備工序)。
[0116]另外，在馬賽克圖像的中央部和周邊部，被拍攝體光向攝像元件22的各像素的入射角不同，因此混色率不同。因此，如圖8所示，將馬賽克圖像的整個區(qū)域例如分割為8X8的分割區(qū)域，對應(yīng)每個分割區(qū)域?qū)D7所示的校正表存儲在存儲器部26。
[0117]圖9是表示圖4所示的混色校正部100的內(nèi)部結(jié)構(gòu)的實(shí)施方式的框圖。
[0118]該混色校正部100具備乘法器110、對象像素信息獲取部112和混色率設(shè)定部114。
[0119]圖9中，經(jīng)由攝像元件22而取得的馬賽克圖像(RGB的色信號)以點(diǎn)順序施加于乘法器110。
[0120]另一方面，在對象像素信息獲取部112施加有表示施加于乘法器110的混色校正的對象像素的、馬賽克圖像內(nèi)的對象像素的位置(x，y)的信息。對象像素信息獲取部112基于表示對象像素的位置U，y)的信息，取得表示該對象像素的基本排列圖案內(nèi)的位置(圖5所示的位置(I)~(36)中的任一個位置)的位置信息和表示該對象像素所屬的分割區(qū)域(參照圖8)的分割區(qū)域信息。將由對象像素信息獲取部112所取得的對象像素的基本排列圖案內(nèi)的位置信息和分割區(qū)域信息輸出到混色率設(shè)定部114。
[0121]混色率設(shè)定部114基于從對象像素信息獲取部112輸入的基本排列圖案內(nèi)的位置信息和分割區(qū)域信息，從存儲器部26讀出對應(yīng)的混色率A，并將該混色率A施加于乘法器110的其他的輸入。即，混色率設(shè)定部114基于分割區(qū)域信息選擇與對象像素所屬的分割區(qū)域相對應(yīng)的校正表，從所選擇的校正表基于基本排列圖案內(nèi)的位置信息讀出如圖7所示與基本排列圖案內(nèi)的位置⑴~(36)建立關(guān)聯(lián)地存儲的混色率A(混色率A1-A36中的任一混色率)。
[0122]乘法器110將所輸入的混色校正的對象像素的色信號和混色率A相乘，將乘積值作為除去了混色等的影響后的色信號，輸出到前述的圖4所示的WB校正部200以及RGB積算部400。
[0123]<圖像處理方法>
[0124]圖10是表示本發(fā)明所涉及的圖像處理方法的實(shí)施方式的流程圖。
[0125]圖10中，混色校正部100首先在混色校正開始前將混色校正的對象像素的位置(X，y)設(shè)定為初始值(0，0)(步驟S10)。
[0126]接下來，取得對象像素(X，y)的色信號(像素值)和該對象像素(X，y)的基本排列圖案內(nèi)的位置信息和分割區(qū)域信息(步驟S12，圖像獲取工序)。
[0127]混色率設(shè)定部114 基于所述取得的位置信息以及分割區(qū)域信息，從存儲器部26讀出對應(yīng)的混色率A (步驟S14)。
[0128]接下來，將步驟S12中取得的對象像素(X，y)的像素值和步驟S14中讀出的混色率A相乘，將該乘積值作為除去了混色等的影響后的像素值而取得(步驟S16，混色校正工序)。
[0129]接下來，判別全部的對象像素的混色校正是否結(jié)束(步驟S18)，在沒有結(jié)束的情況下(“否”的情況下)，轉(zhuǎn)移到步驟S20。
[0130]在步驟S20中，使對象像素的位置(X，y)移動I像素。另外，在對象像素的位置(x，y)到達(dá)水平方向的左端的情況下，使對象像素的位置(x，y)返回水平方向的右端，并且在垂直方向上移動I像素而轉(zhuǎn)移到步驟S12。并且，重復(fù)執(zhí)行從上述步驟S12到步驟S18的處理。
[0131]另一方面，在步驟S18中，若判別為全部的對象像素的混色校正結(jié)束了( “是”的情況下)，結(jié)束本混色校正的處理。
[0132]<第二實(shí)施方式>
[0133]圖11是表示圖1所示的圖像處理部28的第二實(shí)施方式的內(nèi)部結(jié)構(gòu)的主要部分框圖。
[0134]如圖11所示，圖像處理部28具備白平衡(WB)校正部200、信號處理部300、RGB積算部400’及WB增益計(jì)算部500。另外，圖11所示的第二實(shí)施方式的圖像處理部28與圖4所示的第一實(shí)施方式的圖像處理部28相比較不同點(diǎn)在于，沒有設(shè)置混色校正部100和RGB積算部400’的結(jié)構(gòu)不同。
[0135]因此，以下中，僅對RGB積算部400’進(jìn)行詳述，其他構(gòu)成的說明省略。[0136]RGB積算部400’對應(yīng)將I畫面分割為8X8的分割區(qū)域(參照圖8)的每個分割區(qū)域，對每個RGB的色信號進(jìn)行積算，并算出其積算平均值，這一點(diǎn)與圖4所示的RGB積算部400共通，但是其積算平均值的算出過程中，在進(jìn)行除去混色等的影響的處理方面是不同的。
[0137]圖12是表示圖11所示的RGB積算部400’的內(nèi)部結(jié)構(gòu)的實(shí)施方式的框圖。
[0138]該RGB積算部400’具備第一開關(guān)部410、第一計(jì)算單元(第一~第三十六積算部420-1~420-36)、積算值校正單元(乘法器430-1~430-36)、第二開關(guān)部440、第二計(jì)算單元(R積算部450、G積算部452、B積算部454)、對象像素信息獲取部460以及混色率設(shè)定部470。
[0139]圖12中，經(jīng)由攝像元件22而取得的馬賽克圖像(RGB的色信號)被以點(diǎn)順序施加于第一開關(guān)部410 (圖像獲取工序)。另外，在該實(shí)施方式中，圖8所示的64個分割區(qū)域的每個分割區(qū)域，以點(diǎn)順序施加馬賽克圖像。
[0140]另一方面，對象像素信息獲取部460施加有表示施加于第一開關(guān)部410的混色校正的對象像素的、馬賽克圖像內(nèi)的對象像素的位置(x，y)的信息。對象像素信息獲取部460基于表示對象像素的位置(X，y)的信息，取得表示該對象像素的基本排列圖案內(nèi)的位置(圖5所示的位置(I)~(36)中的任一位置)的位置信息和表示該對象像素所屬的分割區(qū)域(參照圖8)的分割區(qū)域信息。由對象像素信息獲取部460所取得的對象像素的基本排列圖案內(nèi)的位置信息被輸出到第一開關(guān)部410，分割區(qū)域信息被輸出到混色率設(shè)定部470。
[0141]第一開關(guān)部410基于從對象像素信息獲取部460輸入的基本排列圖案內(nèi)的位置信息，將以點(diǎn)順序施加的積算對象的色信號切換(分配)地輸出到第一~第三十六積算部420-1~420-36中的任一個積算部。例如，積算對象的色信號是與圖5所示的基本排列圖案內(nèi)的位置(I)對應(yīng)的信號的情況下，輸出到第一積算部420-1，同樣地，是與基本排列圖案內(nèi)的位置(36)對應(yīng)的信號的情況下，輸出到第三十六積算部420-36。
[0142]第一~第三十六積算部420-1~420-36對如上述那樣輸入的色信號分別進(jìn)行積算，若一個分割區(qū)域的色信號的積算結(jié)束，則將各自的積算值輸出到乘法器430-1~430-36(第一計(jì)算工序)。其后，第一~第三十六積算部420-1~420-36將積算值復(fù)位為0，而進(jìn)行下一分割區(qū)域的色信號的積算。
[0143]混色率設(shè)定部470從對象像素信息獲取部460輸入表示現(xiàn)在正在由第一~第三十六積算部420-1~420-36進(jìn)行積算的色信號的分割區(qū)域的分割區(qū)域信息，基于該分割區(qū)域信息從存儲器部26選擇與分割區(qū)域?qū)?yīng)的校正表(參照圖7)，將所選擇的校正表中登記的混色率A1~A36分別施加于乘法器430-1~430-36的其他的輸入。
[0144]乘法器430-1~430-36將分別輸入的積算值和混色率A相乘，并將它們的相乘結(jié)果作為除去了混色等的影響后的積算值而輸出到第二開關(guān)部440 (積算值校正工序)。
[0145]第二開關(guān)部440將所輸入的36個乘積值分為RGB的每色，將R的乘積值輸出到R積算部450，同樣地將G的乘積值輸出到G積算部452，將B的乘積值輸出到B積算部454。
[0146]R積算部450、G積算部452以及B積算部454分別對從第二開關(guān)部440施加的乘積值進(jìn)行積算，并且將積算所得到的值除以所有像素?cái)?shù)而求取平均值(第二計(jì)算工序)。如此求得的每個RGB的積算平均值被輸出到后段的WB增益計(jì)算部500 (圖11)。
[0147]如上述那樣，RGB積算部400’使用與分割區(qū)域?qū)?yīng)的校正表，按照每個分割區(qū)域算出除去了混色等的影響后的RGB的積算平均值。由此，WB增益計(jì)算部500能夠算出將混色等的影響排除后的適當(dāng)?shù)腤B增益。
[0148][其他]
[0149]本發(fā)明不限于圖2所示的濾色器排列的馬賽克圖像，能夠適用于各種的濾色器排列的馬賽克圖像。本發(fā)明例如也能夠適用于僅有圖3所示的A排列或B排列的馬賽克圖像。適用本發(fā)明的基本排列圖案的尺寸NXM優(yōu)選為是5X5以上，更優(yōu)選為是10X10以下。
[0150]若基本排列圖案的像素尺寸以平方的方式變大，3色的RGB的像素的排列的自由度上升，則相鄰的周邊像素的顏色配置的組合增加，不同的混色率增加，因此本發(fā)明是有效的。5X5的話為25像素，因此能夠充分得到本發(fā)明的效果。另一方面，若考慮去馬賽克算法處理、動態(tài)圖像攝影時的間拔處理等的圖像處理的容易度，則N、M最好是10以下。
[0151]另外，即使對于從未埋入有像素共有放大器的攝像元件取得的馬賽克圖像也能夠適用本發(fā)明。此外，在馬賽克圖像的中央部和周邊部混色等的影響較少的情況下，也可以不是每個分割區(qū)域具有混色率的校正表。
[0152]<濾色器排列的追加的實(shí)施方式>
[0153]另外，在上述的各實(shí)施方式中，對于作為第一色采用綠(G)、作為第二色采用紅(R)以及藍(lán)⑶的例子進(jìn)行了說明，但是濾色器中可使用的顏色并不限于這些色。在上述各實(shí)施方式中，能夠使用與滿足以下條件的顏色對應(yīng)的濾色器。
[0154]<第一濾光片 (第一色)的條件>
[0155]例如，上述各實(shí)施方式中，也可以替代G濾光片或者替代G濾光片的一部分，使用滿足下述條件(I)到條件(4)的任一條件的濾光片。
[0156]〔條件(I)〕
[0157]條件(I)是用于獲得亮度信號的貢獻(xiàn)率為50%以上。該貢獻(xiàn)率50%是為了對上述各實(shí)施方式所涉及的第一色(G色等)和第二色(R、B色等)進(jìn)行區(qū)別而確定的值，是以用于獲得亮度數(shù)據(jù)的貢獻(xiàn)率與R色、B色等相比相對地變高的顏色包含在“第一色”中的方式而確定的值。
[0158]例如，G色用于獲得亮度(Y)信號(亮度數(shù)據(jù))的貢獻(xiàn)率比R色、B色高。即，與G色相比，R色以及B色的貢獻(xiàn)率低。若具體地進(jìn)行說明，則上述的圖像處理部28對應(yīng)每個像素根據(jù)具有RGB全部的顏色信息的RGB像素信號按照下述式(I)來生成亮度信號(Y信號)。下述式(I)是通常用于彩色攝像元件22中的Y信號的生成的式子。在該式(I)中向G色對亮度信號的貢獻(xiàn)率成為60%，G色與R色(貢獻(xiàn)率30% )、B色(貢獻(xiàn)率10% )相比貢獻(xiàn)率變高。因此，G色成為3原色中對亮度信號貢獻(xiàn)最大的顏色。
[0159]Y = 0.3R+0.6G+0.1B......式(I)
[0160]G色的貢獻(xiàn)率如上述式(I)那樣成為60%，從而滿足條件(I)。另外，對于G色以外的顏色的貢獻(xiàn)率也能夠通過實(shí)驗(yàn)、模擬而取得。因此，對于G色以外具有貢獻(xiàn)率為50%以上的顏色的濾光片，上述各實(shí)施方式中也能夠作為第一濾光片而使用。另外，貢獻(xiàn)率為不足50 %的顏色在上述各實(shí)施方式中成為第二色(R色、B色等)，具有該色的濾光片在上述各實(shí)施方式中成為第二濾光片。
[0161]〔條件⑵〕
[0162]條件⑵是濾光片的透過率的峰值處于波長480nm以上570nm以下的范圍內(nèi)。濾光片的透過率使用例如由分光光度計(jì)所測定的值。該波長范圍是為了對上述各實(shí)施方式所涉及的第一色(G色等)和第二色(R、B色等)進(jìn)行區(qū)別而確定的范圍，是以不包含前述的貢獻(xiàn)率相對較低的R色、B色等的峰值，而包含貢獻(xiàn)率相對較高的G色等的峰值而確定的范圍。因此，能夠?qū)⑼高^率的峰值處于波長480nm以上570nm以下的范圍內(nèi)的濾光片作為第一濾光片而使用。另外，透過率的峰值為波長480nm以上570nm以下的范圍外的濾光片成為上述各實(shí)施方式所涉及的第二濾光片(R濾光片、B濾光片)。
[0163]〔條件⑶〕
[0164]條件(3)是波長500nm以上560nm以下的范圍內(nèi)的透過率比第二濾光片(R濾光片、B濾光片)的透過率高。該條件(3)中，濾光片的透過率例如也使用由分光光度計(jì)所測定的值。該條件(3)的波長范圍也是為了對上述各實(shí)施方式所涉及的第一色(G色等)和第二色(R、B色等)進(jìn)行區(qū)別而確定的范圍，是具有與R色、B色等相比前述的貢獻(xiàn)率相對較高的顏色的濾光片的透過率高于RB濾光片等的透過率的范圍。因此，能夠?qū)⑼高^率在波長500nm以上560nm以下的范圍內(nèi)相對較高的濾光片作為第一濾光片而使用，并能夠?qū)⑼高^率相對較低的濾光片作為第二濾光片而使用。
[0165]〔條件⑷〕
[0166]條件(4)是將包含3原色中對亮度信號貢獻(xiàn)最大的顏色(例如RGB中的G色)和與該3原色不同的顏色在內(nèi)的2色以上的濾光片作為第一濾光片而使用。該情況下，與第一濾光片的各色以外的顏色對應(yīng)的濾光片成為第二濾光片。
[0167]<多個種類的第一濾光片(G濾光片)>
[0168] 因此，作為第一濾光片的G色的G濾光片不限于一種，例如也可以使用多個種類的G濾光片作為第一濾光片。即，上述的各實(shí)施方式所涉及的濾色器(基本排列圖案)的G濾光片也可以適當(dāng)置換為第一 G濾光片Gl或第二 G濾光片G2。第一 G濾光片Gl透過第一波長帶的G光，第二 G濾光片G2透過與第一 G濾光片Gl相關(guān)度高的第二波長帶的G光(參照圖13)。
[0169]作為第一 G濾光片G1，能夠使用現(xiàn)存的G濾光片(例如第一實(shí)施方式的G濾光片G)。另外，作為第二 G濾光片G2能夠使用與第一 G濾光片Gl相關(guān)度高的濾光片。該情況下，優(yōu)選為，配置有第二 G濾光片G2的受光元件的分光靈敏度曲線的峰值例如處于波長500nm到535nm的范圍(配置有現(xiàn)存的G濾光片的受光元件的分光靈敏度曲線的峰值的附近)。另外，決定4色(R、GU G2、B)的濾色器的方法例如能夠使用特開2003 — 284084號記載的方法。
[0170]如此將由彩色攝像元件取得的圖像的顏色設(shè)為4種，增加取得的顏色信息，從而與僅取得3種顏色(RGB)的情況相比較，能夠更加正確地表現(xiàn)顏色。即，能夠?qū)⒀劬吹贸霾煌脑佻F(xiàn)為不同顏色，將眼睛看得出相同的再現(xiàn)為相同的顏色(提高“顏色的判別性”)。
[0171]另外，第一以及第二 G濾光片Gl、G2的透過率與第一實(shí)施方式的G濾光片G的透過率基本上相同，因此用于獲得亮度信號的貢獻(xiàn)率比50 %高。因此，第一以及第二 G濾光片Gl、G2滿足前述的條件(I)。
[0172]另外，在表示濾色器排列(受光元件)的分光靈敏度特性的圖13中，各G濾光片G1、G2的透過率的峰值(各G像素的靈敏度的峰值)處于波長480nm以上570nm以下的范圍內(nèi)。各G濾光片Gl、G2的透過率在波長500nm以上560nm以下的范圍內(nèi)，比RB濾光片R、B的透過率高。由此，各G濾光片Gl、G2也滿足前述的條件(2)、(3)。
[0173]另外，各G濾光片Gl、G2的配置、個數(shù)也可以適當(dāng)?shù)剡M(jìn)行變更。另外，也可以將G濾光片G的種類增加為3種以上。
[0174]<透明濾光片(W濾光片)>
[0175]在上述的實(shí)施方式中，主要示出了由與RGB色對應(yīng)的彩色濾光片構(gòu)成的濾色器，但是也可以使這些色濾光片的一部分為透明濾光片W(白色像素)。特別是，優(yōu)選為替代第一濾光片(G濾光片G)的一部分而配置透明濾光片W。通過如此將G像素的一部置換為白色像素，即使將像素尺寸微細(xì)化也能夠抑制顏色再現(xiàn)性的劣化。
[0176]透明濾光片W是透明色(第一色)的濾光片。透明濾光片W能夠透過與可見光的波長帶對應(yīng)的光，是例如RGB的各色的光的透過率為50%以上的濾光片。透明濾光片W的透過率也比G濾光片G高，因此用于獲得亮度信號的貢獻(xiàn)率也比G色(60%)高，滿足前述的條件(I)。
[0177]在表示濾色器排列(受光元件)的分光靈敏度特性的圖14中，透明濾光片W的透過率的峰值(白色像素的靈敏度的峰值)處于波長480nm以上570nm以下的范圍內(nèi)。另外，透明濾光片W的透過率在波長500nm以上560nm以下的范圍內(nèi)，比RB濾光片R、B的透過率高。由此，透明濾光片W也滿足前述的條件(2)、(3)。另外，對于G濾光片G也與透明濾光片W同樣滿足前述的條件⑴~⑶。
[0178]如此，由于透明濾光片W滿足前述的條件(I)~(3)，因此在上述各實(shí)施方式中能夠作為第一濾光片而使用。另外，在濾色器排列中，由于將與RGB的3原色中對亮度信號貢獻(xiàn)最大的G色對應(yīng)的G濾光 片G的一部分置換為透明濾光片W，因此也滿足前述的條件(4)。
[0179]<翠綠濾光片(E濾光片)>
[0180]在上述的實(shí)施方式中，主要示出了由與RGB色對應(yīng)的彩色濾光片構(gòu)成的濾色器，但是也可以使這些彩色濾光片的一部分為其他的彩色濾光片，例如也可以采用與翠綠(E)色對應(yīng)的濾光片E (翠綠像素)。特別是，優(yōu)選為替代第一濾光片(G濾光片G)的一部分而配置翠綠濾光片(E濾光片)。如此通過使用由E濾光片置換了 G濾光片G的一部分的4色的濾色器排列，能夠提高亮度的高頻成分的再現(xiàn)，降低鋸齒，并且能夠提高分辨率感。
[0181]在表示濾色器排列(受光元件)的分光靈敏度特性的圖13中，翠綠濾光片E的透過率的峰值(E像素的靈敏度的峰值)處于波長480nm以上570nm以下的范圍內(nèi)。另外，翠綠濾光片E的透過率在波長500nm以上560nm以下的范圍內(nèi)比RB濾光片R、B的透過率高。由此，翠綠濾光片E滿足前述的條件(2)、(3)。另外，在濾色器排列中，將與RGB的3原色中對亮度信號貢獻(xiàn)最大的G色對應(yīng)的G濾光片G的一部分置換為翠綠濾光片E，因此也滿足前述的條件⑷。
[0182]另外，在圖13所示的分光特性中，翠綠濾光片E在比G濾光片G靠短波長側(cè)具有峰值，但在比G濾光片G靠長波長側(cè)具有峰值(看上去稍接近黃色的顏色)的情況也存在。如此，作為翠綠濾光片E，能夠選擇滿足上述的各條件的結(jié)構(gòu)，例如，也能夠選擇滿足條件(I)那樣的翠綠濾光片E。
[0183]<其他的顏色種類>
[0184]在上述的各實(shí)施方式中，對由原色RGB的濾色器構(gòu)成的濾色器排列進(jìn)行了說明，但是也能夠?qū)⒈景l(fā)明適用于例如作為原色RGB的補(bǔ)色的C (青色)、M(品紅)、Y (黃)加上G后的4色的補(bǔ)色系的濾色器的濾色器排列。該情況下也將滿足上述條件(I)~(4)的任一條件的濾色器作為上述各實(shí)施方式所涉及的第一濾光片，將其他濾色器作為第二濾光片。
[0185]<蜂窩配置>
[0186]上述各實(shí)施方式的各濾色器排列包含各色的濾色器沿水平方向(H)以及垂直方向(V) 二維排列而成的基本排列圖案，并且將該基本排列圖案沿水平方向(H)以及垂直方向(V)重復(fù)配置而成，但是本發(fā)明不限于此。
[0187]例如，也可以使用將上述的各實(shí)施方式的基本排列圖案繞光軸旋轉(zhuǎn)45°后的所謂蜂窩排列狀的基本排列圖案，由將基本排列圖案沿傾斜方向(NE，NW)重復(fù)配置而成的排列圖案構(gòu)成濾色器。
[0188]另外，本發(fā)明不限于上述的實(shí)施方式，在不脫離本發(fā)明的精神的范圍內(nèi)能夠進(jìn)行各種的變形，這是不言而喻的。
[0189]附圖標(biāo)記說明:
[0190]10…攝像裝置，12…中央處理裝置(CPU)，14…操作部，18…透鏡部，22…攝像元件，26...存儲器部，28...圖像處理部，100...混色校正部，110...乘法器，112...對象像素信息獲取部，114…混色率設(shè)定部，200…白平衡校正部，400、400’…RGB積算部，410…第一開關(guān)部,420-1~420-36…第一~第三十六積算部,430-1~430-36…乘法器,440…第二開關(guān)部，450…R積算部，452. ..G積算部，454...B積算部，460…對象像素信息獲取部，470…混色率設(shè)定部，500...白平衡增益計(jì)算部。
【權(quán)利要求】
1.一種圖像處理裝置，具備: 圖像獲取單元，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J像素的重復(fù)周期的像素構(gòu)造的攝像元件，其中，1、J為2以上的整數(shù)且至少一方為3以上； 存儲單元，將與所述IXJ像素的各像素分別對應(yīng)的混色率與所述IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲； 混色校正單元，是從由所述圖像獲取單元取得的馬賽克圖像的各像素的色信號除去該色信號所含的來自周邊像素的混色成分的混色校正單元，從所述存儲單元讀出與任意的混色校正的對象像素的所述IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，基于讀出的所述混色率和所述對象像素的色信號除去所述對象像素所含的混色成分； 計(jì)算單元，基于由所述混色校正單元進(jìn)行了混色校正的所述馬賽克圖像的各像素的色信號而算出每色的平均值； 白平衡增益計(jì)算單元，基于由所述計(jì)算單元算出的每色的平均值而算出白平衡增益；及 白平衡校正單元，基于由所述白平衡增益計(jì)算單元算出的白平衡增益，對所述馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
2.一種圖像處理裝置，具備: 圖像獲取單元，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J像素的重復(fù)周期的像素構(gòu)造的攝像元件，其中，1、J為2以上的整數(shù)且至少一方為3以上；存儲單元，將與所述IX J像素的各像素分別對應(yīng)的混色率與所述IX J像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲； 第一計(jì)算單元，算出由所述圖像獲取單元取得的馬賽克圖像的各像素的色信號的所述IXJ像素內(nèi)的每個像素位置的積算值； 積算值校正單元，基于與所述IX J像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率而對由所述第一計(jì)算單元算出的所述IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行校正； 第二計(jì)算單元，按照每色對由所述積算值校正單元進(jìn)行了校正的所述IX J像素內(nèi)的每個像素位置的積算值進(jìn)行加算，算出每色的平均值； 白平衡增益計(jì)算單元，基于由所述第二計(jì)算單元算出的每色的平均值而算出白平衡增益;及 白平衡校正單元，基于由所述白平衡增益計(jì)算單元算出的白平衡增益，對所述馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
3.根據(jù)權(quán)利要求1或2所述的圖像處理裝置，其中， 所述馬賽克圖像包含由具有多個顏色的色像素的MXN像素構(gòu)成的基本排列圖案的像素組，是該基本排列圖案的像素組在水平及垂直方向上重復(fù)配置而得到的圖像，其中，MS I，N< J。
4.根據(jù)權(quán)利要求1~3中任一項(xiàng)所述的圖像處理裝置，其中， 所述馬賽克圖像是從具有每預(yù)定的像素組共有放大器的元件構(gòu)造的攝像元件輸出的圖像， 所述預(yù)定的像素組具有KXL像素的尺寸，其中，K ^ M, L ^ N, K、L是自然數(shù)。
5.根據(jù)權(quán)利要求1~4中任一項(xiàng)所述的圖像處理裝置，其中，所述存儲單元對應(yīng)將所述馬賽克圖像的整個區(qū)域分割為多個分割區(qū)域時的每個分割區(qū)域存儲所述混色率。
6.—種圖像處理方法,包括: 圖像獲取工序，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J像素的重復(fù)周期的像素構(gòu)造攝像元件，其中，1、J為2以上的整數(shù)且至少一方為3以上；準(zhǔn)備存儲單元的工序，所述存儲單元將與所述IX J像素的各像素分別對應(yīng)的混色率與所述IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲； 混色校正工序，是從由所述圖像獲取單元取得的馬賽克圖像的各像素的色信號除去該色信號所含的來自周邊像素的混色成分的混色校正單元，從所述存儲單元讀出與任意的混色校正的對象像素的所述IXJ像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，基于讀出的所述混色率和所述對象像素的色信號除去所述對象像素所含的混色成分； 計(jì)算工序，基于由所述混色校正工序進(jìn)行了混色校正的所述馬賽克圖像的各像素的色信號而算出每色的平均值； 白平衡增益計(jì)算工序，基于由所述計(jì)算工序算出的每色的平均值，算出白平衡增益；及白平衡校正工序，基于由所述白平衡增益計(jì)算工序算出的白平衡增益，對所述馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
7.一種圖像處理方法，包括: 圖像獲取工序，取得由攝像單元所拍攝的馬賽克圖像，所述攝像單元包含具有IX J像素的重復(fù)周期的像素構(gòu)造 的攝像元件，其中，1、J為2以上的整數(shù)且至少一方為3以上；準(zhǔn)備存儲單元的工序，所述存儲單元將與所述IX J像素的各像素分別對應(yīng)的混色率與所述IXJ像素內(nèi)的像素位置建立關(guān)聯(lián)地存儲； 第一計(jì)算工序，算出由所述圖像獲取工序取得的馬賽克圖像的各像素的色信號的所述IXJ像素內(nèi)的每個像素位置的積算值； 積算值校正工序，基于與所述IX J像素內(nèi)的像素位置建立了關(guān)聯(lián)的混色率，對由所述第一計(jì)算工序算出的所述IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行校正； 第二計(jì)算工序，對應(yīng)每色對由所述積算值校正工序進(jìn)行了校正的所述IXJ像素內(nèi)的每個像素位置的積算值進(jìn)行加算，算出每色的平均值； 白平衡增益計(jì)算工序，基于由所述第二計(jì)算工序算出的每色的平均值而算出白平衡增益;及 白平衡校正工序，基于由所述白平衡增益計(jì)算工序算出的白平衡增益，對所述馬賽克圖像的各像素的色信號進(jìn)行白平衡校正。
8.一種攝像裝置，具備: 攝像單元，包含攝影光學(xué)系統(tǒng)和經(jīng)由該攝影光學(xué)系統(tǒng)使被拍攝體像成像的攝像元件； 所述圖像獲取單元，取得從所述攝像單元輸出的馬賽克圖像；及 權(quán)利要求1~5中任一項(xiàng)所述的圖像處理裝置。
9.根據(jù)權(quán)利要求8所述的攝像裝置，其中， 所述攝像元件在由排列于水平方向以及垂直方向的光電轉(zhuǎn)換元件構(gòu)成的多個像素上配置預(yù)定的濾色器排列的濾色器， 所述濾色器排列包含第一濾光片和第二濾光片排列而成的預(yù)定的基本排列圖案，所述第一濾光片與一種顏色以上的第一色對應(yīng)，所述第二濾光片與用于獲得亮度信號的貢獻(xiàn)率比所述第一色低的兩種顏色以上的第二色對應(yīng)，該基本排列圖案在水平以及垂直方向上重復(fù)配置， 所述基本排列圖案是與MXN像素對應(yīng)的排列圖案，其中，M≤Ι,Ν≤ J0
10.根據(jù)權(quán)利要求9所述的攝像裝置，其中， 所述第一濾光片在所述濾色器排列的水平、垂直、斜右上及斜右下方向的各行內(nèi)配置I個以上， 與所述第二色的各色對應(yīng)的所述第二濾光片在所述基本排列圖案內(nèi)在所述濾色器排列的水平及垂直方向的各行內(nèi)配置I個以上， 與所述第一濾光片對應(yīng)的第一色的像素?cái)?shù)的比率比與所述第二濾光片對應(yīng)的第二色的各色的像素?cái)?shù)的比率大。
11.根據(jù)權(quán)利要求9所述的攝像裝置，其中， 所述基本排列圖案是與3 X 3像素對應(yīng)的正方排列圖案，在中心和4角配置有所述第一濾光片。
12.根據(jù)權(quán)利要求9所述的攝像裝置，其中， 所述第一色是綠(G)色，所述第二色是紅(R)色以及藍(lán)(B)色， 所述預(yù)定的基本排列圖案是與6X6像素對應(yīng)的正方排列圖案， 所述濾光片排列將第一排列和第二排列交替地排列于水平方向以及垂直方向而構(gòu)成，所述第一排列與3X3像素對應(yīng)，在中心和4角配置有G濾光片，隔著中心的G濾光片上下配置有B濾光片，左右排列有R濾光片，所述第二排列與3X3像素對應(yīng)，在中心和4角配置有G濾光片，隔著中心的G濾光片上下配直有R濾光片，左右排列有B濾光片。
13.根據(jù)權(quán)利要求8~12中任一項(xiàng)所述的攝像裝置，其中， 所述攝像元件具有每預(yù)定的像素組共有放大器的元件構(gòu)造， 所述預(yù)定的像素組具有KXL像素的尺寸，其中，K≤M，L≤N，K、L是自然數(shù)。
14.根據(jù)權(quán)利要求13所述的攝像裝置，其中， 所述攝像元件的所述IX J像素的重復(fù)周期的像素構(gòu)造是周期為所述MXN像素的基本排列圖案和所述KXL像素的預(yù)定的像素組的最小公倍數(shù)的像素構(gòu)造。
【文檔編號】H04N9/07GK104025577SQ201280064987
【公開日】2014年9月3日 申請日期:2012年12月27日 優(yōu)先權(quán)日:2011年12月28日
【發(fā)明者】林健吉, 入江公祐, 倉橋秀和, 田中誠二 申請人:富士膠片株式會社