專(zhuān)利名稱(chēng)：能夠快速且容易地進(jìn)行校正處理的圖像處理設(shè)備和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及能夠?qū)Πㄓ晒虘B(tài)攝像裝置的制造所引起的缺陷像素的圖像數(shù)據(jù)進(jìn)行校正的圖像處理設(shè)備和圖像處理方法。
背景技術(shù)：
由于固態(tài)攝像裝置的制造工藝，該攝像裝置有時(shí)包括不能對(duì)入射光作出適當(dāng)反應(yīng)的缺陷元件。難以制造出完全不存在這種缺陷元件的固態(tài)攝像裝置。為了克服使用固態(tài)攝像裝置的傳統(tǒng)設(shè)備的該問(wèn)題，已提出如下單元，其中，該單元用于使用一維或二維濾波器對(duì)從固態(tài)攝像裝置的缺陷元件輸出的缺陷像素的數(shù)據(jù)(缺陷像素?cái)?shù)據(jù))進(jìn)行校正(例如，參見(jiàn)日本特開(kāi)2006-3M908)。被配置為使用濾波器校正缺陷像素?cái)?shù)據(jù)的該單元使用從缺陷像素周?chē)?、具有關(guān)于與缺陷像素?cái)?shù)據(jù)的顏色相同的顏色的信息的正常像素(參考像素)所獲得的像素?cái)?shù)據(jù)來(lái)進(jìn)行校正。然而，在使用濾波器進(jìn)行校正的單元中，出現(xiàn)以下問(wèn)題當(dāng)要對(duì)整個(gè)圖像數(shù)據(jù)進(jìn)行校正時(shí)，如果缺陷像素位于該圖像數(shù)據(jù)的端部，則應(yīng)當(dāng)圍繞該缺陷像素的參考像素中的一部分丟失，從而使得無(wú)法校正該缺陷像素。為了解決該問(wèn)題，已提出如下單元當(dāng)濾波用的一些參考像素丟失時(shí)，將位于端部的數(shù)據(jù)外插至丟失的參考像素應(yīng)當(dāng)存在的位置，由此生成偽參考像素，以使得能夠使用濾波器(例如，參見(jiàn)日本特開(kāi)2006-094160)。然而，在濾波用的一些參考像素丟失時(shí)所使用的傳統(tǒng)校正單元中，需要通過(guò)復(fù)制圖像數(shù)據(jù)的端部處的有效像素?cái)?shù)據(jù)來(lái)生成偽參考像素，從而補(bǔ)償丟失的參考像素。必須通過(guò)停止圖像數(shù)據(jù)的輸入來(lái)進(jìn)行復(fù)制有效像素?cái)?shù)據(jù)以生成針對(duì)丟失的參考像素的偽參考像素的操作。這使圖像處理設(shè)備的吞吐量下降。此外，該校正單元需要用于停止圖像數(shù)據(jù)輸入的流程控制和與該流程控制相關(guān)聯(lián)的控制電路，因此電路變得復(fù)雜。

發(fā)明內(nèi)容
本發(fā)明提供以下的圖像處理設(shè)備和圖像處理方法能夠使用與校正對(duì)象像素周?chē)挠行⒖枷袼赜嘘P(guān)的數(shù)據(jù)迅速和容易地通過(guò)濾波進(jìn)行校正處理。在本發(fā)明的第一方面中，提供一種圖像處理設(shè)備，包括獲取單元，用于取入包括有效區(qū)域數(shù)據(jù)和用于對(duì)所述有效區(qū)域數(shù)據(jù)的像素的值進(jìn)行校正的無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)，其中，所述有效區(qū)域數(shù)據(jù)是從攝像裝置的預(yù)設(shè)范圍內(nèi)的像素輸出元件讀出的，所述無(wú)效區(qū)域數(shù)據(jù)是從所述攝像裝置的所述預(yù)設(shè)范圍外的像素輸出元件讀出的，所述攝像裝置包括缺陷像素輸出元件；信號(hào)生成單元，用于將第一信號(hào)和第二信號(hào)疊加，由此生成表示缺陷判定像素的位置的缺陷像素判斷信號(hào)，其中，所述第一信號(hào)表示所述攝像裝置的所述缺陷像素輸出元件的位置，所述第二信號(hào)表示在所述攝像裝置的所述預(yù)設(shè)范圍外的各個(gè)像素的位置；以及校正單元，用于當(dāng)基于所述缺陷像素判斷信號(hào)將所述圖像數(shù)據(jù)中的對(duì)象像素判斷為所述缺陷判定像素時(shí)，使用與位于所述對(duì)象像素周?chē)南袼刂械娜缦孪袼叵嚓P(guān)聯(lián)的圖像數(shù)據(jù)的值對(duì)所述圖像數(shù)據(jù)中的所述對(duì)象像素的值進(jìn)行校正該像素均是基于所述缺陷像素判斷信號(hào)未被判斷為所述缺陷判定像素的像素。在本發(fā)明的第二方面中，提供一種圖像處理方法，用于處理從包括缺陷像素輸出元件的攝像裝置所輸出的圖像，所述圖像處理方法包括以下步驟取入包括有效區(qū)域數(shù)據(jù)和用于對(duì)所述有效區(qū)域數(shù)據(jù)的像素的值進(jìn)行校正的無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)，其中，所述有效區(qū)域數(shù)據(jù)是從所述攝像裝置的預(yù)設(shè)范圍內(nèi)的像素輸出元件讀出的，所述無(wú)效區(qū)域數(shù)據(jù)是從所述攝像裝置的所述預(yù)設(shè)范圍外的像素輸出元件讀出的；將第一信號(hào)和第二信號(hào)疊力口，由此生成表示缺陷判定像素的位置的缺陷像素判斷信號(hào)，其中，所述第一信號(hào)表示所述攝像裝置的所述缺陷像素輸出元件的位置，所述第二信號(hào)表示在所述攝像裝置的所述預(yù)設(shè)范圍外的各個(gè)像素的位置；以及當(dāng)基于所述缺陷像素判斷信號(hào)將所述圖像數(shù)據(jù)中的對(duì)象像素判斷為所述缺陷判定像素時(shí)，使用與位于所述對(duì)象像素周?chē)南袼刂械娜缦孪袼叵嚓P(guān)聯(lián)的圖像數(shù)據(jù)的值對(duì)所述圖像數(shù)據(jù)中的所述對(duì)象像素的值進(jìn)行校正該像素均是基于所述缺陷像素判斷信號(hào)未被判斷為所述缺陷判定像素的像素。根據(jù)本發(fā)明，可以使用與校正對(duì)象像素周?chē)挠行⒖枷袼赜嘘P(guān)的數(shù)據(jù)迅速和容易地通過(guò)濾波對(duì)缺陷像素進(jìn)行校正。通過(guò)以下參考附圖對(duì)典型實(shí)施例的說(shuō)明，本發(fā)明的其它特征和方面將變得明顯。


圖1是根據(jù)本發(fā)明第一實(shí)施例的攝像設(shè)備的主要部分的示意框圖。圖2是根據(jù)第一實(shí)施例的攝像設(shè)備所執(zhí)行的拍攝處理的流程圖。圖3AJB和3C是用于說(shuō)明無(wú)效區(qū)域數(shù)據(jù)和周?chē)鷧⒖紖^(qū)域的概念圖。圖4是根據(jù)第一實(shí)施例的攝像設(shè)備的缺陷像素校正電路的框圖。圖5A、5B和5C是用于說(shuō)明缺陷判定像素的概念圖。圖6是根據(jù)第一實(shí)施例的攝像設(shè)備的缺陷像素校正部的框圖。圖7的(a) (η)是用于說(shuō)明由根據(jù)第一實(shí)施例的攝像設(shè)備的校正方法確定部所確定的缺陷像素的位置圖案的示意圖。圖8是用于說(shuō)明來(lái)自根據(jù)本發(fā)明第二實(shí)施例的攝像設(shè)備的數(shù)字信號(hào)處理器內(nèi)的各個(gè)塊的輸出的概念圖，其中，這些輸出各自用傳感器映射來(lái)表示。圖9是根據(jù)第二實(shí)施例的攝像設(shè)備所使用的示出傳感器映射上的二維濾波器的位置的傳感器映射。圖10是根據(jù)第二實(shí)施例的攝像設(shè)備所使用的示出另一類(lèi)型的二維濾波器的位置的傳感器映射。
具體實(shí)施例方式以下將參考示出本發(fā)明實(shí)施例的附圖來(lái)詳細(xì)說(shuō)明本發(fā)明。首先，將說(shuō)明根據(jù)本發(fā)明第一實(shí)施例的圖像處理設(shè)備。注意，將省略對(duì)該圖像處理設(shè)備中與本發(fā)明不直接相關(guān)的組成元件和部分的例示和說(shuō)明。圖1是攝像設(shè)備的框圖。附圖標(biāo)記100表示該攝像設(shè)備的主單元。攝像設(shè)備100 具有對(duì)在從攝像裝置102輸出的二維圖像數(shù)據(jù)中所生成的缺陷像素進(jìn)行適當(dāng)校正、從而輸出良好圖像的功能。如圖1所示，攝像設(shè)備100使已穿過(guò)光學(xué)鏡頭101的光在攝像裝置102上形成圖像。在攝像設(shè)備100中，數(shù)字信號(hào)處理器114的攝像數(shù)據(jù)輸入接口 111將用于驅(qū)動(dòng)攝像裝置102的同步信號(hào)輸出至?xí)r序發(fā)生器(TG) 105。時(shí)序發(fā)生器105驅(qū)動(dòng)攝像裝置102以將在攝像裝置102上形成的二維圖像輸出至模擬處理電路103。模擬處理電路103對(duì)該二維圖像進(jìn)行包括非線性放大處理的處理并將處理后的圖像輸出至模數(shù)轉(zhuǎn)換器104。模數(shù)轉(zhuǎn)換器104將來(lái)自模擬處理電路103的模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào)，然后將該數(shù)字信號(hào)輸出至數(shù)字信號(hào)處理器114的攝像數(shù)據(jù)輸入接口 111。數(shù)字信號(hào)處理器114從DRAM(存儲(chǔ)部)109讀出缺陷像素?cái)?shù)據(jù)，并對(duì)數(shù)字信號(hào)進(jìn)行缺陷像素校正處理、同步處理和降噪處理。然后，數(shù)字信號(hào)處理器114將處理后的數(shù)字信號(hào)轉(zhuǎn)換成例如通過(guò)JPEG壓縮后的文件。將轉(zhuǎn)換得到的數(shù)字信號(hào)輸出至操作顯示部106或可移除介質(zhì)107。此外，攝像設(shè)備100設(shè)置有CPU 108，其中，CPU 108不僅進(jìn)行各種計(jì)算操作還控制設(shè)備的整體操作。ROM 110連接至CPU 108。ROM 110存儲(chǔ)CPU 108要預(yù)取的數(shù)據(jù)，并在啟動(dòng)攝像設(shè)備100時(shí)將該數(shù)據(jù)輸出至CPU 108。此外，ROM 110還存儲(chǔ)關(guān)于與攝像裝置102未示出的像素輸出元件中有缺陷的像素輸出元件相對(duì)應(yīng)的缺陷像素的數(shù)據(jù)，并將該數(shù)據(jù)(缺陷像素?cái)?shù)據(jù))經(jīng)由CPU 108輸出至DRAM(存儲(chǔ)部)109。攝像設(shè)備100所使用的攝像裝置102由二維圖像傳感器構(gòu)成。攝像裝置102包括 感光部，其中，用于在畫(huà)面上形成圖像的像素輸出元件以二維方式排列，即以與畫(huà)面的水平方向和垂直方向相關(guān)聯(lián)的方式排列；以及輸出放大器，用于將各個(gè)像素輸出元件所生成的電荷轉(zhuǎn)換成電信號(hào)并將該電信號(hào)作為模擬電信號(hào)輸出。攝像裝置102的各個(gè)像素輸出元件設(shè)置有原色濾波器，并且例如，將這些像素輸出元件分類(lèi)成用于分別傳送紅色(R)像素的像素輸出元件、用于分別傳送綠色(G)像素的像素輸出元件以及用于分別傳送藍(lán)色(B)像素的像素輸出元件。在本實(shí)施例中，假定對(duì)于原色濾波器，采用拜耳陣列。在攝像裝置102中，存在具有在制造工藝期間發(fā)生的結(jié)構(gòu)缺陷的像素輸出元件。這里使用的術(shù)語(yǔ)“缺陷像素輸出元件”是指不會(huì)像正常像素輸出元件那樣對(duì)入射光作出反應(yīng)的像素輸出元件、或者在不存在任何入射光的情況下生成異常大量的暗電流的像素輸出元件。此外，術(shù)語(yǔ)“缺陷像素”表示這種缺陷像素輸出元件所輸出的像素。存儲(chǔ)在ROM 110中的、用于指定要從各個(gè)缺陷像素輸出元件輸出的缺陷像素的位置的缺陷像素?cái)?shù)據(jù)是從攝像裝置102的制造商供給的?？蛇x地，在攝像裝置102的制造工藝期間判別這些缺陷像素，并且準(zhǔn)備作為指定這些缺陷像素的位置的數(shù)據(jù)的缺陷像素?cái)?shù)據(jù)。將從攝像裝置102輸出的模擬電信號(hào)輸入至模擬處理電路103。模擬處理電路103 包括用于去除由傳輸線路等所引起的噪聲的未示出的CDS (相關(guān)雙采樣)電路、以及未示出的非線性放大電路。模擬處理電路103將該CDS電路和該非線性放大電路對(duì)所輸入的模擬電信號(hào)進(jìn)行處理的結(jié)果輸出至模數(shù)轉(zhuǎn)換器104。模數(shù)轉(zhuǎn)換器104將從攝像裝置102輸出并由模擬處理電路103處理后的模擬電信號(hào)轉(zhuǎn)換成數(shù)字電信號(hào)(圖像信號(hào))，然后將該數(shù)字電信號(hào)輸出至數(shù)字信號(hào)處理器114。接著，將參考圖2來(lái)說(shuō)明根據(jù)本實(shí)施例的攝像設(shè)備100的CPU 108所執(zhí)行的拍攝處理。當(dāng)用戶例如通過(guò)接通攝像設(shè)備100的電源開(kāi)關(guān)進(jìn)行拍攝開(kāi)始操作時(shí)，拍攝處理開(kāi)始。然后，CPU 108從ROM 110讀出缺陷像素?cái)?shù)據(jù)并將該缺陷像素?cái)?shù)據(jù)輸出至DRAM(存儲(chǔ)部)109。同時(shí)，CPU 108從ROM 110讀出曝光時(shí)間和其它設(shè)置，并且配置攝像設(shè)備100的相關(guān)塊所要進(jìn)行的操作(步驟S201)。這些相關(guān)塊與圖1所示的攝像設(shè)備100的所有塊相對(duì)應(yīng)。接著，CPU 108驅(qū)動(dòng)光學(xué)鏡頭101以使被攝體聚焦(步驟S202)。然后，CPU 108判斷拍攝是否已開(kāi)始(步驟S203)。如果拍攝未開(kāi)始(步驟S203 中為“否”)，則CPU 108等待直到拍攝開(kāi)始為止。如果拍攝已開(kāi)始(步驟S203中為“是”)， 則處理進(jìn)入步驟S204。作為開(kāi)始拍攝的方法，可以采用檢測(cè)用于開(kāi)始拍攝控制的開(kāi)關(guān)操作的方法、或者例如在使用自拍器等時(shí)檢測(cè)預(yù)定時(shí)間的經(jīng)過(guò)的方法。然后，CPU 108控制時(shí)序發(fā)生器105以初始化攝像裝置102。同時(shí)，CPU 108控制攝像數(shù)據(jù)輸入接口 111設(shè)置從攝像裝置102輸出的圖像信號(hào)以使得能夠進(jìn)行信號(hào)累積(步驟 S204)。然后，CPU 108打開(kāi)配置在光學(xué)鏡頭101前方的未示出的快門(mén)，并進(jìn)行控制以使得攝像裝置102的曝光開(kāi)始(步驟S205)。此時(shí)，攝像數(shù)據(jù)輸入接口 111將VD/HD同步信號(hào)等輸出至?xí)r序發(fā)生器105。然后，CPU 108判斷在打開(kāi)快門(mén)之后所經(jīng)過(guò)的曝光時(shí)間是否已達(dá)到在步驟S201中設(shè)置的預(yù)定時(shí)間段(步驟S206)。如果曝光時(shí)間未達(dá)到所設(shè)置的預(yù)定時(shí)間段(步驟S206中為“否”)，則CPU 108等待，直到曝光時(shí)間達(dá)到所設(shè)置的預(yù)定時(shí)間段為止。如果判斷為曝光時(shí)間已達(dá)到所設(shè)置的預(yù)定時(shí)間段(步驟S206中為“是”)，則CPU 108關(guān)閉快門(mén)以由此終止攝像裝置102的曝光(步驟S207)。然后，將從攝像裝置102輸出的模擬數(shù)據(jù)信號(hào)輸入至模擬處理電路103并對(duì)其進(jìn)行信號(hào)處理。然后，將處理后的模擬數(shù)據(jù)信號(hào)輸出至模數(shù)轉(zhuǎn)換器 104，在模數(shù)轉(zhuǎn)換器104中，將該模擬數(shù)據(jù)信號(hào)轉(zhuǎn)換成數(shù)字電信號(hào)(像素信號(hào))，然后將該數(shù)字電信號(hào)輸出至數(shù)字信號(hào)處理器114(步驟S208)。然后，CPU 108控制數(shù)字信號(hào)處理器114以進(jìn)行圖像處理(步驟S209)。之后，CPU 108將數(shù)字信號(hào)處理器114處理后的圖像顯示在操作顯示部106上，或者將該圖像的數(shù)據(jù)記錄在介質(zhì)107中(步驟S210)，之后終止本拍攝處理。接著，將說(shuō)明作為本實(shí)施例的攝像設(shè)備100的數(shù)字信號(hào)處理電路的數(shù)字信號(hào)處理器 114。數(shù)字信號(hào)處理器114包括攝像數(shù)據(jù)輸入接口 111、缺陷像素校正電路112和信號(hào)處理電路113。攝像數(shù)據(jù)輸入接口 111根據(jù)來(lái)自攝像裝置102的輸出取入圖像數(shù)據(jù)，將表示獲取到的圖像數(shù)據(jù)是有效區(qū)域數(shù)據(jù)還是無(wú)效區(qū)域數(shù)據(jù)的信號(hào)(區(qū)域判別數(shù)據(jù))添加至該獲取到的圖像數(shù)據(jù)，并將圖像傳送數(shù)據(jù)傳送至缺陷像素校正電路112。缺陷像素校正電路112對(duì)包含在來(lái)自攝像裝置102的輸出中的缺陷像素進(jìn)行校正。信號(hào)處理電路113對(duì)來(lái)自缺陷像素校正電路112的輸出進(jìn)行信號(hào)處理。在該信號(hào)處理中，進(jìn)行同步、降噪和例如通過(guò)JPEG的壓縮。
6
接著，將參考圖3AJB和3C來(lái)說(shuō)明利用缺陷像素校正電路112的處理的詳細(xì)內(nèi)容。圖3A示出從攝像數(shù)據(jù)輸入接口 111輸出的圖像數(shù)據(jù)。圖3A所示的圖像數(shù)據(jù)303 是二維圖像數(shù)據(jù)。有效區(qū)域數(shù)據(jù)300是從對(duì)攝像裝置102預(yù)先設(shè)置的預(yù)設(shè)范圍的像素輸出元件讀出的，并且用作要寫(xiě)入介質(zhì)107的圖像數(shù)據(jù)的源。在圖3A中出現(xiàn)的無(wú)效區(qū)域數(shù)據(jù)302是從攝像數(shù)據(jù)輸入接口 111輸出的圖像數(shù)據(jù) 303中除有效區(qū)域數(shù)據(jù)以外的圖像數(shù)據(jù)部分。通常，無(wú)效區(qū)域數(shù)據(jù)302是諸如光學(xué)黑區(qū)域等的不寫(xiě)入介質(zhì)107的區(qū)域中的圖像數(shù)據(jù)。無(wú)效區(qū)域數(shù)據(jù)302是從攝像數(shù)據(jù)輸入接口 111輸出、以用于生成對(duì)由攝像裝置102的特性而引起的有效區(qū)域數(shù)據(jù)300的像素值的誤差進(jìn)行校正用的數(shù)據(jù)。在圖3A中出現(xiàn)的周?chē)鷧⒖紖^(qū)域301與在圖:3B中出現(xiàn)的、用于對(duì)校正對(duì)象像素304 進(jìn)行校正的周?chē)鷧⒖枷袼?05的范圍相對(duì)應(yīng)。在第一實(shí)施例中，將以校正對(duì)象像素304為中心的包含3X3個(gè)像素的區(qū)域定義為周?chē)鷧⒖紖^(qū)域301。校正對(duì)象像素304是要基于在圖:3B中出現(xiàn)的周?chē)鷧⒖枷袼?05進(jìn)行校正的缺陷像素。周?chē)鷧⒖枷袼?05的原色信息與位于下文所述的周?chē)鷧⒖紖^(qū)域301中的校正對(duì)象像素304的原色信息相同。具體地，在用于校正缺陷像素的操作中，在圖像數(shù)據(jù)303的范圍內(nèi)掃描來(lái)自攝像數(shù)據(jù)輸入接口 111的輸出。此時(shí)，利用缺陷像素校正電路112對(duì)被判斷為缺陷像素的各校正對(duì)象像素304進(jìn)行校正。接著，將參考圖4來(lái)詳細(xì)說(shuō)明缺陷像素校正電路112。缺陷像素校正電路112包括缺陷像素判斷部401、無(wú)效圖像數(shù)據(jù)檢測(cè)部402和缺陷像素校正部400。缺陷像素校正電路112的無(wú)效圖像數(shù)據(jù)檢測(cè)部402基于從攝像數(shù)據(jù)輸入接口 111 輸出的未示出的同步信號(hào)和由附圖標(biāo)記404表示的區(qū)域判別數(shù)據(jù)，檢測(cè)圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是否屬于無(wú)效區(qū)域數(shù)據(jù)302。更具體地，區(qū)域判別數(shù)據(jù)404是表示與無(wú)效區(qū)域數(shù)據(jù)302相對(duì)應(yīng)的各個(gè)像素的地址的數(shù)據(jù)，并且無(wú)效圖像數(shù)據(jù)檢測(cè)部402對(duì)同步信號(hào)計(jì)數(shù)，由此識(shí)別圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是從哪個(gè)地址讀出的。當(dāng)識(shí)別出的地址和與無(wú)效區(qū)域數(shù)據(jù)302相對(duì)應(yīng)的像素的地址一致時(shí)，無(wú)效圖像數(shù)據(jù)檢測(cè)部402判斷為圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)屬于無(wú)效區(qū)域數(shù)據(jù)302，由此檢測(cè)無(wú)效區(qū)域數(shù)據(jù)302的像素相關(guān)項(xiàng)。然后，當(dāng)檢測(cè)到無(wú)效區(qū)域數(shù)據(jù)302的像素相關(guān)項(xiàng)時(shí)，無(wú)效圖像數(shù)據(jù)檢測(cè)部402向 OR( “或”)電路408輸出表示圖像數(shù)據(jù)303的像素相關(guān)項(xiàng)屬于無(wú)效數(shù)據(jù)區(qū)域302的二值無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406。與無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406相關(guān)聯(lián)的像素(無(wú)效圖像數(shù)據(jù))在傳感器映射上的具體位置如圖3C所示。缺陷像素校正電路112的缺陷像素判斷部401基于從攝像數(shù)據(jù)輸入接口 111輸出的未示出的同步信號(hào)和從DRAM(存儲(chǔ)部)109讀出的缺陷像素?cái)?shù)據(jù)403，判斷圖像數(shù)據(jù)(像素相關(guān)圖像數(shù)據(jù)項(xiàng))是否是從缺陷像素輸出元件生成的。缺陷像素?cái)?shù)據(jù)403存儲(chǔ)缺陷像素的地址，并且缺陷像素判斷部401對(duì)這些同步信號(hào)計(jì)數(shù)，由此識(shí)別圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是從哪個(gè)地址讀出的。當(dāng)識(shí)別出的地址與包括在缺陷像素?cái)?shù)據(jù)403中的像素地址一致時(shí)，缺陷像素判斷部401判斷為圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是從缺陷像素輸出元件輸出的。然后，當(dāng)判斷為圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是從缺陷像素輸出元件輸出的時(shí)，缺陷像素判斷部401向OR電路408輸出表示圖像數(shù)據(jù)303的像素相關(guān)圖像數(shù)據(jù)項(xiàng)是從缺陷像素輸出元件輸出的二值缺陷像素檢測(cè)信號(hào)407。OR電路408用作以下的信號(hào)生成部當(dāng)將缺陷像素檢測(cè)信號(hào)407和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406中的至少一個(gè)輸入至該信號(hào)生成部時(shí)，該信號(hào)生成部將缺陷像素判斷信號(hào) 405傳送至缺陷像素校正部400。更具體地，OR電路408輸出缺陷像素檢測(cè)信號(hào)407和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406的邏輯和。生成缺陷像素判斷信號(hào)405作為如下的缺陷像素判斷數(shù)據(jù)(缺陷像素判斷用的數(shù)據(jù))，其中，該缺陷像素判斷數(shù)據(jù)是通過(guò)將作為第一信號(hào)的缺陷像素檢測(cè)信號(hào)407和作為第二信號(hào)的無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406疊加所獲得的。以下，將基于缺陷像素判斷信號(hào)405被判斷為與攝像裝置102的缺陷像素輸出元件相關(guān)聯(lián)的像素或者在與攝像裝置102相關(guān)聯(lián)地設(shè)置的范圍(與有效區(qū)域數(shù)據(jù)300相關(guān)聯(lián)的有效區(qū)域)以外的像素稱(chēng)為缺陷判定像素。將該缺陷判定像素的圖像數(shù)據(jù)轉(zhuǎn)換成缺陷像素判斷信號(hào)405的值?？蛇x地，可以向生成缺陷像素判斷信號(hào)405所依據(jù)的像素相關(guān)圖像數(shù)據(jù)項(xiàng)添加標(biāo)志以表示該情況?，F(xiàn)在，將參考圖5A、5B和5C來(lái)說(shuō)明轉(zhuǎn)換成缺陷像素判斷信號(hào)405的像素相關(guān)圖像數(shù)據(jù)項(xiàng)(以下還簡(jiǎn)稱(chēng)為像素)在傳感器映射上的位置。圖5A是示出各自與缺陷像素檢測(cè)信號(hào)407相關(guān)聯(lián)的像素在傳感器映射上如何配置的概念圖。圖5B是示出各自與無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406相關(guān)聯(lián)的像素在傳感器映射上如何配置的概念圖。圖5C示出通過(guò)將圖 5A所示的像素疊加在圖5B所示的像素上所獲得的、各自與缺陷像素判斷信號(hào)405相關(guān)聯(lián)的像素。換言之，圖5C總體示出在圖5A中出現(xiàn)的各自與缺陷像素檢測(cè)信號(hào)407相關(guān)聯(lián)的像素的各個(gè)位置、以及在圖5B中出現(xiàn)的與無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406相關(guān)聯(lián)的像素的各個(gè)位置。缺陷像素校正電路112的缺陷像素校正部400基于如上生成的缺陷像素判斷信號(hào) 405對(duì)圖像數(shù)據(jù)303進(jìn)行校正，并輸出校正后的圖像數(shù)據(jù)303。缺陷像素校正部400如圖6所示配置。缺陷像素校正部400包括緩沖器601、數(shù)據(jù)校正部600和校正方法確定部602。緩沖器601是用于存儲(chǔ)圖像數(shù)據(jù)303和基于缺陷像素判斷信號(hào)405所獲得的如下數(shù)據(jù)的電路，其中，該數(shù)據(jù)由數(shù)據(jù)校正部600或校正方法確定部602用于二維濾波器。缺陷像素校正部400的校正方法確定部602是用于確定數(shù)據(jù)校正部600要采用的校正方法的塊。將參考圖7的(a) (η)來(lái)說(shuō)明校正方法確定部602用于確定校正方法的操作。圖7的(a) (η)中的各標(biāo)記“X”表示被轉(zhuǎn)換成缺陷像素判斷信號(hào)的缺陷判定像素500。各缺陷判定像素500表示從緩沖器601輸出的缺陷像素判斷信號(hào)405在二維濾波器上位于何處。圖7的(a) (η)示出在周?chē)鷧⒖枷袼?05中缺陷判定像素500發(fā)生的位置的可能圖案。特別地，缺陷判定像素500在圖7的(e)的上側(cè)、圖7的(f)的右側(cè)、圖7的(g) 的下側(cè)、圖7的(h)的左側(cè)、圖7的(k)的左側(cè)和上側(cè)、圖7的(1)的上側(cè)和右側(cè)、圖7的 (m)的右側(cè)和下側(cè)以及圖7(n)的下側(cè)和左側(cè)發(fā)生。更具體地，這些圖案與在周?chē)鷧⒖枷袼?05是無(wú)效區(qū)域數(shù)據(jù)302的像素的情況下被校正方法確定部602判斷為缺陷判定像素500 的各周?chē)鷧⒖枷袼?05的圖案相對(duì)應(yīng)。圖7的(e) (h)所示的圖案與如下情況相對(duì)應(yīng) 缺陷判定像素500分別與有效區(qū)域數(shù)據(jù)300的上側(cè)、右側(cè)、下側(cè)和左側(cè)的外部的無(wú)效區(qū)域數(shù)據(jù)302的一部分相對(duì)應(yīng)，而圖7的(k) (η)所示的圖案與如下情況相對(duì)應(yīng)缺陷判定像素 500與有效區(qū)域數(shù)據(jù)300的各個(gè)左上角、右上角、右下角和左下角外側(cè)的無(wú)效區(qū)域數(shù)據(jù)302 的一部分相對(duì)應(yīng)。校正方法確定部602確定各缺陷判定像素500在圖7的(a) (η)其中之一中的位置，并且使數(shù)據(jù)校正部600進(jìn)行校正對(duì)象像素304的數(shù)據(jù)校正。注意，對(duì)于圖像數(shù)據(jù)303 中未被判斷為缺陷像素的數(shù)據(jù)、因而未被設(shè)置為校正對(duì)象像素304的數(shù)據(jù)的各像素相關(guān)數(shù)據(jù)項(xiàng)，不進(jìn)行數(shù)據(jù)校正。在進(jìn)行數(shù)據(jù)校正的情況下，當(dāng)缺陷判定像素500位于周?chē)鷧⒖枷袼?05的位置時(shí)， 校正方法確定部602向數(shù)據(jù)校正部600通知僅使用不是缺陷判定像素500的周?chē)鷧⒖枷袼?305來(lái)進(jìn)行缺陷像素校正的校正方法。當(dāng)接收到該通知時(shí)，數(shù)據(jù)校正部600基于來(lái)自校正方法確定部602的通知確定二維濾波器，然后進(jìn)行數(shù)據(jù)校正以傳送校正后的數(shù)據(jù)。因而，在校正方法確定部602中，數(shù)據(jù)校正部600使用既非缺陷像素的數(shù)據(jù)也非無(wú)效區(qū)域數(shù)據(jù)的像素的數(shù)據(jù)來(lái)進(jìn)行校正。如上所述，在根據(jù)本實(shí)施例的攝像設(shè)備100的缺陷像素校正電路112中，與缺陷像素的圖像數(shù)據(jù)相同，將無(wú)效區(qū)域數(shù)據(jù)302作為缺陷判定像素的圖像數(shù)據(jù)進(jìn)行處理。這使得缺陷像素校正電路112能夠在例如不通過(guò)復(fù)制圖像區(qū)域端部數(shù)據(jù)生成偽參考像素的情況下進(jìn)行適當(dāng)?shù)娜毕菹袼匦Ｕ?。注意，盡管在本實(shí)施例中、缺陷像素判斷部401基于從DRAM(存儲(chǔ)部)109讀出的缺陷像素?cái)?shù)據(jù)403生成缺陷像素檢測(cè)信號(hào)407，但這不是限制性的，而且缺陷像素判斷部 401可被配置為基于對(duì)象像素的水平和該對(duì)象像素周?chē)南袼氐乃街g的比較結(jié)果來(lái)判斷該對(duì)象像素是否是缺陷像素。簡(jiǎn)言之，在第一實(shí)施例中，缺陷像素判斷部401輸出用于指定由包括在攝像裝置 102中的缺陷像素輸出元件所引起的缺陷像素的位置的缺陷像素檢測(cè)信號(hào)407。同時(shí)，無(wú)效圖像數(shù)據(jù)檢測(cè)部402基于區(qū)域判別數(shù)據(jù)404檢測(cè)無(wú)效區(qū)域數(shù)據(jù)302的像素相關(guān)圖像數(shù)據(jù)項(xiàng)，并輸出表示檢測(cè)到的數(shù)據(jù)項(xiàng)是無(wú)效區(qū)域數(shù)據(jù)302的數(shù)據(jù)項(xiàng)的無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406。在本第一實(shí)施例中，與無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406相關(guān)聯(lián)的像素在傳感器映射上的具體位置與如圖3C所示位于整個(gè)圖像數(shù)據(jù)303最外周(四個(gè)邊)的像素陣列相對(duì)應(yīng)(該像素陣列可以是單個(gè)像素陣列)。注意，無(wú)效區(qū)域數(shù)據(jù)302的像素的區(qū)域位于作為圖像數(shù)據(jù)的有效區(qū)域數(shù)據(jù)300的像素的區(qū)域的范圍之外。然后，將缺陷像素檢測(cè)信號(hào)407和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406彼此疊加，由此生成缺陷像素判斷信號(hào)405。在缺陷像素校正部400中，利用數(shù)據(jù)校正部600對(duì)從攝像裝置輸出的圖像數(shù)據(jù)的像素中、由校正方法確定部602基于缺陷像素判斷信號(hào)405所識(shí)別出的缺陷判定像素500 進(jìn)行數(shù)據(jù)校正。在進(jìn)行數(shù)據(jù)校正的情況下，缺陷像素校正部400的校正方法確定部602檢測(cè)在周?chē)鷧⒖枷袼?05的位置中是否存在缺陷判定像素500。然后，當(dāng)在周?chē)鷧⒖枷袼?05的位置中檢測(cè)到缺陷判定像素500時(shí)，校正方法確定部602向數(shù)據(jù)校正部600通知僅使用不是缺陷判定像素500的周?chē)鷧⒖枷袼?05的數(shù)據(jù)來(lái)進(jìn)行缺陷像素校正的校正方法。數(shù)據(jù)校正部600根據(jù)來(lái)自校正方法確定部602的通知，執(zhí)行諸如二維濾波處理等的信號(hào)處理。僅當(dāng)包括在攝像裝置102中的缺陷像素輸出元件位于與有效區(qū)域數(shù)據(jù)300的像素的區(qū)域相對(duì)應(yīng)的范圍內(nèi)時(shí)，才執(zhí)行包括二維濾波處理的信號(hào)處理。此外，僅使用位于有效區(qū)域數(shù)據(jù)300的像素范圍內(nèi)的周?chē)鷧⒖枷袼?05來(lái)進(jìn)行包括二維濾波處理的信號(hào)處理。在包括二維濾波處理的信號(hào)處理中，如果多個(gè)周?chē)鷧⒖枷袼?305位于有效區(qū)域數(shù)據(jù)300的像素范圍內(nèi)，則可以使用周?chē)鷧⒖枷袼?05的平均值，而如果僅單個(gè)周?chē)鷧⒖枷袼?05存在于該像素范圍內(nèi)，則可以使用該單個(gè)周?chē)鷧⒖枷袼?05的值。 可選地，當(dāng)多個(gè)周?chē)鷧⒖枷袼?05位于有效區(qū)域數(shù)據(jù)300的像素范圍內(nèi)時(shí)，可以分別確定以校正對(duì)象像素304作為中心的像素在多個(gè)方向上的相關(guān)性，并且優(yōu)選使用位于相關(guān)性最高的方向上的像素對(duì)校正對(duì)象像素304的值進(jìn)行校正。盡管在本實(shí)施例中、二維濾波器由 3X3個(gè)像素構(gòu)成，但這不是限制性的，而且可以采用眾所周知的各種二維濾波器。例如，可以使用5X5像素的濾波器或7X7像素的濾波器、即濾波器的抽頭數(shù)量增加的濾波器?？蛇x地，代替使用同種顏色的像素，可以根據(jù)二維濾波器上的區(qū)域的圖像數(shù)據(jù)的色度將從顏色相同的像素和顏色不同的像素所獲得的校正值混合。盡管在以上例子中基于綠色(G)像素的例子進(jìn)行了說(shuō)明，但眾所周知，還可以利用相同的方法對(duì)藍(lán)色(B)像素或紅色(R)像素進(jìn)行針對(duì)校正對(duì)象像素的值的校正。此外，代替二維濾波器，可以使用被配置為參考位于相對(duì)于對(duì)象像素的垂直或水平方向上的像素值的一維濾波器。如上所執(zhí)行的濾波處理不需要用于將圖像區(qū)域端部數(shù)據(jù)外插至丟失的參考像素應(yīng)當(dāng)存在的位置從而生成偽參考像素的麻煩處理。因此，根據(jù)第一實(shí)施例，可以迅速和容易地進(jìn)行基于濾波器的校正處理。接著，將參考附圖來(lái)說(shuō)明根據(jù)本發(fā)明第二實(shí)施例的攝像設(shè)備。同樣，在第二實(shí)施例的攝像設(shè)備中，缺陷像素校正電路112將缺陷像素檢測(cè)信號(hào)407和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào) 406彼此疊加，由此生成缺陷像素判斷信號(hào)405，并且缺陷像素校正部400基于缺陷像素判斷信號(hào)405對(duì)輸入圖像數(shù)據(jù)進(jìn)行校正。在以下對(duì)第二實(shí)施例的攝像設(shè)備的說(shuō)明中，省略了對(duì)與第一實(shí)施例的攝像設(shè)備的組成部分相同的組成部分的說(shuō)明，并且將主要說(shuō)明與第一實(shí)施例的不同之處。將參考圖8來(lái)詳細(xì)說(shuō)明從包括在本攝像設(shè)備的數(shù)字信號(hào)處理器114中的各塊所輸出的數(shù)據(jù)。圖8通過(guò)關(guān)注從數(shù)字信號(hào)處理器114的攝像數(shù)據(jù)輸入接口 111、缺陷像素校正電路 112和信號(hào)處理電路113各自輸出的數(shù)據(jù)的區(qū)域來(lái)示出傳感器映射。圖8的(a)示出來(lái)自根據(jù)第二實(shí)施例的攝像設(shè)備的數(shù)字信號(hào)處理器114的輸出數(shù)據(jù)。如圖8的(a)所示，圖像數(shù)據(jù)803包括有效區(qū)域數(shù)據(jù)800和額外像素?cái)?shù)據(jù)A 801。有效區(qū)域數(shù)據(jù)800是要記錄在介質(zhì)中的圖像數(shù)據(jù)。此外，本實(shí)施例中的額外像素?cái)?shù)據(jù)A801與第一實(shí)施例中被稱(chēng)為無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)相對(duì)應(yīng)，并且在本實(shí)施例中，額外像素?cái)?shù)據(jù)A 801提供了在對(duì)位于有效區(qū)域數(shù)據(jù)800的像素的圖像區(qū)域的端部處的像素進(jìn)行算術(shù)運(yùn)算時(shí)所使用的參考像素。額外像素?cái)?shù)據(jù)A 801是在對(duì)有效區(qū)域數(shù)據(jù)800進(jìn)行缺陷像素校正處理期間所參考的額外數(shù)據(jù)用的區(qū)域。在本數(shù)字信號(hào)處理器114中，缺陷像素校正電路112所使用的二維濾波器包括 3 X 3個(gè)像素。在數(shù)字信號(hào)處理器114中，將額外像素?cái)?shù)據(jù)A形成為相對(duì)于有效區(qū)域數(shù)據(jù)800 垂直地和水平地延伸1個(gè)像素的區(qū)域。基于從攝像數(shù)據(jù)輸入接口 111輸出的區(qū)域判別數(shù)據(jù)來(lái)進(jìn)行針對(duì)額外像素?cái)?shù)據(jù)A的判斷。接著，將詳細(xì)說(shuō)明根據(jù)第二實(shí)施例的攝像設(shè)備的數(shù)字信號(hào)處理器114的操作。假定第二實(shí)施例的攝像設(shè)備被配置為對(duì)圖像數(shù)據(jù)進(jìn)行光柵讀取。更具體地，在一條線中的最后像素的圖像數(shù)據(jù)之后，該攝像設(shè)備繼續(xù)讀出下一條線的開(kāi)頭像素的圖像數(shù)據(jù)。在數(shù)字信號(hào)處理器114中，將圖像數(shù)據(jù)303從攝像數(shù)據(jù)輸入接口 111輸出至缺陷像素校正電路112。然后，缺陷像素校正電路112將所輸入的圖像數(shù)據(jù)303的額外像素?cái)?shù)據(jù)A 801的像素相關(guān)圖像數(shù)據(jù)項(xiàng)作為缺陷判定像素進(jìn)行處理，由此在無(wú)需用于復(fù)制圖像區(qū)域的端部處的像素的電路的情況下，使用二維濾波器來(lái)進(jìn)行缺陷像素校正處理。然后，缺陷像素校正電路112將通過(guò)該缺陷像素校正處理所生成的有效區(qū)域數(shù)據(jù)802輸出至信號(hào)處理電路113。圖9示出如下?tīng)顟B(tài)在利用缺陷像素校正電路112的處理期間，二維濾波器的周?chē)鷧⒖枷袼?05的位置(參考區(qū)域)位于圖像數(shù)據(jù)的端部。位于校正對(duì)象像素804周?chē)耐N顏色像素GO G3是周?chē)鷧⒖枷袼?05。在圖9中，附圖標(biāo)記811表示二維濾波器的像素的如下?tīng)顟B(tài)校正對(duì)象像素804存在于有效區(qū)域數(shù)據(jù)800的范圍內(nèi)，并且周?chē)鷧⒖枷袼?05 的一部分存在于額外像素?cái)?shù)據(jù)A801的區(qū)域中。在這種狀態(tài)下，周?chē)鷧⒖枷袼?05的像素GO 和G2位于額外像素?cái)?shù)據(jù)A 801的區(qū)域中，因此缺陷像素校正電路112將周?chē)鷧⒖枷袼谿O 和G2的數(shù)據(jù)視為缺陷判定像素的數(shù)據(jù)，并基于周?chē)鷧⒖枷袼谿l和G3的數(shù)據(jù)對(duì)校正對(duì)象像素804進(jìn)行校正。當(dāng)然，當(dāng)周?chē)鷧⒖枷袼谿l和G3中的一個(gè)是缺陷像素并被作為缺陷判定像素進(jìn)行處理時(shí)，不利用該像素的數(shù)據(jù)進(jìn)行對(duì)校正對(duì)象像素804的校正。在圖9中，附圖標(biāo)記812表示二維濾波器的像素的如下?tīng)顟B(tài)當(dāng)從圖9觀看時(shí)，校正對(duì)象像素804存在于額外像素?cái)?shù)據(jù)A 901的區(qū)域中，并且一部分的周?chē)鷧⒖枷袼?05明顯存在于圖像數(shù)據(jù)803的輸出范圍之外。如上所述，在第二實(shí)施例中，攝像設(shè)備被配置為對(duì)圖像數(shù)據(jù)進(jìn)行光柵讀取。由于該原因，濾波器812的周?chē)鷧⒖枷袼谿2與包含校正對(duì)象像素804的線中的最后像素相對(duì)應(yīng)， 并且周?chē)鷧⒖枷袼谿O與包含周?chē)鷧⒖枷袼谿l的線的緊前(上一)線中的最后像素相對(duì)應(yīng)。 由于周?chē)鷧⒖枷袼?05的像素GO和G2位于額外像素?cái)?shù)據(jù)A 801的區(qū)域中，因此缺陷像素校正電路112將周?chē)鷧⒖枷袼谿O和G2視為缺陷判定像素，并將校正對(duì)象像素804的值轉(zhuǎn)換成周?chē)鷧⒖枷袼谿l和G3的平均值。在第二實(shí)施例中，使用二維濾波器使得可以將存在于額外像素?cái)?shù)據(jù)A 801的區(qū)域中的任意像素的值轉(zhuǎn)換成僅根據(jù)存在于有效區(qū)域數(shù)據(jù)800的范圍中的圖像數(shù)據(jù)計(jì)算出的值。這使得能夠生成可被視為使整個(gè)額外像素?cái)?shù)據(jù)A 801轉(zhuǎn)換成有效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)。因而，如圖8的(a)所示，從缺陷像素校正電路112輸出最終使有效區(qū)域數(shù)據(jù)二維延伸一個(gè)像素的圖像數(shù)據(jù)814，并將該圖像數(shù)據(jù)814輸入至信號(hào)處理電路113。在例如使用二維濾波器進(jìn)行降噪處理的情況下，信號(hào)處理電路113可以使用有效區(qū)域數(shù)據(jù)相對(duì)于圖像數(shù)據(jù) 803的有效區(qū)域數(shù)據(jù)延伸了的圖像數(shù)據(jù)814。更具體地，信號(hào)處理電路113可以將圖像數(shù)據(jù)814視為有效區(qū)域數(shù)據(jù)800的外側(cè)添加有偽參考像素的圖像數(shù)據(jù)，由此生成經(jīng)過(guò)了降噪處理的圖像數(shù)據(jù)。信號(hào)處理電路113從進(jìn)行了用于信號(hào)處理的多個(gè)處理的圖像數(shù)據(jù)切出與有效區(qū)域數(shù)據(jù)800相對(duì)應(yīng)的區(qū)域，并且輸出該區(qū)域作為圖像數(shù)據(jù)815。參考圖8的(b)，圖像數(shù)據(jù)903包括有效區(qū)域數(shù)據(jù)900、額外像素?cái)?shù)據(jù)A 901和額外像素?cái)?shù)據(jù)B 902。有效區(qū)域數(shù)據(jù)900和額外像素?cái)?shù)據(jù)A 901分別與圖8的(a)的有效區(qū)域數(shù)據(jù)800 和額外像素?cái)?shù)據(jù)A 801相同。額外像素?cái)?shù)據(jù)B902由分別添加至額外像素?cái)?shù)據(jù)A 901的垂直側(cè)和水平側(cè)的額外像素陣列構(gòu)成。在以下參考圖10和圖8的(b)所述的例子中，假定缺陷像素校正電路112所使用的二維濾波器由5X5個(gè)像素構(gòu)成。在數(shù)字信號(hào)處理器114中，通過(guò)將額外像素?cái)?shù)據(jù)A 901 和額外像素?cái)?shù)據(jù)B902彼此疊加所獲得的區(qū)域相對(duì)于有效區(qū)域數(shù)據(jù)800垂直地和水平地延伸了兩個(gè)像素。這些像素是基于從攝像數(shù)據(jù)輸入接口 111所輸出的區(qū)域判別數(shù)據(jù)來(lái)判斷的。接著，將詳細(xì)說(shuō)明根據(jù)第二實(shí)施例的攝像設(shè)備的數(shù)字信號(hào)處理器114的操作。在數(shù)字信號(hào)處理器114中，攝像數(shù)據(jù)輸入接口 111將圖像數(shù)據(jù)903輸出至缺陷像素校正電路112。然后，缺陷像素校正電路112在將額外像素?cái)?shù)據(jù)A 901和額外像素?cái)?shù)據(jù)B 902作為缺陷判定像素進(jìn)行處理的情況下進(jìn)行缺陷像素校正，并將通過(guò)該缺陷像素校正所生成的圖像數(shù)據(jù)914輸出至信號(hào)處理電路113。圖10示出在利用缺陷像素校正電路112的處理期間、二維濾波器的周?chē)鷧⒖枷袼?905的位置(參考區(qū)域)位于圖像數(shù)據(jù)的端部的狀態(tài)。位于校正對(duì)象像素904周?chē)耐N顏色像素是周?chē)鷧⒖枷袼?05 (GO Gll)。在圖10中，附圖標(biāo)記911表示二維濾波器的像素的如下?tīng)顟B(tài)校正對(duì)象像素904存在于有效區(qū)域數(shù)據(jù)900的范圍內(nèi)，并且周?chē)鷧⒖枷袼?905的一部分存在于額外像素?cái)?shù)據(jù)A 901或額外像素?cái)?shù)據(jù)B 902的區(qū)域中。在這種狀態(tài)下， 周?chē)鷧⒖枷袼谿O、G2、G4、G7和G9是額外像素?cái)?shù)據(jù)A 901或額外像素?cái)?shù)據(jù)B 902的像素， 因此缺陷像素校正電路112將周?chē)鷧⒖枷袼谿0、G2、G4、G7和G9的數(shù)據(jù)視為缺陷判定像素的數(shù)據(jù)，并基于其它的周?chē)鷧⒖枷袼谿l、G3、G5、G6、G8、GlO和Gll對(duì)校正對(duì)象像素904進(jìn)行校正。例如，可以通過(guò)在對(duì)離校正對(duì)象像素904較近的周?chē)鷧⒖枷袼胤峙漭^大的權(quán)重的情況下對(duì)這些周?chē)鷧⒖枷袼氐闹颠M(jìn)行加權(quán)平均來(lái)計(jì)算校正對(duì)象像素904的校正值。在圖10中，附圖標(biāo)記912表示二維濾波器的像素的如下?tīng)顟B(tài)當(dāng)從圖10觀看時(shí)， 校正對(duì)象像素904存在于額外像素?cái)?shù)據(jù)A901的區(qū)域中，并且一部分的周?chē)鷧⒖枷袼?05明顯存在于圖像數(shù)據(jù)903的輸出范圍外。在第二實(shí)施例中，由于攝像設(shè)備被配置為對(duì)圖像數(shù)據(jù)903進(jìn)行光柵讀取，因此周?chē)鷧⒖枷袼谿4、G7和G9各自與分別包括周?chē)鷧⒖枷袼谿6、G8 和Gll的線的緊前線中的相關(guān)線的最后像素相對(duì)應(yīng)。在這種狀態(tài)下，缺陷像素校正電路112 將校正對(duì)象像素904的值轉(zhuǎn)換成與額外像素?cái)?shù)據(jù)A 901或額外像素?cái)?shù)據(jù)B 902不相關(guān)聯(lián)的周?chē)鷧⒖枷袼谿1、G3、G6、G8和Gll的平均值。在圖10中，附圖標(biāo)記913表示二維濾波器的像素的如下?tīng)顟B(tài)當(dāng)從圖10觀看時(shí)， 校正對(duì)象像素904存在于額外像素?cái)?shù)據(jù)B902的區(qū)域中，并且周?chē)鷧⒖枷袼?05中的一部分明顯存在于圖像數(shù)據(jù)903的輸出范圍外。在這種狀態(tài)下，缺陷像素校正電路112將校正對(duì)象像素904的值轉(zhuǎn)換成與額外像素?cái)?shù)據(jù)A 901或額外像素?cái)?shù)據(jù)B 902不相關(guān)聯(lián)的周?chē)鷧⒖枷袼谿6、G8和Gll的平均值。如上所述，在第二實(shí)施例中，通過(guò)使用二維濾波器，無(wú)論校正對(duì)象像素904是否與額外像素?cái)?shù)據(jù)A 901或額外像素?cái)?shù)據(jù)B902相關(guān)聯(lián)，都可以將校正對(duì)象像素904的值轉(zhuǎn)換成僅根據(jù)有效區(qū)域數(shù)據(jù)900的像素相關(guān)圖像數(shù)據(jù)項(xiàng)計(jì)算出的值。這使得能夠生成可被視為使整個(gè)額外像素?cái)?shù)據(jù)A 901和額外像素?cái)?shù)據(jù)B 902轉(zhuǎn)換成有效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)。因而， 從缺陷像素校正電路112輸出最終使有效區(qū)域數(shù)據(jù)二維延伸兩個(gè)像素的圖像數(shù)據(jù)914，并且將該圖像數(shù)據(jù)914輸入至信號(hào)處理電路113。這使得信號(hào)處理電路113能夠通過(guò)使用有效區(qū)域數(shù)據(jù)相對(duì)于圖像數(shù)據(jù)903的有效區(qū)域數(shù)據(jù)延伸了的圖像數(shù)據(jù)914來(lái)進(jìn)行降噪處理。 信號(hào)處理電路113從進(jìn)行了用于信號(hào)處理的多個(gè)處理的圖像數(shù)據(jù)切出與有效區(qū)域數(shù)據(jù)900 相對(duì)應(yīng)的區(qū)域，并輸出該區(qū)域作為圖像數(shù)據(jù)915。如上所述，在第二實(shí)施例中，數(shù)字信號(hào)處理器114的缺陷像素校正電路112能夠生成有效區(qū)域延伸了的圖像數(shù)據(jù)并將該圖像數(shù)據(jù)輸出至后級(jí)的信號(hào)處理電路113。如根據(jù)圖 9和10的比較所能理解的那樣，隨著缺陷像素校正電路112所使用的二維濾波器的參考區(qū)域延伸得更多，可以生成將更大區(qū)域的額外像素?cái)?shù)據(jù)轉(zhuǎn)換成有效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)。換言之，隨著缺陷像素校正電路112所使用的二維濾波器的參考區(qū)域延伸得更多，可以使后級(jí)的信號(hào)處理電路113利用更大的參考區(qū)域進(jìn)行濾波處理。簡(jiǎn)言之，在第二實(shí)施例中，從攝像數(shù)據(jù)輸入接口 111輸出的圖像數(shù)據(jù)903包括有效區(qū)域數(shù)據(jù)900和額外像素?cái)?shù)據(jù)。有效區(qū)域數(shù)據(jù)900是記錄在介質(zhì)中的圖像區(qū)域的數(shù)據(jù)。在第二實(shí)施例的數(shù)字信號(hào)處理器114中，額外像素?cái)?shù)據(jù)的區(qū)域以相對(duì)于有效區(qū)域數(shù)據(jù)900向外二維延伸一個(gè)或兩個(gè)像素的方式形成，并且基于從攝像數(shù)據(jù)輸入接口 111所輸出的區(qū)域判別數(shù)據(jù)來(lái)判斷像素是否與額外像素?cái)?shù)據(jù)的數(shù)據(jù)項(xiàng)相關(guān)聯(lián)。在第二實(shí)施例的缺陷像素校正電路112中，與第一實(shí)施例相同，將缺陷像素檢測(cè)信號(hào)407和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)406彼此疊加，由此生成缺陷像素判斷信號(hào)405。響應(yīng)于缺陷像素判斷信號(hào)405，缺陷像素校正電路112對(duì)由校正方法確定部識(shí)別出的缺陷判定像素進(jìn)行數(shù)據(jù)校正。在該數(shù)據(jù)校正處理中，當(dāng)周?chē)鷧⒖枷袼卮嬖谟陬~外像素?cái)?shù)據(jù)的區(qū)域中時(shí)，缺陷像素校正電路112將這些周?chē)鷧⒖枷袼刈鳛槿毕菖卸ㄏ袼剡M(jìn)行處理。此外，在數(shù)據(jù)校正處理中，即使當(dāng)校正對(duì)象像素位于額外像素?cái)?shù)據(jù)的區(qū)域中時(shí)，也僅利用根據(jù)位于有效區(qū)域數(shù)據(jù)的范圍內(nèi)的周?chē)鷧⒖枷袼?05所獲得的值，通過(guò)二維濾波處理對(duì)該校正對(duì)象像素的值進(jìn)行校正。在這種情況下，隨著二維濾波器所參考的區(qū)域被擴(kuò)展， 可以進(jìn)一步擴(kuò)展將額外像素的值校正為根據(jù)有效區(qū)域數(shù)據(jù)的像素相關(guān)數(shù)據(jù)項(xiàng)所獲得的值的范圍。當(dāng)然，代替二維濾波器，可以使用參考位于垂直方向和水平方向其中之一方向上的像素值的一維濾波器。因而，后級(jí)的信號(hào)處理電路113接收到有效區(qū)域增大的圖像數(shù)據(jù)并對(duì)該圖像數(shù)據(jù)進(jìn)行信號(hào)處理，以使得不再需要進(jìn)行諸如降噪處理等的信號(hào)處理以在有效區(qū)域數(shù)據(jù)的區(qū)域端部處生成偽參考像素。盡管已經(jīng)參考典型實(shí)施例說(shuō)明了本發(fā)明，但是應(yīng)該理解，本發(fā)明不限于所公開(kāi)的典型實(shí)施例。所附權(quán)利要求書(shū)的范圍符合最寬的解釋?zhuān)园羞@類(lèi)修改、等同結(jié)構(gòu)和功能。本申請(qǐng)要求2010年10月20日提交的日本專(zhuān)利申請(qǐng)2010-235649的優(yōu)先權(quán)，在此通過(guò)引用包含其全部?jī)?nèi)容。
權(quán)利要求
1.一種圖像處理設(shè)備，包括獲取單元，用于取入包括有效區(qū)域數(shù)據(jù)和用于對(duì)所述有效區(qū)域數(shù)據(jù)的像素的值進(jìn)行校正的無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)，其中，所述有效區(qū)域數(shù)據(jù)是從攝像裝置的預(yù)設(shè)范圍內(nèi)的像素輸出元件讀出的，所述無(wú)效區(qū)域數(shù)據(jù)是從所述攝像裝置的所述預(yù)設(shè)范圍外的像素輸出元件讀出的，所述攝像裝置包括缺陷像素輸出元件；信號(hào)生成單元，用于將第一信號(hào)和第二信號(hào)疊加，由此生成表示缺陷判定像素的位置的缺陷像素判斷信號(hào)，其中，所述第一信號(hào)表示所述攝像裝置的所述缺陷像素輸出元件的位置，所述第二信號(hào)表示在所述攝像裝置的所述預(yù)設(shè)范圍外的各個(gè)像素的位置；以及校正單元，用于當(dāng)基于所述缺陷像素判斷信號(hào)將所述圖像數(shù)據(jù)中的對(duì)象像素判斷為所述缺陷判定像素時(shí)，使用與位于所述對(duì)象像素周?chē)南袼刂械娜缦孪袼叵嚓P(guān)聯(lián)的圖像數(shù)據(jù)的值對(duì)所述圖像數(shù)據(jù)中的所述對(duì)象像素的值進(jìn)行校正該像素均是基于所述缺陷像素判斷信號(hào)未被判斷為所述缺陷判定像素的像素。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其特征在于，當(dāng)被判斷為所述缺陷判定像素的對(duì)象像素是在所述攝像裝置的所述預(yù)設(shè)范圍外的像素之一時(shí)，所述校正單元使用與位于所述對(duì)象像素周?chē)以谒鰯z像裝置的所述預(yù)設(shè)范圍內(nèi)的像素中的如下像素相關(guān)聯(lián)的圖像數(shù)據(jù)的值對(duì)所述圖像數(shù)據(jù)中的所述對(duì)象像素的值進(jìn)行校正該像素均是基于所述缺陷像素判斷信號(hào)未被判斷為所述缺陷判定像素的像素。
3.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，其特征在于，還包括信號(hào)處理單元，所述信號(hào)處理單元用于對(duì)所述校正單元校正后的圖像數(shù)據(jù)進(jìn)行降噪用的濾波處理。
4.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其特征在于，所述信號(hào)生成單元以像素為單位判斷各像素是否是與所述攝像裝置的所述缺陷像素輸出元件相關(guān)聯(lián)的像素，由此生成所述第一信號(hào)，以像素為單位判斷各像素是否是所述攝像裝置的所述預(yù)設(shè)范圍外的像素之一，由此生成所述第二信號(hào)，并且計(jì)算所述第一信號(hào)和所述第二信號(hào)的邏輯和，由此生成所述缺陷像素判斷信號(hào)。
5.一種圖像處理方法，用于處理從包括缺陷像素輸出元件的攝像裝置所輸出的圖像， 所述圖像處理方法包括以下步驟取入包括有效區(qū)域數(shù)據(jù)和用于對(duì)所述有效區(qū)域數(shù)據(jù)的像素的值進(jìn)行校正的無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)，其中，所述有效區(qū)域數(shù)據(jù)是從所述攝像裝置的預(yù)設(shè)范圍內(nèi)的像素輸出元件讀出的，所述無(wú)效區(qū)域數(shù)據(jù)是從所述攝像裝置的所述預(yù)設(shè)范圍外的像素輸出元件讀出的；將第一信號(hào)和第二信號(hào)疊加，由此生成表示缺陷判定像素的位置的缺陷像素判斷信號(hào)，其中，所述第一信號(hào)表示所述攝像裝置的所述缺陷像素輸出元件的位置，所述第二信號(hào)表示在所述攝像裝置的所述預(yù)設(shè)范圍外的各個(gè)像素的位置；以及當(dāng)基于所述缺陷像素判斷信號(hào)將所述圖像數(shù)據(jù)中的對(duì)象像素判斷為所述缺陷判定像素時(shí)，使用與位于所述對(duì)象像素周?chē)南袼刂械娜缦孪袼叵嚓P(guān)聯(lián)的圖像數(shù)據(jù)的值對(duì)所述圖像數(shù)據(jù)中的所述對(duì)象像素的值進(jìn)行校正該像素均是基于所述缺陷像素判斷信號(hào)未被判斷為所述缺陷判定像素的像素。
全文摘要
本發(fā)明涉及一種能夠快速且容易地進(jìn)行校正處理的圖像處理設(shè)備和方法。該圖像處理設(shè)備能夠迅速和容易地通過(guò)濾波進(jìn)行校正處理。數(shù)字信號(hào)處理器取入包括來(lái)自攝像裝置的預(yù)設(shè)范圍內(nèi)的有效區(qū)域數(shù)據(jù)和來(lái)自該攝像裝置的預(yù)設(shè)范圍外的無(wú)效區(qū)域數(shù)據(jù)的圖像數(shù)據(jù)。該數(shù)字信號(hào)處理器將缺陷像素檢測(cè)信號(hào)和無(wú)效圖像數(shù)據(jù)檢測(cè)信號(hào)疊加，由此生成缺陷像素判斷信號(hào)。當(dāng)基于該缺陷像素判斷信號(hào)將圖像數(shù)據(jù)中的對(duì)象像素判斷為缺陷判定像素時(shí)，數(shù)字信號(hào)處理器使用與該目標(biāo)像素周?chē)南袼刂?、與基于缺陷像素判斷信號(hào)未被判斷為缺陷判定像素的一部分像素相關(guān)聯(lián)的圖像數(shù)據(jù)的值來(lái)對(duì)該目標(biāo)像素的值進(jìn)行校正。
文檔編號(hào)H04N5/367GK102572318SQ20111032420
公開(kāi)日2012年7月11日 申請(qǐng)日期2011年10月20日 優(yōu)先權(quán)日2010年10月20日
發(fā)明者君島裕一郎, 堀川洋平 申請(qǐng)人:佳能株式會(huì)社