圖像處理設(shè)備、成像設(shè)備、圖像處理方法和程序的制作方法
【專利摘要】本發(fā)明涉及圖像處理設(shè)備、成像設(shè)備、圖像處理方法和程序，具體提供了一種圖像處理設(shè)備，包括：水平失真校正處理部，被配置為根據(jù)提供的同步信號在水平方向上對輸入圖像執(zhí)行失真校正處理；存儲器，被配置為順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果；以及垂直失真校正處理部，被配置為在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
【專利說明】圖像處理設(shè)備、成像設(shè)備、圖像處理方法和程序
[0001]相關(guān)申請的交叉參考
[0002]本申請要求于2012年11月13日提交的日本在先專利申請JP2012-249557的優(yōu)先權(quán)，將其全部內(nèi)容結(jié)合于此作為參考。
【技術(shù)領(lǐng)域】
[0003]本公開涉及一種應(yīng)用于攝像機(jī)、數(shù)碼相機(jī)等的圖像處理設(shè)備、成像設(shè)備、圖像處理方法和程序。
【背景技術(shù)】
[0004]在現(xiàn)有技術(shù)中，由于成像透鏡的失真像差特性，在由攝像機(jī)或數(shù)碼相機(jī)或銀鹽相機(jī)拾取的圖像中發(fā)生了失真。另外，CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)圖像傳感器通過卷簾式快門系統(tǒng)累積和讀取信號電荷，如果對象高速移動，則會不利地扭曲圖像。
[0005]通常，在輸入圖像的垂直方向執(zhí)行失真校正處理的情況下，當(dāng)使用具有大量抽頭的濾波器并且圖像在垂直方向上的移動量大時，會處理大量數(shù)據(jù)并因此使用幀存儲器。
[0006]以下，將參照附圖描述現(xiàn)有技術(shù)的失真校正處理。圖1是現(xiàn)有技術(shù)的失真校正處理的示意圖。
[0007]現(xiàn)有技術(shù)的失真校正電路是指輸入圖像200的失真校正表，從其頂行到底行在水平方向上執(zhí)行失真校正處理(光柵處理)，并且在幀存儲器中累積其結(jié)果。然后，在獲得了一幀圖像的水平方向的失真校正結(jié)果之后，電路在垂直方向從其頂行到底行順序讀取圖像，并參考失真校正表在垂直方向校正失真。此時，像素行的一行被分成多個部分，每個都具有預(yù)定數(shù)量的像素，并且例如，以預(yù)定數(shù)量的像素為單位執(zhí)行垂直方向的失真校正處理(帶處理)。
[0008]圖2是圖1中示出的失真校正處理的時序圖。
[0009]根據(jù)用于圖像傳感器的同步信號(2-1)，以每周期1/60秒的時段來執(zhí)行圖像傳感器的曝光。此外，未示出的CPU (中央處理單元)獲取成像透鏡(2-2)的透鏡信息(用于失真校正的表)。在圖2示出的實(shí)例中，分別用(1)、(2)和(3)表示與從圖像傳感器順序輸出的第一至第三圖像相關(guān)的時間段。
[0010]在圖像傳感器曝光以及CPU的透鏡信息獲取之后，根據(jù)用于水平方向的失真校正處理的同步信號(2-3)，失真校正電路從CPU接收并設(shè)置用于水平失真校正處理的失真校正數(shù)據(jù)(2-4)。在下文中，水平方向的失真校正處理可被稱為“水平失真校正處理”。之后，從圖像傳感器輸出圖像，該圖像順序地經(jīng)過水平失真校正處理(2-5)，并且將經(jīng)過了水平失真校正處理的圖像(以下，稱為“水平校正的圖像”)寫入到存儲器中(2-6)。
[0011]在完成了水平失真校正處理之后，根據(jù)用于垂直方向的失真校正處理的同步信號(2-7)，失真校正電路從CPU接收并設(shè)置用于垂直失真校正處理的失真校正數(shù)據(jù)(2-8)。在下文中，可將垂直方向的失真校正處理稱為“垂直失真校正處理”。之后，根據(jù)用于垂直失真校正處理的同步信號，執(zhí)行垂直失真校正處理，使得在垂直方向從頂行到底行從存儲器讀取經(jīng)過了水平失真校正的圖像(2-9)。然后，將經(jīng)過垂直失真校正處理的圖像(校正的圖像)寫入到存儲器中(2-10)。
[0012]之后，失真校正電路根據(jù)用于垂直失真校正處理的同步信號從存儲器讀取校正的圖像，并且將讀取的圖像輸出到外部(2-11)。
[0013]例如，日本專利公開2004-80545已提出了一種圖像處理設(shè)備，其中，在水平方向的失真校正處理之后執(zhí)行垂直方向的失真校正處理。在該專利文獻(xiàn)中描述的圖像處理設(shè)備使用水平一維內(nèi)插部分來執(zhí)行使用水平校正參數(shù)的一維內(nèi)插操作，并從而在水平方向校正失真，其中，該水平校正參數(shù)指示構(gòu)成具有失真的原始圖像的像素點(diǎn)處的水平方向的校正量。此外，圖像處理設(shè)備使用垂直校正參數(shù)對通過水平方向校正獲得的圖像執(zhí)行一維內(nèi)插操作，從而在垂直方向校正原始圖像的失真，其中，該垂直校正參數(shù)指示構(gòu)成相關(guān)原始圖像的像素點(diǎn)處的垂直方向的校正量。

【發(fā)明內(nèi)容】

[0014]然而，如圖2所示，由于上述方法在完成了對圖像的所有行的水平失真校正處理之后執(zhí)行垂直失真校正處理，所以從水平失真校正處理的時間段的開始直到完成垂直失真校正處理來獲得校正的圖像，產(chǎn)生了兩幀的延遲。在用于要求低處理延遲的體育轉(zhuǎn)播的高性能攝像機(jī)、用于監(jiān)測危險等的安全攝像機(jī)等中，這種延遲不是可取的。
[0015]上述情況要求一種方法來減小從輸入圖像的水平方向的失真校正處理的時間段的開始直到獲得最終校正的圖像所產(chǎn)生的延遲。
[0016]根據(jù)本公開的實(shí)施例，水平失真校正處理部根據(jù)提供的同步信號對輸入圖像執(zhí)行水平方向的失真校正處理，并且水平失真校正處理部的水平方向的失真校正處理的結(jié)果被順序地存儲在存儲器中。然后，在開始水平失真校正處理部的水平方向的失真校正處理之后，垂直失真校正處理部以小于一幀的預(yù)定時間段的延遲，從存儲器中順序讀取水平方向的失真校正處理的結(jié)果，以便開始垂直方向的失真校正處理。
[0017]根據(jù)本公開的配置，可以在完成整個輸入圖像的水平失真校正處理之前開始垂直失真校正處理。結(jié)果，相比于現(xiàn)有技術(shù)，可以減小從水平失真校正處理的時間段的開始直到完成垂直失真校正處理以獲得校正的圖像所產(chǎn)生的延遲。
[0018]根據(jù)本公開的實(shí)施例，可以減小從水平方向的失真校正處理的時間段的開始直到獲得最終校正的圖像所產(chǎn)生的延遲。
【專利附圖】

【附圖說明】
[0019]圖1是現(xiàn)有技術(shù)的失真校正處理的示意圖；
[0020]圖2是圖1中示出的失真校正處理的時序圖；
[0021]圖3是根據(jù)本公開的一種實(shí)施例的失真校正處理的示意圖，并且圖3的A是對輸入圖像的上半部分的失真校正處理的示意圖，以及圖3的B是對輸入圖像的下半部分的失真校正處理的示意圖；
[0022]圖4是根據(jù)本公開的一種實(shí)施例的失真校正處理中的校正處理輸入圖像和校正處理輸出圖像的示意圖，并且圖4的A是對輸入圖像的上半部分的失真校正處理的示意圖，以及圖4的B是對輸入圖像的下半部分的失真校正處理的示意圖；[0023]圖5是示出根據(jù)本公開實(shí)施例的成像設(shè)備的示例內(nèi)部配置的框圖；
[0024]圖6是示出圖5中示出的成像設(shè)備中的失真校正處理部的示例內(nèi)部配置的框圖；
[0025]圖7是示出根據(jù)本公開一種實(shí)施例的失真校正處理的流程圖；
[0026]圖8是根據(jù)本公開一種實(shí)施例的失真校正處理的時序圖；以及
[0027]圖9是示出計算機(jī)的示例硬件配置的框圖。
【具體實(shí)施方式】
[0028]以下，將參照附圖詳細(xì)描述本公開的優(yōu)選實(shí)施例。值得注意的是，在該說明書及附圖中，具有大致相同功能和結(jié)構(gòu)的結(jié)構(gòu)元件用相同的參考標(biāo)號表示，并且省略了對這些結(jié)構(gòu)元件的重復(fù)說明。將按以下順序進(jìn)行描述:
[0029]1.一種實(shí)施例(其中將圖像分成多個區(qū)并且從完成水平失真校正處理的區(qū)開始垂直失真校正處理的實(shí)例)
[0030]2.其他(修改例)
[0031]〈1.一種實(shí)施例 > [概述]
[0032]將參照圖3和圖4來描述根據(jù)本公開的一種實(shí)施例的失真校正處理的概述。
[0033]圖3是根據(jù)本公開的一種實(shí)施例的失真校正處理的示意圖，并且圖3的A是對輸入圖像的上半部分的失真校正處理的示意圖，以及圖3的B是對輸入圖像的下半部分的失真校正處理的示意圖。
[0034]圖4是根據(jù)本公開的一種實(shí)施例的失真校正處理中的校正處理輸入圖像和校正處理輸出圖像的示意圖，并且圖4的A是對輸入圖像的上半部分的失真校正處理的示意圖，以及圖4的B是對輸入圖像的下半部分的失真校正處理的示意圖。
[0035]在本公開中，在完成了輸入圖像的水平方向的失真校正處理之后，以小于一幀的預(yù)定時間段的延遲來執(zhí)行垂直方向的失真校正處理。例如，在完成了對多個區(qū)中的一個區(qū)的水平方向的失真校正處理之后，對該一個區(qū)開始垂直方向的失真校正處理，其中，通過在垂直方向劃分待校正的圖像來獲得上述多個區(qū)。圖3和圖4示出了以下的實(shí)例，其中，將輸入圖像I以中心線c分成上和下兩個區(qū)(在垂直方向)，并且對其中每個區(qū)執(zhí)行水平方向和垂直方向的失真校正處理。
[0036]首先，從頂行2U-1到底行2L_n對待校正的圖像I執(zhí)行水平方向的失真校正處理(光柵處理)，并且將其結(jié)果累積在隨后描述的存儲器50中。然后，在對上述圖像I的水平方向的失真校正處理期間，在完成了對作為圖像的上半部分的第一區(qū)的水平方向的失真校正處理后，開始對第一區(qū)的垂直方向的失真校正處理。
[0037]這里，在完成了對從頂行2U-1到底行2U_n的圖像I的第一區(qū)以及比底行2U_n低一行的行2U-m的水平方向的失真校正處理后，開始對第一區(qū)的垂直方向的失真校正處理。行2U-m對應(yīng)于作為圖1的下半部分的第二區(qū)的頂行2L-1。
[0038]在垂直方向的失真校正處理中，以預(yù)定數(shù)量的像素(像素組)為單位劃分像素行的一行，并且在垂直方向從最左列以該像素組為單位順序地執(zhí)行失真校正處理(帶處理)。換句話說，從像素組3U-1到像素組3U-n和像素組3U-m執(zhí)行垂直方向的失真校正處理，像素組3U-1在圖像I的第一區(qū)的最左側(cè)并且在第一區(qū)中的頂行2U-1中，像素組3U-n在第一區(qū)中的底行2U-n中，并且像素組3U-m在比行2U_n低一行的行2U_m中。從在最左列的像素組到在最右列的像素組，對第一區(qū)順序地執(zhí)行垂直方向的失真校正處理。
[0039]類似地，在完成了對作為圖1的下半部分的第二區(qū)的水平方向的失真校正處理后，開始對第二區(qū)的垂直方向的失真校正處理。換句話說，從圖像I的第二區(qū)中的頂行2L-1到第二區(qū)中的底行2L-n順序地執(zhí)行水平方向的失真校正處理，并且在完成了對底行2L-n的水平方向的失真校正處理時，開始對第二區(qū)的垂直方向的失真校正處理。然后，對像素組3L_m以及從像素組3L-1到像素組3L_n執(zhí)行垂直方向的失真校正處理，像素組3L_m在圖像I的第二區(qū)的最左側(cè)并且在比第二區(qū)中的頂行2L-1高一行的行2U-n中，像素組3L-1在第二區(qū)的頂行2L-1中，并且像素組3L-n在第二區(qū)的底行2L_n中。從在最左列的像素組到在最右列的像素組，對第二區(qū)順序地執(zhí)行該垂直方向的失真校正處理。
[0040]如上所述，在對圖像I的第一區(qū)(上部)的失真校正處理中，對第一區(qū)執(zhí)行水平方向和垂直方向的失真校正處理，并且屬于第二區(qū)(下部)且包括行2U-m的校正處理輸入圖像5U持續(xù)到第一區(qū)。然后，從校正處理輸出圖像6U消除擴(kuò)展處理的行2U-m以被輸出(圖4的A)。
[0041]類似地，在對第二區(qū)的失真校正處理中，對第二區(qū)執(zhí)行水平方向和垂直方向的失真校正處理，并且屬于第一區(qū)(下部)且包括行2U-n的校正處理輸入圖像5L持續(xù)到第二區(qū)。然后，從校正處理輸出圖像6L消除擴(kuò)展處理的行2U-n以被輸出(圖4的B)。
[0042]這使得可以保持圖1的第一區(qū)和第二區(qū)之間的中心線c附近的失真校正結(jié)果的連續(xù)性，獲得高質(zhì)量的校正的圖像。這里，優(yōu)選根據(jù)失真幅度(成像透鏡的失真特性)、失真的精度等來充分調(diào)節(jié)校正處理輸入圖像和校正處理輸出圖像之間的這種差異。
[0043]換句話說，在本公開中，首先，對通過劃分輸入圖像而獲得的多個區(qū)執(zhí)行水平方向的失真校正處理。然后，除了經(jīng)過水平方向的失真校正處理的一個區(qū)(例如，第一區(qū))，對與該一個區(qū)連續(xù)并且與該一個區(qū)相鄰的區(qū)(例如，第二區(qū))中包括的預(yù)定數(shù)量的水平行執(zhí)行垂直方向的失真校正處理。然后，僅將經(jīng)過垂直方向的失真校正處理的輸入圖像的一個區(qū)輸出作為校正的圖像。這使得可以保持彼此相鄰的區(qū)之間的劃分線(例如，中心線c)附近的失真校正結(jié)果的連續(xù)性。
[0044][成像設(shè)備]
[0045]接下來，將參照圖5描述成像設(shè)備的配置實(shí)例作為圖像處理設(shè)備的一個實(shí)例。
[0046]圖5是示出根據(jù)本公開的一種實(shí)施例的成像設(shè)備10的示例內(nèi)部配置的框圖。成像設(shè)備10包括圖像傳感器30、信號處理單元40、存儲器50以及控制部60。
[0047]圖像傳感器30是(XD(電荷耦合器件)、CMOS圖像傳感器等適用的成像裝置。根據(jù)預(yù)定快門操作，以區(qū)為單位(例如，以行為單位)執(zhí)行順序讀取操作。根據(jù)經(jīng)由成像透鏡20入射的光，基于成像設(shè)備10的主體的同步信號，圖像傳感器30使用有效成像區(qū)中的每個像素的光電二極管累積電荷，并且基于累積的電荷輸出模擬光電轉(zhuǎn)換信號。模擬光電轉(zhuǎn)換信號通過未示出的A/D轉(zhuǎn)換器被轉(zhuǎn)換成數(shù)字信號，以作為視頻信號(圖像)被提供到信號處理電路40。這里，圖像傳感器30可被配置為對光電轉(zhuǎn)換信號執(zhí)行模擬/數(shù)字轉(zhuǎn)換處理。
[0048]信號處理電路40對從圖像傳感器30提供的視頻信號(圖像)執(zhí)行諸如失真校正處理的信號處理，以將處理的信號輸出到外部。
[0049]信號處理電路40包括以下的模塊:相機(jī)信號處理部41、失真校正處理部42、同步信號生成部43以及顯示系統(tǒng)處理部44，并且各個模塊以使能數(shù)據(jù)通信的方式經(jīng)由總線45彼此連接。
[0050]例如，相機(jī)信號處理部41對從圖像傳感器30提供的視頻信號(圖像)執(zhí)行諸如像素缺陷校正、陰影校正、白平衡調(diào)節(jié)、拐點(diǎn)校正、伽馬校正等的處理，以生成并輸出輸出圖像。通常，在拐點(diǎn)校正、伽馬校正等之后壓縮位寬(動態(tài)范圍)，且因此使用這些校正結(jié)果的失真校正處理可以將電路抑制到小尺寸。
[0051]失真校正處理部42執(zhí)行處理，以校正由于從相機(jī)信號處理部41輸入的視頻信號而產(chǎn)生的圖像失真。以下將詳細(xì)描述該處理。
[0052]同步信號生成部43根據(jù)從外部提供的時鐘信號生成同步信號，以用于控制每個模塊或者信號處理電路40中的信號處理。同步信號生成部43將所生成的同步信號提供到失真校正處理部42。
[0053]顯示系統(tǒng)處理部44將在失真校正處理部42中經(jīng)過了失真校正處理的視頻信號或者存儲器50中存儲的視頻信號轉(zhuǎn)換成最終視頻輸出格式，以輸出到顯示裝置70。例如，顯示系統(tǒng)處理部44包括矩陣電路，以便將視頻信號中包含的紅色、綠色和藍(lán)色的彩色數(shù)據(jù)轉(zhuǎn)換成亮度信號Y、紅色色度信號Cr和藍(lán)色色度信號Cb的格式，以輸出到顯示裝置70。可使用液晶顯示裝置、有機(jī)EL顯示裝置等作為顯示裝置70。
[0054]存儲器50是從信號處理電路40寫入和調(diào)用數(shù)據(jù)輸出的記錄部。如下所述，存儲器50包括存儲器50-1和存儲器50-2 (參照圖6)。
[0055]例如，控制部60具有CPU(中央處理單元)61、用于存儲CPU61執(zhí)行的程序等的ROM(只讀存儲器)62、以及用作CPU61的工作區(qū)的RAM (隨機(jī)存取存儲器)63。這里，例如可使用電可擦除可編程ROM作為R0M62。例如，CPU61經(jīng)由總線45與成像設(shè)備10中的圖像傳感器30、信號處理電路40以及存儲器50耦接，以控制各個模塊。CPU61根據(jù)從外部提供的時
鐘信號運(yùn)行。
[0056][失真校正處理部]
[0057]圖6是示出圖5中示出的信號處理電路40中的失真校正處理部42的示例內(nèi)部配置的框圖。
[0058]失真校正處理部42包括執(zhí)行水平方向的失真校正處理的水平失真校正處理部42h、執(zhí)行垂直方向的失真校正處理的垂直失真校正處理部42v、以及失真校正同步信號生成部42TG。
[0059]水平失真校正處理部42h包括輸入緩沖部421、水平失真校正部422、水平失真校正分量計算部423、以及輸出緩沖部424。
[0060]垂直失真校正處理部42v包括輸入緩沖部425、垂直失真校正部426、垂直失真校正分量計算部427、以及輸出緩沖部428。
[0061]失真校正同步信號生成部42TG被提供有來自相機(jī)信號處理部41和同步信號生成部43的同步信號。失真校正同步信號生成部42TG基于從相機(jī)信號處理部41提供的同步信號生成用于水平方向的失真校正處理的同步信號Sh，并將所生成的信號提供到水平失真校正處理部42h中的每個模塊。另外，生成部42TG基于從同步信號生成部43提供的同步信號生成用于垂直方向的失真校正處理的同步信號Sv，并將所生成的信號提供到垂直失真校正處理部42v中的每個模塊。
[0062]在該實(shí)施例中，相比用于水平方向的失真校正處理的同步信號Sh，用于垂直方向的失真校正處理的同步信號Sv被延遲了小于一幀的預(yù)定時間段。根據(jù)用于水平方向和垂直方向的失真校正處理的這些同步信號Sh和Sv，在水平失真校正處理部42h和垂直失真校正處理部42v中處理每個模塊。
[0063](水平失真校正處理部)
[0064]以下，將描述水平失真校正處理部42h。
[0065]輸入緩沖部421從相機(jī)信號處理部41接收圖像I中的一個水平行的視頻信號數(shù)據(jù)，并且在其中設(shè)置的行存儲器中臨時存儲所接收的數(shù)據(jù)。根據(jù)從失真校正同步信號生成部42TG提供的用于水平失真校正處理的同步信號Sh，輸入緩沖部421順序地向水平失真校正部422輸出與行存儲器中臨時存儲的視頻信號相關(guān)的圖像中的各行的像素數(shù)據(jù)。這里，因?yàn)橥ㄟ^總線45的大量數(shù)據(jù)流等，順序地從相機(jī)信號處理部41輸出的像素數(shù)據(jù)的次序等可能變化。這種變化可通過輸入緩沖部421中設(shè)置的行存儲器吸收，使得像素數(shù)據(jù)以預(yù)定次序從輸入緩沖部421輸出到水平失真校正部422。
[0066]基于從水平失真校正分量計算部423提供的水平方向的各像素的失真校正數(shù)據(jù)(水平失真校正數(shù)據(jù))，水平失真校正部422根據(jù)用于水平失真校正處理的同步信號Sh對從輸入緩沖部421提供的一幀的視頻信號執(zhí)行水平失真校正處理(光柵處理)。水平失真校正部422從待校正的圖像I中的頂行2U-1到底行2L-n對各像素執(zhí)行水平失真校正處理(參照圖3的A)，并且其結(jié)果被順序地輸出到輸出緩沖部424。水平失真校正數(shù)據(jù)是指示構(gòu)成具有失真的原始圖像的像素點(diǎn)處的水平方向的校正量的參數(shù)。
[0067]水平失真校正分量計算部423根據(jù)用于水平失真校正處理的同步信號Sh，獲取從CPU61提供的成像透鏡20的透鏡信息以及其他設(shè)置信息，并且在諸如其中設(shè)置有寄存器的存儲部中臨時存儲和設(shè)置該信息。然后，水平失真校正分量計算部423基于其中設(shè)置的存儲部中存儲的信息為每一個像素生成水平失真校正數(shù)據(jù)，以將所生成的數(shù)據(jù)提供到水平失真校正部422。
[0068]例如，透鏡信息是通過在水平方向和垂直方向劃分圖像I而獲得的網(wǎng)格點(diǎn)處的失真校正數(shù)據(jù)，并且從成像透鏡20的失真像差特性和特定時刻成像透鏡20的變焦位置得到。一般地，在光學(xué)變焦功能中，當(dāng)成像透鏡20在寬度方向上移動時，在圖像中發(fā)生桶形失真，并且當(dāng)成像透鏡20在長焦方向上移動時，在圖像中發(fā)生枕形失真。例如，失真校正數(shù)據(jù)存儲在諸如CPU61中的寄存器或R0M62等的存儲部中，以作為其中圖像I上的網(wǎng)格點(diǎn)與水平方向和垂直方向的失真校正數(shù)據(jù)(校正值)相關(guān)的表。例如，若在水平方向具有2048個像素并且在垂直方向具有1080個像素的圖像在各方向被分成十個相等的部分，則在水平方向的每200個像素以及垂直方向的每100個像素處存在網(wǎng)格點(diǎn)。
[0069]這里，從CPU61提供的其他設(shè)置信息包括圖像I中的待校正的區(qū)等。失真校正處理部42對由CPU61指定的圖像I的區(qū)執(zhí)行水平方向和垂直方向的失真校正處理。
[0070]水平失真校正分量計算部423基于用于水平失真校正處理的同步信號Sh確定待校正的像素。然后，對于位置與該像素相同或者在其附近的網(wǎng)格點(diǎn)，所述部423從表讀取水平方向的失真校正數(shù)據(jù)(校正值)，以計算相關(guān)像素的水平失真校正數(shù)據(jù)。
[0071]輸出緩沖部424是FIFO (先入先出)存儲器。根據(jù)用于水平失真校正處理的同步信號Sh，輸出緩沖部424接收在水平失真校正部422中經(jīng)過水平失真校正處理的水平校正的視頻信號，并且在緩沖處理之后將水平校正的視頻信號寫入到存儲器50-1中。[0072]存儲器50-1可以由具有預(yù)定容量的幀存儲器構(gòu)成。根據(jù)用于垂直失真校正處理的同步信號Sv，以垂直方向的預(yù)定像素寬度從存儲器50-1讀取水平校正的視頻信號。
[0073](垂直失真校正處理部)
[0074]以下，將描述垂直失真校正處理部42v。
[0075]根據(jù)從失真校正同步信號生成部42TG提供的用于垂直失真校正處理的同步信號Sv，輸入緩沖部425從存儲器50-1讀取水平校正的視頻信號，并且將讀取信號臨時存儲在其中設(shè)置的行存儲器中。輸入緩沖部425只要具有如下容量即可:該容量可以存儲對于實(shí)現(xiàn)根據(jù)該實(shí)施例的垂直方向的失真校正處理而言是可取的最小行數(shù)的數(shù)據(jù)。例如，行數(shù)越少，處理延遲越小，但垂直失真校正的效果也變得越小，且因此，優(yōu)選充分設(shè)計行數(shù)。存儲器50-1的一行存儲有預(yù)定像素數(shù)的數(shù)據(jù)，例如，128個像素的數(shù)據(jù)。輸入緩沖部425根據(jù)用于水平失真校正處理的同步信號Sh，將涉及臨時存儲在行存儲器中的視頻信號的圖像中的相應(yīng)行的像素數(shù)據(jù)順序地輸出到垂直失真校正部426。
[0076]基于從垂直失真校正分量計算部427提供的垂直方向的各像素的失真校正數(shù)據(jù)(垂直失真校正數(shù)據(jù))，垂直失真校正部426根據(jù)用于垂直失真校正處理的同步信號Sv對從輸入緩沖部425提供的視頻信號執(zhí)行垂直失真校正處理(帶處理)。垂直失真校正數(shù)據(jù)是指示構(gòu)成具有失真的原始圖像的像素點(diǎn)處的垂直方向的校正量的參數(shù)。
[0077]垂直失真校正分量計算部427根據(jù)用于垂直失真校正處理的同步信號Sv，獲取從CPU61提供的成像透鏡20的透鏡信息(用于失真校正的表)以及其他設(shè)置信息，并且在其中設(shè)置的諸如寄存器的存儲部中臨時存儲和設(shè)置該信息。然后，垂直失真校正分量計算部427基于其中設(shè)置的存儲部中存儲的信息為每一個像素生成垂直失真校正數(shù)據(jù)，以將所生成的數(shù)據(jù)提供到垂直失真校正部426。與水平失真校正處理的情況類似，垂直失真校正分量計算部427基于用于垂直失真校正處理的同步信號Sv確定待校正的像素。然后，對于位置與該像素相同或者在其附近的網(wǎng)格點(diǎn)，所述部427從表中讀取垂直方向的失真校正數(shù)據(jù)(校正值)，以計算相關(guān)像素的垂直失真校正數(shù)據(jù)。
[0078]輸出緩沖部428是FIFO (先入先出)存儲器。輸出緩沖部428根據(jù)用于失真校正處理的垂直同步信號Sv，接收在垂直失真校正部426中經(jīng)過垂直失真校正處理的視頻信號(校正的視頻信號)，并且在緩沖處理之后將該校正的視頻信號寫入到存儲器50-2中。
[0079]存儲器50-2可以由具有預(yù)定容量的幀存儲器構(gòu)成。根據(jù)成像設(shè)備10的主體的同步信號，以幀為單位讀取存儲器50-2中存儲的視頻信號的數(shù)據(jù)，并將該數(shù)據(jù)提供到顯示系統(tǒng)處理部44。
[0080]接下來，將參照圖7描述如上配置的信號處理電路40的失真校正處理。
[0081]圖7是示出根據(jù)本公開的一種實(shí)施例的失真校正處理的流程圖。
[0082]首先，根據(jù)按下未示出的快門按鈕或視頻記錄按鈕或者指示圖像拍攝的其他控制信號，CPU61 (參照圖5)根據(jù)成像設(shè)備10的主體的同步信號，對圖像傳感器30中的各像素執(zhí)行曝光(步驟SI)。然后，圖像處理器30從每個像素讀取像素數(shù)據(jù)(步驟S2)。之后，基于從圖像傳感器30的各像素讀取的像素數(shù)據(jù)的視頻信號(圖像)被輸入到信號處理電路40(步驟S3)。
[0083]與該處理并行，CPU61獲取成像透鏡20的透鏡數(shù)據(jù)(失真像差特性、變焦位置等)(步驟S4)，以計算并設(shè)置失真校正數(shù)據(jù)(步驟S5)。然后，CPU61將包括所計算的失真校正數(shù)據(jù)(校正值)的表提供到水平失真校正處理部42h和垂直失真校正處理部42v (參照圖6)(步驟S3)。
[0084]接下來，信號處理電路40中的相機(jī)信號處理部41對輸入視頻信號(圖像)執(zhí)行預(yù)定信號處理(步驟S6)。然后，相機(jī)信號處理部41將經(jīng)過了預(yù)定信號處理的視頻信號提供到失真校正處理部42中的水平失真校正處理部42h (輸入緩沖部421)，并且將上述同步信號提供到失真校正處理部42中的失真校正同步信號生成部42TG (步驟S7)。
[0085]隨后，水平失真校正處理部42h中的水平失真校正分量計算部423根據(jù)從失真校正同步信號生成部42TG提供的用于水平失真校正處理的同步信號Sv，將從CPU61提供的透鏡信息(用于失真校正的表)和其他設(shè)置信息存儲在諸如寄存器的存儲部中。然后，部423基于透鏡信息和其他設(shè)置信息，計算和設(shè)置用于水平方向的失真校正處理的每一個像素的失真校正數(shù)據(jù)。類似地，垂直失真校正處理部42v中的垂直失真校正分量計算部427根據(jù)從失真校正同步信號生成部42TG提供的用于垂直失真校正處理的同步信號Sv (其相對于同步信號Sh延遲了小于一幀的預(yù)定時間段)，將從CPU61提供的透鏡信息和其他設(shè)置信息存儲在諸如寄存器的存儲部中。然后，部427計算和設(shè)置用于垂直方向的失真校正處理的每一個像素的失真校正數(shù)據(jù)(步驟S7)。
[0086]接下來，基于從水平失真校正分量計算部423提供的各像素的水平失真校正數(shù)據(jù)，水平失真校正部422根據(jù)用于水平失真校正處理的同步信號Sh對從輸入緩沖部421提供的一幀的視頻信號執(zhí)行水平失真校正處理(光柵處理)(步驟S8)。其校正結(jié)果(水平校正的視頻信號的數(shù)據(jù))被順序地輸出到輸出緩沖部424。該水平失真校正部422執(zhí)行該水平失真校正處理，直到使用一幀的視頻信號完成了對圖像的所有像素的處理。
[0087]輸出緩沖部424根據(jù)用于水平失真校正處理的同步信號Sh，將從水平失真校正部422輸入的水平校正的視頻信號順序地寫入到存儲器50-1中(步驟S9)。
[0088]垂直失真校正處理部42v中的輸入緩沖部425根據(jù)用于垂直失真校正處理的同步信號Sv，從存儲器50-1讀取水平校正的視頻信號的數(shù)據(jù)，并將該數(shù)據(jù)提供到垂直失真校正部426 (步驟S10)。在完成了對通過在垂直方向劃分輸入圖像而獲得的多個區(qū)中的一個區(qū)的水平方向失真校正處理時，用于垂直失真校正處理的該同步信號Sv被提供到輸入緩沖部 425。
[0089]根據(jù)用于垂直失真校正處理的同步信號Sv，垂直失真校正部426基于從垂直失真校正分量計算部427提供的失真校正數(shù)據(jù)，對從輸入緩沖部425提供的輸入圖像的上述一個區(qū)的視頻信號執(zhí)行垂直失真校正處理(帶處理)(步驟S11)。在該垂直失真校正處理期間，水平失真校正處理部42h根據(jù)用于水平失真校正處理的同步信號Sh，對與上述一個區(qū)相鄰的區(qū)執(zhí)行水平失真校正處理。
[0090]輸出緩沖部428根據(jù)用于垂直失真校正處理的同步信號Sv，將從垂直失真校正部426輸入的輸入圖像中的上述一個區(qū)的校正的視頻信號的數(shù)據(jù)順序地寫入到存儲器50-2中(步驟S12)。
[0091]這里，若完成了對與輸入圖像中的一個區(qū)相鄰的區(qū)的水平失真校正處理，則該處理進(jìn)行到步驟S10，并且通過垂直失真校正部426對與相關(guān)的一個區(qū)相鄰的區(qū)執(zhí)行垂直失真校正處理。
[0092]例如，在對輸入圖像中的所有區(qū)(即，所有像素)執(zhí)行垂直失真校正處理之后，從存儲器50-2讀取校正的視頻信號(步驟S13)，以輸出到顯示系統(tǒng)處理部44 (步驟S14)。
[0093][垂直失真校正處理的時序]
[0094]圖8是根據(jù)本公開一種實(shí)施例的失真校正處理的時序圖(參照圖3)。這里，在該實(shí)例中，垂直失真校正處理的開始時刻不在水平失真校正處理完成時，而是在完成水平失真校正處理之后的根據(jù)用于垂直失真校正處理的同步信號Sv的時刻。
[0095]例如，根據(jù)用于圖像傳感器30的同步信號(8-1)以每周期1/60 (最短1/62.5)秒的時段執(zhí)行圖像傳感器30的曝光。此外，CPU61獲取成像透鏡20的透鏡信息(用于失真校正的表)等(8-2 )。在圖8示出的實(shí)例中，用(I)、( 2 )和(3 )表示與從圖像傳感器30順序地輸出的第一至第三圖像相關(guān)的時間段。
[0096]在圖像傳感器30的曝光以及CPU61獲取透鏡信息等之后，失真校正處理部42中的水平失真校正處理部42h根據(jù)用于水平失真校正處理的同步信號Sh (8-3)，從CPU61接收并設(shè)置用于水平失真校正處理的失真校正數(shù)據(jù)(8-4)。之后，從圖像傳感器30輸出圖像，該圖像的各像素根據(jù)用于水平失真校正處理的同步信號Sh順序經(jīng)過水平失真校正處理(8-5)，并且經(jīng)過水平失真校正處理的圖像(水平校正的圖像)被寫入到存儲器50-1 (8-6)。
[0097]此時，如圖3的A所示，從頂行2U-1到底行2L_n對待校正的圖像I執(zhí)行水平方向的失真校正處理，并且根據(jù)用于水平失真校正處理的同步信號Sh在存儲器50-1中累積其結(jié)果。然后，在以像素行為單位的對上述圖像I的失真校正處理期間，除了作為圖像I的上半部的第一區(qū)，在完成了對屬于第二區(qū)并延續(xù)到第一區(qū)的行的水平方向的失真校正處理時，恰在其后根據(jù)用于垂直失真校正處理的同步信號Sv開始對第一區(qū)的垂直方向的失真校正處理。
[0098]在完成對圖像I的第一區(qū)的水平失真校正處理之后，根據(jù)用于垂直失真校正處理的同步信號Sv (8-7)，垂直失真校正處理部42v從CPU61接收并設(shè)置垂直失真校正處理的失真校正數(shù)據(jù)(8-8)。這里，在結(jié)束水平失真校正處理的失真校正數(shù)據(jù)的設(shè)置并開始水平失真校正處理的時刻(時間tl)，開始垂直失真校正處理的失真校正數(shù)據(jù)的設(shè)置。分別為第一區(qū)和第二區(qū)設(shè)置垂直失真校正處理的失真校正數(shù)據(jù)。用于垂直失真校正處理的該同步信號Sv是相對于用于水平失真校正處理的同步信號被延遲的同步信號，并且每周期的時段是用于水平失真校正處理的同步信號的一半(在該實(shí)例中為1/120秒)。
[0099]在從上述經(jīng)過每周期的一個時段之后(時間t2)，根據(jù)用于垂直失真校正處理的同步信號Sv，從像素組3U-1至像素組3L-n和3U_m在垂直方向上順序讀取存儲器50_1，以執(zhí)行垂直失真校正處理，像素組3U-1在圖像I的第一區(qū)的水平校正的圖像中的頂行2U-1中，像素組3L-n在底彳丁 2L~n中，并且3Un在比底彳丁 2L-n低一彳丁的彳丁 2Un中。
[0100]此外，在完成對作為圖像I的下半部分的第二區(qū)的水平方向的失真校正處理時，之后立即根據(jù)用于垂直失真校正處理的同步信號Sv對第二區(qū)開始垂直方向的失真校正處理。換句話說，在從時刻t2經(jīng)過每周期的一個時段之后(時刻t3)，從像素組3L_m和像素組3L-1至像素組3L-n在垂直方向順序讀取存儲器50_1，以執(zhí)行垂直失真校正處理(8_9)，像素組3L-m在圖像I的第二區(qū)的水平校正的圖像中比頂行2L-1高一行的行2U_n中，像素組3L-1在第二區(qū)的頂行2L-1中，并且像素組3L-n在底行2L_n中。
[0101]根據(jù)用于垂直失真校正處理的同步信號Sv，將通過對圖像I的第一區(qū)執(zhí)行垂直失真校正處理而獲得的校正的圖像和通過對圖像I的第二區(qū)執(zhí)行垂直失真校正處理而獲得的校正的圖像順序?qū)懭氲酱鎯ζ?0-2中(8-10)。
[0102]然后，根據(jù)用于垂直失真校正處理的同步信號Sv，在從對第二區(qū)的垂直失真校正處理的開始時刻經(jīng)過每周期的一個時段之后(時刻t4)，垂直失真校正處理部42v從存儲器50-2讀取校正的圖像，并且將所讀取的圖像輸出到顯示系統(tǒng)處理部44 (8-11)。
[0103]失真校正處理部42對第一圖像之后的第二圖像、第三圖像等順序地執(zhí)行這一系列失真校正處理。
[0104]以上描述的實(shí)施例具有如下的配置，其中，將輸入圖像在垂直方向分成兩個相等部分，并且在完成了對上部區(qū)域的水平失真校正處理時，開始對上部區(qū)的垂直失真校正處理。換句話說，在開始水平失真校正處理后，延遲小于一幀的預(yù)定時間段(在上述實(shí)例中為1/2幀)開始垂直失真校正處理。根據(jù)以上內(nèi)容，可以在完成對整個輸入圖像的水平失真校正處理之前開始垂直失真校正處理。結(jié)果，相比于現(xiàn)有技術(shù)，可以減小從水平失真校正處理的時間段的開始直到完成垂直失真校正處理以獲得校正的圖像所產(chǎn)生的延遲。例如，若在完成對輸入圖像的上部區(qū)的水平失真校正處理時開始對上部區(qū)的垂直失真校正處理，則可以將延遲抑制到約1.5幀的時間，該延遲是從水平失真校正處理的時間段的開始直到完成垂直失真校正處理以獲得校正的圖像而產(chǎn)生的。
[0105]另外，該實(shí)施例可以只要具有如下容量即可:該容量可以存儲對于實(shí)現(xiàn)垂直方向的失真校正處理而言是可取的最小行數(shù)的數(shù)據(jù)，并因此不需要許多行存儲器。
[0106]除了輸入圖像的第一區(qū)，若對第一區(qū)中重復(fù)處理的部分和第二區(qū)的水平失真校正處理所占用的時間短于垂直同步信號的一半，如圖4所示，則可以將垂直失真校正處理的開始的每周期的時段設(shè)置為水平失真校正處理的開始的每周期的時段的一半。在該情況下，可以不確認(rèn)完成對第一區(qū)的水平失真校正處理，這會導(dǎo)致處理簡化，并將電路抑制到小尺寸。
[0107]<2.其他〉
[0108]這里，上述實(shí)施例描述了其中將輸入圖像在垂直方向上分成兩個相等部分的實(shí)例(參照圖3和圖4)，但可以不分成兩個相等部分。例如，可以將輸入圖像在垂直方向分成三個或更多個相等區(qū)。每當(dāng)在完成對通過劃分輸入圖像而獲得的多個區(qū)中的每個區(qū)的水平方向的失真校正處理時，開始對已完成在水平方向的相關(guān)失真校正處理的區(qū)的垂直方向的失真校正處理。
[0109]例如，若將輸入圖像在垂直方向分成兩個相等部分，則可以精確地校正圖像的中心部分的失真。
[0110]此外，若將輸入圖像在垂直方向分成三個或更多個相等部分，則相比二等劃分，能實(shí)現(xiàn)更高速度的處理，但在多個劃分區(qū)中重復(fù)處理的部分的增加增大了要處理的像素數(shù)。然而，若在有大失真的成像透鏡、圖像拍攝條件和環(huán)境下，可以精確地校正輸入圖像。
[0111]另外，上述實(shí)施例描述了其中將圖像在垂直方向分成兩個相等部分的實(shí)例(參照圖3和圖4)，但可以不分成相等部分。例如，若將圖像在垂直方向分成兩個部分，則可以不相等地劃分圖像，使得上部區(qū)可以是整個圖像的三分之一的區(qū)，下部區(qū)可以是整個圖像的三分之二的區(qū)等。
[0112]然而，在高速處理、要處理的像素數(shù)以及失真校正精度之間的平衡方面，一個區(qū)優(yōu)選具有整個圖像的三分之一以上的大小。[0113]此外，以上實(shí)施例描述了其中將預(yù)定像素數(shù)(例如，128個像素)的數(shù)據(jù)存儲在輸入緩沖部425中的行存儲器中以執(zhí)行垂直失真校正處理的帶處理的實(shí)例，但不限于該實(shí)例。若不限制輸入緩沖部425中的行存儲器，則配置可以是在一行中存儲一個像素的數(shù)據(jù)。在該情況下，可以執(zhí)行更精細(xì)的垂直失真校正處理，但例如，對于開始垂直失真校正處理的像素地址而言，數(shù)據(jù)量增加?？梢砸愿玫靥幚硇屎透叩奶幚硭俣葓?zhí)行以某些特定數(shù)量的像素為單位的垂直失真校正處理，而不是以一個像素為單位或少數(shù)像素為單位的垂直失真校正處理。
[0114]此外，要進(jìn)行失真校正處理的圖像不僅包括從圖像傳感器30輸出的圖像，還包括從圖像傳感器30輸出并臨時存儲在諸如閃存存儲器的存儲介質(zhì)中的圖像、從外部接收并存儲在存儲介質(zhì)中的圖像等。這里，在該情況下，可以將存儲器50用作存儲介質(zhì)。
[0115]此外，上述實(shí)施例示出了如下的配置，其中，基于從相機(jī)信號處理部41提供的同步信號生成用于水平失真校正處理的同步信號Sh，并且基于從同步信號生成部43提供的同步信號生成用于垂直失真校正處理的同步信號Sv (參照圖6和圖8)。然而，實(shí)施例不限于該配置。例如，可以基于從同步信號生成部43提供的同步信號，生成用于水平失真校正處理的同步信號Sh和用于垂直失真校正處理的同步信號Sv，其中，同步信號Sv相對于同步信號Sh被延遲，并且其每周期的時段是同步信號Sh的一半。例如，若對存儲介質(zhì)中存儲的圖像執(zhí)行失真校正，則難以使用從圖像傳感器30輸出的同步信號，但是像這樣的配置使得可以使用從同步信號生成部43提供的同步信號來執(zhí)行垂直失真校正處理和水平失真校正處理。
[0116]此外，對于在上述實(shí)施例中從CPU61提供到失真校正處理部42的其他設(shè)置信息，可以給出用于相機(jī)抖動校正功能的設(shè)置信息。
[0117]另外，上述實(shí)施例可適用于對由于卷簾式快門系統(tǒng)引起的圖像失真的失真校正。在該情況下，圖像上的網(wǎng)格點(diǎn)和用于校正由于卷簾式快門系統(tǒng)引起的水平方向和垂直方向的失真的失真校正數(shù)據(jù)，可以在從CPU61提供的用于失真校正的表中被登記為彼此關(guān)聯(lián)。另外，反映由于成像透鏡引起的失真的校正量和由于卷簾式快門系統(tǒng)引起的失真的校正量的失真校正數(shù)據(jù)，可以在表中被登記為與圖像上的網(wǎng)格點(diǎn)相關(guān)。這使得可以一起校正由于成像透鏡引起的失真和由于卷簾式快門系統(tǒng)引起的失真。
[0118]此外，上述實(shí)施例描述了其中成像透鏡20附著到成像設(shè)備10的主體的實(shí)例，但成像透鏡20可以從成像設(shè)備10的主體被拆卸。
[0119]另外，本技術(shù)還可以如下配置。
[0120](I) 一種圖像處理設(shè)備，包括:
[0121]水平失真校正處理部，被配置為根據(jù)提供的同步信號在水平方向上對輸入圖像執(zhí)行失真校正處理；
[0122]存儲器，被配置為順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果；以及
[0123]垂直失真校正處理部，被配置為在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
[0124]( 2 )根據(jù)(I)所述的圖像處理設(shè)備，其中，[0125]每當(dāng)由所述水平失真校正處理部對通過在所述垂直方向上劃分所述輸入圖像而獲得的多個區(qū)中的每個區(qū)完成在所述水平方向上的所述失真校正處理時，所述垂直失真校正處理部對已完成在所述水平方向上的所述失真校正處理的所述區(qū)開始在所述垂直方向上的所述失真校正處理。
[0126]( 3 )根據(jù)(2 )所述的圖像處理設(shè)備，其中，
[0127]所述多個區(qū)中的每個區(qū)都具有整個所述輸入圖像的三分之一以上的大小。
[0128]( 4 )根據(jù)(2 )或(3 )所述的圖像處理設(shè)備，其中，
[0129]在由所述水平失真校正處理部對通過在所述垂直方向上將所述輸入圖像劃分成兩個相等區(qū)而獲得的區(qū)中的第一區(qū)完成在所述水平方向上的所述失真校正處理之后，所述垂直失真校正處理部對所述輸入圖像中的所述第一區(qū)開始在所述垂直方向上的所述失真校正處理。
[0130](5)根據(jù)(2)至(4)中任一項(xiàng)所述的圖像處理設(shè)備，其中，
[0131]所述水平失真校正處理部對所述輸入圖像中的一個區(qū)以及包括與所述一個區(qū)連續(xù)并且與所述一個區(qū)相鄰的區(qū)中所包含的預(yù)定數(shù)量的水平行的部分，執(zhí)行在所述水平方向上的所述失真校正處理，以及
[0132]所述垂直失真校正處理部對已經(jīng)過在所述水平方向上的所述失真校正處理的所述輸入圖像的所述一個區(qū)以及包括所述預(yù)定數(shù)量的水平行的校正處理的輸入圖像執(zhí)行在所述垂直方向上的所述失真校正處理，以將經(jīng)過在所述垂直方向上的所述失真校正處理的所述輸入圖像中的所述一個區(qū)輸出為校正處理的輸出圖像。
[0133](6) 一種成像設(shè)備，包括:
[0134]圖像傳感器；
[0135]水平失真校正處理部，被配置為根據(jù)提供的同步信號對來自所述圖像傳感器的輸入圖像執(zhí)行在水平方向上的失真校正處理；
[0136]存儲器，被配置為順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果；
[0137]垂直失真校正處理部，被配置為在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
[0138](7) 一種圖像處理方法，包括:
[0139]由圖像處理設(shè)備中所包括的水平失真校正處理部根據(jù)提供的同步信號，對輸入圖像執(zhí)行在水平方向上的失真校正處理；
[0140]由所述水平失真校正處理部在存儲器中順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果；以及
[0141]在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，由所述圖像處理設(shè)備中所包括的垂直失真校正處理部以小于一幀的預(yù)定時間段的延遲，從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
[0142](8) 一種程序，使得計算機(jī)執(zhí)行以下過程:
[0143]根據(jù)提供的同步信號對輸入圖像執(zhí)行在水平方向上的失真校正處理；[0144]在存儲器中順序地存儲在所述水平方向上的所述失真校正處理的結(jié)果；以及
[0145]在開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
[0146][本公開的范圍中的實(shí)例]
[0147]這里，如上所述，圖5中的成像設(shè)備10執(zhí)行用于從廣闊的視野提取圖像結(jié)構(gòu)的圖像處理。通過這種圖像處理提取的信息可被用于改善圖像質(zhì)量等的處理，且因此，設(shè)備10不僅可用于數(shù)碼攝像機(jī)，還可用于其它設(shè)備，諸如實(shí)現(xiàn)用于從廣闊的視野提取圖像結(jié)構(gòu)的模塊的設(shè)備。例如，設(shè)備的種類可包括諸如數(shù)碼相機(jī)、打印機(jī)、諸如顯示器的顯示裝置等的成像設(shè)備。此外，設(shè)備10還可適用于用于制作或編輯圖像的設(shè)備和計算機(jī)程序。
[0148][計算機(jī)硬件配置的實(shí)例]
[0149]值得注意的是，上述的一系列處理可通過硬件執(zhí)行，并且也可通過軟件執(zhí)行。若通過軟件執(zhí)行該一系列處理，則從程序記錄介質(zhì)將構(gòu)成軟件的程序安裝到專用硬件中包含的計算機(jī)或通用個人計算機(jī)或者能夠通過安裝有各種程序來執(zhí)行各種功能的類似裝置中。
[0150]圖9是示出執(zhí)行根據(jù)程序的之前描述的一系列處理的計算機(jī)的示例硬件配置的框圖。
[0151]在該計算機(jī)中，CPUlOl、ROM (只讀存儲器)102以及RAM103通過總線104彼此連接。
[0152]輸入/輸出接口 105也連接至總線104。由鍵盤、鼠標(biāo)、麥克風(fēng)等組成的輸入單元106、由顯示器、揚(yáng)聲器等組成的輸出單元107、由硬盤驅(qū)動器、非易失性存儲器等組成的記錄單元108、由網(wǎng)絡(luò)接口等組成的通信單元109、以及驅(qū)動諸如磁盤、光盤、磁光盤或半導(dǎo)體存儲器的可移動介質(zhì)111的驅(qū)動器110均連接至輸入/輸出接口 105。
[0153]在如上所述配置的計算機(jī)中，一個實(shí)例是，CPUlOl經(jīng)由輸入/輸出接口 105和總線104將記錄單元108中記錄的程序加載到RAM103中，并且執(zhí)行該程序來執(zhí)行之前描述的一系列處理。
[0154]由計算機(jī)(CPUlOl)執(zhí)行的程序被記錄在可移動介質(zhì)111中，可移動介質(zhì)111是例如由磁盤(包括軟盤)、光盤(諸如⑶-ROM (光盤-只讀存儲器))或DVD (數(shù)字多功能光盤)、磁-光盤或半導(dǎo)體存儲器組成的封裝介質(zhì)，或者經(jīng)由諸如局域網(wǎng)、互聯(lián)網(wǎng)或數(shù)字衛(wèi)星廣播的有線或無線傳輸介質(zhì)來提供。
[0155]之后，通過將可移動介質(zhì)111裝載到驅(qū)動器110中，可以經(jīng)由輸入/輸出接口 105將程序安裝到記錄單元108中。還可以使用通信單元109來經(jīng)由有線或無線傳輸介質(zhì)接收程序，并將程序安裝到記錄單元108中?？蛇x地，可以提前將程序安裝到R0M102或記錄單元108中ο
[0156]值得注意的是，由計算機(jī)執(zhí)行的程序可以是以根據(jù)該說明書中描述的順序按照時間序列處理的程序，或者是并行或諸如在調(diào)用時以必要的時序處理的程序。
[0157]本領(lǐng)域普通技術(shù)人員應(yīng)當(dāng)理解，在所附權(quán)利要求或其等同物的范圍內(nèi)，根據(jù)設(shè)計需求和其它因素，可以有各種修改、組合、子組合和替換。
[0158]換句話說，上述每個實(shí)施例中的實(shí)例是本公開的優(yōu)選具體實(shí)例，因此，技術(shù)上優(yōu)選有各種限制。然而，除非在每個實(shí)施方式中具體描述了對本公開的限制，否則本公開的技術(shù)范圍不受這些實(shí)施例的限制。例如，在以上說明書中所引用的使用的材料及其使用量、處理時間、處理順序、每個參數(shù)的數(shù)值條件等僅是優(yōu)選實(shí)例，并且在說明書中使用的附圖中的大小、形狀、排列關(guān)系等均是示意性描述的。
【權(quán)利要求】
1.一種圖像處理設(shè)備，包括: 水平失真校正處理部，被配置為根據(jù)提供的同步信號在水平方向上對輸入圖像執(zhí)行失真校正處理； 存儲器，被配置為順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果；以及 垂直失真校正處理部，被配置為在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中， 每當(dāng)由所述水平失真校正處理部對通過在所述垂直方向上劃分所述輸入圖像而獲得的多個區(qū)中的每個區(qū)完成在所述水平方向上的所述失真校正處理時，所述垂直失真校正處理部對已完成在所述水平方向上的所述失真校正處理的所述區(qū)開始在所述垂直方向上的所述失真校正處理。
3.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，其中， 所述多個區(qū)中的每個區(qū)都具有整個所述輸入圖像的三分之一以上的大小。
4.根據(jù)權(quán)利要求3所述的圖像處理設(shè)備，其中， 在由所述水平失真校正處理部對通過在所述垂直方向上將所述輸入圖像劃分成兩個相等區(qū)而獲得的區(qū)中的第一區(qū)完成在所述水平方向上的所述失真校正處理之后，所述垂直失真校正處理部對所述輸入圖像中的所述第一區(qū)開始在所述垂直方向上的所述失真校正處理。
5.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，其中， 所述水平失真校正處理部對所述輸入圖像中的一個區(qū)以及包括與所述一個區(qū)連續(xù)并且與所述一個區(qū)相鄰的區(qū)中所包含的預(yù)定數(shù)量的水平行的部分，執(zhí)行在所述水平方向上的所述失真校正處理，以及 所述垂直失真校正處理部對已經(jīng)過在所述水平方向上的所述失真校正處理的所述輸入圖像的所述一個區(qū)以及包括所述預(yù)定數(shù)量的水平行的校正處理的輸入圖像執(zhí)行在所述垂直方向上的所述失真校正處理，以將經(jīng)過在所述垂直方向上的所述失真校正處理的所述輸入圖像中的所述一個區(qū)輸出為校正處理的輸出圖像。
6.—種成像設(shè)備,包括: 圖像傳感器； 水平失真校正處理部，被配置為根據(jù)提供的同步信號對來自所述圖像傳感器的輸入圖像執(zhí)行在水平方向上的失真校正處理； 存儲器，被配置為順序地存儲由所述水平失真校正處理部在所述水平方向上的所述失真校正處理的結(jié)果； 垂直失真校正處理部，被配置為在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所 述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
7.一種圖像處理方法，包括: 由圖像處理設(shè)備中所包括的水平失真校正處理部根據(jù)提供的同步信號，對輸入圖像執(zhí)行在水平方向上的失真校正處理； 由所述水平失真校正處理部在存儲器中順序地存儲由所述水平失真校正處理部執(zhí)行的在所述水平方向上的所述失真校正處理的結(jié)果；以及 在由所述水平失真校正處理部開始在所述水平方向上的所述失真校正處理之后，由所述圖像處理設(shè)備中所包括的垂直失真校正處理部以小于一幀的預(yù)定時間段的延遲，從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
8.根據(jù)權(quán)利要求7所述的圖像處理方法，其中， 每當(dāng)由所述水平失真校正處理部對通過在所述垂直方向上劃分所述輸入圖像而獲得的多個區(qū)中的每個區(qū)完成在所述水平方向上的所述失真校正處理時，由所述垂直失真校正處理部對已完成在所述水平方向上的所述失真校正處理的所述區(qū)開始在所述垂直方向上的所述失真校正處理。
9.一種程序，使得計算機(jī)執(zhí)行以下過程: 根據(jù)提供的同步信號對輸入圖像執(zhí)行在水平方向上的失真校正處理； 在存儲器中順序地存儲在所述水平方向上的所述失真校正處理的結(jié)果；以及在開始在所述水平方向上的所述失真校正處理之后，以小于一幀的預(yù)定時間段的延遲從所述存儲器順序地讀取在所述水平方向上的所述失真校正處理的結(jié)果，以便開始在垂直方向上的失真校正處理。
【文檔編號】H04N5/232GK103813054SQ201310547568
【公開日】2014年5月21日 申請日期:2013年11月6日 優(yōu)先權(quán)日:2012年11月13日
【發(fā)明者】原學(xué), 中島健 申請人:索尼公司