圖像對齊設(shè)備和使用該設(shè)備的圖像對齊方法【專利摘要】提供了一種圖像對齊設(shè)備和使用該設(shè)備的圖像對齊方法。所述圖像對齊設(shè)備包括:第一轉(zhuǎn)換函數(shù)估計單元,用于基于從通過使用第一圖像傳感器捕獲的第一圖像和通過使用第二圖像傳感器捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù);第二轉(zhuǎn)換函數(shù)估計單元,用于基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)?!緦@f明】圖像對齊設(shè)備和使用該設(shè)備的圖像對齊方法[0001]本申請要求于2013年8月20日提交到韓國知識產(chǎn)權(quán)局的第10-2013-0098607號韓國專利申請的優(yōu)先權(quán),所述專利申請的公開通過引用完整地包含于此?!?br>技術(shù)領(lǐng)域:
】[0002]與示例性實施例一致的設(shè)備和方法涉及圖像對齊?!?br>背景技術(shù):
】[0003]近來,為了提高在監(jiān)視系統(tǒng)和醫(yī)學圖像領(lǐng)域中的用于對變化的檢測、運動檢測、超分辨率圖像的恢復或者對象的識別和跟蹤的算法的精度和可靠性,積極地執(zhí)行了對使用兩個或更多個傳感器的補充信息融合的研究?!?br/>發(fā)明內(nèi)容】[0004]一個或更多個示例性實施例提供了一種圖像對齊設(shè)備和使用該設(shè)備的圖像對齊方法。[0005]示例性實施例的各個方面將在之后的描述中被部分地闡述,并且部分地,將從描述中是清楚的,或者可通過這些實施例的實踐來得知。[0006]根據(jù)示例性實施例的一方面,提供了一種圖像對齊設(shè)備,所述設(shè)備可包括:第一轉(zhuǎn)換函數(shù)估計單元,用于基于從通過使用第一圖像傳感器捕獲的第一圖像和通過使用第二圖像傳感器捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù);第二轉(zhuǎn)換函數(shù)估計單元,用于基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)。[0007]所述圖像對齊設(shè)備還可包括:轉(zhuǎn)換函數(shù)選擇單元,用于根據(jù)第一轉(zhuǎn)換函數(shù)是否被估計來選擇第一轉(zhuǎn)換函數(shù)或者第二轉(zhuǎn)換函數(shù)作為最終轉(zhuǎn)換函數(shù)。[0008]在第一轉(zhuǎn)換函數(shù)沒有被估計的情況下或者周期性地,第二轉(zhuǎn)換函數(shù)估計單元可估計第二轉(zhuǎn)換函數(shù)。[0009]第一轉(zhuǎn)換函數(shù)估計單元可包括:特征點檢測單元,用于分別檢測第一圖像和第二圖像中的特征點;特征點選擇單元,用于從檢測到的第一圖像和第二圖像中的特征點之中選擇對應特征點;第一估計單元,用于基于選擇的對應特征點來估計第一轉(zhuǎn)換函數(shù)。[0010]特征點選擇單元可包括:補丁圖像獲取單元,用于獲取在補丁圖像的中心分別具有第一圖像和第二圖像中的特征點的補丁圖像;候選選擇單元,用于針對第一圖像中的特征點,選擇與第一圖像中的特征點對應的第二圖像中的候選特征點;相似性確定單元,用于確定第一圖像中的特征點的補丁圖像和第二圖像中的候選特征點的補丁圖像之間的相似性;對應特征點選擇單元,用于基于對相似性確定的結(jié)果,從第一圖像中的特征點和第二圖像中的候選特征點之中選擇對應特征點。[0011]第二轉(zhuǎn)換函數(shù)估計單元可包括:運動檢測單元,用于分別檢測第一圖像和第二圖像中的運動;運動矢量選擇單元,用于在從檢測到的第一圖像和第二圖像中的運動檢測到的運動矢量之中選擇對應運動矢量;第二估計單元,用于基于選擇的對應運動矢量估計第二轉(zhuǎn)換函數(shù)。[0012]運動矢量選擇單元可包括:標記單元,用于對從第一圖像和第二圖像檢測到的每個檢測到的運動進行標記;運動矢量檢測單元,用于針對第一圖像和第二圖像中的標記的運動來檢測運動矢量;相似性確定單元,用于確定檢測到的第一圖像和第二圖像中的運動矢量之間的相似性;對應運動矢量選擇單元,用于基于對相似性確定的結(jié)果,選擇第一圖像和第二圖像之間的對應運動矢量。[0013]針對第一圖像中的運動矢量,相似性確定單元可選擇第二圖像中的候選運動矢量,并確定第一圖像中的運動矢量和第二圖像中的候選運動矢量之間的相似性。[0014]相似性確定單元可基于檢測到的運動矢量的大小和方向來確定相似性。[0015]所述圖像對齊設(shè)備還可包括:對齊單元,用于通過使用選擇的第一轉(zhuǎn)換函數(shù)或第二轉(zhuǎn)換函數(shù)來對齊第一圖像和第二圖像。[0016]根據(jù)另一示例性實施例的一方面,提供了一種圖像對齊方法,所述方法可包括:基于從通過使用第一圖像傳感器捕獲的第一圖像和通過使用第二圖像傳感器捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù);基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)。[0017]所述圖像對齊方法還可包括:根據(jù)第一轉(zhuǎn)換函數(shù)是否被估計來選擇第一轉(zhuǎn)換函數(shù)或者第二轉(zhuǎn)換函數(shù)作為最終轉(zhuǎn)換函數(shù)。[0018]在第一轉(zhuǎn)換函數(shù)沒有被估計的情況下或者周期性地,可執(zhí)行對第二轉(zhuǎn)換函數(shù)的估計。[0019]估計第一轉(zhuǎn)換函數(shù)的步驟可包括:分別檢測第一圖像和第二圖像中的特征點;從檢測到的第一圖像和第二圖像中的特征點之中選擇對應特征點;基于選擇的對應特征點來估計第一轉(zhuǎn)換函數(shù)。[0020]選擇對應特征點的步驟可包括:獲取在補丁圖像的中心分別具有第一圖像和第二圖像中的特征點的補丁圖像;針對第一圖像中的特征點,選擇與第一圖像中的特征點對應的第二圖像中的候選特征點;確定第一圖像中的特征點的補丁圖像和第二圖像中的候選特征點的補丁圖像之間的相似性;基于對相似性確定的結(jié)果,從第一圖像中的特征點和第二圖像中的候選特征點之中選擇對應特征點。[0021]估計第二轉(zhuǎn)換函數(shù)的步驟可包括:分別檢測第一圖像和第二圖像中的運動;在從檢測到的第一圖像和第二圖像中的運動檢測到的運動矢量之中選擇對應運動矢量;基于選擇的對應運動矢量估計第二轉(zhuǎn)換函數(shù)。[0022]選擇對應運動矢量的步驟可包括:對從第一圖像和第二圖像檢測到的每個檢測到的運動進行標記;針對第一圖像和第二圖像中的標記的運動來檢測運動矢量;確定檢測到的第一圖像和第二圖像中的運動矢量之間的相似性;基于對相似性確定的結(jié)果,選擇第一圖像和第二圖像之間的對應運動矢量。[0023]確定相似性的步驟可包括:針對第一圖像中的運動矢量,選擇第二圖像中的候選運動矢量,并確定第一圖像中的運動矢量和第二圖像中的候選運動矢量之間的相似性。[0024]確定相似性的步驟可包括:基于檢測到的運動矢量的大小和方向來確定相似性。[0025]所述圖像對齊方法還可包括:通過使用選擇的第一轉(zhuǎn)換函數(shù)或第二轉(zhuǎn)換函數(shù)來對齊第一圖像與第二圖像?!緦@綀D】【附圖說明】[0026]從結(jié)合附圖對示例性實施例進行的以下描述,這些和/或其他方面將變得清楚和更易于理解,其中:[0027]圖1是根據(jù)示例性實施例的圖像融合系統(tǒng)的示意性框圖;[0028]圖2是根據(jù)示例性實施例的圖像對齊設(shè)備的示意性框圖;[0029]圖3是根據(jù)示例性實施例的第一轉(zhuǎn)換函數(shù)估計單元的示意性框圖;[0030]圖4是示出根據(jù)示例性實施例的選擇特征點的示例的示圖;[0031]圖5是根據(jù)示例性實施例的第二轉(zhuǎn)換函數(shù)估計單元的示意性框圖;[0032]圖6是示出根據(jù)示例性實施例的選擇運動矢量的示例的示圖;[0033]圖7是用于示出根據(jù)示例性實施例的圖像對齊方法的流程圖;[0034]圖8是用于示出根據(jù)示例性實施例的選擇圖7中示出的對應特征點的方法的流程圖;[0035]圖9是用于示出根據(jù)示例性實施例的選擇對應運動矢量的方法的流程圖?!揪唧w實施方式】[0036]現(xiàn)在將對附圖中示出的示例性實施例進行詳細的描述,其中,相同的標號始終表示相同的元件。就這一點而言,這些實施例可具有不同的形式,并且本發(fā)明構(gòu)思不應被解釋為局限于在這里所闡述的描述。因此,下面只是通過參照附圖對這些實施例進行描述,以解釋本發(fā)明構(gòu)思的一些方面。如這里所使用的,術(shù)語"和/或"包括相關(guān)的列出項中的一個或更多個的任意和所有組合。當諸如"…中的至少一個"的表述在一列元件之后時,其修飾整列的元件,而不是修飾列中的單個元件。[0037]由于本發(fā)明構(gòu)思允許各種改變和多個實施例,因此將在附圖中示出特定示例性實施例并在書面描述中對特定示例性實施例進行詳細地描述。然而,這不旨在將本發(fā)明構(gòu)思限制為特定的實踐模式,將理解的是,不脫離本發(fā)明構(gòu)思的精神和技術(shù)范圍的所有更改、等同物和替代物包含在本發(fā)明構(gòu)思中。在描述中,在認為對現(xiàn)有技術(shù)的特定的詳細解釋會不必要地使本發(fā)明的實質(zhì)不清楚時,省略對現(xiàn)有技術(shù)的特定的詳細解釋。[0038]雖然如"第一"、"第二"等的這種術(shù)語可用于描述各種組件,但是這種組件不應局限于以上術(shù)語。以上術(shù)語只是用于區(qū)分一個組件與另一組件。[0039]本說明書中所使用的術(shù)語只是用于描述特定的示例性實施例,而不是旨在限制本發(fā)明構(gòu)思。除非在上下文中具有明顯不同的含義,否則單數(shù)的表述包含復數(shù)的表述。在本說明書中,要理解的是,諸如"包括"或"具有"等的術(shù)語旨在指示存在說明書中所公開的特征、數(shù)字、步驟、動作、組件、部分或者它們的組合,而不是旨在排除可存在或可添加一個或更多個其它特征、數(shù)字、步驟、動作、組件、部分或者它們的組合的可能性。[0040]可按照功能塊組件和各種處理步驟來描述實施例。這種功能塊可由被配置為執(zhí)行特定功能的任意數(shù)量的硬件和/或軟件組件來實現(xiàn)。例如,實施例可采用各種集成電路組件,例如,可在一個或更多個微處理器或其他控制裝置的控制下執(zhí)行多種功能的存儲器元件、處理元件、邏輯元件、查找表(look-uptable)等。類似地,實施例的元件可利用軟件編程或者使用任何編程或腳本語言(諸如,C、C++、Java、匯編程序等)的軟件元件用各種算法來實現(xiàn),所述各種算法用數(shù)據(jù)結(jié)構(gòu)、對象、進程、程序或其他編程元素的任意組合來實現(xiàn)。可以以在一個或更多個處理器上執(zhí)行的算法來實現(xiàn)功能方面。此外,本發(fā)明構(gòu)思可采用用于電子設(shè)備配置、信號處理和/或控制、數(shù)據(jù)處理等的任意數(shù)量的傳統(tǒng)技術(shù)。詞語"機械"和"元件"被廣泛使用,且不局限于機械或物理實施例,而可包括與處理器結(jié)合的軟件程序等。[0041]圖1是根據(jù)示例性實施例的圖像融合系統(tǒng)1的示意性框圖。[0042]根據(jù)實施例,參照圖1,圖像融合系統(tǒng)1包括第一圖像傳感器10、第二圖像傳感器20、圖像對齊設(shè)備30、圖像融合設(shè)備40和顯示設(shè)備50。[0043]第一圖像傳感器10和第二圖像傳感器20可以是具有用于捕獲相同場景并提供圖像信息的不同特性的相機。第一圖像傳感器10和第二圖像傳感器20可設(shè)置有平移-傾斜-變焦(PTZ)功能,因此可被一起移動和傾斜以使用各自的變焦比率獲得相同位置的圖像。第一圖像傳感器10和第二圖像傳感器20可被安裝為一個整體,可被安裝在需要安全的銀行或者公共建筑以及用于入口或出口的管理或者犯罪的預防的辦公室、住宅、醫(yī)院的內(nèi)部或者外部。第一圖像傳感器10和第二圖像傳感器20可根據(jù)安裝位置和使用目的而具有諸如線性類型或圓頂類型的各種形式。[0044]在當前的實施例中,第一圖像傳感器10為可見光相機。第一圖像傳感器10可使用光檢測方法獲得圖像信息,并因此根據(jù)對象的亮度分布產(chǎn)生作為可見光圖像的第一圖像。例如,可見光相機可以是使用電荷耦合器件(CCD)或互補金屬氧化物半導體(CMOS)作為成像裝置的相機。[0045]在當前的實施例中,第二圖像傳感器20是紅外線相機或者熱感應相機。第二圖像傳感器可以感測和檢測作為一種電磁波的紅外光的波長形式的由對象發(fā)射的輻射能(熱能),并測量熱能的強度,從而產(chǎn)生作為根據(jù)強度而示出不同色彩的熱圖像的第二圖像。[0046]圖像對齊設(shè)備30可通過將從不同的傳感器獲得的相同場景的兩個或更多個圖像中的點的位置進行匹配并在一個坐標系中對齊所述位置,來執(zhí)行圖像對齊。在用于使用兩個或更多個傳感器獲得圖像以產(chǎn)生一個融合圖像的系統(tǒng)(諸如,監(jiān)視系統(tǒng)或者醫(yī)學圖像)的情況下,需要執(zhí)行圖像對齊。[0047]圖像對齊設(shè)備30將通過使用第一圖像傳感器10捕獲的第一圖像與通過使用第二圖像傳感器20捕獲的第二圖像對齊。為此,圖像對齊設(shè)備30可基于從第一圖像和第二圖像提取的特征點信息和運動信息來估計轉(zhuǎn)換函數(shù)。轉(zhuǎn)換函數(shù)是表示第一圖像和第二圖像之間的特征點信息或者運動信息的對應關(guān)系的矩陣。圖像對齊設(shè)備30通過應用估計的轉(zhuǎn)換函數(shù)來對齊第一圖像與第二圖像。[0048]圖像融合設(shè)備40可通過將接收到的圖像信號輸出為符合顯示設(shè)備的規(guī)格的信號來執(zhí)行信號處理。圖像融合設(shè)備40將對齊的第一圖像與第二圖像融合。例如,紅外線相機可清楚地提供對象的熱分布,但是可能無法清楚地提供對象的形狀。與此相反,可見光相機可清楚地提供對象的形狀,但是可能無法清楚地提供對象的熱分布。通過適當?shù)乩每梢姽庀鄼C和紅外線相機的優(yōu)點和缺點,圖像融合設(shè)備40可同時顯示對象的圖像和對象的熱分布的狀態(tài)。[0049]圖像融合設(shè)備40可減少噪聲,并針對第一圖像和第二圖像執(zhí)行諸如伽馬校正、濾色器陣列插值、色彩矩陣、色彩校正和色彩增強的圖像信號處理,以提高圖像品質(zhì)。此外,圖像融合設(shè)備40可通過壓縮從用于圖像改善的圖像信號處理獲得的融合的圖像數(shù)據(jù)來產(chǎn)生圖像文件,或者可從圖像文件恢復圖像數(shù)據(jù)。圖像壓縮類型可包括可逆的類型或者不可逆的類型。[0050]此外,圖像融合設(shè)備40可執(zhí)行諸如色彩處理、模糊處理、邊緣增強處理、圖像判讀處理、圖像識別處理、圖像效果處理等的功能。圖像識別處理可包括人臉識別處理和場景識別處理。[0051]顯示設(shè)備50向用戶提供從圖像融合設(shè)備40輸出的融合圖像,從而用戶可監(jiān)視顯示的圖像。顯示設(shè)備50可顯示第一圖像和第二圖像彼此重疊的融合圖像。顯示設(shè)備50可由液晶顯示器(IXD)面板、有機發(fā)光顯示器(0LED)面板、電泳顯示器(EH))面板等形成。顯示設(shè)備50以可通過用戶做出的觸摸接收輸入的觸摸屏的形式被提供,因此,可作為用戶輸入界面操作。[0052]圖2是根據(jù)示例性實施例的圖像對齊設(shè)備30的示意性框圖。[0053]參照圖2,圖像對齊設(shè)備30可包括第一轉(zhuǎn)換函數(shù)估計單元301、第二轉(zhuǎn)換函數(shù)估計單元303、轉(zhuǎn)換函數(shù)選擇單元305和對齊單元307。[0054]第一轉(zhuǎn)換函數(shù)估計單元301可基于從通過第一圖像傳感器10捕獲的第一圖像和通過第二圖像傳感器20捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù)H1。[0055]在這種情況下,第一轉(zhuǎn)換函數(shù)估計單元301可從第一圖像和第二圖像提取特征點,并通過選擇一對對應特征點的處理來估計第一轉(zhuǎn)換函數(shù)H1。然而,如果難以檢測到特征點的圖像被輸入,則可能無法估計第一轉(zhuǎn)換函數(shù)H1,因此,可能難以執(zhí)行實時對齊。[0056]因此,在當前的實施例中,如果第一轉(zhuǎn)換函數(shù)估計單元301不可估計第一轉(zhuǎn)換函數(shù)H1,則第二轉(zhuǎn)換函數(shù)H2可通過從第一圖像和第二圖像提取運動信息來被估計,從而可執(zhí)行實時對齊。[0057]第二轉(zhuǎn)換函數(shù)估計單元303可基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)H2。如果第一轉(zhuǎn)換函數(shù)H1沒有被估計,或者在根據(jù)用戶設(shè)置預定的時間段內(nèi),第二轉(zhuǎn)換函數(shù)估計單元303可估計第二轉(zhuǎn)換函數(shù)H2。因此,即使第一轉(zhuǎn)換函數(shù)估計單元301可能無法估計第一轉(zhuǎn)換函數(shù)H1,第二轉(zhuǎn)換函數(shù)估計單元303也可估計第二轉(zhuǎn)換函數(shù)H2,從而可執(zhí)行實時對齊。[0058]根據(jù)第一轉(zhuǎn)換函數(shù)H1是否被估計,轉(zhuǎn)換函數(shù)選擇單元305可選擇第一轉(zhuǎn)換函數(shù)H1或者第二轉(zhuǎn)換函數(shù)H2作為最終轉(zhuǎn)換函數(shù)H。如果第一轉(zhuǎn)換函數(shù)估計單元301正常地估計第一轉(zhuǎn)換函數(shù)HI(Hl_error=0),則轉(zhuǎn)換函數(shù)選擇單元305選擇第一轉(zhuǎn)換函數(shù)H1作為最終轉(zhuǎn)換函數(shù)H。如果第一轉(zhuǎn)換函數(shù)H1沒有被估計(Hl_error=l),則轉(zhuǎn)換函數(shù)選擇單元305選擇第二轉(zhuǎn)換函數(shù)H2作為最終轉(zhuǎn)換函數(shù)H。轉(zhuǎn)換函數(shù)選擇單元305可在預定的時間段內(nèi)選擇第二轉(zhuǎn)換函數(shù)H2作為最終轉(zhuǎn)換函數(shù)H。下面提供的等式1中示出了通過選擇轉(zhuǎn)換函數(shù)選擇單元305執(zhí)行的選擇方法。[0059]【權(quán)利要求】1.一種圖像對齊設(shè)備,所述圖像對齊設(shè)備包括:第一轉(zhuǎn)換函數(shù)估計單元,被配置為基于從通過使用第一圖像傳感器捕獲的第一圖像和通過使用第二圖像傳感器捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù);第二轉(zhuǎn)換函數(shù)估計單元,被配置為基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)。2.根據(jù)權(quán)利要求1所述的圖像對齊設(shè)備,還包括:轉(zhuǎn)換函數(shù)選擇單元,用于根據(jù)第一轉(zhuǎn)換函數(shù)是否被估計來選擇第一轉(zhuǎn)換函數(shù)或者第二轉(zhuǎn)換函數(shù)作為最終轉(zhuǎn)換函數(shù)。3.根據(jù)權(quán)利要求1所述的圖像對齊設(shè)備,其中,在第一轉(zhuǎn)換函數(shù)沒有被估計的情況下或者周期性地,第二轉(zhuǎn)換函數(shù)估計單元估計第二轉(zhuǎn)換函數(shù)。4.根據(jù)權(quán)利要求1所述的圖像對齊設(shè)備,其中,第一轉(zhuǎn)換函數(shù)估計單元包括:特征點檢測單元,被配置為分別檢測第一圖像和第二圖像中的特征點;特征點選擇單元,被配置為從檢測到的第一圖像和第二圖像中的特征點之中選擇對應特征點;第一估計單元,用于基于選擇的對應特征點來估計第一轉(zhuǎn)換函數(shù)。5.根據(jù)權(quán)利要求4所述的圖像對齊設(shè)備,其中,特征點選擇單元包括:補丁圖像獲取單元,被配置為獲取在補丁圖像的中心分別具有第一圖像和第二圖像中的特征點的補丁圖像;候選選擇單元,被配置為針對第一圖像中的特征點,選擇與第一圖像中的特征點對應的第二圖像中的候選特征點;相似性確定單元,被配置為確定第一圖像中的特征點的補丁圖像和第二圖像中的候選特征點的補丁圖像之間的相似性;對應特征點選擇單元,被配置為基于對相似性確定的結(jié)果,從第一圖像中的特征點和第二圖像中的候選特征點之中選擇對應特征點。6.根據(jù)權(quán)利要求1所述的圖像對齊設(shè)備,其中,第二轉(zhuǎn)換函數(shù)估計單元包括:運動檢測單元,被配置為分別檢測第一圖像和第二圖像中的運動;運動矢量選擇單元,被配置為在從檢測到的第一圖像和第二圖像中的運動檢測到的運動矢量之中選擇對應運動矢量;第二估計單元,被配置為基于選擇的對應運動矢量估計第二轉(zhuǎn)換函數(shù)。7.根據(jù)權(quán)利要求6所述的圖像對齊設(shè)備,其中,運動矢量選擇單元包括:標記單元,被配置為對從第一圖像和第二圖像檢測到的每個檢測到的運動進行標記;運動矢量檢測單元,被配置為針對第一圖像和第二圖像中的標記的運動來檢測運動矢量;相似性確定單元,被配置為確定檢測到的第一圖像和第二圖像中的運動矢量之間的相似性;對應運動矢量選擇單元,被配置為基于對相似性確定的結(jié)果,選擇第一圖像和第二圖像之間的對應運動矢量。8.根據(jù)權(quán)利要求7所述的圖像對齊設(shè)備,其中,針對第一圖像中的運動矢量,相似性確定單元被配置為選擇第二圖像中的候選運動矢量,并確定第一圖像中的運動矢量和第二圖像中的候選運動矢量之間的相似性。9.根據(jù)權(quán)利要求8所述的圖像對齊設(shè)備,其中,相似性確定單元被配置為基于檢測到的運動矢量的大小和方向來確定相似性。10.根據(jù)權(quán)利要求2所述的圖像對齊設(shè)備,還包括:對齊單元,被配置為通過使用選擇的第一轉(zhuǎn)換函數(shù)或第二轉(zhuǎn)換函數(shù)來對齊第一圖像和第二圖像。11.一種圖像對齊方法,所述圖像對齊方法包括:基于從通過使用第一圖像傳感器捕獲的第一圖像和通過使用第二圖像傳感器捕獲的第二圖像提取的特征點信息來估計第一轉(zhuǎn)換函數(shù);基于從第一圖像和第二圖像提取的運動信息來估計第二轉(zhuǎn)換函數(shù)。12.根據(jù)權(quán)利要求11所述的圖像對齊方法,還包括:根據(jù)第一轉(zhuǎn)換函數(shù)是否被估計來選擇第一轉(zhuǎn)換函數(shù)或者第二轉(zhuǎn)換函數(shù)作為最終轉(zhuǎn)換函數(shù)。13.根據(jù)權(quán)利要求12所述的圖像對齊方法,其中,在第一轉(zhuǎn)換函數(shù)沒有被估計的情況下或者周期性地,執(zhí)行對第二轉(zhuǎn)換函數(shù)的估計。14.根據(jù)權(quán)利要求12所述的圖像對齊方法,其中,估計第一轉(zhuǎn)換函數(shù)的步驟包括:分別檢測第一圖像和第二圖像中的特征點;從檢測到的第一圖像和第二圖像中的特征點之中選擇對應特征點;基于選擇的對應特征點來估計第一轉(zhuǎn)換函數(shù)。15.根據(jù)權(quán)利要求14所述的圖像對齊方法,其中,選擇對應特征點的步驟包括:獲取在補丁圖像的中心分別具有第一圖像和第二圖像中的特征點的補丁圖像;針對第一圖像中的特征點,選擇與第一圖像中的特征點對應的第二圖像中的候選特征占.確定第一圖像中的特征點的補丁圖像和第二圖像中的候選特征點的補丁圖像之間的相似性;基于對相似性確定的結(jié)果,從第一圖像中的特征點和第二圖像中的候選特征點之中選擇對應特征點。16.根據(jù)權(quán)利要求12所述的圖像對齊方法,其中,估計第二轉(zhuǎn)換函數(shù)的步驟包括:分別檢測第一圖像和第二圖像中的運動;在從檢測到的第一圖像和第二圖像中的運動檢測到的運動矢量之中選擇對應運動矢量;基于選擇的對應運動矢量估計第二轉(zhuǎn)換函數(shù)。17.根據(jù)權(quán)利要求16所述的圖像對齊方法,其中,選擇對應運動矢量的步驟包括:對從第一圖像和第二圖像檢測到的每個檢測到的運動進行標記;針對第一圖像和第二圖像中的標記的運動來檢測運動矢量;確定檢測到的第一圖像和第二圖像中的運動矢量之間的相似性;基于對相似性確定的結(jié)果,選擇第一圖像和第二圖像之間的對應運動矢量。18.根據(jù)權(quán)利要求17所述的圖像對齊方法,其中,確定相似性的步驟包括:針對第一圖像中的運動矢量,選擇第二圖像中的候選運動矢量,并確定第一圖像中的運動矢量和第二圖像中的候選運動矢量之間的相似性。19.根據(jù)權(quán)利要求17所述的圖像對齊方法,其中,確定相似性的步驟包括:基于檢測到的運動矢量的大小和方向來確定相似性。20.根據(jù)權(quán)利要求13所述的圖像對齊方法,還包括:通過使用選擇的第一轉(zhuǎn)換函數(shù)或第二轉(zhuǎn)換函數(shù)來對齊第一圖像與第二圖像?!疚臋n編號】H04N7/18GK104427211SQ201410148031【公開日】2015年3月18日申請日期:2014年4月14日優(yōu)先權(quán)日:2013年8月20日【發(fā)明者】李準性,吳哉侖,金坤洙申請人:三星泰科威株式會社