特征點(diǎn)對等系統(tǒng)、特征點(diǎn)對等方法、以及記錄介質(zhì)的制作方法
【專利摘要】提供了一種特征點(diǎn)關(guān)聯(lián)系統(tǒng),配備有:集合創(chuàng)建單元,用于接收要比較的多個特征點(diǎn)組,并且創(chuàng)建作為由近似局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對構(gòu)成的集合的多個特征點(diǎn)對集合;集合選擇單元,用于從多個特征點(diǎn)對集合當(dāng)中選擇包括在特征點(diǎn)對集合中包括大元素計(jì)數(shù)的特征點(diǎn)對集合;以及對應(yīng)特征點(diǎn)確定單元,用于從包括在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定用于關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),并且使能輸出。從而,在所比較的特征點(diǎn)組之間存在的特征點(diǎn)的正確組合被對應(yīng)。
【專利說明】特征點(diǎn)對等系統(tǒng)、特征點(diǎn)對等方法、以及記錄介質(zhì)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種特征點(diǎn)關(guān)聯(lián)系統(tǒng)和特征點(diǎn)關(guān)聯(lián)方法,利用該特征點(diǎn)關(guān)聯(lián)系統(tǒng)和特征點(diǎn)關(guān)聯(lián)方法,通過信息處理在數(shù)據(jù)分析中使分別屬于來自兩個圖像等等的特征點(diǎn)的組并且可以被視為相同特征點(diǎn)的特征點(diǎn)彼此關(guān)聯(lián)。
【背景技術(shù)】
[0002]當(dāng)可以使兩個圖像中的相同特征點(diǎn)(地點(diǎn))彼此關(guān)聯(lián)時可以從圖像獲得各類信息。例如,借助于下述對應(yīng)特征點(diǎn)通過立體匹配可以從兩個圖像獲得對象的三維形狀,該對應(yīng)特征點(diǎn)是來自兩個圖像的、彼此相對應(yīng)的特征點(diǎn)。此外,可以通過利用對應(yīng)特征點(diǎn)來檢查對象的變化以校正圖像,使得圖像的對象重疊。該校正還使得可以檢驗(yàn)在兩個圖像中所拍攝的對象是否是相同的。
[0003]獲得各類信息的另一方式是預(yù)先準(zhǔn)備要比較的特征點(diǎn)組中的一個作為三維數(shù)據(jù)并且使從圖像或視頻所提取的一組特征點(diǎn)與所準(zhǔn)備的特征點(diǎn)組關(guān)聯(lián)。這可以在例如使實(shí)際拍攝的衛(wèi)星圖像或航拍圖像與地圖數(shù)據(jù)關(guān)聯(lián)時使用。類似地,這可以在使車載照相機(jī)的圖像與汽車導(dǎo)航數(shù)據(jù)關(guān)聯(lián)時使用。
[0004]該特征點(diǎn)關(guān)聯(lián)方法的示例是在專利文獻(xiàn)I中所述的圖形形式位置檢測方法。專利文獻(xiàn)I的方法使來自兩個圖像的下述特征點(diǎn)關(guān)聯(lián)并且獲得用于使對應(yīng)特征點(diǎn)候選者重疊的坐標(biāo)整合參數(shù)的分布,該特征點(diǎn)在相對于作為對應(yīng)特征點(diǎn)候選者的給定特征點(diǎn)而言的鄰近特征點(diǎn)的布置中彼此相似。在隨后處理中使用坐標(biāo)整合參數(shù)所集中到的位置作為與圖像至圖像轉(zhuǎn)換參數(shù)相當(dāng)?shù)淖鴺?biāo)整合量。
[0005]在專利文獻(xiàn)2中所述的圖像處理設(shè)備創(chuàng)建多個分辨率的圖像的集合,并且通過利用為一個圖像所創(chuàng)建的不同分辨率圖像的集合以及為另一圖像所創(chuàng)建的不同分辨率圖像的集合來使兩個圖像彼此關(guān)聯(lián)。因此即使當(dāng)放大或縮小圖像中的一個時,要比較的圖像也可以彼此關(guān)聯(lián)。
[0006]在專利文獻(xiàn)3中所述的圖案交叉檢驗(yàn)設(shè)備從對應(yīng)特征點(diǎn)候選者之間的關(guān)系來估計(jì)形狀的變化,以便圖形形式可以彼此關(guān)聯(lián)而與對象的形狀變化無關(guān)。
[0007]引用列表:
[0008]專利文獻(xiàn)1:日本專利N0.3002721 ;
[0009]專利文獻(xiàn)2 JP — A — 2006 — 065399
[0010]專利文獻(xiàn)3 JP — A — 2002 — 298141
【發(fā)明內(nèi)容】
[0011]要由本發(fā)明解決的技術(shù)問題
[0012]進(jìn)一步發(fā)展了用于通過參考多個特征點(diǎn)組來使圖像等等中的特定位置彼此關(guān)聯(lián)的技術(shù),如上面作為示例所給出的技術(shù)。
[0013]描述對上面作為示例所給出的技術(shù)的一些問題。[0014]在專利文獻(xiàn)I中所述的技術(shù)的問題之一是當(dāng)圖像之間的形狀變化非常大或者圖像之間的布置部分不同時,要比較的圖像無法彼此關(guān)聯(lián)。這是因?yàn)樵摷夹g(shù)使鄰近特征點(diǎn)的布置中彼此相似的特征點(diǎn)關(guān)聯(lián),提取關(guān)聯(lián)點(diǎn)作為對應(yīng)特征點(diǎn)候選者,并且獲得用于使對應(yīng)特征點(diǎn)候選者重疊的坐標(biāo)整合量。因此當(dāng)在圖像之間對象的形狀變化非常大或者布置部分且局部不同時,用于使每對對應(yīng)特征點(diǎn)候選者中的特征點(diǎn)重疊的坐標(biāo)整合量因地點(diǎn)而不同。其結(jié)果是,坐標(biāo)整合參數(shù)不集中并且無法獲得正確位置。
[0015]專利文獻(xiàn)I中所述的方法的另一問題是處理過長。專利文獻(xiàn)I的方法首先為來自兩個圖像的特征點(diǎn)的每成對組合確定是否通過利用鄰近特征點(diǎn)的布置將特征點(diǎn)的成對組合視為對應(yīng)特征點(diǎn)候選者。為該確定設(shè)定嚴(yán)格標(biāo)準(zhǔn)提高了對應(yīng)特征點(diǎn)的對應(yīng)精確度,這使坐標(biāo)整合參數(shù)的分布集中于正確值,并且從而便于獲得正確坐標(biāo)整合量。
[0016]然而,進(jìn)行該確定嚴(yán)格地需要從鄰近特征點(diǎn)的布置獲得足夠信息,這反過來需要擴(kuò)大獲得鄰近特征點(diǎn)的范圍。另一方面,擴(kuò)大鄰近特征點(diǎn)的范圍增大了該確定所使用的信息并且增大了(延長了)該確定所需的處理量(長度)。另外,對特征點(diǎn)的每成對組合進(jìn)行對應(yīng)特征點(diǎn)的確定,這是非常大的數(shù)目。因此執(zhí)行該確定的次數(shù)也非常大并且由于每個確定會話所需的過長處理時間,總處理時間極其長。另一方面,使該確定處理簡單化以便使該確定加速降低了對應(yīng)特征點(diǎn)候選者的對應(yīng)精確度,這導(dǎo)致檢測正確對應(yīng)特征點(diǎn)(實(shí)際上相同的特征點(diǎn)對;仍包括的特征點(diǎn)對)失敗并且在對應(yīng)特征點(diǎn)候選者中包含許多錯誤的對應(yīng)特征點(diǎn)(實(shí)際上不相同的特征點(diǎn)對;要被排除的特征點(diǎn)對)。此后坐標(biāo)整合量具有稀疏的分布,這意味著無法獲得正確坐標(biāo)整合量。
[0017]專利文獻(xiàn)I的方法的又一問題在于獲得用于使每對對應(yīng)特征點(diǎn)候選者中的特征點(diǎn)重疊的坐標(biāo)整合量的分布的處理也費(fèi)時。坐標(biāo)整合量是用于使每對對應(yīng)特征點(diǎn)候選者中的特征點(diǎn)重疊的轉(zhuǎn)換的參數(shù),并且坐標(biāo)整合量是在平行移動的情況下通過例如檢查橫向和縱向每一個上的各個對的對應(yīng)特征點(diǎn)候選者的坐標(biāo)位置差的分布而獲得的。該差可能采用非常寬范圍的值并且在該條件下掃描每對對應(yīng)特征點(diǎn)候選者的需要延長了處理時間。與確定對應(yīng)特征點(diǎn)候選者的情況一樣,為該特征設(shè)定嚴(yán)格標(biāo)準(zhǔn)進(jìn)一步延長了處理時間。
[0018]在專利文獻(xiàn)2中所述的技術(shù)具有該技術(shù)不能應(yīng)對形狀的極大變化或者部分不同的布置的相似問題。原因是通過圖像放大或縮小無法緩和由于形狀的極大變化或者部分不同的布置所引起的在圖像之間的差別。通過創(chuàng)建多分辨率圖像來應(yīng)對圖像放大或縮小的專利文獻(xiàn)2的方法不能應(yīng)對形狀變化或者部分不同的布置,因?yàn)閳D像放大或縮小不能消除形狀的變化或者部分不同的布置。
[0019]專利文獻(xiàn)3中所述的技術(shù)問題在于該技術(shù)在估計(jì)圖像形狀變化的過程中不能處理除彈性連續(xù)的形狀變化之外的其它形狀變化。原因是根據(jù)專利文獻(xiàn)3的方法在估計(jì)形狀變化的過程中認(rèn)為對象為是彈性膜。因此該方法不能應(yīng)對圖像之間的布置部分地且不連續(xù)地不同的情況。
[0020]本發(fā)明提供了一種特征點(diǎn)關(guān)聯(lián)系統(tǒng),該特征點(diǎn)關(guān)聯(lián)系統(tǒng)在即使在特征點(diǎn)的比較組之間對象的布置部分地不同時也可以以低處理量使特征點(diǎn)彼此關(guān)聯(lián)。
[0021]解決問題的手段
[0022]根據(jù)本發(fā)明的一個實(shí)施例的特征點(diǎn)關(guān)聯(lián)系統(tǒng)包括:集合創(chuàng)建單元,用于接收要比較的多個特征點(diǎn)組,并且通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組成集合來創(chuàng)建多個特征點(diǎn)對集合;集合選擇單元,用于在多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及對應(yīng)特征點(diǎn)確定單元,用于從包含在所選擇的特征點(diǎn)對集合之中的特征點(diǎn)對當(dāng)中確定將被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn)以便輸出。
[0023]本發(fā)明的效果
[0024]根據(jù)本發(fā)明的一個實(shí)施例,可以提供即使當(dāng)在特征點(diǎn)的比較組之間對象的布置部分地不同時也可以以低處理量使特征點(diǎn)彼此關(guān)聯(lián)的特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
【專利附圖】
【附圖說明】
[0025]圖1是用于對根據(jù)本發(fā)明的第一實(shí)施例的配置進(jìn)行說明的方框圖。
[0026]圖2是用于對根據(jù)本發(fā)明的第一實(shí)施例的操作示例進(jìn)行說明的流程圖。
[0027]圖3是用于對根據(jù)本發(fā)明的第二實(shí)施例的配置進(jìn)行說明的方框圖。
[0028]圖4是用于對根據(jù)本發(fā)明的第二實(shí)施例的操作示例進(jìn)行說明的流程圖。
[0029]圖5是用于對根據(jù)本發(fā)明的示例I的處理目標(biāo)圖像的示例進(jìn)行說明的示意圖。
[0030]圖6是用于對圖5的特征點(diǎn)之間的位置關(guān)系進(jìn)行說明的說明圖。
[0031]圖7是用于對圖6的特征點(diǎn)之間的局部轉(zhuǎn)換參數(shù)進(jìn)行說明的說明圖。
[0032]圖8是用于對創(chuàng)建特征點(diǎn)對的集合的處理的示例進(jìn)行說明的說明圖。
[0033]圖9是用于對特征點(diǎn)對的集合的示例進(jìn)行說明的說明圖。
[0034]圖10是用于對根據(jù)本發(fā)明的示例2的要比較的處理目標(biāo)圖像中的一個進(jìn)行說明的示意圖。
[0035]圖11是用于對根據(jù)本發(fā)明的示例2的要比較的其它處理目標(biāo)圖像進(jìn)行說明的示意圖。
[0036]圖12是用于對圖10的處理目標(biāo)圖像的特征點(diǎn)進(jìn)行說明的說明圖。
[0037]圖13是用于對圖11的處理目標(biāo)圖像的特征點(diǎn)進(jìn)行說明的說明圖。
[0038]圖14是用于對圖12的特征點(diǎn)與圖13的特征點(diǎn)之間的位置關(guān)系進(jìn)行說明的說明圖。
[0039]圖15是用于對根據(jù)本發(fā)明的示例2的特征點(diǎn)之間的相對位置關(guān)系的示例進(jìn)行說明的說明圖。
[0040]圖16是用于對根據(jù)本發(fā)明的示例2的特征點(diǎn)之間的相對位置關(guān)系的另一示例進(jìn)行說明的說明圖。
[0041]圖17是用于對具體體現(xiàn)本發(fā)明的示例進(jìn)行說明的配置示意圖。
【具體實(shí)施方式】
[0042]接下來參考附圖對本發(fā)明的實(shí)施例進(jìn)行詳細(xì)地說明。
[0043]參考圖1,本發(fā)明的第一實(shí)施例的特征點(diǎn)關(guān)聯(lián)系統(tǒng)包括集合創(chuàng)建單元110、集合選擇單元120、以及對應(yīng)特征點(diǎn)確定單元130。
[0044]集合創(chuàng)建單元110接收要比較的多個特征點(diǎn)組并且設(shè)定多個特征點(diǎn)對集合,這多個特征點(diǎn)對集合的每一個是將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的集合。特征點(diǎn)對是由來自要比較的特征點(diǎn)組之一的一個特征點(diǎn)與來自另一個特征點(diǎn)組的一個特征點(diǎn)所構(gòu)成的對。局部轉(zhuǎn)換參數(shù)(local conversion parameter)是在構(gòu)成了特征點(diǎn)對的特征點(diǎn)之間進(jìn)行各個轉(zhuǎn)換所需的指示諸如變量的值、函數(shù)、代數(shù)式等等這樣的圖形的參數(shù)。換句話說,局部轉(zhuǎn)換參數(shù)是用于將成對的兩個特征點(diǎn)中的一個轉(zhuǎn)換成另一特征點(diǎn)的參數(shù)。
[0045]集合選擇單元120從多個創(chuàng)建的集合當(dāng)中選擇包含元素多的集合。
[0046]對應(yīng)特征點(diǎn)確定單元130確定包含在所選擇的集合之中的元素當(dāng)中的特征點(diǎn)彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn)(分別從要比較的特征點(diǎn)組取出的并且被認(rèn)為是相同的對應(yīng)特征點(diǎn))。對所確定的特征點(diǎn)對進(jìn)行分組以便輸出并且適當(dāng)?shù)厥褂谩?br>
[0047]利用該配置,通過分別從例如兩個圖像收集特征點(diǎn)來為比較而創(chuàng)建的特征點(diǎn)組被接收,并且來自特征點(diǎn)組之一的特征點(diǎn)與來自另一特征點(diǎn)組的、被認(rèn)為是相同的特征點(diǎn)被彼此關(guān)聯(lián)并且被確定為對應(yīng)特征點(diǎn)。
[0048]所獲得的對應(yīng)特征點(diǎn)被視為用于在各種類型的隨后期望處理中指示兩個圖像中的相同地點(diǎn)的特征點(diǎn)。
[0049]接下來參考圖2的流程圖和圖1對該實(shí)施例中的整個處理的示例進(jìn)行詳細(xì)地描述。以下描述采用兩個圖像的特征點(diǎn)作為示例。
[0050]集合創(chuàng)建單元110檢查來自兩個圖像的特征點(diǎn)組的特征點(diǎn)的成對組合,并且順序地創(chuàng)建特征點(diǎn)對的集合,使得就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對屬于同一集合。其處理包括從來自兩個圖像的特征點(diǎn)的許多成對組合(特征點(diǎn)對)選擇一個成對組合(步驟S101),并且獲得所選擇的特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)(步驟S102)。確定所獲得的局部轉(zhuǎn)換參數(shù)是否接近已創(chuàng)建的特征點(diǎn)對集合中的一個的局部轉(zhuǎn)換參數(shù)(步驟S103),并且當(dāng)找到這種特征點(diǎn)對集合時,將所選擇的特征點(diǎn)對添加到該特征點(diǎn)對集合(步驟S104)。當(dāng)不存在符合該標(biāo)準(zhǔn)的特征點(diǎn)對集合時,倉Il建僅具有所選擇的特征點(diǎn)對作為其元素的新特征點(diǎn)對集合(步驟S105)。重復(fù)這些操作步驟,同時檢驗(yàn)是否已對給定范圍的特征點(diǎn)對組合完成了該處理(步驟S106)。
[0051]集合選擇單元120從多個創(chuàng)建的集合當(dāng)中選擇包含元素多的集合(步驟S107)。
[0052]對應(yīng)特征點(diǎn)確定單元130從所選擇的集合的元素當(dāng)中確定將被視為來自兩個圖像的、彼此相對應(yīng)的特征點(diǎn)的對應(yīng)特征點(diǎn)(步驟S108)。
[0053]因而通過采用用于從下述特征點(diǎn)對集合當(dāng)中選擇對應(yīng)特征點(diǎn)的例程可以降低處理量,該特征點(diǎn)對集合將參數(shù)彼此接近的特征點(diǎn)對分組在一起。
[0054]接下來參考附圖對本發(fā)明的第二實(shí)施例進(jìn)行詳細(xì)地描述。
[0055]如在圖3和4中所說明的,第二實(shí)施例與第一實(shí)施例的不同之處在于集合創(chuàng)建單元的操作。簡化或省略對第二實(shí)施例的與第一實(shí)施例相似的點(diǎn)的描述。
[0056]集合創(chuàng)建單元210從要比較的特征點(diǎn)組中選擇特征點(diǎn)的一個成對組合作為焦點(diǎn)特征點(diǎn)對(圖4的步驟S201)。對于所選擇的焦點(diǎn)特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù)(步驟S202)。此后,創(chuàng)建下述特征點(diǎn)對集合(步驟S203),該特征點(diǎn)對集合僅具有已獲得了局部轉(zhuǎn)換參數(shù)的焦點(diǎn)特征點(diǎn)對作為其元素。接下來,從要比較的特征點(diǎn)組中的每一個中選擇在當(dāng)前焦點(diǎn)特征點(diǎn)對附近的特征點(diǎn),并且創(chuàng)建下述鄰近特征點(diǎn)對(步驟S204),該鄰近特征點(diǎn)對是就相對于構(gòu)成了焦點(diǎn)特征點(diǎn)對的相應(yīng)特征點(diǎn)而言的布置來說彼此接近的特征點(diǎn)對。對于所創(chuàng)建的鄰近特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù)(步驟S205)。確定鄰近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是否接近焦點(diǎn)特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)(步驟S206),并且當(dāng)參數(shù)彼此接近時,將鄰近特征點(diǎn)對添加到包含焦點(diǎn)特征點(diǎn)對的集合(步驟S207)。執(zhí)行這些操作步驟,直至對焦點(diǎn)特征點(diǎn)的鄰近特征點(diǎn)的每一成對組合進(jìn)行了處理(步驟S208)。
[0057]接下來確定包含焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對集合是否具有仍未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對(步驟S209)。當(dāng)存在符合該標(biāo)準(zhǔn)的特征點(diǎn)對時,從未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對當(dāng)中選擇一個特征點(diǎn)對(步驟S210),并且利用所選擇的對作為新焦點(diǎn)特征點(diǎn)對來執(zhí)行相同處理(S202至S208)。
[0058]在集合不再包含未構(gòu)成焦點(diǎn)特征點(diǎn)對的特征點(diǎn)的情況下,對特征點(diǎn)的每一成對組合執(zhí)行相同處理(S201至S211)。該處理包括選擇下一集合,并且當(dāng)已創(chuàng)建的集合中的一個包含未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對時,利用該特征點(diǎn)對作為焦點(diǎn)特征點(diǎn)對來執(zhí)行相同處理。在沒有集合包含未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對并且存在未選擇的特征點(diǎn)對的情況下,利用該特征點(diǎn)對作為焦點(diǎn)特征點(diǎn)對來執(zhí)行相同處理。重復(fù)該處理,直至沒有留下未被選的特征點(diǎn)對。
[0059]此后,集合選擇單元220和對應(yīng)特征點(diǎn)確定單元230從多個創(chuàng)建的集合當(dāng)中選擇包含元素多的集合(步驟S212),并且從所選擇的集合的元素當(dāng)中確定對應(yīng)特征點(diǎn)(步驟S213)。
[0060]因而通過采用用于選擇一個特征點(diǎn)對作為代表的例程、將參數(shù)上接近所選擇的特征點(diǎn)對的特征點(diǎn)對分組在一起、并且從分組的特征點(diǎn)對的集合中選擇對應(yīng)特征點(diǎn),借助于特征點(diǎn)與其鄰近特征點(diǎn)的相對關(guān)系可以降低處理量并且提高處理精確度。
[0061][示例]
[0062]接下來借助于具體示例對實(shí)施例的操作進(jìn)行描述。
[0063]對與本發(fā)明的第一實(shí)施例相對應(yīng)的本發(fā)明的示例進(jìn)行描述。該示例是本發(fā)明應(yīng)用于使用兩個衛(wèi)星圖像或者航拍圖像以創(chuàng)建3D地圖的3D地圖創(chuàng)建系統(tǒng)中的特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
[0064]該示例討論了關(guān)聯(lián)下述特征點(diǎn),該關(guān)聯(lián)特征點(diǎn)是具有不同圖像拾取角度的兩個衛(wèi)星圖像或航拍圖像中的建筑物等等的拐角,并且由此創(chuàng)建包括建筑物等等的高度的3D地圖。該特征點(diǎn)可以是通過各種通常已知的方法來提取的,并且在這里已被提取作為特征點(diǎn)組。通過三角測量的原理,基于特征點(diǎn)之間的關(guān)聯(lián)性來創(chuàng)建3D地圖也是眾所周知的技術(shù),并且在這里僅描述了通過特征點(diǎn)的關(guān)聯(lián)的處理,同時省略了對在該處理之前和之后的處理的描述。
[0065]參考用于對特征點(diǎn)組進(jìn)行說明的示意圖給出以下描述。
[0066]圖5的左半邊是從正上方拍攝兩個建筑物的圖像的示意圖。圖5的右半邊是從一定角度拍攝兩個建筑物的示意圖。從每個建筑物提取建筑物的邊沿所交匯的四個角作為特征點(diǎn),由A至H以及a至h來表示。諸如“A”和“a”或者“B”和“b”這樣的相同字母的大寫字母和小寫字是在左邊圖像和右邊圖像中同一特征點(diǎn)(同一地點(diǎn):彼此關(guān)聯(lián)的特征點(diǎn))。
[0067]圖6說明了圖5的每個特征點(diǎn)的坐標(biāo)位置。相同特征點(diǎn)具有不同坐標(biāo)值,因?yàn)榻ㄖ锊皇菑耐耆嗤奈恢门臄z的。因此必需獲得用于使兩個特征點(diǎn)重疊的平行移動和/或旋轉(zhuǎn)的參數(shù)。
[0068]此外,由于拍攝建筑物的不同方向,AB⑶與EFGH之間的位置關(guān)系以及abed與efgh之間的位置關(guān)系在左邊圖像和右邊圖像中不同。換句話說,無論哪個建筑物用作參考,其它拍攝的建筑物的布置在圖像之間不同,并且對象布置在圖像之間部分地不同。因此特征點(diǎn)通過兩個圖像的旋轉(zhuǎn)和/或平行移動沒有彼此重疊。因此,通過專利文獻(xiàn)I的方法沒有實(shí)現(xiàn)這兩個圖像之間的局部關(guān)聯(lián)并且特征點(diǎn)無法適當(dāng)?shù)乇舜岁P(guān)聯(lián)。
[0069]通過將兩個圖像之間的旋轉(zhuǎn)視為不必要并且僅對就每個特征點(diǎn)對的坐標(biāo)整合量(局部轉(zhuǎn)換參數(shù)值)而言的平行移動進(jìn)行描述可以使這里所給出的描述簡單化。該描述還僅使用附圖中的相應(yīng)建筑物的上部特征點(diǎn)(ABEF和abef)。
[0070]圖7說明了用于對來自兩個圖像的特征點(diǎn)的成對組合的坐標(biāo)進(jìn)行整合的局部轉(zhuǎn)換參數(shù)(平行移動量)。在該描述中執(zhí)行通過將兩個圖像的特征點(diǎn)組標(biāo)繪在同一坐標(biāo)系統(tǒng)上來獲得參數(shù)值的處理。替代地,可以通過對特征點(diǎn)組進(jìn)行處理使得特征點(diǎn)組重疊,來確定參數(shù)值。其它方法也可以用于確定值。
[0071]集合創(chuàng)建單元110檢查來自兩個圖像的特征點(diǎn)的成對組合,并且通過對特征點(diǎn)對進(jìn)行分組來創(chuàng)建特征點(diǎn)對的多個分組集合,使得就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對
屬于同一集合。
[0072]首先,從來自兩個圖像的特征點(diǎn)的成對組合當(dāng)中選擇諸如(A,a)的一個特征點(diǎn)對。接下來對于所選擇的特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù)。在(A,a)的情況下,當(dāng)“A”通過平行移動向右位移12并且向上位移2時,“A”和“a”重疊。因此(A,a)的局部轉(zhuǎn)換參數(shù)是(12,2)。
[0073]當(dāng)所獲得的局部轉(zhuǎn)換參數(shù)接近已被創(chuàng)建的特征點(diǎn)對集合中的一個的局部轉(zhuǎn)換參數(shù)時,將所選擇的特征點(diǎn)對添加到該特征點(diǎn)對集合。在所獲得的參數(shù)不接近任何現(xiàn)有集合中的參數(shù)的情況下,創(chuàng)建僅包含所選擇的特征點(diǎn)對作為其元素的新特征點(diǎn)對集合。
[0074]因?yàn)?A,a)是首先選擇的特征點(diǎn)對,因此尚未創(chuàng)建特征點(diǎn)對集合。因此集合創(chuàng)建單元Iio執(zhí)行如圖8中所說明的、創(chuàng)建具有局部轉(zhuǎn)換參數(shù)(12,2)的集合I作為新特征點(diǎn)對集合,并且關(guān)聯(lián)特征點(diǎn)對(A,a作為集合I的元素)的處理。該處理與經(jīng)過步驟S105的、從圖2的步驟SlOl至步驟S106的處理例程相對應(yīng)。
[0075]在處理了一個特征點(diǎn)對之后,選擇下一特征點(diǎn)對以重復(fù)相同處理。
[0076]例如,接下來選擇(A,b)。該特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是(15,2)。在該示例中,用于確定局部轉(zhuǎn)換參數(shù)是否彼此接近的標(biāo)準(zhǔn)是局部轉(zhuǎn)換參數(shù)是否完全匹配以便使該描述簡單化。因此,因?yàn)閯偒@得的局部轉(zhuǎn)換參數(shù)(15,2)與已創(chuàng)建的集合I的局部轉(zhuǎn)換參數(shù)不匹配,因此集合創(chuàng)建單元110創(chuàng)建具有局部轉(zhuǎn)換參數(shù)(15,2)的集合2作為新特征點(diǎn)對集合,并且將特征點(diǎn)對(A,b)置為集合2的元素。
[0077]當(dāng)接下來選擇了(B,b)時,該特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是(12,2)并且與集合I的局部轉(zhuǎn)換參數(shù)相匹配。因此集合創(chuàng)建單元Iio將(B,b)添加到集合I。該處理與經(jīng)過步驟S104的、從圖2的步驟SlOl至S106的處理例程相對應(yīng)。
[0078]類似地,當(dāng)選擇了(E,e)時,該特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是(10,0)并且與已創(chuàng)建的特征點(diǎn)對集合的集合I和集合2的局部轉(zhuǎn)換參數(shù)不同。因此創(chuàng)建具有局部轉(zhuǎn)換參數(shù)(10,
O)的集合3作為新特征點(diǎn)對集合,并且將特征點(diǎn)對(E,e)置為集合3的元素。
[0079]類似地,當(dāng)選擇了(F,f )時,該特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是(10,O)并且與集合3的局部轉(zhuǎn)換參數(shù)相匹配。因此將該特征點(diǎn)對(F,f)添加到集合3。
[0080]類似地,當(dāng)選擇了(E,b)時,該特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)是(15,5)并且與已創(chuàng)建的特征點(diǎn)對集合的局部轉(zhuǎn)換參數(shù)不同。因此創(chuàng)建具有局部轉(zhuǎn)換參數(shù)(15,5)的集合4作為新特征點(diǎn)對集合,并且將特征點(diǎn)對(E,b)置為集合4的元素。[0081]集合創(chuàng)建單元110在給定范圍的特征點(diǎn)的成對組合之內(nèi)重復(fù)這些操作步驟。在這里,對特征點(diǎn)的每一成對組合重復(fù)該操作步驟。替代地,可以在首先對每個特征點(diǎn)獲得了局部轉(zhuǎn)換參數(shù)之后將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組中到集合中。
[0082]在專利文獻(xiàn)I的方法中,信息處理設(shè)備對特征點(diǎn)的每一成對組合執(zhí)行用于確定就布置而言其鄰近特征點(diǎn)是否彼此類似的處理。當(dāng)一個特征點(diǎn)的鄰近特征點(diǎn)的平均計(jì)數(shù)例如是十時,需要執(zhí)行IOX10次對鄰近特征點(diǎn)的搜索和比較。對特征點(diǎn)的每一成對組合執(zhí)行該處理意味著計(jì)算量與特征點(diǎn)的計(jì)數(shù)成比例地按指數(shù)規(guī)律增大。另一方面,在該示例中,僅對特征點(diǎn)的一個成對組合執(zhí)行一個局部轉(zhuǎn)換參數(shù)的計(jì)算。僅獲得平行移動量的兩個參數(shù)的該示例只需計(jì)算兩次。因而在該示例中對特征點(diǎn)的每個成對組合所執(zhí)行的處理非常簡單,并且因此實(shí)現(xiàn)了高速處理。
[0083]一旦創(chuàng)建了特征點(diǎn)對集合,則集合選擇單元120從多個創(chuàng)建的集合當(dāng)中選擇包含元素多的集合。圖9說明了所創(chuàng)建的特征點(diǎn)對集合中的一些。在這里選擇集合I和集合3,集合I和集合3是具有元素計(jì)數(shù)為2或更大的集合。
[0084]當(dāng)對于特征點(diǎn)的每一成對組合獲得了局部轉(zhuǎn)換參數(shù)時,形狀相似變化或者相似部分布置不同的特征點(diǎn)的成對組合具有相同參數(shù)值,并且大量單元聚集在正確成對組合的集合中。另一方面,輸出各種值作為不是表不同一地點(diǎn)的特征點(diǎn)的成對組合的局部轉(zhuǎn)換參數(shù)。具有該局部轉(zhuǎn)換參數(shù)的集合的元素計(jì)數(shù)是I或更小。因此通過所包含的元素的計(jì)數(shù)是高還是低可以確定集合是否包含相同特征點(diǎn)的成對組合,即正確特征點(diǎn)對。
[0085]利用專利文獻(xiàn)I的方法,必需對轉(zhuǎn)換參數(shù)可以采用的所有值進(jìn)行檢查以便獲得坐標(biāo)整合量的分布。在圖像大小例如是100像素*100像素的情況下,平行移動量可以采用的值的一般范圍在橫向上約是200 (從-100至+100)并且在縱向上約是200 (從-100至+100),其整個總計(jì)達(dá)約40000。需要從約40000個值找到該分布所集中的位置。通過將某個范圍設(shè)定為獲得平行移動量的分布的單位可以使搜索范圍變窄。例如,將移動量分成以10為單位并且將+1至+10視為相同值,則將搜索的范圍降低到長20*寬20,總共400。然而,在這種情況下所獲得的坐標(biāo)整合量的精確度為以10個像素為單位,這相當(dāng)?shù)汀?br>
[0086]該示例僅需檢查與所創(chuàng)建的特征點(diǎn)對集合的計(jì)數(shù)一樣多的值。特征點(diǎn)的計(jì)數(shù)通常低于可能的局部轉(zhuǎn)換參數(shù)類型的計(jì)數(shù),并且因此該示例中的選擇比專利文獻(xiàn)I中的方法更快地完成。
[0087]在提取了具有高元素計(jì)數(shù)的集合之后,對應(yīng)特征點(diǎn)確定單元130從所選擇的集合的元素當(dāng)中確定對應(yīng)特征點(diǎn)。在這里,將包含在所選擇的集合之中的所有特征點(diǎn)對確定為對應(yīng)特征點(diǎn)對。
[0088]該處理后面是借助于所確定的對應(yīng)特征點(diǎn)對組、基于兩個圖像的特征點(diǎn)之間的關(guān)聯(lián)性來創(chuàng)建3D地圖的處理。
[0089]雖然該示例已經(jīng)描述了本發(fā)明應(yīng)用于下述3D地圖創(chuàng)建系統(tǒng)中的特征點(diǎn)關(guān)聯(lián)系統(tǒng),該3D地圖創(chuàng)建系統(tǒng)在創(chuàng)建3D地圖時使用兩個衛(wèi)星圖像或航拍圖像作為要比較的輸入圖像,但是本發(fā)明適用于使用來自兩個圖像的特征點(diǎn)的關(guān)聯(lián)性的任何系統(tǒng)。
[0090]雖然該示例已經(jīng)討論了在獲得局部轉(zhuǎn)換參數(shù)的值時,圖像不需旋轉(zhuǎn)并且僅考慮平行移動的情況,但是本發(fā)明通過在局部轉(zhuǎn)換參數(shù)當(dāng)中包括旋轉(zhuǎn)而能夠應(yīng)對圖像的旋轉(zhuǎn)。類似地,本發(fā)明通過添加其它參數(shù)元素(放大/縮小、圖案變化等等)作為要在被配對為特征點(diǎn)對的特征點(diǎn)之間進(jìn)行轉(zhuǎn)換所需的實(shí)數(shù)值、函數(shù)、矢量等等。利用這種參數(shù),還可以將屋頂上的廣告氣球、鐵路道口上的橫木等等有效地確定為正確特征點(diǎn)對。本發(fā)明中的處理量仍小于相似現(xiàn)有方法,即使當(dāng)按照這種方式增加了所使用的參數(shù)元素。
[0091]用于確定局部轉(zhuǎn)換參數(shù)彼此接近的標(biāo)準(zhǔn)在該示例中是完全匹配,以便使該描述簡單化。然而,通常由于錯誤等等,很少見的是使局部轉(zhuǎn)換參數(shù)完全匹配。通過將該標(biāo)準(zhǔn)設(shè)定為“差別在給定范圍之內(nèi)”可以應(yīng)對這一點(diǎn)。這種情況下的集合的局部轉(zhuǎn)換參數(shù)可以被固定到首先選擇的特征點(diǎn)對的局部轉(zhuǎn)換參數(shù),或者可以是每當(dāng)將新元素添加到集合時所計(jì)算的、在集合之內(nèi)的元素的局部轉(zhuǎn)換參數(shù)的平均值或者重心。
[0092]該示例中的要搜索的特征點(diǎn)的成對組合的范圍是特征點(diǎn)的每一成對組合。當(dāng)例如預(yù)先已知圖像的平行移動量的上限時,通過在上限范圍之內(nèi)搜索,該搜索范圍可以變窄。按照這種方式使搜索范圍變窄可以降低處理量。
[0093]該示例中的集合選擇單元120選擇集合的標(biāo)準(zhǔn)是元素計(jì)數(shù)是2或更大。在該示例中集合選擇單元120可以選擇具有給定元素計(jì)數(shù)或更大的集合,或者可以使用其它選擇標(biāo)準(zhǔn)。例如,集合選擇單元120可以按照元素計(jì)數(shù)的遞減順序選擇給定值的集合,或者可以選擇其元素計(jì)數(shù)等于或大于所有集合的最高元素計(jì)數(shù)的給定比例的集合。類似地,可以選擇具有較高元素計(jì)數(shù)的集合,直至包含在所選擇的集合之中的元素的計(jì)數(shù)達(dá)到與所有集合的元素的總計(jì)數(shù)的給定比值。替代地,可以用作選擇標(biāo)準(zhǔn)的元素計(jì)數(shù)可以是基于輸入圖像的大小或像素計(jì)數(shù)、在創(chuàng)建特征點(diǎn)對的集合時所需的計(jì)算量等等來確定的。
[0094]集合選擇單元120還可以將其局部轉(zhuǎn)換參數(shù)彼此接近的特征點(diǎn)對集合組合成一個集合,從而防止多個集合當(dāng)中的正確對應(yīng)特征點(diǎn)的分散以及每個集合中得到的元素計(jì)數(shù)低。在這種情況下集合選擇單元120可以操作以執(zhí)行對對應(yīng)特征點(diǎn)分組的處理,通過該處理,利用現(xiàn)有圖案識別技術(shù)通過個體識別來繪制對象。
[0095]在該示例中對應(yīng)特征點(diǎn)確定單元130將包含在所選擇的集合之中的所有特征點(diǎn)對確定為對應(yīng)特征點(diǎn)對。在用于確定局部轉(zhuǎn)換參數(shù)彼此接近的標(biāo)準(zhǔn)是局部轉(zhuǎn)換參數(shù)在給定范圍之內(nèi)彼此具有差別以代替完全匹配的情況下,所選擇的集合中的個別元素的局部轉(zhuǎn)換參數(shù)具有各種值。可以執(zhí)行使用局部轉(zhuǎn)換參數(shù)的這些差別以降低錯誤對應(yīng)特征點(diǎn)的精確度提高處理。例如,可以通過獲得集合的平均值并且除去極大地偏離平均值的特征點(diǎn)對來降低錯誤對應(yīng)。在確定要排除的特征點(diǎn)對時也可以使用集合的重心。
[0096]接下來對本發(fā)明的示例2進(jìn)行描述。該示例與本發(fā)明的第二實(shí)施例相對應(yīng)。
[0097]該示例是本發(fā)明應(yīng)用于對水果執(zhí)行個體識別的系統(tǒng)中的特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
[0098]在這里所討論的系統(tǒng)是對甜瓜的個體識別系統(tǒng),其目的在于確??勺匪菪砸员憬鉀Q水果生產(chǎn)區(qū)域的偽造及其它問題。對培育者所注冊的甜瓜的圖案與所出售的甜瓜的圖案進(jìn)行比較,并且當(dāng)圖案匹配時,確定甜瓜為同一個體。因此通過從甜瓜的圖案提取特征點(diǎn)并且使特征點(diǎn)關(guān)聯(lián)以交叉檢驗(yàn)來實(shí)現(xiàn)甜瓜的個體識別,并且可以發(fā)現(xiàn)生產(chǎn)區(qū)域的偽造等等。在這里已經(jīng)提取了通過各種通常已知的方法可以被提取的甜瓜圖案的特征點(diǎn)。用于根據(jù)特征點(diǎn)之間的關(guān)聯(lián)性來確定對象是否相同的特征點(diǎn)交叉檢驗(yàn)的技術(shù)也廣為人知,并且在這里僅描述通過特征點(diǎn)的關(guān)聯(lián)的處理,同時省略對在該處理之前和之后的處理的描述。
[0099]圖10和11每一個是用于對甜瓜的圖案進(jìn)行說明的示意圖。在如圖12和13中所說明的示例中將以線狀圖案的斷點(diǎn)當(dāng)作特征點(diǎn)。特征點(diǎn)的特征量不但包括坐標(biāo)位置而且還包括與特征點(diǎn)相接觸的線的方向作為元素。特征量還可以包括與環(huán)境亮度等等的差別作為元素。
[0100]對圖12和圖13執(zhí)行比較處理,圖12說明了圖10的甜瓜的特征點(diǎn),圖13說明了圖11的甜瓜的特征點(diǎn)。圖14是兩個特征點(diǎn)布置圖案與作為中心的甜瓜的莖相重疊的示意圖。圖10中的甜瓜和圖12中的甜瓜位于不同地點(diǎn),這導(dǎo)致特征點(diǎn)布置有差別。甜瓜位置的差別例如使“I”與“K”的相對位置關(guān)系之間以及i與k的相對位置關(guān)系之間極大地差另Ij,而與“I”與與“ j”、“K”與“k”每一個是相同特征點(diǎn)這樣的事實(shí)無關(guān)。通過獲得正確特征點(diǎn)對來確定下述兩個圖像的同一性,在該兩個圖像之間圖案特征點(diǎn)的布置部分地且局部地不同。
[0101]通過利用這兩個圖像的示例對示例2進(jìn)行了描述。
[0102]集合創(chuàng)建單元210選擇來自兩個圖像的特征點(diǎn)的一個成對組合作為焦點(diǎn)特征點(diǎn)對(與圖4的S201相對應(yīng))。在這里,將(I,i)選擇作為焦點(diǎn)特征點(diǎn)對。
[0103]接下來對于所選擇的焦點(diǎn)特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù),并且創(chuàng)建僅包括焦點(diǎn)特征點(diǎn)對作為其元素的特征點(diǎn)對集合(與S202和S203相對應(yīng))。在這里,創(chuàng)建具有(I,i)作為元素的集合10。
[0104]接下來執(zhí)行對焦點(diǎn)特征點(diǎn)對的鄰近特征點(diǎn)對的處理(與S204至S208相對應(yīng))。首先通過從焦點(diǎn)特征點(diǎn)對的附近單獨(dú)地選擇特征點(diǎn)來創(chuàng)建鄰近特征點(diǎn)對。在這里,“I”的鄰近特征點(diǎn)是“ J”和“K”,“ i ”的鄰近特征點(diǎn)“ j ”和“k”,并且考慮四個鄰近特征點(diǎn)對(J,j ),(J,k),(K,j),(K,k)。此后,對于所選擇的鄰近特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù),并基于所獲得的局部轉(zhuǎn)換參數(shù)對焦點(diǎn)特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)的接近性,將所獲得的局部轉(zhuǎn)換參數(shù)添加到包含焦點(diǎn)特征點(diǎn)對作為元素的特征點(diǎn)對集合。
[0105]圖15說明了鄰近特征點(diǎn)相對于焦點(diǎn)特征點(diǎn)對(I,i)的相對位置關(guān)系。在鄰近特征點(diǎn)對(J,j),(J,k),(K,j), (K,k)當(dāng)中,(J, j)具有接近的相對位置關(guān)系,并且在這里將其添加到集合10。
[0106]接下來,在包含焦點(diǎn)特征點(diǎn)對的集合包含仍未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對的情況下,將未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對中的一個選擇作為新焦點(diǎn)特征點(diǎn)對,并且執(zhí)行對鄰近特征點(diǎn)對的處理。
[0107]例如,包含焦點(diǎn)特征點(diǎn)對(I, i)的集合10包含未被選擇作為焦點(diǎn)特征點(diǎn)對的(J,j),并且利用(J,j)作為焦點(diǎn)特征點(diǎn)對來執(zhí)行對鄰近特征點(diǎn)對的處理。
[0108]在這里,“J”的鄰近特征點(diǎn)是“I”和“K”,并且“ j”的鄰近特征點(diǎn)是“i”和“k”。雖然(J,j)具有四個鄰近特征點(diǎn)對:(I,i),(I,k),(K,i)和(K,k),但是(I,i)已經(jīng)屬于集合10,并且因此考慮仍未屬于任何集合的(I,k),(K,i)和(K,k)。
[0109]圖16說明了相對于焦點(diǎn)特征點(diǎn)對(J,j)而言鄰近特征點(diǎn)的相對位置關(guān)系。在所搜索的鄰近特征點(diǎn)對,即(1,10,(1(,1)和(1(,10當(dāng)中,(K,k)具有接近的相對位置關(guān)系并且將其添加到集合10。
[0110]接下來選擇屬于集合10但是仍未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對(K,k)作為焦點(diǎn)特征點(diǎn)對,以執(zhí)行對鄰近特征點(diǎn)對的處理。集合創(chuàng)建單元210按照這種方式重復(fù)該操作,直至集合10不再包含未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對。
[0111]當(dāng)焦點(diǎn)集合不再包含未被選擇作為焦點(diǎn)特征點(diǎn)對的特征點(diǎn)對時,選擇下一集合。[0112]按照這種方式,當(dāng)存在仍未選擇的特征點(diǎn)對時,利用該特征點(diǎn)對作為新焦點(diǎn)特征點(diǎn)來執(zhí)行相同處理。重復(fù)上述處理以直至對每個特征點(diǎn)對進(jìn)行了處理。
[0113]集合選擇單元220和對應(yīng)特征點(diǎn)確定單元230的隨后操作與示例I中相同,并且省略其描述。
[0114]該示例中的特征點(diǎn)的特征量使用除了位置之外的方向作為參數(shù)元素。即使在目標(biāo)特征點(diǎn)不具有方向的情況下,例如當(dāng)柑子或梨的點(diǎn)圖案被用作特征點(diǎn)時,通過將諸如朝著最接近所討論的特征點(diǎn)的特征點(diǎn)的方向用作所討論的特征點(diǎn)所具有的方向的方法,或者通過確定諸如柑子或梨的莖的參考點(diǎn)并且使用朝著參考點(diǎn)的方向的方法的任意方法,來對特征點(diǎn)給出方向特征量。
[0115]該示例通過采用甜瓜作為示例描述了本發(fā)明應(yīng)用于個體識別系統(tǒng)中的特征點(diǎn)關(guān)聯(lián)系統(tǒng)。然而,本發(fā)明還適合于鮮魚等等的個體識別系統(tǒng),該個體識別系統(tǒng)是針對諸如魚的、其輪廓和圖案方向性可以被使用的對象并且相對于輪廓而言的圖案方向性用作特征點(diǎn)的特征量。本發(fā)明還可應(yīng)用于將脊紋中斷或分叉關(guān)聯(lián)作為交叉檢驗(yàn)的特征點(diǎn)的指紋或掌紋認(rèn)證系統(tǒng)、通過利用字符的端點(diǎn)和高曲率點(diǎn)來識別字符的字符識別系統(tǒng)、以及需要使來自兩個圖像的特征點(diǎn)彼此關(guān)聯(lián)的任何其它系統(tǒng)。
[0116]可展開的手指和手掌部分地伸展/收縮。因此當(dāng)本發(fā)明應(yīng)用于指紋或掌紋認(rèn)證系統(tǒng)時,能夠應(yīng)對局部轉(zhuǎn)換參數(shù)部分不同的情況的本發(fā)明的特征很有效。
[0117]類似地,果實(shí)及其它易腐品的顏色和圖案隨時間而變。因此當(dāng)本發(fā)明應(yīng)用于下述個體識別系統(tǒng)時,能夠應(yīng)對局部轉(zhuǎn)換參數(shù)部分不同的情況的本發(fā)明的特征很有效,該個體識別系統(tǒng)吸收了由于隨識別目標(biāo)的時間的變化所造成的從一個地點(diǎn)到另一地點(diǎn)的變化量的差。在這種情況下,基于圖像獲得的日期/時間、識別目標(biāo)的傳送信息等等,可調(diào)節(jié)特征點(diǎn)對集合的提取中參數(shù)之間的接近/遠(yuǎn)離。
[0118]此外在字符識別中,字符之間的間隔或者一個漢字內(nèi)的左手偏旁部首與右手偏旁部首之間的間隔有時變化,并且因此當(dāng)本發(fā)明應(yīng)用于字符識別系統(tǒng)時能夠應(yīng)對局部轉(zhuǎn)換參數(shù)部分不同的情況的本發(fā)明的特征很有效。
[0119]接下來對示例2的效果進(jìn)行描述。示例I在確定特征點(diǎn)對屬于哪個集合時使用局部轉(zhuǎn)換參數(shù)的絕對差。因此示例I無法應(yīng)對諸如在該示例中給定為示例的甜瓜的球狀物上的特征點(diǎn)隨著球狀物的轉(zhuǎn)動而逐漸變化的情況。例如,利用示例I的方法,幾乎不能將圖14中的其間的絕對距離相當(dāng)大的特征點(diǎn)K和特征點(diǎn)k識別為屬于與特征點(diǎn)對(I,i)相同集合的特征點(diǎn)對。在該示例中,如在圖15和16中所說明的使用相對于相鄰特征點(diǎn)對而言的相對位置關(guān)系的情況下,通過確定相對于比(I,i)更靠近(K,k)的(J,j)而言的相對位置關(guān)系,可以將(K,k)放置在與(J,j)相同的集合10中,即與(I,j)相同的集合10。
[0120]因而示例2還能夠應(yīng)對圖像之內(nèi)的位置關(guān)系等等部分地且逐漸地變化這樣的情況。
[0121]可以通過硬件和軟件的組合實(shí)現(xiàn)特征點(diǎn)關(guān)聯(lián)系統(tǒng)的部件。在硬件和軟件相結(jié)合的模式中,在RAM上開發(fā)特征點(diǎn)關(guān)聯(lián)程序,并且部件通過基于該程序?qū)刂茊卧?CPU)等等的硬件進(jìn)行操作而起各種裝置的作用。還可以將該程序固定地記錄到要分發(fā)的記錄介質(zhì)上。經(jīng)由電纜、無線連接、或者記錄介質(zhì)本身將記錄在記錄介質(zhì)上的程序讀取到存儲器上,并且運(yùn)行控制單元等等。記錄介質(zhì)的示例包括光盤、磁盤、半導(dǎo)體存儲器設(shè)備、以及硬盤。[0122]如在圖17中所例示的,特征點(diǎn)關(guān)聯(lián)系統(tǒng)可以建立在單個計(jì)算機(jī)或服務(wù)器上,并且還可以被建立為云系統(tǒng)。
[0123]為了改述該實(shí)施例,基于在RAM上開發(fā)的特征點(diǎn)關(guān)聯(lián)程序,通過使控制單元作為集合創(chuàng)建裝置、集合選擇裝置、以及對應(yīng)特征點(diǎn)確定裝置進(jìn)行操作,可以實(shí)現(xiàn)作為特征點(diǎn)關(guān)聯(lián)系統(tǒng)進(jìn)行操作的信息處理設(shè)備。
[0124]在建立下述個體識別系統(tǒng)的過程中可以使用該特征點(diǎn)關(guān)聯(lián)系統(tǒng),在該個體識別系統(tǒng)中,單獨(dú)地從兩個輸入圖像提取特征點(diǎn)作為特征點(diǎn)組,使包含在所提取的特征點(diǎn)組中的一個之中的特征點(diǎn)與包含在另一個提取的特征點(diǎn)組之中的特征點(diǎn)彼此成對以被識別為是特征點(diǎn)對,獲得要在構(gòu)成了所識別的特征點(diǎn)對的特征點(diǎn)之間進(jìn)行轉(zhuǎn)換所需的參數(shù)作為局部轉(zhuǎn)換參數(shù),對在給定規(guī)則之下被認(rèn)為就所獲得的局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對進(jìn)行分組以創(chuàng)建多個特征點(diǎn)對集合,從所創(chuàng)建的多個特征點(diǎn)對集合當(dāng)中選擇在給定規(guī)則之下被認(rèn)為包含元素多的特征點(diǎn)對集合,從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中選擇具有在給定規(guī)則之下被認(rèn)為仍包括特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),借助于所選擇的對應(yīng)特征點(diǎn)對執(zhí)行特征點(diǎn)交叉檢驗(yàn)處理,并且確定包括在輸入兩個圖像之中的個體的同一性。在建立執(zhí)行3D地圖創(chuàng)建處理以創(chuàng)建包括在兩個輸入圖像之中的對象的3D地圖的3D地圖創(chuàng)建系統(tǒng)中也可以使用該特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
[0125]除了圖像之間的關(guān)聯(lián)性之外,在使圖像與特征點(diǎn)組的數(shù)據(jù)關(guān)聯(lián)的過程中可以使用特征點(diǎn)關(guān)聯(lián)系統(tǒng)。特征點(diǎn)組的數(shù)據(jù)在這里是通過使特定空間中的特征點(diǎn)之間的位置關(guān)系變成信息所獲得的數(shù)據(jù)。
[0126]通過按照這種方式對圖像與特征點(diǎn)組的數(shù)據(jù)進(jìn)行比較,可以以小處理量使實(shí)際拍攝的衛(wèi)星圖像、航拍圖像等等與現(xiàn)有地圖數(shù)據(jù)關(guān)聯(lián)。例如,將該特征點(diǎn)關(guān)聯(lián)系統(tǒng)并入到拍攝位置識別系統(tǒng)中可以使識別系統(tǒng)從輸入圖像提取圖像的對象的位置和名稱、對象的有關(guān)數(shù)據(jù)、3D數(shù)據(jù)等等。
[0127]當(dāng)使圖像與視頻、視頻與另一視頻、視頻與特征點(diǎn)組的數(shù)據(jù)等等實(shí)時關(guān)聯(lián)時,也可以使用該特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
[0128]通過按照這種方式使來自不同特征點(diǎn)組的特征點(diǎn)實(shí)時關(guān)聯(lián),可以以小處理量使利用照相機(jī)等等所拍攝的視頻與地圖數(shù)據(jù)等等關(guān)聯(lián)。這些可以在例如汽車導(dǎo)航系統(tǒng)和增強(qiáng)現(xiàn)實(shí)(AR)系統(tǒng)中使用。從而以小處理量實(shí)現(xiàn)了諸如在照相機(jī)所拍攝的視頻上重疊寫入并且輸出注解的處理。在視頻一視頻比較的情況下,在識別版權(quán)擁有者等等的過程中可以使用該系統(tǒng)。在諸如汽車導(dǎo)航系統(tǒng)或AR系統(tǒng)中的實(shí)時處理的情況下,通過執(zhí)行下述處理可以降低整個處理量,該處理涉及從照相機(jī)拍攝的視頻新提取特征點(diǎn)、使所提取的特征點(diǎn)與包含在要比較的數(shù)據(jù)(特征點(diǎn)組)之中的特征點(diǎn)成對、將成對的特征點(diǎn)識別為特征點(diǎn)對、對于特征點(diǎn)對獲得局部轉(zhuǎn)換參數(shù)、找到接近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對集合的已獲得的局部轉(zhuǎn)換參數(shù)中的一個、并且將該特征點(diǎn)對添加到具有接近的局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對集合??梢曰谂c在新提取的特征點(diǎn)附近的特征點(diǎn)對的關(guān)系來限制該情況下的提取范圍。
[0129]汽車導(dǎo)航系統(tǒng)或AR系統(tǒng)可以對于實(shí)時處理圖像的每個幀,使來自不同特征點(diǎn)組的特征點(diǎn)關(guān)聯(lián),或者可以使在幀變稀疏的同時執(zhí)行該處理。本發(fā)明還可以用于與分離給定間隔的一個幀和另一幀關(guān)聯(lián)地并且利用特定的變化量使來自不同特征點(diǎn)組的特征點(diǎn)關(guān)聯(lián),并且介于幀之間的幀的特征點(diǎn)與較接近在關(guān)聯(lián)中所使用的幀中的一個的特征點(diǎn)關(guān)聯(lián)。在執(zhí)行幀間預(yù)測的MPEG或其它視頻形式的情況下,不執(zhí)行幀間預(yù)測的I幀或其它幀可以用于將來自不同特征點(diǎn)組的就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組到一起并且對分組的特征點(diǎn)對進(jìn)行處理,而在對執(zhí)行幀間預(yù)測的幀的幀間預(yù)測中所計(jì)算的值可以用于校正對從不執(zhí)行幀間預(yù)測的幀所獲得的對應(yīng)特征點(diǎn)的預(yù)測。
[0130]用這種方式,可以以小處理量獲得諸如對象的位置以及對象的變化(例如靠邊駕駛的車輛)。在吸收從視頻所提取的實(shí)時處理的識別目標(biāo)的特征點(diǎn)之間的由于天氣、光源等等所引起的差別方面,能夠應(yīng)對如在實(shí)施例中所述的局部轉(zhuǎn)換參數(shù)部分不同的情況的本發(fā)明的特征也是有效的??梢酝ㄟ^集合創(chuàng)建裝置來執(zhí)行所述的變疏及其它類型的處理??梢酝ㄟ^對應(yīng)特征點(diǎn)確定單元來處理比較幀之間的幀關(guān)聯(lián)性。
[0131]如已描述的,本發(fā)明所應(yīng)用于的特征點(diǎn)關(guān)聯(lián)系統(tǒng)對于布置部分不同的兩個圖像等等也能夠以小處理量使特征點(diǎn)關(guān)聯(lián)。
[0132]也就是說,根據(jù)本發(fā)明的一個實(shí)施例,可以提供即使當(dāng)諸如兩個圖像的特征點(diǎn)的比較組之間的對象的布置部分不同,也能夠以低處理量使特征點(diǎn)彼此關(guān)聯(lián)的特征點(diǎn)關(guān)聯(lián)系統(tǒng)。
[0133]本發(fā)明的具體配置不局限于上述實(shí)施例和示例,并且不脫離本發(fā)明的精神的修改包含在本發(fā)明中。本發(fā)明還包括部件的適當(dāng)劃分和組合。
[0134]上述實(shí)施例的一些或全部還可以如下表達(dá)。以下說明決不是對本發(fā)明做出限制。
[0135][補(bǔ)充說明I]
[0136]一種特征點(diǎn)關(guān)聯(lián)系統(tǒng),包括:
[0137]集合創(chuàng)建單元,用于接收要比較的多個特征點(diǎn)組,并且通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組到集合中來創(chuàng)建多個特征點(diǎn)對集合;
[0138]集合選擇單元,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及
[0139]對應(yīng)特征點(diǎn)確定單元,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸入。
[0140][補(bǔ)充說明2]
[0141]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元參考給定特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)以及在所述給定特征點(diǎn)對附近的鄰近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù),以由此創(chuàng)建將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0142][補(bǔ)充說明3]
[0143]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,當(dāng)創(chuàng)建集合時,為了確定是否將特定特征點(diǎn)對添加到已創(chuàng)建的集合,所述集合創(chuàng)建單元通過基于相對于包含在現(xiàn)有集合之中的特征點(diǎn)對而言的相對位置關(guān)系,選擇屬于搜索范圍的特征點(diǎn)作為鄰近特征點(diǎn),來創(chuàng)建所述特定特征點(diǎn)對的鄰近特征點(diǎn)對。
[0144][補(bǔ)充說明4]
[0145]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元使用在被配對為特征點(diǎn)對的特征點(diǎn)之間的轉(zhuǎn)換所需的值作為所述局部轉(zhuǎn)換參數(shù),來創(chuàng)建用于將就參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0146][補(bǔ)充說明5][0147]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述局部轉(zhuǎn)換參數(shù)包括局部轉(zhuǎn)換所需的多個參數(shù)元素,并且所述集合創(chuàng)建單元基于所述多個參數(shù)元素的每一個的近似性來創(chuàng)建用于將特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0148][補(bǔ)充說明6]
[0149]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元通過將用于確定局部轉(zhuǎn)換參數(shù)接近已創(chuàng)建集合的局部轉(zhuǎn)換參數(shù)的標(biāo)準(zhǔn)設(shè)定為“局部轉(zhuǎn)換參數(shù)完全匹配”或者“局部轉(zhuǎn)換參數(shù)之間的差在給定范圍之內(nèi)”來執(zhí)行將特征點(diǎn)對分組的處理,并且所述標(biāo)準(zhǔn)使用首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合中的元素的重心的參數(shù)。
[0150][補(bǔ)充說明7]
[0151]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,在當(dāng)將特征點(diǎn)對分組時使用除了“完全匹配”之外的標(biāo)準(zhǔn)作為將局部轉(zhuǎn)換參數(shù)認(rèn)為彼此接近的范圍的集合中,所述對應(yīng)特征點(diǎn)確定單元對照首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合之中的元素的重心的參數(shù)中的任何一個,對作為元素包含在由所述集合選擇單元所選擇的特征點(diǎn)對集合中的每個特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)進(jìn)行比較,并且作為錯誤對應(yīng)特征點(diǎn)從關(guān)聯(lián)排除局部轉(zhuǎn)換參數(shù)極大地偏離的特征點(diǎn)對。
[0152][補(bǔ)充說明8]
[0153]一種個體識別系統(tǒng),所述個體識別系統(tǒng)配置成:
[0154]從兩個輸入圖像分別提取特征點(diǎn)作為特征點(diǎn)組;
[0155]使包含在所提取的特征點(diǎn)組中的一個之中的特征點(diǎn)與包含在所提取的特征點(diǎn)組的另一個之中的特征點(diǎn)彼此成對,并且將成對的特征點(diǎn)識別為特征點(diǎn)對,獲得在構(gòu)成所識別的特征點(diǎn)對的特征點(diǎn)之間進(jìn)行轉(zhuǎn)換所需的參數(shù)作為局部轉(zhuǎn)換參數(shù),并且通過將在給定規(guī)則之下就所獲得的局部轉(zhuǎn)換參數(shù)而言被認(rèn)為彼此接近的特征點(diǎn)分組在一起來創(chuàng)建多個特征點(diǎn)對集合;
[0156]從所創(chuàng)建的所述多個特征點(diǎn)對集合當(dāng)中選擇在給定規(guī)則之下被認(rèn)為包含高元素計(jì)數(shù)的特征點(diǎn)對集合;
[0157]從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中選擇具有在給定規(guī)則之下被認(rèn)為仍被包括的特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn);并且
[0158]通過借助于所選擇的對應(yīng)特征點(diǎn)對執(zhí)行特征點(diǎn)交叉檢驗(yàn)處理來確定包括在兩個輸入圖像之中的個體的同一性。
[0159][補(bǔ)充說明9]
[0160]一種特征點(diǎn)關(guān)聯(lián)方法,包括:
[0161]集合創(chuàng)建步驟,用于接收要比較的多個特征點(diǎn)組,并且通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組到集合中來創(chuàng)建多個特征點(diǎn)對集合;
[0162]集合選擇步驟,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及
[0163]對應(yīng)特征點(diǎn)確定步驟,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸出。
[0164][補(bǔ)充說明10][0165]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)方法,其中,所述集合創(chuàng)建步驟包括參考給定特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)以及在所述給定特征點(diǎn)對附近的鄰近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù),以由此創(chuàng)建將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0166][補(bǔ)充說明11]
[0167]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)方法,其中,所述集合創(chuàng)建步驟包括,當(dāng)創(chuàng)建集合時,為了確定是否將特定特征點(diǎn)對添加到已創(chuàng)建的集合,通過基于相對于包含在現(xiàn)有集合之中的特征點(diǎn)對而言的相對位置關(guān)系,選擇屬于搜索范圍的特征點(diǎn)作為鄰近特征點(diǎn),來創(chuàng)建所述特定特征點(diǎn)對的鄰近特征點(diǎn)對。
[0168][補(bǔ)充說明12]
[0169]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)方法,其中,所述集合創(chuàng)建步驟包括使用在被配對為特征點(diǎn)對的特征點(diǎn)之間的轉(zhuǎn)換所需的值作為所述局部轉(zhuǎn)換參數(shù),來創(chuàng)建用于將就參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0170][補(bǔ)充說明13]
[0171]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)方法,其中,所述局部轉(zhuǎn)換參數(shù)包括局部轉(zhuǎn)換所需的多個參數(shù)元素,并且所述集合創(chuàng)建步驟包括基于所述多個參數(shù)元素的每一個的近似性來創(chuàng)建用于將特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0172][補(bǔ)充說明14]
[0173]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)方法,其中,所述集合創(chuàng)建步驟包括通過將用于確定局部轉(zhuǎn)換參數(shù)接近已創(chuàng)建集合的局部轉(zhuǎn)換參數(shù)的標(biāo)準(zhǔn)設(shè)定為“局部轉(zhuǎn)換參數(shù)完全匹配”或者“局部轉(zhuǎn)換參數(shù)之間的差在給定范圍之內(nèi)”來執(zhí)行將特征點(diǎn)對分組的處理,并且所述標(biāo)準(zhǔn)使用首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合中的元素的重心的參數(shù)。
[0174][補(bǔ)充說明15]
[0175]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)方法,其中,所述對應(yīng)特征點(diǎn)確定步驟包括,在當(dāng)將特征點(diǎn)對分組時使用除了“完全匹配”之外的標(biāo)準(zhǔn)作為將局部轉(zhuǎn)換參數(shù)認(rèn)為彼此接近的范圍的集合中,對照首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合之中的元素的重心的參數(shù)中的任何一個,對作為元素包含在所述集合選擇步驟中選擇的特征點(diǎn)對集合中的每個特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)進(jìn)行比較,并且作為錯誤對應(yīng)特征點(diǎn)從關(guān)聯(lián)排除局部轉(zhuǎn)換參數(shù)極大地偏離的特征點(diǎn)對。
[0176][補(bǔ)充說明16]
[0177]一種特征點(diǎn)關(guān)聯(lián)程序,所述特征點(diǎn)關(guān)聯(lián)程序用于控制信息處理設(shè)備的控制單元,以便所述控制單元操作為:
[0178]集合創(chuàng)建單元,用于通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起來創(chuàng)建多個特征點(diǎn)對集合;
[0179]集合選擇單元,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及
[0180]對應(yīng)特征點(diǎn)確定單元,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸出。
[0181][補(bǔ)充說明17][0182]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便參考給定特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)以及在所述給定特征點(diǎn)對附近的鄰近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù),以由此創(chuàng)建將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0183][補(bǔ)充說明18]
[0184]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便當(dāng)創(chuàng)建集合時,為了確定是否將特定特征點(diǎn)對添加到已創(chuàng)建的集合,通過基于相對于包含在現(xiàn)有集合之中的特征點(diǎn)對而言的相對位置關(guān)系,選擇屬于搜索范圍的特征點(diǎn)作為鄰近特征點(diǎn),來創(chuàng)建所述特定特征點(diǎn)對的鄰近特征點(diǎn)對。
[0185][補(bǔ)充說明19]
[0186]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便使用在被配對為特征點(diǎn)對的特征點(diǎn)之間的轉(zhuǎn)換所需的值作為局部轉(zhuǎn)換參數(shù),來創(chuàng)建用于將就參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0187][補(bǔ)充說明20]
[0188]根據(jù)先前說明的特征點(diǎn)關(guān)聯(lián)程序,其中,所述局部轉(zhuǎn)換參數(shù)包括局部轉(zhuǎn)換所需的多個參數(shù)元素,并且所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便基于所述多個參數(shù)元素的每一個的近似性來創(chuàng)建用于將特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
[0189][補(bǔ)充說明21]
[0190]根據(jù)先前說明中的任何一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便通過將用于確定局部轉(zhuǎn)換參數(shù)接近已創(chuàng)建集合的局部轉(zhuǎn)換參數(shù)的標(biāo)準(zhǔn)設(shè)定為“局部轉(zhuǎn)換參數(shù)完全匹配”或者“局部轉(zhuǎn)換參數(shù)之間的差在給定范圍之內(nèi)”來執(zhí)行將特征點(diǎn)對分組的處理,并且所述標(biāo)準(zhǔn)使用首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合中的元素的重心的參數(shù)。
[0191][補(bǔ)充說明22]
[0192]根據(jù)先前說明的任何一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述對應(yīng)特征點(diǎn)確定單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便在當(dāng)將特征點(diǎn)對分組時使用除了“完全匹配”之外的標(biāo)準(zhǔn)作為將局部轉(zhuǎn)換參數(shù)認(rèn)為彼此接近的范圍的集合中,對照首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合之中的元素的重心的參數(shù)中的任何一個,對作為元素包含在由所述集合選擇單元所選擇的特征點(diǎn)對集合中的每個特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)進(jìn)行比較,并且作為錯誤對應(yīng)特征點(diǎn)從關(guān)聯(lián)排除局部轉(zhuǎn)換參數(shù)極大地偏離的特征點(diǎn)對。
[0193][補(bǔ)充說明23]
[0194]根據(jù)先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便:
[0195]接收從照相機(jī)實(shí)時獲得的視頻或圖像的幀所提取的一組特征點(diǎn),使包括在所提取的中貞特征點(diǎn)的組中的特征點(diǎn)與包含在準(zhǔn)備的特征點(diǎn)組中的特征點(diǎn)成對,將成對的特征點(diǎn)識別為特征點(diǎn)對,獲得在構(gòu)成所識別的特征點(diǎn)對的特征點(diǎn)之間的轉(zhuǎn)換所需的參數(shù)作為局部轉(zhuǎn)換參數(shù),將在給定規(guī)則之下就所獲得的局部轉(zhuǎn)換參數(shù)而言被認(rèn)為彼此接近的特征點(diǎn)對分組在一起,并且由所分組的特征點(diǎn)對創(chuàng)建多個特征點(diǎn)對集合;并且[0196]基于所接收到的幀特征點(diǎn)組,執(zhí)行特征點(diǎn)交叉檢驗(yàn)處理以輸出在來自照相機(jī)的視頻上覆蓋寫入的注釋。
[0197][補(bǔ)充說明24]
[0198]根據(jù)先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便使幀特征點(diǎn)組稀疏。
[0199][補(bǔ)充說明25]
[0200]根據(jù)先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便通過與給定間隔的每個幀和/或每個特定量的變化關(guān)聯(lián)地,將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起,來創(chuàng)建多個特征點(diǎn)。
[0201][補(bǔ)充說明26]
[0202]根據(jù)先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便使在特征點(diǎn)集合的產(chǎn)生過程中未使用的幀的特征點(diǎn)與更接近在關(guān)聯(lián)中所使用的幀中的一個的特征點(diǎn)關(guān)聯(lián)。
[0203][補(bǔ)充說明27]
[0204]根據(jù)先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序,其中,所述集合創(chuàng)建單元被所述特征點(diǎn)關(guān)聯(lián)程序控制,以便基于所討論的幀與在關(guān)聯(lián)中所使用的幀之間的關(guān)系,以及在關(guān)聯(lián)中所使用的幀的特征點(diǎn)對,來對于在特征點(diǎn)集合的產(chǎn)生過程中未使用的幀的特征點(diǎn)計(jì)算要比較的特征點(diǎn)組中的、與所討論的巾貞的特征點(diǎn)相對應(yīng)的對應(yīng)特征點(diǎn)或?qū)?yīng)位置。
[0205][補(bǔ)充說明28]
[0206]一種在其上記錄有先前說明中的一個的特征點(diǎn)關(guān)聯(lián)程序的記錄介質(zhì)。
[0207]本發(fā)明可已應(yīng)用于需要使來自兩個圖像等等的特征點(diǎn)彼此關(guān)聯(lián)的任何系統(tǒng)。
[0208]該申請要求于2011年8月16日提交的日本專利申請N0.2011 — 178029的優(yōu)先權(quán),將其整個公開并入到這里。
[0209]參考符號列表
[0210]110,210集合創(chuàng)建單元(集合創(chuàng)建裝置)
[0211]120,220集合選擇單元(集合選擇裝置)
[0212]130,230對應(yīng)特征點(diǎn)確定單元(對應(yīng)特征點(diǎn)確定裝置)
【權(quán)利要求】
1.一種特征點(diǎn)關(guān)聯(lián)系統(tǒng),包括: 集合創(chuàng)建單元,用于接收要比較的多個特征點(diǎn)組,并且通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組到集合中來創(chuàng)建多個特征點(diǎn)對集合; 集合選擇單元,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及 對應(yīng)特征點(diǎn)確定單元,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸出。
2.根據(jù)權(quán)利要求1所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元參考給定特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)以及在所述給定特征點(diǎn)對附近的鄰近特征點(diǎn)對的局部轉(zhuǎn)換參數(shù),以由此創(chuàng)建將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
3.根據(jù)權(quán)利要求2所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,當(dāng)創(chuàng)建集合時,為了確定是否將特定特征點(diǎn)對添加到已創(chuàng)建的集合,所述集合創(chuàng)建單元通過基于相對于包含在現(xiàn)有集合之中的特征點(diǎn)對而言的相對位置關(guān)系,選擇屬于搜索范圍的特征點(diǎn)作為鄰近特征點(diǎn),來創(chuàng)建所述特定特征點(diǎn)對的鄰近特征點(diǎn)對。
4.根據(jù)權(quán)利要求1至3中的任何一項(xiàng)所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元使用在被配對為特征點(diǎn)對的特征點(diǎn)之間的轉(zhuǎn)換所需的值作為所述局部轉(zhuǎn)換參數(shù),來創(chuàng)建將就參數(shù)而言彼此接近 的特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
5.根據(jù)權(quán)利要求4所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述局部轉(zhuǎn)換參數(shù)包括局部轉(zhuǎn)換所需的多個參數(shù)元素,并且所述集合創(chuàng)建單元基于所述多個參數(shù)元素的每一個的近似性來創(chuàng)建將特征點(diǎn)對分組在一起的特征點(diǎn)對集合。
6.根據(jù)權(quán)利要求1至5中的任何一項(xiàng)所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,所述集合創(chuàng)建單元通過將用于確定局部轉(zhuǎn)換參數(shù)接近已創(chuàng)建集合的局部轉(zhuǎn)換參數(shù)的標(biāo)準(zhǔn)設(shè)定為“局部轉(zhuǎn)換參數(shù)完全匹配”或者“局部轉(zhuǎn)換參數(shù)之間的差在給定范圍之內(nèi)”來執(zhí)行將特征點(diǎn)對分組的處理,并且所述標(biāo)準(zhǔn)使用首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合中的元素的重心的參數(shù)。
7.根據(jù)權(quán)利要求1至5中的任何一項(xiàng)所述的特征點(diǎn)關(guān)聯(lián)系統(tǒng),其中,在當(dāng)將特征點(diǎn)對分組時使用除了“完全匹配”之外的標(biāo)準(zhǔn)作為將局部轉(zhuǎn)換參數(shù)認(rèn)為彼此接近的范圍的集合中,所述對應(yīng)特征點(diǎn)確定單元對照首先選擇的元素的參數(shù)、在包含在集合中的元素當(dāng)中取平均值的參數(shù)、以及包含在集合中的元素的重心的參數(shù)中的任何一個,對作為元素包含在由所述集合選擇單元所選擇的特征點(diǎn)對集合中的每個特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)進(jìn)行比較,并且作為錯誤對應(yīng)特征點(diǎn)從關(guān)聯(lián)排除局部轉(zhuǎn)換參數(shù)極大地偏離的特征點(diǎn)對。
8.一種用于執(zhí)行個體識別的特征點(diǎn)關(guān)聯(lián)系統(tǒng),所述特征點(diǎn)關(guān)聯(lián)系統(tǒng)配置成: 從兩個輸入圖像分別提取特征點(diǎn)作為特征點(diǎn)組; 使包含在所提取的特征點(diǎn)組中的一個之中的特征點(diǎn)與包含在所提取的特征點(diǎn)組的另一個之中的特征點(diǎn)彼此成對,并且將成對的特征點(diǎn)識別為特征點(diǎn)對,獲得在構(gòu)成所識別的特征點(diǎn)對的特征點(diǎn)之間進(jìn)行轉(zhuǎn)換所需的參數(shù)作為局部轉(zhuǎn)換參數(shù),并且通過將在給定規(guī)則之下就所獲得的局部轉(zhuǎn)換參數(shù)而言被認(rèn)為彼此接近的特征點(diǎn)分組在一起來創(chuàng)建多個特征點(diǎn)對集合; 從所創(chuàng)建的所述多個特征點(diǎn)對集合當(dāng)中選擇在給定規(guī)則之下被認(rèn)為包含高元素計(jì)數(shù)的特征點(diǎn)對集合; 從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中選擇具有在給定規(guī)則之下被認(rèn)為仍被包括的特征點(diǎn)對的局部轉(zhuǎn)換參數(shù)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn);并且 通過借助于所選擇的對應(yīng)特征點(diǎn)對執(zhí)行特征點(diǎn)交叉檢驗(yàn)處理來確定包括在兩個輸入圖像之中的個體的同一性。
9.一種特征點(diǎn)關(guān)聯(lián)方法,包括: 集合創(chuàng)建步驟,用于接收要比較的多個特征點(diǎn)組,并且通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組到集合中來創(chuàng)建多個特征點(diǎn)對集合; 集合選擇步驟,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及 對應(yīng)特征點(diǎn)確定步驟,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸出。
10.一種記錄介質(zhì),所述記錄介質(zhì)在其上記錄有特征點(diǎn)關(guān)聯(lián)程序,所述特征點(diǎn)關(guān)聯(lián)程序用于信息處理設(shè)備的控制單元使得所述控制單元操作為: 集合創(chuàng)建單元,用于通過將就局部轉(zhuǎn)換參數(shù)而言彼此接近的特征點(diǎn)對一起分組到集合中來創(chuàng)建多個特征點(diǎn)對集合; 集合選擇單元,用于從所述多個特征點(diǎn)對集合當(dāng)中選擇包含元素多的特征點(diǎn)對集合;以及 對應(yīng)特征點(diǎn)確定單元,用于從包含在所選擇的特征點(diǎn)對集合中的特征點(diǎn)對當(dāng)中確定要被彼此關(guān)聯(lián)的特征點(diǎn)對作為正確對應(yīng)特征點(diǎn),以便輸出。
【文檔編號】G06T7/00GK103733225SQ201280039803
【公開日】2014年4月16日 申請日期:2012年7月17日 優(yōu)先權(quán)日:2011年8月16日
【發(fā)明者】門田啟 申請人:日本電氣株式會社