專利名稱:影像處理裝置及影像處理方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種對(duì)用于確定被拍攝體的臉部圖像的特征量進(jìn)行存儲(chǔ)的影像處理裝置及影像處理方法。
背景技術(shù):
近年來(lái),如下的數(shù)字靜態(tài)相機(jī)、數(shù)碼攝像機(jī)等影像處理裝置得到普及從生成的影像中確定用戶指定的人物的臉部圖像(臉部的圖像),并對(duì)確定的臉部圖像自動(dòng)調(diào)節(jié)焦點(diǎn)、 曝光。這種影像處理裝置,預(yù)先從用戶指定的臉部圖像導(dǎo)出臉部圖像的特征量,之后為了確定臉部圖像而進(jìn)行存儲(chǔ)。但是,臉部圖像的特征量由于受到臉部的朝向的影響,而存在以下情況即使被拍攝體為同一人物,若臉部的朝向變化過(guò)大,則會(huì)誤判斷為不同的人物。因此提出了如下的技術(shù)(例如專利文獻(xiàn)1)使用臉部的代表性特征點(diǎn)而推測(cè)了臉部的朝向后,使用臉部的平均的三維模型,將各人不同顯著表現(xiàn)的其他的特征位置變換為特定的姿勢(shì),在變換后的位置比較特征量,從而進(jìn)行人物的判斷。專利文獻(xiàn)1 JP特開2009-53916號(hào)公報(bào)。
發(fā)明內(nèi)容
發(fā)明要解決的課題若使用上述專利文獻(xiàn)1的技術(shù),則在確定臉部圖像時(shí)可以使該臉部的朝向具有某種程度的魯棒性(穩(wěn)健性),但改變了姿勢(shì)(臉部的朝向)的臉部圖像畢竟是通過(guò)預(yù)測(cè)生成的,因此若臉部的朝向、表情的變化較大,還是有可能在臉部的認(rèn)證處理中產(chǎn)生誤判斷。此外,影像處理裝置若預(yù)先對(duì)同一人物取得臉部朝向、表情不同的多個(gè)臉部圖像并導(dǎo)出及存儲(chǔ)特征量,則在臉部的認(rèn)證處理中可以提高確定臉部圖像的精度。但是,為此需要使被拍攝體的人物不停改變臉部朝向、表情,同時(shí)反復(fù)進(jìn)行攝像及注冊(cè)的操作。這樣會(huì)使用戶以及被拍攝體的人物都很厭煩。進(jìn)而,在該攝像及注冊(cè)的操作中,對(duì)于臉部的朝向、表情差異很大的臉部圖像能否進(jìn)行攝像及注冊(cè),是由用戶來(lái)判斷的,因此存在注冊(cè)了多個(gè)相同的特征量而導(dǎo)致確定臉部圖像時(shí)的精度惡化的問(wèn)題。因此,本發(fā)明鑒于這種問(wèn)題,其目的在于提供一種影像處理裝置及影像處理方法, 其不會(huì)使用戶感到厭煩,便可導(dǎo)出能夠切實(shí)確定臉部圖像的適當(dāng)特征量。用于解決課題的手段為了解決上述課題,本發(fā)明的影像處理裝置的特征在于,包括影像取得部,取得影像;位置確定部,從影像確定一個(gè)臉部圖像;臉部關(guān)聯(lián)部,將確定的臉部圖像與存儲(chǔ)于存儲(chǔ)部中的、匯總了一個(gè)或多個(gè)特征量的臉部信息建立關(guān)聯(lián);特征量導(dǎo)出部,導(dǎo)出確定的臉部圖像的特征量;和存儲(chǔ)控制部,對(duì)導(dǎo)出的特征量和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的特征量追加到臉部信息中,并存儲(chǔ)到存儲(chǔ)部中。優(yōu)選,上述預(yù)定條件為導(dǎo)出的特征量和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的所有的一個(gè)或多個(gè)特征量之間的類似度小于預(yù)定值。上述影像處理裝置優(yōu)選包括顯示控制部,其使顯示部顯示表示實(shí)際存儲(chǔ)的特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的特征量的上限數(shù)量的圖像。為了解決上述課題,本發(fā)明的另一影像處理裝置的特征在于,包括影像取得部, 取得影像;位置確定部,從影像確定一個(gè)臉部圖像;臉部關(guān)聯(lián)部,將確定的臉部圖像與存儲(chǔ)于存儲(chǔ)部中的、匯總了一個(gè)或多個(gè)特征量及該臉部的朝向的臉部信息建立關(guān)聯(lián);臉部朝向?qū)С霾浚瑢?dǎo)出確定的臉部圖像的臉部的朝向;特征量導(dǎo)出部,導(dǎo)出確定的臉部圖像的特征量;和存儲(chǔ)控制部,對(duì)導(dǎo)出的臉部的朝向和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)臉部的朝向進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的特征量和導(dǎo)出的臉部的朝向追加到臉部信息中,并存儲(chǔ)到存儲(chǔ)部中。優(yōu)選,上述預(yù)定條件為在與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量的范圍中,包含與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的臉部的朝向的一個(gè)或多個(gè)范圍,均不含導(dǎo)出的臉部的朝向。上述影像處理裝置優(yōu)選包括顯示控制部,其使顯示部顯示表示以下二者中的任一方或雙方的圖像實(shí)際存儲(chǔ)的特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的特征量的上限數(shù)量;包含實(shí)際存儲(chǔ)的臉部的朝向的范圍相對(duì)于與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量的范圍。為了解決上述課題,本發(fā)明的影像處理方法的特征在于,取得影像,從影像確定一個(gè)臉部圖像,將確定的臉部圖像與匯總了一個(gè)或多個(gè)特征量的臉部信息建立關(guān)聯(lián),導(dǎo)出確定的臉部圖像的特征量,對(duì)導(dǎo)出的特征量和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的特征量追加到臉部信息中并進(jìn)行存儲(chǔ)。為了解決上述課題,本發(fā)明的另一影像處理方法的特征在于,取得影像,從影像確定一個(gè)臉部圖像,將確定的臉部圖像與匯總了一個(gè)或多個(gè)特征量及該臉部的朝向的臉部信息建立關(guān)聯(lián),導(dǎo)出確定的臉部圖像的臉部的朝向,對(duì)導(dǎo)出的臉部的朝向和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)臉部的朝向進(jìn)行比較,在滿足預(yù)定條件時(shí),將確定的臉部圖像的特征量和導(dǎo)出的臉部的朝向追加到臉部信息中并進(jìn)行存儲(chǔ)。發(fā)明效果綜上所述,本發(fā)明不會(huì)使用戶感到厭煩,便可導(dǎo)出能夠切實(shí)確定臉部圖像的適當(dāng)特征量。
圖1是表示影像處理裝置的一例的外觀圖。圖2是表示第1實(shí)施方式的影像處理裝置的簡(jiǎn)要構(gòu)成的功能框圖。圖3是用于說(shuō)明臉部的朝向的說(shuō)明圖。圖4是用于說(shuō)明第1實(shí)施方式的特征量向特征量存儲(chǔ)部的存儲(chǔ)控制的說(shuō)明圖。圖5是表示第1實(shí)施方式的影像處理方法的處理流程的流程圖。圖6是表示第2實(shí)施方式的影像處理裝置的簡(jiǎn)要構(gòu)成的功能框圖。圖7是用于說(shuō)明第2實(shí)施方式的基于臉部朝向的臉部圖像的分類的說(shuō)明圖。
圖8是用于說(shuō)明表示特征量的數(shù)量的圖像和表示包含臉部朝向的范圍的圖像的說(shuō)明圖。圖9是用于說(shuō)明從外部設(shè)備取得特征量時(shí)的處理的說(shuō)明圖。圖10是表示第2實(shí)施方式的影像處理方法的處理流程的流程圖。符號(hào)說(shuō)明100、400…影像處理裝置108…取景器(顯示部)…攝像部(影像取得部)13O…存儲(chǔ)讀取部(影像取得部)132…外部輸入輸出部(影像取得部)134…特征量存儲(chǔ)部(存儲(chǔ)部)170…位置確定部172…臉部朝向?qū)С霾?74、474…臉部關(guān)聯(lián)部176、476…特征量導(dǎo)出部178、478…存儲(chǔ)控制部180、480…顯示控制部
具體實(shí)施例方式以下參照附圖詳細(xì)說(shuō)明本發(fā)明的優(yōu)選實(shí)施方式。相關(guān)實(shí)施方式中示出的尺寸、材料、其他具體數(shù)值等只不過(guò)是用于使本發(fā)明的理解變得容易的示例,除非特別指出的情況, 否則不用于限定本發(fā)明。另外,在本說(shuō)明書和附圖中,對(duì)于實(shí)質(zhì)上具有相同功能、構(gòu)成的要素,標(biāo)以相同的標(biāo)號(hào)而省略重復(fù)說(shuō)明,此外與本發(fā)明無(wú)直接關(guān)系的要素省略了圖示。(第1實(shí)施方式影像處理裝置100)圖1是表示影像處理裝置100的一例的外觀圖。圖1 (a)作為影像處理裝置100 示出了數(shù)字靜態(tài)相機(jī),圖1 (b)作為影像處理裝置100示出了攝像機(jī)。影像處理裝置100包括具有便攜性的裝置,包括主體102、攝像透鏡104、操作部106和作為顯示部發(fā)揮作用的取景器108。圖2是表示第1實(shí)施方式的影像處理裝置100的簡(jiǎn)要構(gòu)成的功能框圖。在此作為影像處理裝置100列舉了圖1(b)所示的攝像機(jī)。本實(shí)施方式的影像處理裝置100的目的在于,確定拍攝到的影像數(shù)據(jù)上的一個(gè)臉部圖像,關(guān)于該臉部圖像新導(dǎo)出與存儲(chǔ)的特征量不同的特征量并進(jìn)行存儲(chǔ),即,將同一人物的臉部的朝向、表情不同的各個(gè)臉部圖像的特征量導(dǎo)出并進(jìn)行存儲(chǔ)。這樣導(dǎo)出并存儲(chǔ)的各個(gè)臉部圖像的特征量,之后可以用于認(rèn)證影像中的任意的臉部圖像(認(rèn)證模式)。影像處理裝置100包括操作部106、攝像部120、數(shù)據(jù)處理部122、影像保持部124、 取景器108、壓縮擴(kuò)展部128、存儲(chǔ)讀取部130、外部輸入輸出部132、特征量存儲(chǔ)部134和中央控制部136。操作部106由包括釋放開關(guān)的操作鍵、十字鍵、操縱桿等開關(guān)構(gòu)成,接受用戶的操作輸入。此外,還可以在后述取景器108的顯示面上配置觸摸面板,而作為操作部106。
攝像部120包括用于焦點(diǎn)調(diào)整的聚焦透鏡150、用于曝光調(diào)整的光圈152、使經(jīng)過(guò)攝像透鏡104入射的光進(jìn)行光電變換而A/D變換為影像數(shù)據(jù)的攝像元件156、以及用于驅(qū)動(dòng)聚焦透鏡150和光圈152的驅(qū)動(dòng)電路158。該攝像部120作為取得攝像方向的被拍攝體的影像(影像數(shù)據(jù))的影像取得部發(fā)揮作用,并將取得的影像數(shù)據(jù)輸出到數(shù)據(jù)處理部122。數(shù)據(jù)處理部122對(duì)從攝像部120輸出的影像數(shù)據(jù)進(jìn)行白平衡調(diào)節(jié)、噪聲減輕處理、 電平校正處理、A/D變換處理和色彩校正處理(伽瑪校正處理、拐點(diǎn)(knee)處理)等預(yù)定的處理,并將處理后的影像數(shù)據(jù)輸出到影像保持部124。影像保持部124 由 RAM (Random Access Memory)、閃存、HDD (Hard Disk Drive)等構(gòu)成,暫時(shí)保持從數(shù)據(jù)處理部122、壓縮擴(kuò)展部1 和外部輸入輸出部132輸入的影像數(shù)據(jù)。取景器108由液晶顯示器、有機(jī)EL(Electro Luminescence)顯示器等構(gòu)成,作為顯示部發(fā)揮作用,而顯示數(shù)據(jù)處理部122和壓縮擴(kuò)展部1 輸出并由影像保持部IM保持的影像數(shù)據(jù)、與操作部106連動(dòng)的指示項(xiàng)目。用戶可以確認(rèn)在攝像時(shí)顯示于取景器108的影像(圖像)、由后述存儲(chǔ)讀取部130存儲(chǔ)的影像數(shù)據(jù)的影像。此外,用戶通過(guò)在觀看顯示于取景器108的影像的同時(shí)操作操作部106,能夠以希望的位置和占有面積捕捉被拍攝體。 進(jìn)而,取景器108顯示后述的、表示實(shí)際存儲(chǔ)的特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的特征量的上限數(shù)量的圖像。壓縮擴(kuò)展部1 使從數(shù)據(jù)處理部122輸出的影像數(shù)據(jù)成為以M-JPEG(運(yùn)動(dòng) (Motion) JPEG)、MPEG (Moving Picture Experts Group)-2、H.洸4 等預(yù)定的編碼方式編碼的編碼數(shù)據(jù),并將編碼數(shù)據(jù)輸出到存儲(chǔ)讀取部130。此外,壓縮擴(kuò)展部1 將對(duì)存儲(chǔ)讀取部130從存儲(chǔ)介質(zhì)200讀取的、以預(yù)定編碼方式編碼的編碼數(shù)據(jù)進(jìn)行解碼后的影像數(shù)據(jù),輸出到影像保持部124。存儲(chǔ)讀取部130使壓縮擴(kuò)展部1 編碼后的編碼數(shù)據(jù)存儲(chǔ)到任意的存儲(chǔ)介質(zhì)200。 作為任意的存儲(chǔ)介質(zhì) 200,可以使用 DVD(Digital Versatile Disc) ,BD(Blu-ray Disc)等光盤介質(zhì)、RAM、EEPR0M、非易失性RAM、閃存、HDD等介質(zhì)。在此,存儲(chǔ)介質(zhì)200能夠拆裝,但也可以與影像處理裝置100成一體。此外,存儲(chǔ)讀取部130從存儲(chǔ)有將影像數(shù)據(jù)以預(yù)定編碼方式編碼的編碼數(shù)據(jù)的任意存儲(chǔ)介質(zhì)200讀取編碼數(shù)據(jù),并輸出到壓縮擴(kuò)展部128。外部輸入輸出部132將影像保持部124中保持的影像數(shù)據(jù),輸出到例如與影像處理裝置100連接的顯示裝置204。此外,外部輸入輸出部132例如與DVD播放器、BD播放器、HDD播放器等外部的影像播放裝置206連接,接收影像播放裝置輸出的影像數(shù)據(jù),并輸出到影像保持部124。特征量存儲(chǔ)部134由RAM、閃存、HDD等構(gòu)成,作為如下的存儲(chǔ)部發(fā)揮作用按照后述存儲(chǔ)控制部的指示,僅存儲(chǔ)同一人物的數(shù)量的、將從同一人物的臉部圖像導(dǎo)出的一個(gè)或多個(gè)特征量匯總了的臉部信息。中央控制部136由包括中央處理裝置(CPU)、信號(hào)處理裝置(DSP =Digital Signal Processor)的半導(dǎo)體集成電路構(gòu)成,利用預(yù)定的程序來(lái)管理并控制整個(gè)影像處理裝置 100。此外,中央控制部136還作為位置確定部170、臉部朝向?qū)С霾?72、臉部關(guān)聯(lián)部 174、特征量導(dǎo)出部176、存儲(chǔ)控制部178、顯示控制部180發(fā)揮作用。本實(shí)施方式的影像處理裝置100在注冊(cè)模式中,確定拍攝到的影像數(shù)據(jù)上的一個(gè)臉部圖像,關(guān)于該臉部新導(dǎo)出并存儲(chǔ)與存儲(chǔ)的特征量不同的特征量,在認(rèn)證模式中為了認(rèn)證影像中的臉部而使用該特征量。以下,對(duì)于影像處理裝置100分為注冊(cè)模式和認(rèn)證模式進(jìn)行說(shuō)明。(注冊(cè)模式)位置確定部170在注冊(cè)模式中,從攝像部120取得并保持于影像保持部124的中的影像數(shù)據(jù)中,根據(jù)經(jīng)操作部106的用戶輸入,確定(選擇)一個(gè)臉部圖像,并利用已有的圖像處理技術(shù)來(lái)追蹤該臉部圖像。并且,位置確定部170將與每幀的臉部圖像相關(guān)的圖像信息輸出到臉部朝向?qū)С霾?72和特征量導(dǎo)出部176。位置確定部170在檢測(cè)到多個(gè)臉部圖像時(shí)對(duì)各臉部圖像同樣進(jìn)行追蹤,并將與所有的臉部圖像相關(guān)的圖像信息輸出到特征量導(dǎo)出部176。在此,作為影像取得部使用了攝像部120,但不限于此,也可以使存儲(chǔ)讀取部130、 外部輸入輸出部132作為影像取得部發(fā)揮作用,位置確定部170根據(jù)存儲(chǔ)讀取部130、外部輸入輸出部132取得的影像來(lái)確定一個(gè)臉部圖像。這種一個(gè)臉部圖像的確定如下來(lái)執(zhí)行使基于影像保持部IM所保持的影像數(shù)據(jù)的影像顯示于取景器108,通過(guò)操作部106的操作而使用戶選擇一個(gè)臉部圖像。此外,作為操作部106,在取景器108的顯示面上重疊了觸摸面板時(shí),也可以通過(guò)觸摸面板使用戶接觸相當(dāng)于一個(gè)臉部圖像的位置的部位,而進(jìn)行一個(gè)臉部圖像的確定。進(jìn)而也可以是,位置確定部170自動(dòng)選擇畫面內(nèi)存在的所有臉部圖像,后述顯示控制部180在以包圍所選擇的所有臉部圖像的方式顯示了多個(gè)框的狀態(tài)下,在畫面上顯示“注冊(cè)哪個(gè)人? ”,并使用戶選擇其中的一個(gè)臉部圖像。此外,位置確定部170可以對(duì)被拍攝體的人物進(jìn)行定位以便在畫面內(nèi)的例如中央部的預(yù)定區(qū)域拍攝臉部,并在用戶的操作輸入的任意的時(shí)序下確定與該預(yù)定區(qū)域?qū)?yīng)的影像中的區(qū)域的臉部圖像。所述預(yù)定區(qū)域可以是用戶能在畫面內(nèi)任意指定的區(qū)域。此時(shí),顯示控制部180在顯示于取景器108的該預(yù)定區(qū)域的邊界線上例如重疊顯示四方框等標(biāo)識(shí)。在本實(shí)施方式中,位置確定部170為了追蹤臉部圖像,而掃描影像中的預(yù)定大小的檢索區(qū)域,檢測(cè)表示眼、鼻、口等構(gòu)成臉部的器官的特征的特征點(diǎn),從而提取出臉部圖像, 但臉部圖像的提取手段不限于特征點(diǎn)的檢測(cè)。例如,也可以檢測(cè)膚色區(qū)域或進(jìn)行圖案匹配, 而提取出臉部圖像。位置確定部170將至少包含臉部圖像的坐標(biāo)、臉部圖像的大小的圖像信息輸出到臉部朝向?qū)С霾?72,將至少包含臉部圖像的坐標(biāo)、臉部圖像的大小、臉部圖像的準(zhǔn)確度的圖像信息輸出到特征量導(dǎo)出部176。臉部圖像的坐標(biāo)表示臉部區(qū)域相對(duì)于影像尺寸的相對(duì)坐標(biāo),臉部圖像的大小表示臉部區(qū)域相對(duì)于影像尺寸的相對(duì)大小,臉部圖像的準(zhǔn)確度表示臉部圖像為臉部的影像的確切性,例如可以作為表示與標(biāo)準(zhǔn)的臉部圖像類似的程度的類似度導(dǎo)出。此外,位置確定部170可以用膚色區(qū)域的檢測(cè)結(jié)果對(duì)該類似度進(jìn)行加權(quán),例如可以在膚色區(qū)域較少時(shí)將類似度修正為較低的值。圖3是用于說(shuō)明臉部的朝向的說(shuō)明圖。圖像信息包括上述臉部圖像的坐標(biāo)、臉部圖像的大小、臉部圖像的準(zhǔn)確度,并且還包括用于臉部圖像的旋轉(zhuǎn)校正的臉部圖像的滾轉(zhuǎn)角。在此,向特征量導(dǎo)出部176輸出的臉部圖像的滾轉(zhuǎn)角是繞圖3(a)中定義的滾轉(zhuǎn)軸的臉部圖像的旋轉(zhuǎn)角。此外,后述俯仰角(繞俯仰軸的旋轉(zhuǎn)角)、偏向角(繞偏向軸的旋轉(zhuǎn)角)的定義還在圖3(b)、圖3(c)中示出。臉部朝向?qū)С霾?72根據(jù)位置確定部170輸出的圖像信息所表示的臉部圖像的坐標(biāo)和臉部圖像的大小,從影像保持部1 所保持的影像數(shù)據(jù)中讀出位置確定部170確定的臉部圖像,并根據(jù)作為臉部圖像的特征點(diǎn)的眼、口和臉部的輪廓信息等,導(dǎo)出滾轉(zhuǎn)角以外的臉部的朝向、即臉部的俯仰角和偏向角(參照?qǐng)D3(b)、(c))。特征量導(dǎo)出部176根據(jù)從位置確定部170輸出的圖像信息所表示的臉部圖像的坐標(biāo)、臉部圖像的大小,從影像保持部1 所保持的影像數(shù)據(jù)中讀出臉部圖像。并且,對(duì)于讀出的臉部圖像,根據(jù)圖像信息所表示的臉部圖像的大小、臉部圖像的滾轉(zhuǎn)角,進(jìn)行分辨率變換、滾轉(zhuǎn)角方向的旋轉(zhuǎn)校正,而變換為標(biāo)準(zhǔn)化(以預(yù)定的大小正立)的臉部圖像。此外,特征量導(dǎo)出部170根據(jù)自身變換了的臉部圖像和臉部朝向?qū)С霾?72導(dǎo)出的作為臉部朝向的俯仰角、偏向角,導(dǎo)出位置確定部170確定的臉部圖像的特征量。具體地說(shuō),首先,特征量導(dǎo)出部176根據(jù)臉部朝向?qū)С霾?72導(dǎo)出的臉部的俯仰角和偏向角,對(duì)標(biāo)準(zhǔn)化后的臉部圖像進(jìn)一步進(jìn)行仿射變換(affine transformation),修正為朝向正面的臉部的臉部圖像。并且,特征量導(dǎo)出部176嘗試檢測(cè)與仿射變換后的臉部圖像相關(guān)的特征點(diǎn)。在此, 為了避免特征點(diǎn)的檢測(cè)產(chǎn)生較大的處理負(fù)荷,不是從仿射變換后的臉部圖像檢測(cè),而使對(duì)事先檢測(cè)出的與仿射變換前的臉部圖像相關(guān)的特征點(diǎn)進(jìn)行仿射變換,從而導(dǎo)出仿射變換后的臉部圖像的特征點(diǎn)。從仿射變換后的臉部圖像的特征點(diǎn),對(duì)每個(gè)特征點(diǎn)分別導(dǎo)出表示各特征點(diǎn)為臉部的各部分的特征點(diǎn)的確實(shí)度的、為特征點(diǎn)的準(zhǔn)確度。在此,例如當(dāng)被拍攝體的人物閉眼時(shí),為眼的特征點(diǎn)的確實(shí)度降低。進(jìn)而,特征量導(dǎo)出部176判斷該臉部圖像是否為值得處理的臉部圖像,例如,臉部圖像的俯仰角為-15° +15°的范圍,臉部圖像的偏向角為-30° +30°的范圍,圖像信息所示的臉部圖像的準(zhǔn)確度、為特征點(diǎn)的準(zhǔn)確度滿足預(yù)先設(shè)定的各自所對(duì)應(yīng)的預(yù)定條件時(shí),作為臉部圖像的特征量,例如導(dǎo)出Gabor Jet (伽柏關(guān)鍵特征點(diǎn))。為了求出Gabor Jet而使用的Gabor (伽柏)濾波器是同時(shí)具有方向選擇性和頻率特性的濾波器。特征量導(dǎo)出部176使用使方向和頻率各自不同的多個(gè)Gabor濾波器進(jìn)行臉部圖像的折疊。將得到的多個(gè)標(biāo)量值的組稱為Gabor Jet0特征量導(dǎo)出部176在臉部圖像上的特征點(diǎn)的附近,作為局部的特征量求出Gabor Jet0并且,特征量導(dǎo)出部176將根據(jù)仿射變換后的臉部圖像的特征點(diǎn)導(dǎo)出的特征量輸出到臉部關(guān)聯(lián)部174。在此,特征量被表示為作為多個(gè)標(biāo)量值的組(Gabor Jet)的集合的矢量。從一個(gè)臉部圖像導(dǎo)出一個(gè)矢量。臉部關(guān)聯(lián)部174首先例如根據(jù)特征量之間的類似度,判斷匯總了從與位置確定部 170根據(jù)用戶輸入確定的臉部圖像為同一人物的臉部圖像導(dǎo)出的特征量的臉部信息(以下簡(jiǎn)稱為同一人物的臉部信息)是否已經(jīng)存儲(chǔ)到特征量存儲(chǔ)部134中。并且,如果與位置確定部170根據(jù)用戶輸入確定的臉部圖像為同一人物的臉部信息尚未存儲(chǔ)到特征量存儲(chǔ)部134中,則臉部關(guān)聯(lián)部174將該特征量作為新的臉部信息存儲(chǔ)到特征量存儲(chǔ)部134中。此外,如果與位置確定部170根據(jù)用戶輸入確定的臉部圖像為同一人物的臉部信息已經(jīng)存儲(chǔ)到特征量存儲(chǔ)部134中,則臉部關(guān)聯(lián)部174將確定的臉部圖像和存儲(chǔ)于特征量存儲(chǔ)部134中的該同一人物的臉部信息建立關(guān)聯(lián)。以下對(duì)臉部關(guān)聯(lián)部174的具體處理進(jìn)行說(shuō)明。在特征量存儲(chǔ)部134中,對(duì)應(yīng)于人物的數(shù)量而存儲(chǔ)有多個(gè)將從與一個(gè)人物相關(guān)的多個(gè)臉部圖像導(dǎo)出的多個(gè)特征量匯總了的臉部信息。臉部關(guān)聯(lián)部174對(duì)特征量導(dǎo)出部176 導(dǎo)出的特征量和從特征量存儲(chǔ)部134讀出的多個(gè)臉部信息的多個(gè)特征量的各個(gè)特征量,導(dǎo)出類似度。S卩,如果對(duì)于一個(gè)臉部信息僅存儲(chǔ)有一個(gè)特征量,則臉部關(guān)聯(lián)部174導(dǎo)出特征量導(dǎo)出部176導(dǎo)出的特征量和特征量存儲(chǔ)部134中存儲(chǔ)的一個(gè)臉部信息的一個(gè)特征量之間的類似度。此外,當(dāng)在一個(gè)臉部信息中匯總多個(gè)特征量進(jìn)行存儲(chǔ)時(shí),臉部關(guān)聯(lián)部174分別導(dǎo)出特征量導(dǎo)出部176導(dǎo)出的特征量和特征量存儲(chǔ)部134中存儲(chǔ)的一個(gè)臉部信息的多個(gè)特征量之間的類似度,將導(dǎo)出的一個(gè)或多個(gè)類似度中最高的類似度作為特征量導(dǎo)出部176輸出的特征量和該一個(gè)臉部信息的多個(gè)特征量之間的類似度。在特征量存儲(chǔ)部134中存儲(chǔ)有多個(gè)臉部信息時(shí),臉部關(guān)聯(lián)部174對(duì)全部的多個(gè)臉部信息進(jìn)行上述對(duì)一個(gè)臉部信息的類似度的導(dǎo)出處理。作為具體的類似度的導(dǎo)出處理,臉部關(guān)聯(lián)部174首先通過(guò)從特征量導(dǎo)出部176輸出的特征量和從特征量存儲(chǔ)部134讀出的例如一個(gè)臉部信息的一個(gè)特征量,利用標(biāo)準(zhǔn)化相關(guān)運(yùn)算等方法,求出每個(gè)特征點(diǎn)的類似度d0、dl、d2、…、dn(n為正數(shù))。然后,臉部關(guān)聯(lián)部174將利用標(biāo)準(zhǔn)化相關(guān)運(yùn)算得到的各特征點(diǎn)的類似度d0、dl、 d2、…、dn作為要素,導(dǎo)出類似度矢量(類似度的集合)D= (d0、dl、d2、...、dn)。臉部關(guān)聯(lián)部174從類似度矢量D,例如使用AdaB00st(自適應(yīng)增強(qiáng))算法、支持向量機(jī)(SVM :Support Vector Machine),導(dǎo)出作為臉部整體的類似度Fi。并且,臉部關(guān)聯(lián)部 174對(duì)于全部的一個(gè)臉部信息的多個(gè)特征量導(dǎo)出該類似度Fi,將其中的最大值作為從特征量導(dǎo)出部176輸出的特征量和該一個(gè)臉部信息的多個(gè)特征量之間的類似度F。臉部關(guān)聯(lián)部174對(duì)于所有的臉部信息導(dǎo)出這樣的類似度F,當(dāng)導(dǎo)出的類似度F中的最大的類似度比預(yù)定的第1閾值小時(shí),判斷為位置確定部170確定的臉部圖像和同一人物的臉部信息尚未存儲(chǔ)到特征量存儲(chǔ)部134中。并且,臉部關(guān)聯(lián)部174將從特征量導(dǎo)出部176輸出的特征量作為新的臉部信息的特征量存儲(chǔ)到特征量存儲(chǔ)部134中。并且,臉部關(guān)聯(lián)部174將位置確定部170確定的臉部圖像和新存儲(chǔ)到特征量存儲(chǔ)部134中的臉部信息作為同一人物建立關(guān)聯(lián)。此外,對(duì)于所有的臉部信息導(dǎo)出的類似度F中最大的類似度在預(yù)定的第1閾值以上時(shí),臉部關(guān)聯(lián)部174判斷為成為該最大的類似度F的臉部信息與位置確定部170確定的臉部圖像屬于同一人物,且同一人物的臉部信息已經(jīng)存儲(chǔ)到特征量存儲(chǔ)部134中。并且,臉部關(guān)聯(lián)部174將位置確定部170確定的臉部圖像和特征量存儲(chǔ)部134中存儲(chǔ)的類似度F最大的臉部信息作為同一人物建立關(guān)聯(lián)。進(jìn)而,臉部關(guān)聯(lián)部174也可以將位置確定部170確定的臉部圖像和特征量存儲(chǔ)部 134中存儲(chǔ)的臉部信息,例如根據(jù)經(jīng)操作部106的用戶操作輸入而建立關(guān)聯(lián)。具體地說(shuō), 如上所述,用戶從影像保持部1 所保持的影像數(shù)據(jù)中確定(選擇)一個(gè)臉部圖像,同時(shí), 從預(yù)先在特征量存儲(chǔ)部134中存儲(chǔ)有特征量的臉部信息中,選擇將要存儲(chǔ)特征量的被拍攝體的人物的臉部信息時(shí),臉部關(guān)聯(lián)部174可以不執(zhí)行經(jīng)類似度的導(dǎo)出的同一人物的判斷處理,而將位置確定部170確定的臉部圖像和特征量存儲(chǔ)部134中由用戶選擇的臉部信息作為同一人物建立關(guān)聯(lián)。此時(shí),位置確定部170確定的臉部圖像,無(wú)類似度的導(dǎo)出地與臉部信息建立關(guān)聯(lián), 可以由位置確定部170確定并追蹤的臉部圖像中的第1張(第1幀)臉部圖像作為特征量的存儲(chǔ)的對(duì)象。進(jìn)而,即使在例如影像僅為1幀時(shí)(照片攝影時(shí)),位置確定部170確定臉部圖像但不追蹤,也可以將第1張臉部圖像作為特征量的存儲(chǔ)的對(duì)象。并且,特征量導(dǎo)出部176對(duì)于位置確定部170確定的臉部圖像,從繼續(xù)取入的圖像信息分別導(dǎo)出特征量。存儲(chǔ)控制部178對(duì)特征量導(dǎo)出部176導(dǎo)出的特征量和與確定的臉部圖像相關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將該導(dǎo)出的特征量追加到臉部信息中并存儲(chǔ)于特征量存儲(chǔ)部134。通過(guò)所述存儲(chǔ)控制部178的構(gòu)成,在確定的臉部圖像中也僅將滿足預(yù)定條件的臉部圖像的特征量自動(dòng)存儲(chǔ)到特征量存儲(chǔ)部134,因此在認(rèn)證模式中也可以適當(dāng)?shù)卮_定臉部, 用戶的操作性得以提高。如上所述,通過(guò)臉部關(guān)聯(lián)部174將位置確定部170確定的臉部圖像和特征量存儲(chǔ)部134中的臉部信息作為同一人物建立關(guān)聯(lián)后,提取關(guān)于同一人物的臉部信息尚未注冊(cè) (不同)的臉部圖像,并將該提取出的臉部圖像的特征量存儲(chǔ)到特征量存儲(chǔ)部134。為了提取上述同一人物的不同的臉部圖像,將特征量導(dǎo)出部176新導(dǎo)出的特征量和存儲(chǔ)于特征量存儲(chǔ)部134的、與位置確定部170確定的臉部圖像相關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)特征量之間的類似度低于預(yù)定值作為預(yù)定條件。在此,類似度F低于預(yù)定值(第2閾值)時(shí),認(rèn)為是當(dāng)前的臉部圖像和之前注冊(cè)的臉部圖像為同一人物、但臉部朝向不同或表情不同的情況。因此,存儲(chǔ)控制部178將這種臉部朝向、表情不同的臉部圖像的特征量存儲(chǔ)到特征量存儲(chǔ)部134。另一方面,類似度F為第2閾值以上時(shí),認(rèn)為當(dāng)前的臉部圖像和之前注冊(cè)的臉部圖像為相同的臉部朝向、表情。此時(shí),即使注冊(cè)當(dāng)前的臉部圖像,在后述的判斷影像中的臉部是否已注冊(cè)的認(rèn)證模式中對(duì)于認(rèn)證精度的提高基本沒(méi)有貢獻(xiàn),因此存儲(chǔ)控制部178不將這樣的臉部圖像的特征量存儲(chǔ)到特征量存儲(chǔ)部134。圖4是用于說(shuō)明第1實(shí)施方式的特征量向特征量存儲(chǔ)部134的存儲(chǔ)的控制的說(shuō)明圖。如圖4 (a)所示,在特征量存儲(chǔ)部134中,對(duì)于任意的臉部信息的特征量230a 230d,存儲(chǔ)有標(biāo)識(shí)M1、M2、M3、M4和各特征點(diǎn)的值mla、mlb、…。在此,輸出新從特征量導(dǎo)出部176、 從作為同一人物與臉部信息相關(guān)聯(lián)的臉部圖像導(dǎo)出的特征量230e。此時(shí),存儲(chǔ)控制部178導(dǎo)出該臉部信息各自的特征量230a 230d和新導(dǎo)出的特征量230e之間的類似度,將最高的特征量、在此例如將特征量230d與第2閾值進(jìn)行比較, 為第2閾值以上時(shí),不將該特征量存儲(chǔ)到特征量存儲(chǔ)部134中。此外,在低于第2閾值時(shí), 如圖4(b)所示,將該特征量230e作為該臉部信息的特征量存儲(chǔ)到特征量存儲(chǔ)部134。存儲(chǔ)于特征量存儲(chǔ)部134中的臉部圖像的特征量,在認(rèn)證模式中,在導(dǎo)出與從攝像部120生成的影像所包含的臉部圖像導(dǎo)出的特征量之間的類似度時(shí)使用。本實(shí)施方式的影像處理裝置100根據(jù)作為與認(rèn)證模式相同的判斷基準(zhǔn)的類似度,判斷自此存儲(chǔ)的特征量的候補(bǔ)與已經(jīng)存儲(chǔ)的特征量是否不同,因此在認(rèn)證模式中也可以切實(shí)提取與有效的同一人物相關(guān)的多個(gè)不同的特征量,能通過(guò)很少的比較處理提高認(rèn)證的精度。上述特征量的存儲(chǔ)例如通過(guò)用戶的操作輸入而在用于注冊(cè)確定的臉部圖像的特征量的注冊(cè)模式中執(zhí)行。用戶進(jìn)行開始注冊(cè)模式的操作輸入并持續(xù)拍攝想要注冊(cè)的臉部時(shí),特征量導(dǎo)出部176對(duì)由臉部關(guān)聯(lián)部174與臉部信息建立了關(guān)聯(lián)的確定的臉部圖像,順次導(dǎo)出特征量,存儲(chǔ)控制部178隨時(shí)注冊(cè)導(dǎo)出的特征量中滿足預(yù)定條件的特征量。此時(shí),顯示控制部180將特征量存儲(chǔ)部134中存儲(chǔ)的、表示與確定的臉部圖像建立了關(guān)聯(lián)的臉部信息的特征量的數(shù)量的圖像,重疊到生成的被拍攝體的影像上并顯示到取景器108。例如,對(duì)于一個(gè)人的人物的臉部信息,特征量最多存儲(chǔ)8個(gè)時(shí),對(duì)于某人物的臉部信息已經(jīng)存儲(chǔ)了 3個(gè)特征量。此時(shí),顯示3/8被涂黑的圓圈。這樣一來(lái),顯示控制部180使表示實(shí)際存儲(chǔ)的特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的特征量的上限數(shù)量的圖像顯示到取景器 108。通過(guò)這樣的構(gòu)成,用戶能夠看到表示顯示的臉部信息的特征量的數(shù)量的圖像,確認(rèn)臉部圖像的特征量的存儲(chǔ)的進(jìn)展情況,能夠提高用戶的操作性。在注冊(cè)模式中,對(duì)于注冊(cè)的對(duì)象的人物的臉部,若最大數(shù)量、例如8個(gè)特征量的注冊(cè)完成、或通過(guò)用戶的操作輸入結(jié)束了注冊(cè)模式,則變換為輸入注冊(cè)的特征量的注冊(cè)對(duì)象的個(gè)人信息的輸入模式。顯示控制部180使取景器108顯示“請(qǐng)輸入注冊(cè)的人的名字”、“請(qǐng)輸入注冊(cè)的人的出生年月日”等消息。并且,用戶通過(guò)操作部106輸入特征量的注冊(cè)對(duì)象的名字、出生年月日等個(gè)人信息。存儲(chǔ)控制部178將這些個(gè)人信息、表示注冊(cè)時(shí)刻的日期時(shí)間的日期時(shí)間信息與特征量建立關(guān)聯(lián),并存儲(chǔ)到特征量存儲(chǔ)部134。此外,用戶還可以不立即輸入個(gè)人信息而是在事后輸入。進(jìn)而,在通常的攝影時(shí),在被拍攝體的人物中若特征量已被存儲(chǔ)到特征量存儲(chǔ)部 134且已經(jīng)存儲(chǔ)的特征量的數(shù)量低于最大數(shù)量,或從日期時(shí)間信息所表示的日期時(shí)間經(jīng)過(guò)了預(yù)定的時(shí)間,也可以自動(dòng)變換為注冊(cè)模式。此時(shí),顯示控制部180使取景器108顯示“繼續(xù)進(jìn)行A的注冊(cè)嗎”這樣的消息,使用戶選擇可否確認(rèn)作為特征量的注冊(cè)對(duì)象的臉部信息以及可否變換為注冊(cè)模式。此外,特征量存儲(chǔ)部134按照每個(gè)臉部信息存儲(chǔ)特征量,但例如也可以存儲(chǔ)導(dǎo)出特征量時(shí)使用的臉部圖像自身。這樣也存儲(chǔ)臉部圖像,從而在認(rèn)證模式中用戶可以實(shí)際觀看臉部認(rèn)證所使用的臉部圖像,因此用戶可以從特征量存儲(chǔ)部134刪除極端的表情的臉部圖像等認(rèn)為不需要的臉部圖像。此時(shí),特征量存儲(chǔ)部134也可以不存儲(chǔ)特征量而僅存儲(chǔ)臉部圖像,特征量導(dǎo)出部176可以在從特征量存儲(chǔ)部134讀出臉部圖像時(shí)根據(jù)該臉部圖像導(dǎo)出特征量。(認(rèn)證模式)在上述注冊(cè)模式中存儲(chǔ)于特征量存儲(chǔ)部134的特征量,在認(rèn)證模式中在認(rèn)證被拍攝體的臉部時(shí)被使用。通過(guò)用戶的操作輸入而存在變換為認(rèn)證模式的指示時(shí),顯示控制部 180使取景器108顯示存儲(chǔ)于特征量存儲(chǔ)部134的一個(gè)或多個(gè)臉部信息。用戶選擇了希望的臉部信息后,開始攝像時(shí),位置確定部170對(duì)攝像部120取得并保持于影像保持部IM的影像數(shù)據(jù)中包含的全部臉部圖像,追蹤臉部圖像,并將包含各幀的臉部圖像的坐標(biāo)的圖像信息輸出到特征量導(dǎo)出部176。
特征量導(dǎo)出部176根據(jù)從位置確定部170輸出的臉部圖像的坐標(biāo),導(dǎo)出位置確定部170確定的臉部圖像的特征量。存儲(chǔ)控制部178導(dǎo)出存儲(chǔ)于特征量存儲(chǔ)部134的特征量中用戶選擇的臉部信息的特征量和特征量導(dǎo)出部176導(dǎo)出的特征量之間的類似度。并且,導(dǎo)出的類似度為預(yù)定閾值、例如上述第1閾值以上時(shí),驅(qū)動(dòng)電路158驅(qū)動(dòng)聚焦透鏡150和光圈152,根據(jù)對(duì)應(yīng)的被拍攝體來(lái)調(diào)節(jié)焦點(diǎn)、曝光。此外,顯示控制部180在顯示于取景器108的影像中的對(duì)應(yīng)的臉部圖像上重疊顯示例如四方框等標(biāo)識(shí)。如上所述,在本實(shí)施方式中,存儲(chǔ)控制部178對(duì)于可以與臉部信息視為同一人物的被拍攝體的臉部圖像的特征量,在臉部的朝向或表情不同、類似度低于第2閾值時(shí),使其自動(dòng)存儲(chǔ)于特征量存儲(chǔ)部134。因此,在特征量的注冊(cè)中,不會(huì)使用戶感到厭煩,就可以導(dǎo)出能夠切實(shí)認(rèn)證臉部的適當(dāng)?shù)奶卣髁俊?影像處理方法)還提供了使用上述影像處理裝置100的影像處理方法。圖5是表示第1實(shí)施方式的影像處理方法的處理流程的流程圖。在圖5中尤其示出了上述注冊(cè)模式的處理流程。攝像部120取得影像(S300),位置確定部170判斷是否能夠從影像保持部IM所保持的影像數(shù)據(jù)中確定一個(gè)臉部圖像630 。位置確定部170無(wú)法確定一個(gè)臉部圖像時(shí) (S302的否),返回到影像取得步驟(S300)。位置確定部170能夠確定一個(gè)臉部圖像時(shí)(S302的是),追蹤該臉部圖像,并將與每幀的臉部圖像相關(guān)的圖像信息輸出到特征量導(dǎo)出部176(S304)。特征量導(dǎo)出部176對(duì)于位置確定部170追蹤的臉部圖像,在臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向、例如俯仰角為-15° +15°的范圍、偏向角為-30° +30°的范圍,圖像信息所示的臉部圖像的準(zhǔn)確度、為特征點(diǎn)的準(zhǔn)確度滿足預(yù)先設(shè)定的各自所對(duì)應(yīng)的預(yù)定條件時(shí),導(dǎo)出特征量(S306)。臉部關(guān)聯(lián)部174判斷位置確定部170確定的臉部圖像是否與存儲(chǔ)于特征量存儲(chǔ)部 134的臉部信息建立了關(guān)聯(lián)(S308)。沒(méi)有建立關(guān)聯(lián)時(shí)(S308的否),臉部關(guān)聯(lián)部174對(duì)于特征量導(dǎo)出部176導(dǎo)出的特征量和從特征量存儲(chǔ)部134讀出的多個(gè)臉部信息中的一個(gè)臉部信息的多個(gè)特征量中的一個(gè),導(dǎo)出類似度(S310)。并且,臉部關(guān)聯(lián)部174對(duì)于與此時(shí)導(dǎo)出了類似度的特征量相關(guān)的臉部信息,比較目前為止導(dǎo)出的類似度的最大值和此時(shí)導(dǎo)出的類似度(S312),當(dāng)與目前為止導(dǎo)出的類似度的最大值相比,此時(shí)導(dǎo)出的類似度較大時(shí)(S312的是),對(duì)對(duì)象的臉部信息將類似度的最大值置換為此時(shí)導(dǎo)出的類似度(S314)。臉部關(guān)聯(lián)部174判斷對(duì)于從特征量存儲(chǔ)部134讀出的一個(gè)臉部信息的全部特征量是否已經(jīng)完成了類似度的導(dǎo)出(S316)。若沒(méi)有完成(S316的否),則返回到類似度導(dǎo)出步驟(S310),對(duì)還沒(méi)有導(dǎo)出類似度的特征量進(jìn)行同樣的處理。對(duì)于從特征量存儲(chǔ)部134讀出的一個(gè)臉部信息的全部特征量,完成了類似度的導(dǎo)出時(shí)(S316的是),臉部關(guān)聯(lián)部174判斷對(duì)于從特征量存儲(chǔ)部134讀出的全部的臉部信息的特征量是否完成了類似度的導(dǎo)出(S318)。若沒(méi)有完成(S318的否),則返回到類似度導(dǎo)出步驟(S310),對(duì)還沒(méi)有導(dǎo)出類似度的其他臉部信息的特征量進(jìn)行同樣的處理。對(duì)于從特征量存儲(chǔ)部134讀出的全部的臉部信息的特征量,完成了類似度的導(dǎo)出時(shí)(S318的是),臉部關(guān)聯(lián)部174判斷導(dǎo)出的各臉部信息的類似度的最大值中成為最大的類似度是否為第1閾值以上(S320)。若為第1閾值以上(S320的是),則臉部關(guān)聯(lián)部174 判斷為與位置確定部170確定的臉部圖像同一人物的臉部信息已經(jīng)被存儲(chǔ)到特征量存儲(chǔ)部134,將位置確定部170確定的臉部圖像與對(duì)應(yīng)的臉部信息建立關(guān)聯(lián)(S324)。當(dāng)?shù)陀诘?1閾值時(shí)(S320的否),臉部關(guān)聯(lián)部174判斷為與位置確定部170確定的臉部圖像同一人物的臉部信息尚未存儲(chǔ)到特征量存儲(chǔ)部134,而將導(dǎo)出的特征量作為新的臉部信息的特征量存儲(chǔ)到特征量存儲(chǔ)部134(S322),并將位置確定部170確定的臉部圖像與該新的臉部信息建立關(guān)聯(lián)(S324)。并且,返回到影像取得步驟(S300)。在關(guān)聯(lián)判斷步驟(S308)中,位置確定部170確定的臉部圖像與存儲(chǔ)于特征量存儲(chǔ)部134的臉部信息建立了關(guān)聯(lián)時(shí)(S308的是),存儲(chǔ)控制部178導(dǎo)出特征量導(dǎo)出部176導(dǎo)出的特征量和相同的臉部信息的其他特征量中的一個(gè)之間的類似度(S326)。并且,存儲(chǔ)控制部178對(duì)于相同的臉部信息的其他特征量,比較目前為止導(dǎo)出的類似度的最大值和此時(shí)導(dǎo)出的類似度(S328),當(dāng)與目前為止導(dǎo)出的類似度的最大值相比,此時(shí)導(dǎo)出的類似度較大時(shí) (S328的是),對(duì)對(duì)象的臉部信息將類似度的最大值置換為此時(shí)導(dǎo)出的類似度(S330)。存儲(chǔ)控制部178判斷對(duì)于相同臉部信息的其他特征量是否完成了類似度的導(dǎo)出 (S33》。沒(méi)有完成時(shí)(S332的否),返回到類似度導(dǎo)出步驟,對(duì)還沒(méi)有導(dǎo)出類似度的特征量進(jìn)行同樣的處理。對(duì)于相同臉部信息的其他全部的特征量完成了類似度的導(dǎo)出時(shí)(S322的是),存儲(chǔ)控制部178判斷導(dǎo)出的類似度的最大值是否滿足預(yù)定條件、即是否低于第2閾值(S334)。 低于第2閾值時(shí)(S334的是),存儲(chǔ)控制部178將特征量導(dǎo)出部176新導(dǎo)出的特征量作為已有的同一人物的臉部信息的特征量存儲(chǔ)到特征量存儲(chǔ)部134(S336)。并且,中央控制部 136判斷存儲(chǔ)于特征量存儲(chǔ)部134的與對(duì)象的臉部信息相關(guān)的特征量的數(shù)量是否已經(jīng)達(dá)到了最大數(shù)量(S338)。特征量的數(shù)量達(dá)到了最大數(shù)量時(shí)(S338的是),顯示控制部180使取景器108顯示達(dá)到了對(duì)于一個(gè)臉部信息存儲(chǔ)的特征量的最大數(shù)量這一情況,提示注冊(cè)模式的結(jié)束(S340)。在預(yù)定條件判斷步驟(S334)中沒(méi)有滿足預(yù)定條件時(shí)(S334的否)、在最大數(shù)量判斷步驟(S338)中特征量的數(shù)量沒(méi)有達(dá)到最大數(shù)量時(shí)(S338的否)、以及達(dá)到最大數(shù)量顯示步驟(S340)后,中央控制部136判斷是否通過(guò)用戶的操作輸入而存在注冊(cè)模式結(jié)束的指示 (S342)。沒(méi)有結(jié)束的指示時(shí)(S342的否),返回到影像取得步驟(S300)。有結(jié)束的指示時(shí) (S342的是),結(jié)束注冊(cè)模式。如上所述,根據(jù)使用了影像處理裝置100的影像處理方法,不會(huì)使用戶感到厭煩, 就可以導(dǎo)出能夠切實(shí)認(rèn)證臉部的適當(dāng)?shù)奶卣髁俊?第2實(shí)施方式)在上述第1實(shí)施方式中,存儲(chǔ)控制部178在判斷新導(dǎo)出的特征量是否存儲(chǔ)到特征量存儲(chǔ)部134中時(shí),導(dǎo)出類似度并與第2閾值比較。在第2實(shí)施方式中,說(shuō)明了根據(jù)對(duì)特征量影響大的臉部的角度進(jìn)行判斷的影像處理裝置400。另外,對(duì)于與上述影像處理裝置100 實(shí)質(zhì)相等的構(gòu)成要素,標(biāo)以相同的標(biāo)號(hào)而省略說(shuō)明。(影像處理裝置400)圖6是表示第2實(shí)施方式的影像處理裝置400的簡(jiǎn)要構(gòu)成的功能框圖。影像處理裝置400包括操作部106、攝像部120、數(shù)據(jù)處理部122、影像保持部124、取景器108、壓縮擴(kuò)展部128、存儲(chǔ)讀取部130、外部輸入輸出部132、作為存儲(chǔ)部發(fā)揮作用的特征量存儲(chǔ)部134 和中央控制部436。作為第1實(shí)施方式中的構(gòu)成要素已經(jīng)說(shuō)明的操作部106、攝像部120、數(shù)據(jù)處理部122、影像保持部124、取景器108、壓縮擴(kuò)展部128、存儲(chǔ)讀取部130、外部輸入輸出部132、特征量存儲(chǔ)部134,功能實(shí)質(zhì)上相同,因此省略重復(fù)說(shuō)明,在此以構(gòu)成不同的中央控制部436為主進(jìn)行說(shuō)明。中央控制部436由包括中央處理裝置(CPU)、信號(hào)處理裝置(DSP)的半導(dǎo)體集成電路構(gòu)成,利用預(yù)定的程序來(lái)管理并控制整個(gè)影像處理裝置400。此外,中央控制部436還作為位置確定部170、臉部朝向?qū)С霾?72、臉部關(guān)聯(lián)部474、特征量導(dǎo)出部476、存儲(chǔ)控制部 478、顯示控制部480發(fā)揮作用。臉部關(guān)聯(lián)部474進(jìn)行與第1實(shí)施方式的臉部關(guān)聯(lián)部174相同的處理,將特定的臉部圖像和臉部信息建立關(guān)聯(lián)。此時(shí),存儲(chǔ)于特征量存儲(chǔ)部134的臉部信息中不僅包含特征量,還包含該臉部的朝向,因此臉部關(guān)聯(lián)部474將匯總了這樣的一個(gè)或多個(gè)特征量和該臉部的朝向的臉部信息,與確定的臉部圖像建立關(guān)聯(lián)。特征量導(dǎo)出部476對(duì)臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向和與位置確定部170 確定的臉部圖像建立了關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)臉部朝向進(jìn)行比較,在滿足預(yù)定條件時(shí),導(dǎo)出確定的臉部圖像的特征量。在本實(shí)施方式中,特征量導(dǎo)出部476僅在滿足預(yù)定條件時(shí),導(dǎo)出確定的臉部圖像的特征量,但也可以無(wú)論預(yù)定條件如何均導(dǎo)出確定的臉部圖像的全部的特征量。存儲(chǔ)控制部478對(duì)臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向和與位置確定部170確定的臉部圖像建立了關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)臉部朝向進(jìn)行比較,在滿足預(yù)定條件時(shí), 將特征量導(dǎo)出部476新導(dǎo)出的特征量和臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向追加到臉部信息中,并存儲(chǔ)到特征量存儲(chǔ)部134。此外,在上述實(shí)施方式中,上述預(yù)定條件為在與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量的范圍中,包含與位置確定部170確定的臉部圖像建立關(guān)聯(lián)的臉部信息的臉部的朝向的一個(gè)或多個(gè)范圍,均不含臉部朝向?qū)С霾?72導(dǎo)出的臉部的朝向。圖7是用于說(shuō)明第2實(shí)施方式的基于臉部朝向的臉部圖像的分類的說(shuō)明圖。圖 7(a)是用于對(duì)某臉部信息說(shuō)明特征量的存儲(chǔ)狀態(tài)的說(shuō)明圖,圖7(b)是用于說(shuō)明在圖7(a) 中新存儲(chǔ)了特征量后的狀態(tài)的說(shuō)明圖。在本實(shí)施方式中,特征量存儲(chǔ)部134存儲(chǔ)臉部圖像 (例如圖7(a)、圖7(b)所示的臉部朝向不同的臉部圖像410)來(lái)替代特征量。在圖7(a)、 (b)中,表412表示特征量存儲(chǔ)部134中記錄的臉部圖像自身,表414表示預(yù)定的臉部朝向的范圍所包含的臉部圖像的記錄的有無(wú)。與第1實(shí)施方式同樣,在第2實(shí)施方式中也是臉部朝向?qū)С霾?72導(dǎo)出臉部圖像的俯仰角和偏向角,特征量導(dǎo)出部476在俯仰角為+15° -15°的范圍、偏向角為 +30° -30°的范圍之外時(shí)不導(dǎo)出特征量。特征量導(dǎo)出部476判斷臉部朝向?qū)С霾?72新導(dǎo)出的臉部圖像的臉部朝向即俯仰角、偏向角包含在圖7(a)所示的范圍(關(guān)于俯仰角為-15° -5°、-5° 5°、5° 15°,關(guān)于偏向角為-30° -10° , -10° 10°、10° 30° )中的哪個(gè)范圍內(nèi)。并且, 特征量導(dǎo)出部476對(duì)于同一人物的臉部信息,在與特征量建立關(guān)聯(lián)并存儲(chǔ)的多個(gè)標(biāo)志中與該范圍對(duì)應(yīng)的圖7(a)所示的表414的標(biāo)志為表示已經(jīng)存儲(chǔ)了特征量的“1”時(shí),不導(dǎo)出該臉部圖像的特征量。此外,圖7(a)所示的標(biāo)志為表示尚未存儲(chǔ)特征量的“0”時(shí),S卩,當(dāng)在與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量(在本實(shí)施方式中為9個(gè))的范圍中,包含存儲(chǔ)于特征量存儲(chǔ)部134中的、與位置確定部170確定的臉部圖像建立關(guān)聯(lián)的臉部信息的臉部的朝向的一個(gè)或多個(gè)范圍,均不含臉部朝向?qū)С霾?72新導(dǎo)出的臉部圖像的臉部的朝向時(shí),特征量導(dǎo)出部476導(dǎo)出位置確定部170確定的臉部圖像的特征量。并且,存儲(chǔ)控制部 478將特征量導(dǎo)出部476導(dǎo)出的特征量和臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向追加存儲(chǔ)到臉部信息中,將表414的對(duì)應(yīng)的標(biāo)志變更為“ 1 ”。例如,臉部朝向?qū)С霾?72新導(dǎo)出的臉部圖像的臉部朝向的俯仰角、偏向角為圖 7(a)所示的N7的位置416(俯仰角-15° -5°、偏向角10° 30° )時(shí),如圖7(b)所示,新存儲(chǔ)特征量,將標(biāo)志從“0”變更為“ 1 ”。圖8是用于說(shuō)明表示特征量的數(shù)量的圖像418a和表示包含臉部朝向的范圍的圖像418b的說(shuō)明圖。如圖8(a)、(b)所示,顯示控制部480使取景器108顯示表示以下二者中的任一方或雙方的圖像實(shí)際存儲(chǔ)的特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的上述特征量的上限數(shù)量;包含實(shí)際存儲(chǔ)的臉部朝向的范圍相對(duì)于與根據(jù)俯仰角和偏向角劃分的臉部朝向相關(guān)的預(yù)定數(shù)量的范圍。例如,圖7(b)所示的表412被記錄到特征量存儲(chǔ)部134時(shí),顯示控制部480可以與第1實(shí)施方式的顯示控制部180同樣,使取景器108顯示6/9被涂黑(描陰影)的圓圈 (例如圖8(a)所示的圖像418a),其表示實(shí)際存儲(chǔ)的特征量的數(shù)量(在此為6個(gè))相對(duì)于能存儲(chǔ)的特征量的上限數(shù)量(在此為9個(gè))。此外,在本實(shí)施方式中,顯示控制部480,作為實(shí)際存儲(chǔ)的臉部的朝向的范圍相對(duì)于與臉部的朝向相關(guān)的上述預(yù)定數(shù)量的范圍,使取景器108顯示相當(dāng)于Ni、N2、N5、N6、N7、 N8的位置的網(wǎng)格被涂黑的縱橫3X3的網(wǎng)格的圖像(例如圖8(b)所示的圖像418b)。此時(shí), 3X3的9個(gè)網(wǎng)格中的6個(gè)網(wǎng)格被涂黑,因此表示相對(duì)于能存儲(chǔ)的特征量的上限數(shù)量9個(gè),實(shí)際存儲(chǔ)的特征量的數(shù)量為6個(gè)。用戶可以通過(guò)操作輸入來(lái)設(shè)定顯示圖像418a和圖像418b 的哪一個(gè)圖像。在本實(shí)施方式中,不僅顯示表示特征量的數(shù)量的圖像,還以明確實(shí)際存儲(chǔ)了特征量的臉部朝向的范圍和尚未存儲(chǔ)的臉部朝向的范圍的方式顯示圖像。因此,具有如下的優(yōu)點(diǎn)用戶例如容易把握要攝像的臉部的朝向、攝像的必要性較低的臉部的朝向?yàn)槟膫€(gè)朝向等狀況。臉部圖像的特征量的導(dǎo)出對(duì)臉部的朝向的影像很大。本實(shí)施方式的影像處理裝置 400限定為臉部的朝向不同的臉部圖像來(lái)存儲(chǔ)特征量,因此可以排除臉部的表情的影響,而存儲(chǔ)僅臉部的朝向有差異的臉部圖像的特征量。此外,對(duì)特征量影響大的臉部的朝向可以通過(guò)俯仰角和偏向角分類。在本實(shí)施方式中,在預(yù)定的俯仰角和偏向角的框中預(yù)先設(shè)定了為了使認(rèn)證容易而必要的臉部的朝向, 存儲(chǔ)控制部478對(duì)于分類為相同的臉部朝向的特征量不進(jìn)行存儲(chǔ),而存儲(chǔ)分類為不同的臉部朝向的特征量。因此,存儲(chǔ)控制部478對(duì)于在認(rèn)證模式中影響大的臉部的朝向,能夠參照大范圍的臉部的朝向的特征量。進(jìn)而,還可以將通過(guò)該影像處理裝置400以外的設(shè)備生成的臉部圖像的特征量取入到內(nèi)部。例如,外部輸入輸出部132接收到從其他影像處理裝置、能夠根據(jù)臉部圖像導(dǎo)出特征量的外部設(shè)備420輸出的特征量后,存儲(chǔ)控制部478將接收到的特征量存儲(chǔ)到特征量存儲(chǔ)部134。同樣,存儲(chǔ)讀取部130從存儲(chǔ)有特征量的存儲(chǔ)介質(zhì)422讀出特征量后,存儲(chǔ)控制部478將讀出的特征量存儲(chǔ)到特征量存儲(chǔ)部134。圖9是用于說(shuō)明從外部設(shè)備420取得了特征量時(shí)的處理的說(shuō)明圖。尤其是,圖9(a) 為表示存儲(chǔ)于特征量存儲(chǔ)部134中的任意的臉部信息的特征量被分類的臉部的朝向的范圍的表41 ,圖9(b)為表示與從外部設(shè)備420取得的任意的臉部信息同一人物的臉部圖像的特征量被分類的臉部朝向的范圍的表414b,圖9(c)為表示反映了從外部設(shè)備420取得的特征量之后的、存儲(chǔ)于特征量存儲(chǔ)部134中的任意的臉部信息的特征量被分類的臉部朝向的范圍的表414c。圖9 (a) (c)中的m N9各自的標(biāo)志,與圖7 (a)、(b)中的m N9 各自的標(biāo)志同樣,對(duì)應(yīng)于預(yù)定的臉部的朝向的范圍的特征量的有無(wú)。存儲(chǔ)控制部478,在從外部設(shè)備420接收到(從存儲(chǔ)介質(zhì)422讀出)的特征量與存儲(chǔ)于特征量存儲(chǔ)部134的臉部信息的特征量之間的類似度為第1閾值以上、或通過(guò)用戶的操作輸入而選擇了臉部信息時(shí),進(jìn)行對(duì)象的臉部信息的特征量和特征量的導(dǎo)出元的臉部圖像的臉部的朝向的比較。在該比較中,存儲(chǔ)控制部478對(duì)于圖9(a)所示的標(biāo)志為“1”的臉部的朝向的范圍不更新特征量,對(duì)于標(biāo)志為“0”的臉部的朝向的范圍(圖9(a)中的N5 N9),若有與從外部設(shè)備420接收到的特征量對(duì)應(yīng)的臉部的朝向的特征量,則將該特征量存儲(chǔ)到特征量存儲(chǔ)部134。在圖9(b)中,有N5的臉部的朝向的特征量,因此存儲(chǔ)控制部478將該特征量存儲(chǔ)到特征量存儲(chǔ)部134。結(jié)果,如圖9(c)所示,N5的標(biāo)志也從圖9(a)所示的“0”變更為“ 1”。 此外,例如也可以在特征量存儲(chǔ)部134中將特征量的導(dǎo)出的時(shí)刻作為輔助信息一并存儲(chǔ), 當(dāng)已經(jīng)存儲(chǔ)了相同的臉部朝向的范圍的特征量時(shí),存儲(chǔ)控制部478優(yōu)先存儲(chǔ)更新導(dǎo)出的特征量。將從外部設(shè)備420接收到的特征量存儲(chǔ)到特征量存儲(chǔ)部134時(shí),通過(guò)根據(jù)臉部的朝向判斷是否存儲(chǔ)的構(gòu)成,存儲(chǔ)控制部478不會(huì)過(guò)于增加存儲(chǔ)的特征量,可以劃一且有效地存儲(chǔ)特征量。如上所述,根據(jù)本實(shí)施方式的影像處理裝置400,對(duì)于對(duì)認(rèn)證模式影響大的臉部的朝向,可以預(yù)先存儲(chǔ)大范圍的臉部朝向的特征量,在認(rèn)證模式中可以提高認(rèn)證的精度。(影像處理方法)還提供了使用上述影像處理裝置400的影像處理方法。圖10是表示第2實(shí)施方式的影像處理方法的處理流程的流程圖。在圖10中,與圖5同樣地特別示出了注冊(cè)模式的處理流程。對(duì)于與上述第1實(shí)施方式的影像處理方法實(shí)質(zhì)上相同的處理,標(biāo)以相同的標(biāo)號(hào)而省略說(shuō)明。在本實(shí)施方式中,與第1實(shí)施方式不同,在臉部圖像追蹤步驟(S304)之后、進(jìn)行特征量導(dǎo)出步驟(圖5的S306)之前,臉部關(guān)聯(lián)部174判斷位置確定部170確定的臉部圖像是否與存儲(chǔ)于特征量存儲(chǔ)部134中的臉部信息建立了關(guān)聯(lián)(S500)。沒(méi)有建立關(guān)聯(lián)時(shí)(S500的否),特征量導(dǎo)出部476導(dǎo)出位置確定部170確定的臉部圖像的特征量(S502)。以下,由于從類似度導(dǎo)出步驟(S310)到臉部信息關(guān)聯(lián)步驟(S324)的處理與第1實(shí)施方式中說(shuō)明的影像處理方法實(shí)質(zhì)上相同,因此標(biāo)以相同標(biāo)號(hào)而省略說(shuō)明。在關(guān)聯(lián)判斷步驟(S500)中,位置確定部170確定的臉部圖像與存儲(chǔ)于特征量存儲(chǔ)部134中的臉部信息建立了關(guān)聯(lián)時(shí)(S500的是),臉部朝向?qū)С霾?72導(dǎo)出位置確定部170確定的臉部圖像的臉部的朝向(S504)。特征量導(dǎo)出部476對(duì)臉部朝向?qū)С霾?72導(dǎo)出的臉部的朝向和與位置確定部170 確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)臉部的朝向進(jìn)行比較,判斷是否滿足預(yù)定條件,即,臉部朝向?qū)С霾?72導(dǎo)出的臉部的朝向是否并非根據(jù)與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的俯仰角和偏向角劃分的預(yù)定數(shù)量的臉部朝向的任一個(gè)(是否為未注冊(cè)的臉部的朝向)(S506)。并非任一個(gè)時(shí)(S506的是),特征量導(dǎo)出部476導(dǎo)出位置確定部170 確定的臉部圖像的特征量(S508),存儲(chǔ)控制部478將特征量導(dǎo)出部476導(dǎo)出的特征量和臉部朝向?qū)С霾?72導(dǎo)出的臉部朝向,追加到已有的同一人物的臉部信息中并存儲(chǔ)到特征量存儲(chǔ)部134(S336)。臉部朝向?qū)С霾?72導(dǎo)出的臉部的朝向?yàn)楦鶕?jù)與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的俯仰角和偏向角劃分的預(yù)定數(shù)量的臉部朝向的任一個(gè)時(shí)(S506的否), 轉(zhuǎn)移到最大數(shù)量判斷步驟(S338)。以下,從最大數(shù)量判斷步驟(S338)到模式變換步驟(S34》與第1實(shí)施方式中說(shuō)明的影像處理方法實(shí)質(zhì)上相同,因此標(biāo)以相同標(biāo)號(hào)而省略說(shuō)明。如上所述,根據(jù)使用了影像處理裝置400的影像處理方法,可以預(yù)先存儲(chǔ)大范圍的臉部的朝向的特征量,在認(rèn)證模式中可以提高認(rèn)證的精度。以上參照附圖對(duì)本發(fā)明的優(yōu)選實(shí)施方式進(jìn)行了說(shuō)明,但本發(fā)明不限于所述實(shí)施方式。本領(lǐng)域技術(shù)人員能夠在權(quán)利要求書所記載的范圍內(nèi)想到各種變更例或修正例,這些也自然屬于本發(fā)明的技術(shù)范圍。另外,本說(shuō)明書的影像處理方法中的各步驟并非必須按照作為流程圖記載的順序以時(shí)間序列來(lái)處理,還可以包含并列或子流程的處理。工業(yè)利用性本發(fā)明可以用于對(duì)用于確定被拍攝體的臉部圖像的特征量進(jìn)行存儲(chǔ)的影像處理裝置及影像處理方法。
權(quán)利要求
1.一種影像處理裝置,其特征在于,包括影像取得部,取得影像;位置確定部,從上述影像確定一個(gè)臉部圖像;臉部關(guān)聯(lián)部,將確定的上述臉部圖像與存儲(chǔ)于存儲(chǔ)部中的、匯總了一個(gè)或多個(gè)特征量的臉部信息建立關(guān)聯(lián);特征量導(dǎo)出部,導(dǎo)出上述確定的臉部圖像的特征量;和存儲(chǔ)控制部,對(duì)導(dǎo)出的上述特征量和與上述確定的臉部圖像建立關(guān)聯(lián)的上述臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的上述特征量追加到上述臉部信息中,并存儲(chǔ)到上述存儲(chǔ)部中。
2.根據(jù)權(quán)利要求1所述的影像處理裝置,其特征在于,上述預(yù)定條件為上述導(dǎo)出的特征量和與上述確定的臉部圖像建立關(guān)聯(lián)的臉部信息的所有的一個(gè)或多個(gè)特征量之間的類似度小于預(yù)定值。
3.根據(jù)權(quán)利要求1或2所述的影像處理裝置,其特征在于,包括顯示控制部,其使顯示部顯示表示實(shí)際存儲(chǔ)的上述特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的上述特征量的上限數(shù)量的圖像。
4.一種影像處理裝置,其特征在于,包括影像取得部,取得影像;位置確定部,從上述影像確定一個(gè)臉部圖像;臉部關(guān)聯(lián)部,將確定的上述臉部圖像與存儲(chǔ)于存儲(chǔ)部中的、匯總了一個(gè)或多個(gè)特征量及該臉部的朝向的臉部信息建立關(guān)聯(lián);臉部朝向?qū)С霾?,?dǎo)出上述確定的臉部圖像的臉部的朝向;特征量導(dǎo)出部,導(dǎo)出上述確定的臉部圖像的特征量;和存儲(chǔ)控制部,對(duì)導(dǎo)出的上述臉部的朝向和與上述確定的臉部圖像建立關(guān)聯(lián)的上述臉部信息的一個(gè)或多個(gè)臉部的朝向進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的上述特征量和上述導(dǎo)出的臉部的朝向追加到上述臉部信息中,并存儲(chǔ)到上述存儲(chǔ)部中。
5.根據(jù)權(quán)利要求4所述的影像處理裝置,其特征在于,上述預(yù)定條件為在與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量的范圍中,包含與上述確定的臉部圖像建立關(guān)聯(lián)的臉部信息的臉部的朝向的一個(gè)或多個(gè)范圍,均不含上述導(dǎo)出的臉部的朝向。
6.根據(jù)權(quán)利要求4或5所述的影像處理裝置,其特征在于,包括顯示控制部,其使顯示部顯示表示以下二者中的任一方或雙方的圖像實(shí)際存儲(chǔ)的上述特征量的數(shù)量相對(duì)于能夠存儲(chǔ)的上述特征量的上限數(shù)量;包含實(shí)際存儲(chǔ)的上述臉部的朝向的范圍相對(duì)于與根據(jù)俯仰角和偏向角劃分的臉部的朝向相關(guān)的預(yù)定數(shù)量的范圍。
7.一種影像處理方法,其特征在于,取得影像,從上述影像確定一個(gè)臉部圖像,將確定的上述臉部圖像與匯總了一個(gè)或多個(gè)特征量的臉部信息建立關(guān)聯(lián),導(dǎo)出上述確定的臉部圖像的特征量,對(duì)導(dǎo)出的上述特征量和與上述確定的臉部圖像建立關(guān)聯(lián)的上述臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的上述特征量追加到上述臉部信息中并進(jìn)行存儲(chǔ)。
8. 一種影像處理方法,其特征在于, 取得影像,從上述影像確定一個(gè)臉部圖像,將確定的上述臉部圖像與匯總了一個(gè)或多個(gè)特征量及該臉部的朝向的臉部信息建立關(guān)聯(lián),導(dǎo)出上述確定的臉部圖像的臉部的朝向,對(duì)導(dǎo)出的上述臉部的朝向和與上述確定的臉部圖像建立關(guān)聯(lián)的上述臉部信息的一個(gè)或多個(gè)臉部的朝向進(jìn)行比較,在滿足預(yù)定條件時(shí),將上述確定的臉部圖像的特征量和上述導(dǎo)出的臉部的朝向追加到上述臉部信息中并進(jìn)行存儲(chǔ)。
全文摘要
一種影像處理裝置和影像處理方法,不會(huì)使用戶感到厭煩,而導(dǎo)出能切實(shí)確定臉部的適當(dāng)?shù)奶卣髁?。影像處理裝置(100)的特征在于,包括攝像部(120),取得影像;位置確定部(170),從影像確定一個(gè)臉部圖像;臉部關(guān)聯(lián)部(174),將確定的臉部圖像與存儲(chǔ)于存儲(chǔ)部中的、匯總了一個(gè)或多個(gè)特征量的臉部信息建立關(guān)聯(lián);特征量導(dǎo)出部(176),導(dǎo)出確定的臉部圖像的特征量;和存儲(chǔ)控制部(178),對(duì)導(dǎo)出的特征量和與確定的臉部圖像建立關(guān)聯(lián)的臉部信息的一個(gè)或多個(gè)特征量進(jìn)行比較,在滿足預(yù)定條件時(shí),將導(dǎo)出的特征量追加到臉部信息中,并存儲(chǔ)到特征量存儲(chǔ)部(134)中。
文檔編號(hào)G06T1/00GK102172014SQ201080002809
公開日2011年8月31日 申請(qǐng)日期2010年9月6日 優(yōu)先權(quán)日2009年11月13日
發(fā)明者寺西康彥 申請(qǐng)人:日本勝利株式會(huì)社