專利名稱:攝影裝置、圖像區(qū)域存在與否判定方法、以及記錄介質(zhì)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種攝影裝置、拍攝對象的圖像區(qū)域存在與否判定方法、 以及記錄介質(zhì)。
背景技術(shù):
0001
為了以攝影對象的人物的臉為基準(zhǔn)進行曝光控制,己有具備從在攝像 元件上成像的圖像中檢測臉的裝置的數(shù)碼相機。例如,專利文獻l(日本
國特開2008—28960號公報)中記載有如下攝影裝置及攝影方法,即相比 精度更優(yōu)先處理時間,對實時取景(live view)圖像進行臉檢測處理,并 進行與檢測出的臉相適應(yīng)的曝光控制。此外,專利文獻2(日本國特開2008 一42319號公報)中記載有如下攝像裝置及攝影方法,即相比處理時間更 優(yōu)先精度,對全尺寸(foil size)圖像進行臉檢測處理,計算所檢測出的臉 的表情的評價值。
發(fā)明內(nèi)容
0002
本發(fā)明鑒于上述背景而形成,其目的在于,對與拍攝對象相對應(yīng)的圖 像區(qū)域正確判定拍攝對象是否存在,且縮短該判定處理所需的時間。0003
為達(dá)成上述目的,本發(fā)明的一個方式是攝影裝置,其具備攝像部件, 通過攝像處理取得攝像圖像;圖像生成部件,根據(jù)由該攝像部件取得的攝 像圖像生成降低分辨率后的第一圖像;檢測部件,從由該圖像生成部件生 成的第一圖像中檢測與拍攝對象相對應(yīng)的圖像區(qū)域;第一控制部件,在由 該檢測部件未檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為 在所述攝像圖像中不存在與所述拍攝對象相對應(yīng)的圖像區(qū)域;第一判定部件,在由所述檢測部件檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況 下,判定所述攝像圖像中與由所述檢測部件檢測出的圖像區(qū)域相對應(yīng)的區(qū) 域是否是與所述拍攝對象相對應(yīng)的圖像區(qū)域;以及第二控制部件,在由該
第一判定部件判定為是與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷 為在所述攝像圖像中存在與所述拍攝對象相對應(yīng)的圖像區(qū)域。
本發(fā)明的另一方式是圖像區(qū)域存在與否判定方法,包括圖像生成部 件(18),根據(jù)由攝像部取得的攝像圖像生成降低分辨率后的第一圖像; 檢測部件(14),從由該圖像生成部件生成的第一圖像中檢測與拍攝對象 相對應(yīng)的圖像區(qū)域;第一控制部件(18),在由該檢測部件未檢測出與所 述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝像圖像中不存在 與所述拍攝對象相對應(yīng)的圖像區(qū)域;第一判定部件(15),在由所述檢測 部件檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判定所述攝像圖 像中與由所述檢測部件檢測出的圖像區(qū)域相對應(yīng)的區(qū)域是否是與所述拍 攝對象相對應(yīng)的圖像區(qū)域;以及第二控制部件(18),在由該第一判定部 件判定為是與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝 像圖像中存在與所述拍攝對象相對應(yīng)的圖像區(qū)域。
0006
圖1是表示本發(fā)明實施方式的數(shù)碼相機1的概念結(jié)構(gòu)圖。
圖2是示出實時取景圖像的圖。
圖3是示出實時取景圖像的圖。
圖4是示出從全尺寸圖像中切出的圖像的圖。
圖5是示出實時取景圖像的圖。
圖6是示出數(shù)碼相機1的臉圖像檢測步驟的流程圖。
圖7是示出數(shù)碼相機1的臉圖像區(qū)域檢測步驟的流程圖。
圖8是說明在臉圖像區(qū)域檢測時從實時取景圖像中切出的部分圖像的圖。
圖9是示出數(shù)碼相機1的臉判定處理的步驟的流程圖。 圖IO是示出上述臉圖像檢測步驟的變形例的流程圖。圖11是示出上述臉圖像檢測步驟的變形例的流程圖。 圖12是示出上述臉圖像檢測步驟的變形例的流程圖。 圖13是示出上述臉圖像檢測步驟的變形例的流程圖。
具體實施例方式
0007
以下,針對本實施方式,作為適用于數(shù)碼相機的一例,參照附圖詳細(xì) 說明本發(fā)明的攝像裝置。0008
[實施方式] A.數(shù)碼相機的結(jié)構(gòu)
圖1是示出本實施方式涉及的數(shù)碼相機1的概念結(jié)構(gòu)的圖。如圖1所 示,數(shù)碼相機l由光學(xué)鏡頭(lens)裝置IO、 CMOSll、 A/D轉(zhuǎn)換器12、 存儲部13、臉檢測部14、臉判定部15、表情識別部16、顯示部17、控制 部18、以及外部存儲器19構(gòu)成。
0009
光學(xué)鏡頭裝置10具備鏡頭、光圈、焦點調(diào)整裝置、以及快門裝置等, 是將拍攝對象的圖像成像在CMOSll上的裝置。0010
CMOSll具備將大約100萬個圖像檢測元件排列為二維矩陣狀的部 件,是將由光學(xué)鏡頭裝置10在上述排列的圖像撿測元件上成像的圖像轉(zhuǎn) 換為圖像信號的裝置。此外,CMOSll輸出的圖像信號具有與CMOSll 上的圖像檢測元件大致相同數(shù)目的像素數(shù)。由與該CMOS 11上的圖像檢測 元件大致相同數(shù)目的像素構(gòu)成的圖像(信號)稱為全尺寸圖像(信號)。 此外,如后所述,顯示部17能顯示的分辨率比全尺寸圖像低。此外,還 需要加快實時取景圖像的更新處理速度。因此,針對CMOSll輸出后由后 述A/D轉(zhuǎn)換器12轉(zhuǎn)換為數(shù)字信號并暫時存儲在存儲部13中的圖像信號, 控制部18減少其像素數(shù),并生成輸出將分辨率降低至VGA類(class)后 的圖像。在本說明書中將降低該分辨率后得到的圖像(信號)稱為實時取 景圖像(信號)。0011
A/D轉(zhuǎn)換器12是將模擬信號轉(zhuǎn)換為數(shù)字信號的電路,將由CMOSll
輸出的圖像信號轉(zhuǎn)換為數(shù)字信號。0012
存儲部13是存儲圖像信號的存儲裝置。0013
臉檢測部14是根據(jù)控制部18的指示,從實時取景圖像中檢測可能包 含有人物的臉的圖像(以下,稱為臉圖像)的圖像區(qū)域(以下,稱為臉圖 像區(qū)域)作為拍攝對象的圖像區(qū)域的裝置。0014
臉判定部15是根據(jù)控制部18的指示,判定全尺寸圖像中與由臉檢測 部14檢測出的臉圖像區(qū)域相對應(yīng)的區(qū)域是否是臉圖像的裝置。0015
表情識別部16根據(jù)控制部18的指示計算表情評價值,其中,該表情
評價值表示提取出的臉圖像中包含的臉是否接近特定表情。0016
顯示部17是按照控制部18的指示來顯示實時取景圖像等的液晶顯示 裝置。
0017
控制部18是控制數(shù)碼相機1的動作的計算機,按照程序存儲器181 中所寫入的程序來控制臉檢測部14等,并執(zhí)行后述在CMOSll輸出的圖 像信號中是否存在臉圖像的判定處理。0018
外部存儲器19例如由對數(shù)碼相機主體自由裝卸的存儲卡、內(nèi)置于相 機主體內(nèi)的閃速存儲器等構(gòu)成。0019
如以上構(gòu)成的數(shù)碼相機1利用CMOSll將由光學(xué)鏡頭裝置IO攝像的 拍攝對象的圖像轉(zhuǎn)換為電信號,由A/D轉(zhuǎn)換器12將該電信號轉(zhuǎn)換為數(shù)字 信號,存儲在存儲部13中。此外,由光學(xué)鏡頭裝置IO攝像的拍攝對象的 圖像被降低分辨率后顯示在顯示部17上。然后,用戶確認(rèn)顯示部17上顯示的圖像,通過操作未圖示的快門裝置,能夠僅將所希望的圖像保存在外
部存儲器19中。0020
此外,如上所述,顯示部17不限制能顯示的像素數(shù)。因此,控制部 18,對由CMOSll輸出的全尺寸圖像,另外從全尺寸圖像中減少像素數(shù), 生成像素數(shù)較少的實時取景圖像,并向存儲部13輸出。0021
如上所述,在數(shù)碼相機1中,雖然可以由用戶確認(rèn)顯示部17中顯示 的圖像,手動操作快門裝置進行攝影,但是也能夠檢測拍攝對象人物令人 滿意的表情,進行自動攝影(以下,稱為自動快門)。例如,如圖2所示, 當(dāng)在顯示部17中顯示實時取景圖像時,如果用戶選擇自動快門,則數(shù)碼 相機1進行如下處理。0022
首先,臉檢測部14針對圖2示出的實時取景圖像100搜索臉圖像區(qū) 域,作為其結(jié)果,如圖3所示檢測出區(qū)域R30、 R31、 R32。然后,臉檢測 部14確定該實時取景圖像中區(qū)域R30、 R31、 R32的位置。之后,臉判定 部15從在CM0S11上成像的全尺寸圖像中,切出與由臉檢測部14確定的 R30、 R31、 R32相當(dāng)?shù)膮^(qū)域P30、 P31、 P32 (參照圖4),并詳細(xì)地判定 這些區(qū)域的圖像是否真正是臉圖像。例如,由于在P30、 P31的圖像中拍 攝有人臉,因此臉判定部15判定為這些是臉圖像。但是,如果臉判定部 15針對P32在提高分辨率后的全尺寸圖像中詳細(xì)地進行判定,則判定為是 在細(xì)節(jié)上具有人臉?biāo)哂械奶卣髦獾奶卣鞯膱D像。也就是說,由于臉檢 測部14盡可能地將可能是臉圖像的圖像區(qū)域檢測為臉圖像區(qū)域,因此, 有時會如R32這樣檢測出按細(xì)節(jié)來看并不是臉圖像的圖像區(qū)域。另一方 面,為了針對全尺寸圖像進行高精度的判定,臉判定部15能夠針對臉檢 測部14誤檢測為臉圖像的臉圖像區(qū)域,糾正其判斷,從而正確判定全尺 寸圖像中與臉圖像區(qū)域相對應(yīng)的區(qū)域是否是臉圖像。作為其結(jié)果,即使在 該實時取景圖像100中的R32、以及與該實時取景相對應(yīng)的全尺寸圖像P32 中,由臉檢測部14檢測為臉圖像,臉判定部15也不會判定為臉圖像。0023接著,表情識別部16對由臉判定部15判定為臉圖像的臉圖像P30、 P31進行表情評價,計算表情評價值。另外,所謂表情評價值是針對檢測 出的臉圖像的每一個,評價"未閉眼"和"是笑臉"等,并根據(jù)這兩個評 價值來計算表情評價值。也就是說,所謂表情評價值是表示作為拍攝對象 表情是否"令人滿意"的指標(biāo),如果拍攝對象的人物是笑臉,則其值變大。 計算出表情評價值之后,數(shù)碼相機1在顯示部17中顯示表示臉圖像的位 置的框F30、 F31和臉圖像的表情評價值V30、 V31 (參照圖5)。此外, 如果臉圖像的表情評價值比規(guī)定閾值高,則在CM0S11中成像的全尺寸圖 像被存儲在存儲部13中,自動快門結(jié)束。0024參照圖6詳細(xì)說明以上處理。另外,控制部18讀出保存在程序存儲 器181中的程序,控制部18基于該程序開始其處理。開始,控制部18按 照規(guī)定時間間隔(例如,每秒30次 60次)依次反復(fù)進行實時取景圖像 的生成。也就是說,根據(jù)在CMOSll上成像的圖像來生成降低分辨率后的 圖像作為實時取景圖像,并依次顯示在顯示部17中。該處理用于用戶研 究構(gòu)圖。圖6示出的流程圖示出生成第N個實時取景圖像時的處理步驟。0025首先,將第N個實時取景圖像存儲在存儲部13中(步驟SIOO)。0026此時,如果使用上次生成的實時取景圖像即第(N—l)個實時取景圖 像檢測出的臉圖像的位置信息和其表情評價值存儲在存儲部13中(步驟 S101:是),則在第N個實時取景圖像中,將使用第(N—l)個實時取景 圖像檢測出的表示臉圖像的位置的框和表情評價值重疊顯示在顯示部17 中(步驟S102)。0027如果使用第(N—l)個實時取景圖像檢測出的臉圖像和其表情評價值 未存儲在存儲部13中(步驟S101:否),則在顯示部17中僅顯示第N個 實時取景圖像(步驟S103)。0028接著,臉檢測部14搜索第N個實時取景圖像并檢測臉圖像區(qū)域(步驟S104)。另外,步驟S104中的臉圖像區(qū)域檢測的詳細(xì)步驟以后敘述。0029從第N個實時取景圖像中檢測出臉圖像區(qū)域后(步驟S104:是),確 定該臉圖像區(qū)域的位置,并從在CMOS11上成像的圖像中按照全尺寸切出 與該臉圖像區(qū)域相對應(yīng)的區(qū)域,并發(fā)送至臉判定部15 (步驟S105)。另外, 在未從第N個實時取景圖像中檢測出臉圖像區(qū)域的情況下(步驟S104: 否),判斷為在該圖像中不存在臉圖像,省略步驟S105至步驟Slll的處 理,進入步驟S112。0030臉判定部15進行判定發(fā)送來的圖像是否是臉圖像的臉判定處理(步 驟S106)。另外,該臉判定處理的詳細(xì)步驟以后敘述。0031該步驟S106的臉判定處理的結(jié)果中,如果臉判定部15判定為發(fā)送來 的圖像是臉圖像(步驟S107:是),則將該臉圖像的位置信息輸出至存儲 部13,并將該臉圖像輸出至表情識別部16 (步驟S108)。另一方面,如果 臉判定部15判定為發(fā)送來的圖像不是臉圖像(步驟S107:否),則越過步 驟108的處理進入步驟S109。0032另外,針對檢測出的所有臉圖像區(qū)域反復(fù)進行從步驟S105至步驟 S109的處理。0033控制部18判定針對所有臉圖像區(qū)域的臉判定處理是否結(jié)束(步驟 S109),在針對所有臉圖像區(qū)域判定為臉判定處理結(jié)束后(步驟S109:是), 進入步驟SllO。0034另外,針對步驟S108中輸出的臉圖像,由表情識別部16對臉圖像進 行表情評價處理(步驟SllO),計算表情評價值,并輸出至存儲部13 (步 驟Slll )。在由步驟S108輸出的臉圖像不存在的情況下,不進行步驟S110 以及步驟Slll的處理。0035另外,表情評價處理是計算表情評價值的處理,其中,該表情評價值 表示臉圖像中包含的臉是否接近規(guī)定表情,假設(shè)本實施方式中的規(guī)定表情 是笑臉,則臉圖像的人物越笑則表情評價值越高。表情評價值的計算可以 考慮例如如下方法,即準(zhǔn)備表示笑臉的基準(zhǔn)圖像和表示無表情的基準(zhǔn)圖像,判定評價對象的臉圖像接近哪一個基準(zhǔn)圖像。另外,上述專利文獻2詳細(xì)記載有這樣的表情評價值的計算方法。0036用戶確認(rèn)顯示部17中顯示的表情評價值,判斷能否進行快門操作。 然后,如果用戶操作快門(步驟S112:是),則檢測到快門操作,控制部18采用記錄用圖像的攝影條件進行攝影,將在CMOSll上成像的全尺寸 圖像記錄在外部存儲器19中(步驟S113),攝影結(jié)束。0037另外,在用戶未進行快門操作的情況下(步驟S112:否),由于未檢測出快門操作,因此控制部18將處理返回至步驟S100,針對第(N+l) 個實時取景圖像重復(fù)進行同樣的處理。0038下面,說明步驟S104中的臉圖像區(qū)域檢測的詳細(xì)步驟。在臉圖像檢 測處理中,臉檢測部14從搜索對象的實時取景圖像中切出,將該切出的 部分圖像與基準(zhǔn)臉圖像做對比,求出該部分圖像與基準(zhǔn)圖像的相似度。然 后,在求得的相似度超過規(guī)定閾值(第一閾值)的情況下,檢測該部分圖 像作為臉圖像區(qū)域。另外,上述基準(zhǔn)臉圖像是重疊多個人物的臉的圖像后 得到的圖像,是平均的臉的黑白(monochrome)圖像。此外,該基準(zhǔn)臉圖 像是預(yù)先生成并存儲在存儲部13中的。0039圖7是示出臉圖像檢測處理的步驟的流程圖,圖8是說明在臉圖像區(qū) 域檢測的過程中從實時取景圖像中切出的部分圖像的圖。以下,參照圖7 和圖8繼續(xù)說明。0040如前所述,由于基準(zhǔn)臉圖像是黑白圖像,所以臉檢測部14首先將搜 索對象的實時取景圖像黑白化(步驟SIO)。0041接著,如圖8所示,臉檢測部14從采用步驟S10黑白化后的實時取 景圖像G中切出與基準(zhǔn)臉圖像T相同尺寸的部分圖像F (步驟Sll )。0042接著,臉檢測部14針對基準(zhǔn)臉圖像T和部分圖像F按照像素級別來 比較亮度,并求出基準(zhǔn)臉圖像T與部分圖像F的相似度(步驟S12)。另 外,由于相似度的計算方法是公知技術(shù),因此省略具體記述。0043如果得到的相似度為規(guī)定閾值(第一閾值)以上(步驟S13:是),則臉檢測部14檢測該部分圖像F作為臉圖像區(qū)域(步驟S14)。0044接著,臉檢測部14將部分圖像F在垂直方向或水平方向上移動一像 素、或改變基準(zhǔn)臉圖像T的尺寸,重復(fù)步驟S11至步驟S14的處理(步驟 S15:否)。0045針對實時取景圖像的所有區(qū)域F搜索后(步驟S15:是),臉圖像區(qū)域檢測結(jié)束。0046下面,說明步驟S106中的臉判定處理的詳細(xì)步驟。臉判定處理是針 對與由臉圖像檢測處理檢測出的臉圖像區(qū)域相當(dāng)?shù)娜叽鐖D像的區(qū)域(以 下,稱為判定區(qū)域),判定該判定區(qū)域是否是臉圖像的處理。因此,在臉 判定處理中,臉判定部15研究判定區(qū)域的圖像與全尺寸基準(zhǔn)臉圖像的相 似度。另外,所謂全尺寸基準(zhǔn)臉圖像是增加在臉圖像檢測處理中使用的基 準(zhǔn)臉圖像的像素數(shù)從而提高分辨率后,與全尺寸圖像相對應(yīng)的圖像。0047圖9是示出臉判定處理的步驟的流程圖。以下,參照圖9繼續(xù)說明。0048首先,臉判定部15從在CM0S11上成像的全尺寸圖像中切出判定區(qū)域(步驟S20),對該圖像進行黑白處理(步驟S21)。0049接著,臉判定部15針對全尺寸基準(zhǔn)臉圖像和判定區(qū)域的圖像,按照 像素級別比較亮度,并求出全尺寸基準(zhǔn)臉圖像與判定區(qū)域的圖像的相似度(步驟S22)。0050如果求得的相似度為規(guī)定閾值(第二閾值)以上(步驟S23:是),則臉判定部15判定為該判定區(qū)域為臉圖像(步驟S24)。如果上述相似度不 足規(guī)定閾值(第二閾值)(步驟S23:否),則臉判定部15判定為該判定區(qū) 域不是臉圖像,臉判定處理結(jié)束。0051如以上,數(shù)碼相機l搜索實時取景圖像并檢測臉圖像區(qū)域,在檢測出 臉圖像區(qū)域的情況下,判定全尺寸圖像的與該臉圖像區(qū)域相對應(yīng)的區(qū)域是 否是臉圖像并計算表情評價值。由此,在實時取景圖像的搜索時還未檢測 出臉圖像區(qū)域的情況下,通過在該時刻結(jié)束判定處理,從而能夠縮短處理 時間。更進一步地,在檢測出臉圖像區(qū)域的情況下,通過進行更高精度的 臉判定處理,從而能夠判定攝像得到的圖像中是否存在正確的臉圖像。還 有,通過對由臉判定處理判定為臉圖像的圖像進行表情評價處理,從而也 能夠高精度地判斷判定出的臉圖像中包含的臉的表情是否是所謂的"美好表情"[變形例]0052另外,也能夠如圖10所示對圖6示出的控制流程進行變形。g卩,在 步驟S104和步驟S105之間加入步驟S114,在基準(zhǔn)臉圖像T與部分圖像F 的相似度超過比上述第一閾值大的第三閾值的情況下(步驟S114:是), 也可以省略步驟S105至步驟S107的處理。由此,在基準(zhǔn)臉圖像T與部分 圖像F的相似度超過第三閾值的情況下,在轉(zhuǎn)移至臉判定處理之前,通過 判定在由臉圖像檢測處理檢測出的臉圖像區(qū)域中是否存在臉,從而能夠更 進一步縮短處理時間。另外,第三閾值是比第一閾值高的值,將其設(shè)置為 如下的值,即,即使檢測對象為實時取景圖像,若超過該值也能夠信賴臉 圖像區(qū)域為臉圖像的值。0053此外,雖然在圖6示出的控制流程中,通過用戶的快門操作,將CM0S11上的全尺寸圖像保存在外部存儲器19中(步驟S112),但是,也 可以如圖ll所示,設(shè)置步驟S200來取代步驟S112。并且,例如,也可以 由表情識別部16判定是否所有表情評價值超過70%,若判定為超過,則 由控制部18自動將CMOS11上的全尺寸圖像記錄在外部存儲器19中。由 此,能夠自動攝影拍攝對象現(xiàn)出笑臉的瞬間,而不必等待用戶的快門操作。0054另外,將CMOSll上的全尺寸圖像自動記錄在外部存儲器19中的必 要條件不限于"所有表情評價值超過70%"。也可以是"至少一個表情評 價值超過70%",且"70%"也可以是其他值。0055于是,可以想象的到,當(dāng)從CMOSll中輸出每秒30幀至60幀的實時 取景圖像時,雖然執(zhí)行臉圖像檢測處理,但臉圖像區(qū)域的位置在短時間內(nèi) 沒有較大變化。此外,在臉判定處理中,也可以考慮針對未判定為臉圖像 的區(qū)域,通過下一幀的臉圖像檢測處理再次檢測臉圖像區(qū)域的情況。但是, 在該情況下,由于在對上一幀的處理中,通過比臉圖像檢測處理更高精度 的臉判定處理判定為不是臉圖像,因此,由下一幀的處理檢測出的臉圖像 區(qū)域有較高可能也被臉判定處理判定為不是臉圖像。因此,在依次進行的 單個或多個幀的處理之前,也可以將判定為不是臉圖像的臉圖像區(qū)域判斷 為實時取景圖像中的該圖像區(qū)域不是臉圖像區(qū)域,并從臉圖像檢測處理或 臉判定處理的對象中排除。0056具體來說,在如圖12所示這樣在與臉圖像區(qū)域相當(dāng)?shù)娜叽鐖D像的 區(qū)域中,由臉判定處理判定為判定區(qū)域不是臉圖像的情況下(步驟S107: 否),控制部18將該判定區(qū)域的位置信息作為不是臉圖像的區(qū)域存儲在存 儲部13中(步驟S300)。然后,對緊鄰之前的三幀實時取景圖像(第(N 一l)個 至第(N—3)個實時取景圖像),判定是否存在與該不是臉圖像 的區(qū)域相對應(yīng)的區(qū)域(步驟S301)。然后,在判定為存在的情況下(步驟 S301:是),也可以判斷為該區(qū)域不是臉圖像,從臉圖像檢測處理的搜索 對象中排除后進行搜索(步驟S302)。0057
或者,如圖13所示,在針對第N個實時取景圖像檢測出的臉圖像區(qū) 域的位置與緊鄰之前的三幀的實時取景圖像(第(N—1)個 至第(N— 3)個實時取景圖像)的不是臉圖像的區(qū)域的位置大致一致的情況下(步 驟S303:是),也可以省略該步驟S105至步驟S108,決定為該臉圖像區(qū) 域不是臉圖像,并從臉判定處理的對象中排除。此外,在針對第N個實時 取景圖像檢測出的臉圖像區(qū)域的位置與緊鄰之前的三幀的實時取景圖像 (第(N—l)個 至第(N—3)個實時取景圖像)的臉圖像的位置大致 一致的情況下,也可以判斷為該臉圖像區(qū)域是臉圖像,并從臉判定處理的 對象中排除。也就是說,也可以不進行臉判定處理而判斷該臉圖像區(qū)域是 臉圖像。
然后,根據(jù)上述圖12、 13的處理,能夠正確判定與拍攝對象相對應(yīng) 的圖像區(qū)域(這里為臉圖像)是否存在,并且能夠進一步縮短該判定處理 的時間。
0058
上述實施方式和變形例的任一個中,求出從實時取景圖像中切出的部 分圖像與基準(zhǔn)臉圖像的相似度,在相似度超過規(guī)定閾值(第一閾值)的情 況下,檢測該部分圖像作為臉圖像區(qū)域,該第一閾值設(shè)置為即使是臉圖像 區(qū)域的可能性較低也檢測為臉圖像區(qū)域的值。也就是說,臉圖像檢測處理 不是用于檢測是臉圖像的區(qū)域的處理,而是為了對能夠高精度地判定臉圖 像是否存在的臉判定處理的區(qū)域進行限定而進行的處理。
這樣,在對全尺寸圖像進行精度較高的臉判定處理之前,預(yù)先檢測實 時取景圖像中有可能是臉圖像的區(qū)域(臉圖像區(qū)域),僅在存在可能是臉 圖像的區(qū)域的情況下,進行臉判定處理,因此能夠加快實時取景圖像內(nèi)沒 有可能存在臉圖像區(qū)域的情況下的處理,并能夠通過精度較高的臉判定處 理對臉圖像區(qū)域進行是否存在臉圖像的判定。
此外,由于表情評價處理也是對由臉判定處理判定為是臉的區(qū)域的全 尺寸圖像進行的,因此能夠進行精度較高的表情評價處理。0059
此外,在上述實施方式和變形例的任一個中,臉圖像檢測處理和臉判定處理是求得基準(zhǔn)臉圖像的相似度的方法,但是也可以是這以外的方法, 也可以采用與臉圖像檢測處理和臉判定處理不同的方法。例如,在臉圖像 檢測處理中可以通過膚色檢測來檢測臉圖像區(qū)域,臉判定處理也可以通過 檢測眼和/或嘴等特征點來進行是否是臉圖像的判定。但是,無論哪種情況, 對是否是臉圖像的結(jié)果,相比臉圖像檢測處理,臉判定處理能夠得到更高 精度的結(jié)果。
0060
此外,上述實施方式和變形例的任一個中,從圖像中檢測人物的臉, 但是可以不限定為臉,針對任何拍攝對象來實施。0061
根據(jù)上述實施方式和變形例,能夠針對與拍攝對象相對應(yīng)的圖像區(qū)域 正確判定其是否存在,并且能夠縮短該判定處理所需的時間。
權(quán)利要求
1.一種攝影裝置,具備攝像部件(11),通過攝像處理獲得攝像圖像;圖像生成部件(18),根據(jù)由該攝像部件獲得的攝像圖像生成降低分辨率后的第一圖像;檢測部件(14),從由該圖像生成部件生成的第一圖像中檢測與拍攝對象相對應(yīng)的圖像區(qū)域;第一控制部件(18),在由該檢測部件未檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝像圖像中不存在與所述拍攝對象相對應(yīng)的圖像區(qū)域;第一判定部件(15),在由所述檢測部件檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判定所述攝像圖像中與由所述檢測部件檢測出的圖像區(qū)域相對應(yīng)的區(qū)域是否是與所述拍攝對象相對應(yīng)的圖像區(qū)域;以及第二控制部件(18),在由該第一判定部件判定為是與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝像圖像中存在與所述拍攝對象相對應(yīng)的圖像區(qū)域。
2.根據(jù)權(quán)利要求1所述的攝影裝置,其特征在于,還包括第一評價值計算部件(14),針對所述第一圖像中的圖像區(qū)域,計算 與所述拍攝對象的相似度作為評價值;以及第二評價值計算部件(15),針對所述攝像圖像中與由所述檢測部件 檢測出的圖像區(qū)域相對應(yīng)的區(qū)域,計算與所述拍攝對象的相似度作為評價 值,在該攝影裝置中,所述檢測部件檢測所述第一評價值計算部件計算出的評價值為第一 閾值以上的圖像區(qū)域作為與所述拍攝對象相對應(yīng)的圖像區(qū)域,所述第一判定部件根據(jù)所述第二評價值計算部件計算出的評價值是 否是第二閾值以上,判定所述攝像圖像中的所述區(qū)域是否是與所述拍攝對 象相對應(yīng)的圖像區(qū)域。
3. 根據(jù)權(quán)利要求2所述的攝影裝置,其特征在于, 還具備第二判定部件(14),該第二判定部件(14)判定所述第一評價值計算部件計算出的評價值是否是第三閾值以上,其中,所述第三閾值 比所述第一閾值大, 在該攝影裝置中,在由所述第二判定部件判定為所述評價值為所述第三閾值以上的情 況下,所述第二控制部件進一步地判斷為在所述攝像圖像中存在與所述拍 攝對象相對應(yīng)的圖像區(qū)域。
4. 根據(jù)權(quán)利要求2或3所述的攝影裝置,其特征在于, 所述第一評價值計算部件和所述第二評價值計算部件都采用相同的方法計算評價值。
5. 根據(jù)權(quán)利要求4所述的攝影裝置,其特征在于, 所述第 一 閾值是比所述第二閾值小的值。
6. 根據(jù)權(quán)利要求4或5所述的攝影裝置,其特征在于, 還具備基準(zhǔn)圖像存儲部件(13),該基準(zhǔn)圖像存儲部件(13)將與所述拍攝對象相對應(yīng)的圖像作為基準(zhǔn)圖像來存儲, 在該攝影裝置中,所述第一評價值計算部件和所述第二評價值計算部件計算在所述基 準(zhǔn)圖像存儲部件中存儲的基準(zhǔn)圖像與所述第一圖像中的圖像區(qū)域或所述 攝像圖像中的所述區(qū)域的相似度作為評價值。
7. 根據(jù)權(quán)利要求2或3所述的攝影裝置,其特征在于, 所述第一評價值計算部件和所述第二評價值計算部件釆用相互不同的方法來計算評價值。
8. 根據(jù)權(quán)利要求1所述的攝影裝置,其特征在于, 還具備第三控制部件,在由所述第一判定部件判定為不是與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,之后,在規(guī)定期間內(nèi)由所述攝像部件獲 得的攝像圖像中,該第三控制部件將與判定為不是與所述拍攝對象相對應(yīng) 的圖像區(qū)域的所述區(qū)域相對應(yīng)的區(qū)域判斷為不是與所述拍攝對象相對應(yīng) 的圖像區(qū)域。
9. 根據(jù)權(quán)利要求8所述的攝影裝置,其特征在于,在由所述第一判定部件判定為不是與所述拍攝對象相對應(yīng)的圖像區(qū) 域的情況下,之后,所述第三控制部件將該圖像區(qū)域從規(guī)定期間內(nèi)的所述 檢測部件的檢測對象中排除。
10. 根據(jù)權(quán)利要求l所述的攝影裝置,其特征在于, 具備存儲部件(13),在由所述第一判定部件判定為不是與所述拍攝對象 相對應(yīng)的圖像區(qū)域的情況下,存儲該圖像區(qū)域的位置;以及第三判定部件(18),判定由所述檢測部件檢測出的圖像區(qū)域的位置 和所述存儲部件中存儲的圖像區(qū)域的位置是否大致一致,在該攝影裝置中,在由所述第三判定部件判定為大致一致的情況下,所述第二控制部件 進一步判斷為所述攝像圖像中與由所述檢測部件檢測出的圖像區(qū)域相對 應(yīng)的所述區(qū)域是與所述拍攝對象相對應(yīng)的圖像區(qū)域。
11. 根據(jù)權(quán)利要求l所述的攝影裝置,其特征在于, 還具備表情評價值計算部件(16),所謂與所述拍攝對象相對應(yīng)的圖像區(qū)域是人物的臉的圖像區(qū)域,該表情評價值計算部件(16)計算由所述 第二控制部件判斷為存在的圖像區(qū)域中的表情與規(guī)定表情的相似度作為 表情評價值。
12. 根據(jù)權(quán)利要求ll所述的攝影裝置,其特征在于, 還具備表情評價值報告部件(17),該表情評價值報告部件(17)向用戶報告由所述表情評價值計算部件計算出的表情評價值。
13. 根據(jù)權(quán)利要求12所述的攝影裝置,其特征在于, 還具備記錄圖像的記錄部件(19);第四判定部件(16),判定由所述表情評價值計算部件計算出的表情 評價值是否為規(guī)定閾值以上;以及記錄控制部件(18),如果由該第四判定部件判定為所述表情評價值 為規(guī)定閾值以上,則將包含該圖像區(qū)域的攝像圖像記錄在所述記錄部件 中。
14. 一種圖像區(qū)域存在與否判定方法,包括圖像生成步驟,根據(jù)由攝像部獲得的攝像圖像生成降低分辨率后的第一圖像;檢測步驟,從由該圖像生成步驟生成的第一圖像中檢測與拍攝對象相 對應(yīng)的圖像區(qū)域;第一控制步驟,在由該檢測步驟未檢測出與所述拍攝對象相對應(yīng)的圖 像區(qū)域的情況下,判斷為在所述攝像圖像中不存在與所述拍攝對象相對應(yīng) 的圖像區(qū)域;第一判定步驟,在由所述檢測步驟檢測出與所述拍攝對象相對應(yīng)的圖 像區(qū)域的情況下,判定所述攝像圖像中與由所述檢測步驟檢測出的圖像區(qū) 域相對應(yīng)的區(qū)域是否是與所述拍攝對象相對應(yīng)的圖像區(qū)域;以及第二控制步驟,在由該第一判定步驟判定為是與所述拍攝對象相對應(yīng) 的圖像區(qū)域的情況下,判斷為在所述攝像圖像中存在與所述拍攝對象相對 應(yīng)的圖像區(qū)域。
全文摘要
本發(fā)明提供一種攝影裝置具備攝像部件;圖像生成部件,根據(jù)由攝像部件獲得的攝像圖像生成降低分辨率后的第一圖像;檢測部件,從第一圖像中檢測與拍攝對象相對應(yīng)的圖像區(qū)域;第一控制部件,在由檢測部件未檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝像圖像中不存在與所述拍攝對象相對應(yīng)的圖像區(qū)域;第一判定部件,在由檢測部件檢測出與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判定所述攝像圖像中與由所述檢測部件檢測出的圖像區(qū)域相對應(yīng)的區(qū)域是否是與所述拍攝對象相對應(yīng)的圖像區(qū)域;以及第二控制部件,在判定為是與所述拍攝對象相對應(yīng)的圖像區(qū)域的情況下,判斷為在所述攝像圖像中存在與所述拍攝對象相對應(yīng)的圖像區(qū)域。
文檔編號G06K9/00GK101674411SQ20091017053
公開日2010年3月17日 申請日期2009年9月8日 優(yōu)先權(quán)日2008年9月9日
發(fā)明者巖本健士 申請人:卡西歐計算機株式會社