在第二次循環(huán)中，如圖6(B)所示，向被認(rèn)證者進(jìn)行指示使其做出怒臉，在步驟S19中，確認(rèn)得到與“憤怒”對應(yīng)的規(guī)定的面部參數(shù)。最終，如圖6(C)那樣，成為認(rèn)證成功的狀態(tài)。
[0132]另外，追蹤部104進(jìn)行的追蹤動作與第一實(shí)施方式相同。S卩，直至表情判定階段完成為止，持續(xù)幀間的追蹤區(qū)域的追蹤，在追丟了追蹤區(qū)域的情況下，認(rèn)證處理被中斷。
[0133]根據(jù)第二實(shí)施方式，由于使被認(rèn)證者做出所指定的多個(gè)表情，所以能夠使安全性變得更穩(wěn)固。
[0134]另外，在前述的說明中，沒有設(shè)置認(rèn)證中的時(shí)間限制，但在開始認(rèn)證處理至規(guī)定的時(shí)間經(jīng)過為止沒有完成認(rèn)證的情況下，也可以作為認(rèn)證失敗而中斷處理。
[0135]此外，也可以取得按幀的面部參數(shù)的變化的程度，在面部參數(shù)的變化量比規(guī)定的閾值大的情況下，判定為認(rèn)證失敗。這是因?yàn)樵诿娌繀?shù)在幀間不自然地較大變動的情況下，能夠估計(jì)冒充者替換照片等。
[0136]此外，在第二實(shí)施方式中，列舉了持續(xù)做出“高興”這樣的表情、“憤怒”這樣的表情的例子，但也可以使用其他表情的組合。此外，也可以從多個(gè)表情之中每次隨機(jī)決定所使用的表情并向被認(rèn)證者進(jìn)行指示。
[0137](第三實(shí)施方式)
[0138]在第一或第二實(shí)施方式中，表情判定部103判定了被認(rèn)證者的表情。與此相對，第三實(shí)施方式是判定被認(rèn)證者的面部的朝向來代替判定表情的實(shí)施方式。
[0139]在第三實(shí)施方式中，表情判定部103被置換為面部朝向判定部108 (未圖示)，用于判定被認(rèn)證者的面部的朝向。此外，在第三實(shí)施方式中，面部參數(shù)不是與被認(rèn)證者的表情相關(guān)的參數(shù)，而是成為表示被認(rèn)證者的面部的朝向的參數(shù)。例如，是在將正面設(shè)為0度的情況下的表示上下左右的角度的參數(shù)。關(guān)于其他部件，與第一實(shí)施方式相同，所以省略詳細(xì)的說明，僅說明處理的不同點(diǎn)。
[0140]在第三實(shí)施方式中，在步驟S18中，代替判定被認(rèn)證者的表情，判定被認(rèn)證者的面部的朝向朝向了規(guī)定的方向的情況。例如，如圖7所示，在進(jìn)行了朝向右45度方向的指示后，判定被認(rèn)證者的面部的朝向是否處于規(guī)定的范圍(例如，右35度?55度的范圍)。
[0141]追蹤部104進(jìn)行的追蹤動作與第一實(shí)施方式相同。S卩，直至表情判定階段完成為止，持續(xù)幀間的追蹤區(qū)域的追蹤，在追丟了追蹤區(qū)域的情況下，認(rèn)證處理被中斷。其中，在第三實(shí)施方式中，由于被認(rèn)證者的面部的朝向變化，優(yōu)選為考慮該變化而設(shè)定追蹤區(qū)域。例如，也可以將追蹤區(qū)域設(shè)定為鼻子等的、即使面部的朝向變化追丟的顧慮也低的器官。另夕卜，追蹤區(qū)域也可以是與面部中包含的器官以外對應(yīng)的區(qū)域。例如，也可以是包含面部整體的矩形區(qū)域等。
[0142]一般而言，判定面部的朝向的處理能夠以比識別人物或表情的處理低的處理成本來執(zhí)行。因此，根據(jù)第三實(shí)施方式，能夠與第一或第二實(shí)施方式相同地降低整體的處理成本。
[0143](變形例)
[0144]上述的實(shí)施方式只是一例，本發(fā)明能夠在不脫離其主旨的范圍內(nèi)適當(dāng)變更而實(shí)施。
[0145]例如，在實(shí)施方式的說明中，列舉了使用多個(gè)中間圖像來對追蹤區(qū)域進(jìn)行追蹤的例子，但不一定需要使用中間圖像。
[0146]此外，在實(shí)施方式的說明中，例示了七種表情(高興、憤怒、悲傷、驚愕、恐怖、厭惡、無表情)，但也可以使用與所例示的表情以外相關(guān)聯(lián)的面部參數(shù)。例如，也可以使用表示閉眼的程度或視線的方向、嘴的開閉的程度等的面部參數(shù)。
[0147]此外，在實(shí)施方式的說明中，列舉了將表情數(shù)值化后的參數(shù)、和將面部的朝向數(shù)值化后的參數(shù)作為面部參數(shù)的例子，但還能夠采用與用戶的面部的外觀關(guān)聯(lián)的其他參數(shù)。
[0148]此外，在第一以及第二實(shí)施方式中，列舉了向被認(rèn)證者指示做出特定的表情的例子，但在被認(rèn)證者預(yù)先掌握應(yīng)做出怎樣的表情的情況下，也可以不進(jìn)行具體的指示。例如，也可以不指示“笑臉” “憤怒”這樣的具體的表情，僅通知確認(rèn)預(yù)先決定的表情。此外，在這樣的情況下，也可以不將圖像提供給被認(rèn)證者。例如，也可以僅通過燈或聲音來通知進(jìn)行認(rèn)證步驟。
[0149]此外，也可以直至認(rèn)證成功為止完全不進(jìn)行通知。像這樣，也可以對合法的人物以外不提供線索。
[0150]此外，在實(shí)施方式的說明中，使用照相機(jī)取得面部圖像，但只要能夠取得面部圖像，則也可以使用照相機(jī)以外。例如，也可以設(shè)為經(jīng)由網(wǎng)絡(luò)從遠(yuǎn)處取得面部圖像的結(jié)構(gòu)。
[0151]此外，在實(shí)施方式的說明中，將面部中包含的器官設(shè)為追蹤區(qū)域，但追蹤的對象也可以是器官以外，也可以是面部圖像中設(shè)定的特征點(diǎn)等。只要能夠確認(rèn)被認(rèn)證者的面部持續(xù)存在，則追蹤的對象可以任意設(shè)定。
【主權(quán)項(xiàng)】
1.一種面部認(rèn)證裝置，其特征在于，具有: 面部圖像取得部件，連續(xù)取得用戶的面部圖像； 用戶識別部件，基于所述面部圖像取得部件取得的第一面部圖像來識別所述用戶；參數(shù)取得部件，基于所述面部圖像取得部件取得的第二面部圖像，取得與所述用戶的表情或者面部的朝向相關(guān)聯(lián)的參數(shù)即面部參數(shù)； 追蹤部件，提取所述第一面部圖像中包含的面部的一部分的區(qū)域，在連續(xù)取得的多個(gè)面部圖像間追蹤該區(qū)域；以及 認(rèn)證部件，在所述用戶識別部件進(jìn)行了識別的用戶是被注冊的用戶、且所述取得的面部參數(shù)滿足規(guī)定的條件、且在所述多個(gè)面部圖像間能夠連續(xù)追蹤到所述提取的區(qū)域的情況下，判斷為認(rèn)證成功。2.如權(quán)利要求1所述的面部認(rèn)證裝置，其特征在于， 所述面部圖像取得部件在所述第一面部圖像的取得定時(shí)和所述第二面部圖像的取得定時(shí)之間，進(jìn)一步取得一個(gè)以上的中間面部圖像， 所述追蹤部件進(jìn)一步使用所述中間面部圖像來追蹤所述提取的區(qū)域。3.如權(quán)利要求1或2所述的面部認(rèn)證裝置，其特征在于， 所述第二面部圖像由在不同的定時(shí)取得的多個(gè)面部圖像構(gòu)成， 所述參數(shù)取得部件進(jìn)一步取得與該多個(gè)面部圖像分別對應(yīng)的多個(gè)面部參數(shù)， 所述認(rèn)證部件在所述取得的多個(gè)面部參數(shù)滿足與各個(gè)面部參數(shù)對應(yīng)的規(guī)定的條件的情況下，判斷為認(rèn)證成功。4.如權(quán)利要求1至3的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述面部參數(shù)是將用戶的表情數(shù)值化后的參數(shù)。5.如權(quán)利要求1至3的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述面部參數(shù)是將用戶的面部的朝向數(shù)值化后的參數(shù)。6.如權(quán)利要求1至5的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述認(rèn)證部件進(jìn)一步取得所述面部參數(shù)的每單位時(shí)間的變化量，在所述變化量比規(guī)定的值大的情況下，中斷認(rèn)證處理。7.如權(quán)利要求1至6的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述追蹤部件進(jìn)一步取得追蹤對象的區(qū)域的每單位時(shí)間的移動量，在所述移動量比規(guī)定的值大的情況下，判斷為追蹤失敗。8.如權(quán)利要求1至7的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述認(rèn)證部件在規(guī)定的時(shí)間內(nèi)沒有完成認(rèn)證處理的情況下，中斷認(rèn)證處理。9.如權(quán)利要求1至8的任一項(xiàng)所述的面部認(rèn)證裝置，其特征在于， 所述追蹤部件在對所述提取的區(qū)域進(jìn)行追蹤時(shí)，僅將處于該區(qū)域的附近的規(guī)定的范圍作為對象來進(jìn)行追蹤。10.一種面部認(rèn)證方法，由面部認(rèn)證裝置進(jìn)行，其特征在于，包含: 面部圖像取得步驟，連續(xù)取得用戶的面部圖像； 面部認(rèn)證步驟，基于所取得的第一面部圖像來識別所述用戶； 參數(shù)取得步驟，基于所取得的第二面部圖像，取得與所述用戶的表情或者面部的朝向相關(guān)聯(lián)的參數(shù)即面部參數(shù)； 追蹤步驟，提取所述第一面部圖像中包含的面部的一部分的區(qū)域，在連續(xù)取得的多個(gè)面部圖像間追蹤該區(qū)域；以及 認(rèn)證步驟，在所述面部認(rèn)證步驟中進(jìn)行了識別的用戶是被注冊的用戶、且所述取得的面部參數(shù)滿足規(guī)定的條件、且在所述多個(gè)面部圖像間能夠連續(xù)追蹤到所述提取的區(qū)域的情況下，判斷為認(rèn)證成功。11.一種程序，使計(jì)算機(jī)執(zhí)行權(quán)利要求10所述的面部認(rèn)證方法的各步驟。
【專利摘要】本發(fā)明涉及面部認(rèn)證裝置以及面部認(rèn)證方法。以較低的處理成本來進(jìn)行可靠性高的面部認(rèn)證。具有：面部圖像取得部件，連續(xù)取得用戶的面部圖像；用戶識別部件，基于所述面部圖像取得部件取得的第一面部圖像來識別所述用戶；參數(shù)取得部件，基于所述面部圖像取得部件取得的第二面部圖像，取得與所述用戶的表情或者面部的朝向相關(guān)聯(lián)的參數(shù)即面部參數(shù)；追蹤部件，提取所述第一面部圖像中包含的面部的一部分的區(qū)域，在連續(xù)取得的多個(gè)面部圖像間追蹤該區(qū)域；以及認(rèn)證部件，在所述用戶識別部件進(jìn)行了識別的用戶是被注冊的用戶、且所述取得的面部參數(shù)滿足規(guī)定的條件、且在所述多個(gè)面部圖像間能夠連續(xù)追蹤到所述提取的區(qū)域的情況下，判斷為認(rèn)證成功。
【IPC分類】G06K9/00
【公開號】CN105279479
【申請?zhí)枴緾N201510288633
【發(fā)明人】松永純平, 入江淳
【申請人】歐姆龍株式會社
【公開日】2016年1月27日
【申請日】2015年5月29日
【公告號】EP2960828A1, US20150379332