專利名稱：信息處理設(shè)備、信息處理方法以及程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種信息處理設(shè)備、信息處理方法以及程序，并且特別地，涉及這樣的信息處理設(shè)備、信息處理方法以及程序其通過(guò)結(jié)合面部識(shí)別與通過(guò)在說(shuō)密碼時(shí)讀唇的說(shuō)話辨識(shí)(recognition)，提高個(gè)人認(rèn)證的準(zhǔn)確性。
背景技術(shù)：
近年來(lái)，圖像辨識(shí)技術(shù)已得到改進(jìn)。作為其一個(gè)領(lǐng)域的面部識(shí)別技術(shù)已達(dá)到實(shí)用水平，并且在例如用于控制進(jìn)入安全區(qū)域的鎖的認(rèn)證設(shè)備中使用。除面部識(shí)別技術(shù)之外，還通過(guò)例如獲得PIN(個(gè)人識(shí)別號(hào))號(hào)、密碼等的輸入、或增加ID(身份)卡認(rèn)證(例如，日本未審查專利申請(qǐng)公布第2009-25擬69號(hào))、或增加通過(guò)對(duì)說(shuō)出的密碼的聲音辨識(shí)的驗(yàn)證(例如，日本未審查專利申請(qǐng)公布第9-179583號(hào))，提出提高安全水平的建議。

發(fā)明內(nèi)容
如上所述，通過(guò)一起使用面部識(shí)別技術(shù)與附加的認(rèn)證技術(shù)(例如，PIN號(hào)或密碼的輸入、ID卡的出示、或密碼的聲音辨識(shí))，可以提高安全水平。然而，PIN號(hào)或密碼的輸入涉及諸如鍵盤的輸入設(shè)備，并且增加ID卡的出示涉及讀取器設(shè)備。另外，對(duì)說(shuō)出的密碼的聲音辨識(shí)不但涉及諸如擴(kuò)音器的聲音輸入設(shè)備，而且涉及由于說(shuō)出的密碼被聽(tīng)到而導(dǎo)致的泄露的風(fēng)險(xiǎn)。因此，期望在無(wú)需提供除成像單元之外的輸入設(shè)備的情況下，提供比僅使用面部識(shí)別技術(shù)時(shí)的安全水平高的安全水平。根據(jù)本發(fā)明的實(shí)施例的信息處理設(shè)備基于通過(guò)對(duì)象者(object person)的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證，該信息處理設(shè)備包括成像裝置，其用于對(duì)對(duì)象者和登記者之一執(zhí)行成像以生成視頻信號(hào)；第一特征量計(jì)算裝置，其用于在登記模式下，計(jì)算視頻信號(hào)的圖像中的登記者的面部的特征量，其中，該視頻信號(hào)是通過(guò)登記者的成像而獲得的；第二特征量計(jì)算裝置，其用于在登記模式下，計(jì)算視頻信號(hào)的圖像中的登記者的唇部的時(shí)間序列特征量，其中，該視頻信號(hào)是通過(guò)說(shuō)任意密碼的登記者的成像而獲得的；登記裝置，其用于將所計(jì)算出的說(shuō)任意密碼時(shí)的唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的登記者的面部的特征量相關(guān)聯(lián)；識(shí)別裝置，其用于在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的面部的特征量，參照數(shù)據(jù)庫(kù)，并且識(shí)別對(duì)象者的面部，其中，該視頻信號(hào)是通過(guò)對(duì)象者的成像而獲得的；辨識(shí)裝置，其用于在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的對(duì)象者的唇部的時(shí)間序列特征量，參照數(shù)據(jù)庫(kù)，并且辨識(shí)對(duì)象者的說(shuō)話內(nèi)容，其中，該視頻信號(hào)是通過(guò)正說(shuō)話的對(duì)象者的成像而獲得的；以及認(rèn)證裝置，其用于基于對(duì)象者的面部的識(shí)別結(jié)果和對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行對(duì)象者的個(gè)人認(rèn)證。辨識(shí)裝置可基于所計(jì)算出的對(duì)象者的唇部的時(shí)間序列特征量是否與已登記在數(shù)據(jù)庫(kù)中的、登記者說(shuō)任意密碼時(shí)的唇部的時(shí)間序列特征量匹配，辨識(shí)對(duì)象者的說(shuō)話內(nèi)容。辨識(shí)裝置可進(jìn)一步在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的登記者的唇部的時(shí)間序列特征量，參照數(shù)據(jù)庫(kù)，并且辨識(shí)登記者的說(shuō)話內(nèi)容，其中該視頻信號(hào)是通過(guò)正說(shuō)話的登記者的成像而獲得的。根據(jù)本發(fā)明的實(shí)施例的信息處理設(shè)備還可包括模式切換裝置，其用于根據(jù)所辨識(shí)出的登記者的說(shuō)話內(nèi)容，從認(rèn)證模式切換到登記模式。第一特征量計(jì)算裝置可在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的面部的特征量，其中該視頻信號(hào)是通過(guò)正說(shuō)話的登記者的成像而獲得的。識(shí)別裝置可在認(rèn)證模式下計(jì)算視頻信號(hào)的圖像中的面部的特征量，參照數(shù)據(jù)庫(kù)，并且識(shí)別對(duì)象者的面部，其中，該視頻信號(hào)是通過(guò)正說(shuō)話的對(duì)象者的成像而獲得的。根據(jù)本發(fā)明的另一實(shí)施例，由基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證的信息處理設(shè)備執(zhí)行的信息處理方法包括以下步驟第一特征量計(jì)算步驟，其在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的面部的特征量，其中，該視頻信號(hào)是通過(guò)登記者的成像而獲得的；第二特征量計(jì)算步驟，其在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的唇部的時(shí)間序列特征量，其中，該視頻信號(hào)是通過(guò)說(shuō)任意密碼的登記者的成像而獲得的；登記步驟，其將所計(jì)算出的說(shuō)任意密碼時(shí)的唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的登記者的面部的特征量相關(guān)聯(lián)；識(shí)別步驟，其在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的面部的特征量，參照數(shù)據(jù)庫(kù)，并且識(shí)別對(duì)象者的面部，其中，該視頻信號(hào)是通過(guò)對(duì)象者的成像而獲得的；辨識(shí)步驟，其在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的對(duì)象者的唇部的時(shí)間序列特征量，參照數(shù)據(jù)庫(kù)，并且辨識(shí)對(duì)象者的說(shuō)話內(nèi)容，其中，該視頻信號(hào)是通過(guò)正說(shuō)話的對(duì)象者的成像而獲得的；以及認(rèn)證步驟，其基于對(duì)象者的面部的識(shí)別結(jié)果和對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行對(duì)象者的個(gè)人認(rèn)證。根據(jù)本發(fā)明的又一實(shí)施例，用于控制信息處理設(shè)備的程序使得該信息處理設(shè)備的計(jì)算機(jī)執(zhí)行包括以下步驟的處理，其中，該信息處理設(shè)備基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證第一特征量計(jì)算步驟，其在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的面部的特征量，其中，該視頻信號(hào)是通過(guò)登記者的成像而獲得的；第二特征量計(jì)算步驟，其在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的唇部的時(shí)間序列特征量，其中， 該視頻信號(hào)是通過(guò)說(shuō)任意密碼的登記者的成像而獲得的；登記步驟，其將所計(jì)算出的說(shuō)任意密碼時(shí)的唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的登記者的面部的特征量相關(guān)聯(lián)；識(shí)別步驟，其在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的面部的特征量，參照數(shù)據(jù)庫(kù)，并且識(shí)別對(duì)象者的面部，其中，該視頻信號(hào)是通過(guò)對(duì)象者的成像而獲得的；辨識(shí)步驟，其在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的對(duì)象者的唇部的時(shí)間序列特征量，參照數(shù)據(jù)庫(kù)，并且辨識(shí)對(duì)象者的說(shuō)話內(nèi)容，其中，該視頻信號(hào)是通過(guò)正說(shuō)話的對(duì)象者的成像而獲得的；以及認(rèn)證步驟，其基于對(duì)象者的面部的識(shí)別結(jié)果和對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行對(duì)象者的個(gè)人認(rèn)證。根據(jù)本發(fā)明的實(shí)施例，在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的面部的特征量，其中，該視頻信號(hào)通過(guò)登記者的成像而獲得的；在登記模式下計(jì)算視頻信號(hào)的圖像中的登記者的唇部的時(shí)間序列特征量，其中，該視頻信號(hào)是通過(guò)說(shuō)任意密碼的登記者的成像而獲得的；并且將所計(jì)算出的說(shuō)任意密碼時(shí)的唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的登記者的面部的特征量相關(guān)聯(lián)。另外，在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的面部的特征量，參照數(shù)據(jù)庫(kù)，并識(shí)別對(duì)象者的面部，其中，該視頻信號(hào)是通過(guò)對(duì)象者的成像而獲得的；并且在認(rèn)證模式下，計(jì)算視頻信號(hào)的圖像中的對(duì)象者的唇部的時(shí)間序列特征量，參照數(shù)據(jù)庫(kù)，并且辨識(shí)對(duì)象者的說(shuō)話內(nèi)容其中，該視頻信號(hào)是通過(guò)正說(shuō)話的對(duì)象者的成像而獲得的。然后，基于對(duì)象者的面部的識(shí)別結(jié)果和對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行對(duì)象者的個(gè)人認(rèn)證。根據(jù)本發(fā)明的實(shí)施例，可以在無(wú)需提供除成像單元之外的輸入設(shè)備的情況下，提供比僅使用面部識(shí)別技術(shù)時(shí)的安全水平高的安全水平。


圖1是示出根據(jù)本發(fā)明實(shí)施例的個(gè)人認(rèn)證/開(kāi)鎖設(shè)備的配置示例的框圖；圖2是示出個(gè)人認(rèn)證處理的流程圖；圖3是示出面部登記處理的流程圖；圖4是示出說(shuō)話登記處理的流程圖；以及圖5是示出計(jì)算機(jī)的配置示例的框圖。
具體實(shí)施例方式以下將參照附圖詳細(xì)描述用于實(shí)施本發(fā)明的最好模式(以下稱為實(shí)施例)。<1.實(shí)施例 >[個(gè)人認(rèn)證/開(kāi)鎖設(shè)備的配置示例]圖1示出了根據(jù)本發(fā)明實(shí)施例的個(gè)人認(rèn)證/開(kāi)鎖設(shè)備的配置示例。該個(gè)人認(rèn)證/ 開(kāi)鎖設(shè)備10通過(guò)對(duì)對(duì)象者的面部進(jìn)行成像來(lái)執(zhí)行面部識(shí)別，基于對(duì)象者的唇動(dòng)而辨識(shí)說(shuō)出的密碼，并且基于面部識(shí)別的結(jié)果和密碼的辨識(shí)結(jié)果來(lái)執(zhí)行個(gè)人認(rèn)征。然后，根據(jù)認(rèn)證結(jié)果，個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10例如對(duì)用于進(jìn)入安全區(qū)域的門進(jìn)行開(kāi)鎖。注意，對(duì)象者以與說(shuō)密碼時(shí)類似的方式、在無(wú)需實(shí)際話音(voice)的無(wú)聲狀態(tài)下動(dòng)唇部。因此，可以防止由于密碼被聽(tīng)到而導(dǎo)致的泄露。在以下描述中，說(shuō)話指的是如上所述在無(wú)聲狀態(tài)下動(dòng)唇部。注意，還可以通過(guò)具有話音的說(shuō)話來(lái)辨識(shí)密碼。然而，在該情況下，顯然不能防止由于話音被聽(tīng)到而導(dǎo)致的密碼泄
Mo個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10包括控制單元11、成像單元12、圖像處理單元13、顯示控制單元14、顯示器15以及開(kāi)鎖單元16?？刂茊卧?1控制整個(gè)個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10。具體地，控制單元11基于從圖像處理單元13輸入的說(shuō)話辨識(shí)結(jié)果，設(shè)置圖像處理單元13的操作模式(即，登記模式或認(rèn)證模式)。另外，控制單元11生成用于警報(bào)顯示的圖像信號(hào)，將該圖像信號(hào)輸出至顯示控制單元14，并且使得顯示器15顯示警報(bào)顯示。此外，控制單元11基于從圖像處理單元13輸入的面部識(shí)別結(jié)果和說(shuō)話內(nèi)容來(lái)確定個(gè)人認(rèn)證的成功或失敗，并且向開(kāi)鎖單元16通知個(gè)人認(rèn)證結(jié)果(即，成功或失敗)。注意，可設(shè)置用于用戶指示切換圖像處理單元13的操作模式(即，登記模式或認(rèn)證模式)的開(kāi)關(guān)等，以根據(jù)用戶對(duì)開(kāi)關(guān)的操作，設(shè)置圖像處理單元13的操作模式。由能夠?qū)\(yùn)動(dòng)圖像進(jìn)行成像的數(shù)字?jǐn)z像機(jī)等構(gòu)成的成像單元12對(duì)說(shuō)密碼的對(duì)象者執(zhí)行成像，并且將作為結(jié)果獲得的視頻信號(hào)輸出至圖像處理單元13和顯示控制單元14。圖像處理單元13包括面部區(qū)域檢測(cè)單元21、面部登記單元22、說(shuō)話登記單元23、 特征量數(shù)據(jù)庫(kù)(DB) 24以及面部識(shí)別/說(shuō)話辨識(shí)單元25。圖像處理單元13在登記模式或認(rèn)證模式的狀態(tài)下操作。面部區(qū)域檢測(cè)單元21從由成像單元12輸入的視頻信號(hào)的圖像中檢測(cè)對(duì)象者的面部的區(qū)域(即，面部區(qū)域)。然后，面部區(qū)域檢測(cè)單元21在登記模式下將所檢測(cè)到的面部區(qū)域輸出至面部登記單元22和說(shuō)話登記單元23，或者在認(rèn)證模式下將所檢測(cè)到的面部區(qū)域輸出至面部識(shí)別/說(shuō)話辨識(shí)單元25。另外，當(dāng)從由成像單元12輸入的視頻信號(hào)的圖像中沒(méi)有檢測(cè)到人的面部或者檢測(cè)到不止一個(gè)面部時(shí)，面部區(qū)域檢測(cè)單元21相應(yīng)地通知控制單元Ilo在登記模式下，面部登記單元22基于從面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域來(lái)計(jì)算特征量，并且將該特征量登記在特征量DB M中。任何可用的方法均可被應(yīng)用為計(jì)算面部的特征量的方法。一個(gè)示例是已由本發(fā)明的申請(qǐng)人提出的方法(如日本未審查專利申請(qǐng)公布第2009-53916號(hào)所公布)。具體地，總之，預(yù)先用預(yù)定方法分別計(jì)算準(zhǔn)備的X個(gè)人的面部圖像的特征量，并且計(jì)算表示登記者的面部相對(duì)于X個(gè)人的每個(gè)面部的相似度的值， 由此計(jì)算X維的特征量。此外，還存在將X維的特征量壓縮成更少維度的方法?；趶拿娌繀^(qū)域檢測(cè)單元21輸入的面部區(qū)域，說(shuō)話登記單元23檢測(cè)說(shuō)密碼時(shí)的唇部，計(jì)算唇動(dòng)的特征量(即，時(shí)間序列特征量)，并且將該特征量登記在特征量DB M中， 以與面部的特征量相關(guān)聯(lián)。任何可用的方法均可被應(yīng)用為計(jì)算唇動(dòng)的特征量的方法。一個(gè)示例是已由本發(fā)明的申請(qǐng)人提出的方法(即，日本專利申請(qǐng)第2009-1M924號(hào))。具體地， 總之，學(xué)習(xí)說(shuō)出的聲音與唇部的形狀(視位)之間的關(guān)聯(lián)，并且獲得登記者說(shuō)密碼時(shí)的唇動(dòng)的特征量作為視位的時(shí)間序列變化。被登記在特征量DB 24中的是所登記的對(duì)象者的面部的特征量和與其相關(guān)聯(lián)的、 說(shuō)話者(即，所登記的對(duì)象者)說(shuō)密碼時(shí)的唇部的時(shí)間序列特征量。此外，登記在特征量DB 24中的還有通過(guò)預(yù)先學(xué)習(xí)獲得的、非特定說(shuō)話者說(shuō)出用于指示登記的命令(“登記”、“登記面部”、或“登記密碼”)時(shí)的唇部的時(shí)間序列特征量。在認(rèn)證模式下，面部識(shí)別/說(shuō)話辨識(shí)單元25以與面部登記單元22類似的方式，基于從面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域計(jì)算特征量，并且通過(guò)參照特征量DB M來(lái)確定對(duì)象者的面部是否已被登記。另外，在認(rèn)證模式下，面部識(shí)別/說(shuō)話辨識(shí)單元25以與說(shuō)話登記單元23類似的方式，基于從面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域中的唇動(dòng)來(lái)計(jì)算對(duì)象者正說(shuō)話時(shí)的唇部的時(shí)間序列特征量，并且通過(guò)參照特征量DB M來(lái)辨識(shí)說(shuō)話內(nèi)容。然后，面部識(shí)別/說(shuō)話辨識(shí)單元25向控制單元11通知面部識(shí)別結(jié)果和說(shuō)話辨識(shí)結(jié)果(即，說(shuō)話內(nèi)容)。顯示控制單元14將從控制單元11適當(dāng)輸入的用于警報(bào)顯示的圖像信號(hào)疊加在從成像單元12輸入的視頻信號(hào)上，并且將該視頻信號(hào)提供給顯示器15。顯示器15基于從顯示控制單元14輸入的視頻信號(hào)顯示圖像。對(duì)象者在查看并調(diào)整顯示器15中所顯示的他/ 她的面部的位置的同時(shí)，說(shuō)預(yù)定命令或密碼。開(kāi)鎖單元16例如在由控制單元11通知個(gè)人認(rèn)證成功時(shí)對(duì)到安全區(qū)域的門進(jìn)行開(kāi)鎖。
[關(guān)于操作的描述]接下來(lái)，通過(guò)例如在對(duì)已完成他/她的面部和密碼的登記的對(duì)象者進(jìn)行認(rèn)證時(shí)開(kāi)鎖的情況，描述個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10的操作。圖2是示出通過(guò)個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10 進(jìn)行的個(gè)人認(rèn)證處理的流程圖。該個(gè)人認(rèn)證處理在個(gè)人認(rèn)證/開(kāi)鎖設(shè)備10的電源接通時(shí)開(kāi)始，并且此后繼續(xù)被執(zhí)行，直到電源斷開(kāi)為止。在步驟Sl中，控制單元11將圖像處理單元13設(shè)置為登記模式。成像單元12開(kāi)始進(jìn)行成像，并且將作為結(jié)果所獲得的視頻信號(hào)輸出至圖像處理單元13和顯示控制單元 14。顯示控制單元14使得顯示器15顯示從成像單元12輸入的視頻信號(hào)的圖像。面部區(qū)域檢測(cè)單元21監(jiān)視正從成像單元12連續(xù)輸入的視頻信號(hào)，并且確定是否從圖像僅檢測(cè)到人(即，對(duì)象者)的一個(gè)面部。當(dāng)在步驟Sl中沒(méi)有檢測(cè)到人的面部或者檢測(cè)到不止一個(gè)面部時(shí)，處理進(jìn)行到步驟S2。在步驟S2中，控制單元11例如生成用于警報(bào)顯示(諸如，“請(qǐng)僅顯現(xiàn)一個(gè)人”)的圖像信號(hào)，并且將該圖像信號(hào)輸出至顯示控制單元14。顯示控制單元14將該警報(bào)顯示疊加在來(lái)自成像單元12的視頻信號(hào)上，并且使得顯示器15顯示該圖像。這里，當(dāng)未登記的對(duì)象者進(jìn)入成像單元12的成像范圍時(shí)，他/她的面部的檢測(cè)使得處理從步驟Sl進(jìn)行到步驟S3。在步驟S3中，面部區(qū)域檢測(cè)單元21將從來(lái)自成像單元12的視頻信號(hào)檢測(cè)到的對(duì)象者的面部區(qū)域輸出至面部識(shí)別/說(shuō)話辨識(shí)單元25。面部識(shí)別/說(shuō)話辨識(shí)單元25計(jì)算面部區(qū)域內(nèi)的唇部的時(shí)間序列特征量，并且通過(guò)參照特征量DB M來(lái)辨識(shí)說(shuō)話內(nèi)容。注意，對(duì)于在該階段對(duì)說(shuō)話內(nèi)容的辨識(shí)，達(dá)到可區(qū)分用于指示登記的命令(“登記”、“登記面部”、或 “登記密碼”)的程度的準(zhǔn)確性是足夠的(即，準(zhǔn)確性可低于稍后描述的步驟S5中的說(shuō)話辨識(shí)的準(zhǔn)確性)。然后，面部識(shí)別/說(shuō)話辨識(shí)單元25向控制單元11通知說(shuō)話辨識(shí)結(jié)果(即， 說(shuō)話內(nèi)容)。在步驟S4中，控制單元11確定對(duì)象者的說(shuō)話內(nèi)容是否是用于指示登記的命令 (“登記”、“登記面部”、或“登記密碼”)。當(dāng)確定是用于指示登記的命令時(shí)，處理進(jìn)行到步驟S9。另一方面，當(dāng)確定不是用于指示登記的命令時(shí)，處理進(jìn)行到步驟S5?，F(xiàn)在，對(duì)象者既沒(méi)有說(shuō)命令也沒(méi)有說(shuō)密碼，因此處理進(jìn)行到步驟S5。在步驟S5中，面部識(shí)別/說(shuō)話辨識(shí)單元25計(jì)算從面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域的特征量，并且通過(guò)參照特征量DB M來(lái)確定對(duì)象者的面部是否已經(jīng)被登記。注意， 可根據(jù)運(yùn)動(dòng)圖像的一幀計(jì)算面部區(qū)域的特征量，或者根據(jù)若干幀計(jì)算面部區(qū)域的特征量來(lái)作為時(shí)間序列特征量。此外，面部識(shí)別/說(shuō)話辨識(shí)單元25計(jì)算面部區(qū)域中的唇部的時(shí)間序列特征量，并且通過(guò)參照特征量DB M來(lái)確定是否存在和與面部識(shí)別結(jié)果中的面部相關(guān)聯(lián)的特征量的匹配(即，差值是否小于或等于預(yù)定閾值)。也就是說(shuō)，確定說(shuō)出的密碼是否和與所登記的面部相關(guān)聯(lián)的密碼匹配。然后，面部識(shí)別/說(shuō)話辨識(shí)單元25向控制單元11通知面部識(shí)別結(jié)果和說(shuō)話辨識(shí)結(jié)果(在這種情況下，關(guān)于密碼是否匹配的信息)。在步驟S6中，控制單元11綜合由面部識(shí)別/說(shuō)話辨識(shí)單元25通知的面部識(shí)別結(jié)果和說(shuō)話辨識(shí)結(jié)果，并且在步驟S7中確定個(gè)人認(rèn)證是否已成功。具體地，僅當(dāng)在面部標(biāo)識(shí)結(jié)果中確定面部已經(jīng)被登記并且說(shuō)話辨識(shí)結(jié)果和與所登記的面部相關(guān)聯(lián)的密碼匹配時(shí)確定個(gè)人認(rèn)證成功時(shí)，處理進(jìn)行到步驟S18。否則，處理進(jìn)行到步驟S8?，F(xiàn)在，對(duì)象者是未被登記的并且說(shuō)話內(nèi)容是未知的(即，沒(méi)有說(shuō)話)。因此，確定個(gè)人認(rèn)證失敗，并且處理進(jìn)行到步驟S8。在步驟S8中，控制單元11例如生成用于警報(bào)顯示 (諸如，“個(gè)人認(rèn)證失敗”)的圖像信號(hào)，并且將該圖像信號(hào)輸出至顯示控制單元14。顯示控制單元14將該警報(bào)顯示疊加在來(lái)自成像單元12的視頻信號(hào)上，并且使得顯示器15顯示該圖像。然后，處理返回至步驟Si，并且重復(fù)隨后的步驟。如果再次在步驟Sl中對(duì)象者還未從成像范圍移動(dòng)，則處理進(jìn)行到步驟S3。這里， 如果未登記的對(duì)象者說(shuō)出用于指示登記的命令(例如，“登記面部”)，則辨識(shí)說(shuō)話內(nèi)容。然后，經(jīng)過(guò)步驟S4，處理進(jìn)行到步驟S9。在步驟S9中，控制單元11將圖像處理單元13設(shè)置為登記模式。此外，控制單元 11確定對(duì)象者(或者登記者)的說(shuō)話內(nèi)容是否是“登記面部”，并且在“登記面部”的情況下處理進(jìn)行到步驟S10。注意，當(dāng)?shù)怯浾叩恼f(shuō)話內(nèi)容不是“登記面部”時(shí)，處理進(jìn)行到步驟S12?，F(xiàn)在，應(yīng)該將說(shuō)話內(nèi)容辨識(shí)為“登記面部”，并且因此，處理進(jìn)行到步驟S10。在步驟SlO中，面部區(qū)域檢測(cè)單元21將從來(lái)自成像單元12的視頻信號(hào)檢測(cè)到的對(duì)象者的面部區(qū)域輸出至面部登記單元22。面部登記單元22基于從面部區(qū)域檢測(cè)單元21 輸入的面部區(qū)域，計(jì)算特征量。此時(shí)，可使得顯示器15例如顯示諸如“請(qǐng)摘下您的眼鏡”或 “請(qǐng)面向正面(或者轉(zhuǎn)向右方或左方)”的警報(bào)顯示。在步驟Sll中，面部登記單元22將所計(jì)算出的面部的特征量登記在特征量DB M中。詳細(xì)描述步驟SlO和Sll中的處理(以下稱為面部登記處理)。圖3是示出面部登記處理的流程圖。在步驟S31中，面部登記單元22從由面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域中檢測(cè)面部的每個(gè)部分(即，眉毛、眼睛、鼻子、嘴等)。接下來(lái)，在步驟S32中，基于所檢測(cè)到的每個(gè)部分的位置，調(diào)整整個(gè)面部的位置或方向。在步驟S33中，再次剪切面部區(qū)域以包括在調(diào)整后的位置或方向上的整個(gè)面部，并且在步驟S34中，計(jì)算特征量并且將其輸出至特征量DBM。在步驟S35中，特征量DB M登記從面部登記單元22輸入的面部的特征量。在以上述方式登記面部(的特征量)之后，使得顯示器15例如顯示諸如“面部登記完成”的警報(bào)顯示，并且處理返回至圖2中的步驟Si。如果再次在步驟Sl中對(duì)象者還未從成像范圍移動(dòng)，則處理進(jìn)行到步驟S3。這里， 如果僅已經(jīng)登記面部的對(duì)象者(或登記者)說(shuō)出用于指示登記密碼的命令“登記密碼”，則辨識(shí)說(shuō)話內(nèi)容。然后，經(jīng)過(guò)步驟S4，處理進(jìn)行到步驟S9?，F(xiàn)在，登記者的說(shuō)話內(nèi)容不是“登記面部”，并且因此處理經(jīng)過(guò)步驟S9進(jìn)行到步驟 S12。在步驟S12中，控制單元11確定登記者的說(shuō)話內(nèi)容是否是“登記密碼”，并且在是 “登記密碼”的情況下處理進(jìn)行到步驟S13。注意，當(dāng)?shù)怯浾叩恼f(shuō)話內(nèi)容不是“登記密碼”時(shí) (即，當(dāng)說(shuō)話內(nèi)容是“登記”時(shí))，處理進(jìn)行到步驟S16?，F(xiàn)在，應(yīng)該將說(shuō)話內(nèi)容辨識(shí)為“登記密碼”，并且因此處理進(jìn)行到步驟S13。在步驟S13中，控制單元11例如使得顯示器15顯示諸如“請(qǐng)說(shuō)要登記的密碼”的警報(bào)顯示。如果對(duì)象者相應(yīng)地說(shuō)任意密碼，則拍攝圖像以將面部區(qū)域輸入至說(shuō)話登記單元23。在步驟S14中，說(shuō)話登記單元23基于所輸入的面部區(qū)域來(lái)檢測(cè)對(duì)象者在說(shuō)密碼時(shí)的唇部，并且計(jì)算運(yùn)動(dòng)的特征量(即，時(shí)間序列特征量)。此外，在步驟S15中，將所計(jì)算出的唇動(dòng)的特征量登記在特征量DB M中，以與在步驟Sll中登記的登記者的面部的特征量相關(guān)聯(lián)。詳細(xì)描述步驟S14和S15中的處理(以下稱為說(shuō)話登記處理)。圖4是示出說(shuō)話登記處理的流程圖。在步驟S41中，說(shuō)話登記單元23從由面部區(qū)域檢測(cè)單元21輸入的面部區(qū)域中檢測(cè)包括唇部的唇部區(qū)域，并且在步驟S42中，該說(shuō)話登記單元從面部區(qū)域中剪切唇部區(qū)域。 此外，在步驟S43中，從時(shí)間序列的唇部區(qū)域中剪切其中唇部正運(yùn)動(dòng)的說(shuō)話區(qū)間，并且在步驟S44中，計(jì)算說(shuō)話區(qū)間中的唇部區(qū)域的特征量并將其輸出至特征量DB 24。在步驟S45中， 特征量DB M登記從說(shuō)話登記單元23輸入的唇部的時(shí)間序列特征量，以與在步驟Sll中登記的面部的特征量相關(guān)聯(lián)。在以上述方式登記密碼(的時(shí)間序列特征量)之后，例如使得顯示器15顯示諸如 “密碼登記完成”的警報(bào)顯示，并且處理返回至圖2中的步驟Si。從該點(diǎn)起，由于對(duì)象者的面部和密碼已經(jīng)被登記，因此個(gè)人認(rèn)證可以通過(guò)說(shuō)出正確的密碼而成功。注意，雖然在上述示例中已描述了單獨(dú)進(jìn)行面部登記和密碼登記的情況，但是還可以一起執(zhí)行面部登記和密碼登記。在該情況下，在步驟S3的階段處，對(duì)象者說(shuō)出“登記” 作為用于指示登記的命令。因此，處理按照步驟S4、S9、S12以及S16的順序進(jìn)行。然后，在步驟S16和S17中，連續(xù)執(zhí)行或一起執(zhí)行上述面部登記處理和密碼登記處理。注意，當(dāng)在步驟S16和S17中一起執(zhí)行面部登記處理和密碼登記處理時(shí)，計(jì)算說(shuō)密碼時(shí)(即，唇部正在運(yùn)動(dòng)時(shí))的面部的特征量。以此方式，唇部正在運(yùn)動(dòng)時(shí)的面部的特征量與未正說(shuō)話時(shí)的面部的特征量相比，被認(rèn)為是更清楚地表示對(duì)象者的特征。因此，一起執(zhí)行面部登記處理和密碼登記處理與僅執(zhí)行面部登記處理時(shí)相比，被認(rèn)為是提高個(gè)人認(rèn)證的準(zhǔn)確性。再次返回至步驟Si，如果面部和密碼已經(jīng)被登記的對(duì)象者在成像單元12的成像范圍中說(shuō)出正確的密碼，則處理按照步驟Si、S4以及S5的順序進(jìn)行。在步驟S5中，計(jì)算對(duì)象者的面部的特征量以確定面部是否已經(jīng)被登記。現(xiàn)在，確定為已經(jīng)被登記。另外，計(jì)算說(shuō)話內(nèi)容(即，密碼)的時(shí)間序列特征量，以確定說(shuō)話內(nèi)容是否和已與所登記的面部相關(guān)聯(lián)地登記的說(shuō)話內(nèi)容匹配。現(xiàn)在，確定為匹配。現(xiàn)在，在步驟S6中，在面部識(shí)別結(jié)果中確定對(duì)象者為所登記的人，并且確定說(shuō)話辨識(shí)結(jié)果和與所登記的人相關(guān)聯(lián)的密碼匹配。因此，確定個(gè)人認(rèn)證成功，并且處理進(jìn)行到步驟 S18。在步驟S18中，控制單元11向開(kāi)鎖單元16通知個(gè)人認(rèn)證成功。因此，例如，開(kāi)鎖單元16對(duì)到安全區(qū)域的門進(jìn)行開(kāi)鎖。然后，暫時(shí)終止個(gè)人認(rèn)證處理。利用上述個(gè)人認(rèn)證處理，在無(wú)需提供除成像單元12之外的輸入設(shè)備的情況下，與僅執(zhí)行面部識(shí)別時(shí)相比，可以更高的準(zhǔn)確性執(zhí)行個(gè)人認(rèn)證。因此，只要可以捕獲面部，對(duì)象者即使雙手拿著行李等也可以通過(guò)個(gè)人認(rèn)證。
另外，由于說(shuō)密碼時(shí)的唇部的時(shí)間序列特征量與說(shuō)話者的面部的特征量相關(guān)聯(lián)， 因此，與僅將密碼辨識(shí)為字符串以確定其匹配時(shí)相比，可以更高的準(zhǔn)確性執(zhí)行個(gè)人認(rèn)證。此外，由于在無(wú)需實(shí)際話音的情況下說(shuō)密碼，因此可以防止通過(guò)竊聽(tīng)等泄露密碼。 另外，甚至可以在嘈雜環(huán)境中通過(guò)說(shuō)話來(lái)輸入密碼。另外，對(duì)象者(或登記者)可以將任意單詞或用字符串不能表示的聲音登記為密碼。注意，根據(jù)以上描述，知道用于指示登記的命令的任何人都可以登記他/她的面部和密碼。因此，例如，可彼此關(guān)聯(lián)地登記管理者的面部的特征量和管理者說(shuō)出用于指示登記的命令時(shí)的唇動(dòng)的時(shí)間序列特征量。然后，僅在登記時(shí)，管理者說(shuō)出用于指示登記的命令，然后，對(duì)象者(登記者)登記他/她的面部和密碼。注意，本發(fā)明的實(shí)施例不但可以應(yīng)用于如在該實(shí)施例中的開(kāi)鎖設(shè)備，而且可以應(yīng)用于根據(jù)個(gè)人認(rèn)證的成功或失敗來(lái)執(zhí)行預(yù)定處理的任何設(shè)備?？梢岳糜布?zhí)行或者可以利用軟件執(zhí)行上述處理序列。當(dāng)要利用軟件執(zhí)行處理序列時(shí)，從內(nèi)置于專用硬件的計(jì)算機(jī)、或通過(guò)安裝各種程序能夠執(zhí)行各種功能的例如通用個(gè)人計(jì)算機(jī)上的程序記錄介質(zhì)，安裝構(gòu)成軟件的程序。圖5是示出通過(guò)程序來(lái)執(zhí)行上述處理序列的計(jì)算機(jī)的硬件的配置示例的框圖。在該計(jì)算機(jī)100中，中央處理單元(CPU) 101、只讀存儲(chǔ)器(ROM) 102、隨機(jī)存取存儲(chǔ)器(RAM) 103以及總線104相互連接。總線104還與輸入-輸出接口 105連接。輸入-輸出接口 105與包括鍵盤、鼠標(biāo)以及擴(kuò)音器的輸入單元106、包括顯示器和揚(yáng)聲器的輸出單元107、包括硬盤或非易失性存儲(chǔ)器的存儲(chǔ)單元108、包括網(wǎng)絡(luò)接口的通信單元109以及驅(qū)動(dòng)可移動(dòng)介質(zhì)111 (諸如磁盤、光盤、磁光盤或半導(dǎo)體存儲(chǔ)器)的驅(qū)動(dòng)器110連接。在以上述方式配置的計(jì)算機(jī)100中，通過(guò)例如CPU 101經(jīng)由輸入-輸出接口 105 和總線104在RAM 103中裝載并執(zhí)行存儲(chǔ)在存儲(chǔ)單元108中的程序，來(lái)執(zhí)行上述處理序列。注意，由計(jì)算機(jī)執(zhí)行的程序可以是以該說(shuō)明書(shū)中描述的時(shí)間順序執(zhí)行處理的程序，或者可以是并行或在適當(dāng)?shù)亩〞r(shí)(諸如，在呼叫時(shí))執(zhí)行處理的程序。另外，程序可旨在用于利用一臺(tái)計(jì)算機(jī)的處理，并且可旨在用于利用不止一臺(tái)計(jì)算機(jī)的分布式處理。此外，程序可被傳遞到遠(yuǎn)程計(jì)算機(jī)并且可在其上執(zhí)行。本申請(qǐng)包含于2010年3月25日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP 2010-070495中公開(kāi)的主題內(nèi)容相關(guān)的主題內(nèi)容，在此通過(guò)引用將其全文合并于此。本領(lǐng)域的技術(shù)人員應(yīng)該理解，在所附權(quán)利要求或其等同方案的范圍內(nèi)，根據(jù)設(shè)計(jì)需要和其它因素，可進(jìn)行各種修改、組合、子組合以及變更。
權(quán)利要求
1.一種信息處理設(shè)備，其基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證， 所述信息處理設(shè)備包括成像裝置，其用于對(duì)所述對(duì)象者和登記者之一執(zhí)行成像以生成所述視頻信號(hào)； 第一特征量計(jì)算裝置，其用于在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的面部的特征量，其中，所述視頻信號(hào)是通過(guò)所述登記者的成像而獲得的；第二特征量計(jì)算裝置，其用于在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的唇部的時(shí)間序列特征量，其中，所述視頻信號(hào)是通過(guò)說(shuō)任意密碼的所述登記者的成像而獲得的；登記裝置，其用于將所計(jì)算出的說(shuō)所述任意密碼時(shí)的所述唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的所述登記者的所述面部的特征量相關(guān)聯(lián)；識(shí)別裝置，其用于在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的面部的特征量，參照所述數(shù)據(jù)庫(kù)，并且識(shí)別所述對(duì)象者的面部，其中，所述視頻信號(hào)是通過(guò)所述對(duì)象者的成像而獲得的；辨識(shí)裝置，其用于在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的所述對(duì)象者的唇部的時(shí)間序列特征量，參照所述數(shù)據(jù)庫(kù)，并且辨識(shí)所述對(duì)象者的說(shuō)話內(nèi)容，其中，所述視頻信號(hào)是通過(guò)正說(shuō)話的所述對(duì)象者的成像而獲得的；以及認(rèn)證裝置，其用于基于所述對(duì)象者的面部的識(shí)別結(jié)果和所述對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行所述對(duì)象者的個(gè)人認(rèn)證。
2.根據(jù)權(quán)利要求1所述的信息處理設(shè)備，其中，所述辨識(shí)裝置基于所計(jì)算出的所述對(duì)象者的唇部的時(shí)間序列特征量是否與已登記在所述數(shù)據(jù)庫(kù)中的、所述登記者說(shuō)任意密碼時(shí)的所述唇部的時(shí)間序列特征量匹配，辨識(shí)所述對(duì)象者的說(shuō)話內(nèi)容。
3.根據(jù)權(quán)利要求2所述的信息處理設(shè)備，還包括 模式切換裝置；其中，所述辨識(shí)裝置進(jìn)一步在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的所述登記者的唇部的時(shí)間序列特征量，參照所述數(shù)據(jù)庫(kù)，并且辨識(shí)所述登記者的說(shuō)話內(nèi)容，其中所述視頻信號(hào)是通過(guò)正說(shuō)話的所述登記者的成像而獲得的；并且其中，所述模式切換裝置根據(jù)所辨識(shí)出的所述登記者的說(shuō)話內(nèi)容，從所述認(rèn)證模式切換到所述登記模式。
4.根據(jù)權(quán)利要求2所述的信息處理設(shè)備，其中，所述第一特征量計(jì)算裝置在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的面部的特征量，其中所述視頻信號(hào)是通過(guò)正說(shuō)話的所述登記者的成像而獲得的，并且其中，所述識(shí)別裝置在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的面部的特征量，參照所述數(shù)據(jù)庫(kù)，并且識(shí)別所述對(duì)象者的面部，其中所述視頻信號(hào)是通過(guò)正說(shuō)話的所述對(duì)象者的成像而獲得的。
5.一種信息處理方法，其由基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證的信息處理設(shè)備執(zhí)行，所述方法包括以下步驟第一特征量計(jì)算步驟，其在登記模式下計(jì)算所述視頻信號(hào)的圖像中的登記者的面部的特征量，其中，所述視頻信號(hào)是通過(guò)所述登記者的成像而獲得的；第二特征量計(jì)算步驟，其在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的唇部的時(shí)間序列特征量，其中，所述視頻信號(hào)是通過(guò)說(shuō)任意密碼的所述登記者的成像而獲得的；登記步驟，其將所計(jì)算出的說(shuō)所述任意密碼時(shí)的所述唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的所述登記者的所述面部的特征量相關(guān)聯(lián)；識(shí)別步驟，其在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的面部的特征量，參照所述數(shù)據(jù)庫(kù)，并且識(shí)別所述對(duì)象者的面部，其中，所述視頻信號(hào)是通過(guò)所述對(duì)象者的成像而獲得的；辨識(shí)步驟，其在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的所述對(duì)象者的唇部的時(shí)間序列特征量，參照所述數(shù)據(jù)庫(kù)，并且辨識(shí)所述對(duì)象者的說(shuō)話內(nèi)容，其中，所述視頻信號(hào)是通過(guò)正說(shuō)話的所述對(duì)象者的成像而獲得的；以及認(rèn)證步驟，其基于所述對(duì)象者的面部的識(shí)別結(jié)果和所述對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行所述對(duì)象者的個(gè)人認(rèn)證。
6.一種用于控制信息處理設(shè)備的程序，其使得所述信息處理設(shè)備的計(jì)算機(jī)執(zhí)行包括以下步驟的處理，其中，所述信息處理設(shè)備基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證第一特征量計(jì)算步驟，其在登記模式下計(jì)算所述視頻信號(hào)的圖像中的登記者的面部的特征量，其中，所述視頻信號(hào)是通過(guò)所述登記者的成像而獲得的；第二特征量計(jì)算步驟，其在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的唇部的時(shí)間序列特征量，其中，所述視頻信號(hào)是通過(guò)說(shuō)任意密碼的所述登記者的成像而獲得的；登記步驟，其將所計(jì)算出的說(shuō)所述任意密碼時(shí)的所述唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的所述登記者的所述面部的特征量相關(guān)聯(lián)；識(shí)別步驟，其在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的面部的特征量，參照所述數(shù)據(jù)庫(kù)，并且識(shí)別所述對(duì)象者的面部，其中，所述視頻信號(hào)是通過(guò)所述對(duì)象者的成像而獲得的；辨識(shí)步驟，其在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的所述對(duì)象者的唇部的時(shí)間序列特征量，參照所述數(shù)據(jù)庫(kù)，并且辨識(shí)所述對(duì)象者的說(shuō)話內(nèi)容，其中，所述視頻信號(hào)是通過(guò)正說(shuō)話的所述對(duì)象者的成像而獲得的；以及認(rèn)證步驟，其基于所述對(duì)象者的面部的識(shí)別結(jié)果和所述對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行所述對(duì)象者的個(gè)人認(rèn)證。
7.一種信息處理設(shè)備，其基于通過(guò)對(duì)象者的成像而獲得的視頻信號(hào)來(lái)執(zhí)行個(gè)人認(rèn)證， 所述信息處理設(shè)備包括成像單元，其被配置成對(duì)所述對(duì)象者和登記者之一執(zhí)行成像以生成所述視頻信號(hào)； 第一特征量計(jì)算單元，其被配置成在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的面部的特征量，其中，所述視頻信號(hào)是通過(guò)所述登記者的成像而獲得的；第二特征量計(jì)算單元，其被配置成在登記模式下計(jì)算所述視頻信號(hào)的圖像中的所述登記者的唇部的時(shí)間序列特征量，其中，所述視頻信號(hào)是通過(guò)說(shuō)任意密碼的所述登記者的成像而獲得的；登記單元，其被配置成將所計(jì)算出的說(shuō)所述任意密碼時(shí)的所述唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與所計(jì)算出的所述登記者的所述面部的特征量相關(guān)聯(lián)；識(shí)別單元，其被配置成在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的面部的特征量，參照所述數(shù)據(jù)庫(kù)，并且識(shí)別所述對(duì)象者的面部，其中，所述視頻信號(hào)是通過(guò)所述對(duì)象者的成像而獲得的；辨識(shí)單元，其被配置成在認(rèn)證模式下，計(jì)算所述視頻信號(hào)的圖像中的所述對(duì)象者的唇部的時(shí)間序列特征量，參照所述數(shù)據(jù)庫(kù)，并且辨識(shí)所述對(duì)象者的說(shuō)話內(nèi)容，其中，所述視頻信號(hào)是通過(guò)正說(shuō)話的所述對(duì)象者的成像而獲得的；以及認(rèn)證單元，其被配置成基于所述對(duì)象者的面部的識(shí)別結(jié)果和所述對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行所述對(duì)象者的個(gè)人認(rèn)證。
全文摘要
本發(fā)明提供了一種信息處理設(shè)備、信息處理方法以及程序，其中，該信息處理設(shè)備包括成像單元，其被配置成對(duì)對(duì)象者和登記者之一執(zhí)行成像；第一特征量計(jì)算單元，其被配置成計(jì)算登記者的面部的特征量；第二特征量計(jì)算單元，其被配置成計(jì)算登記者的唇部的時(shí)間序列特征量；登記單元，其被配置成將唇部的時(shí)間序列特征量登記在數(shù)據(jù)庫(kù)中，以與登記者的面部的特征量相關(guān)聯(lián)；識(shí)別單元，其被配置成識(shí)別對(duì)象者的面部；辨識(shí)單元，其被配置成辨識(shí)對(duì)象者的說(shuō)話內(nèi)容；以及認(rèn)證單元，其被配置成基于面部的識(shí)別結(jié)果和對(duì)象者的說(shuō)話內(nèi)容的辨識(shí)結(jié)果，執(zhí)行對(duì)象者的個(gè)人認(rèn)證。
文檔編號(hào)G06F21/00GK102201055SQ201110069129
公開(kāi)日2011年9月28日 申請(qǐng)日期2011年3月18日 優(yōu)先權(quán)日2010年3月25日
發(fā)明者市川清人, 青山一美 申請(qǐng)人:索尼公司