專利名稱：信息處理裝置、非法者檢測方法和自動(dòng)提款機(jī)裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及根據(jù)使用者的處理要求進(jìn)行信息處理的終端裝置。尤其，本發(fā)明涉及自動(dòng)提款機(jī)裝置(ATM)。特別是涉及使用面部圖像的ATM的監(jiān)視方法。此外，涉及使用面部圖像識別控制ATM的處理內(nèi)容的方法。另外，還涉及能夠使用面部圖像識別來防止非法交易的技術(shù)。
背景技術(shù)：
近年來，在ATM中，利用盜用卡和偽造卡進(jìn)行現(xiàn)金的非法取出以及假鈔的使用增多了。這樣的社會環(huán)境下，以每個(gè)人固有的特征(生物信息)為基礎(chǔ)識別每個(gè)人的生物識別備受關(guān)注。作為識別對象，有手、手指的靜脈圖案、指紋、虹膜、面部等。
生物識別中有認(rèn)證和識別的2個(gè)使用方式。所謂認(rèn)證是判定“是否為本人”。即，確認(rèn)輸入的生物信息和與使用者ID對應(yīng)的系統(tǒng)內(nèi)的登錄信息之間的一一對應(yīng)關(guān)系。與此相對，識別是判定“這人是誰”。即，通過比較輸入的生物信息和系統(tǒng)內(nèi)多人的登錄信息來確認(rèn)一對N的對應(yīng)關(guān)系。
作為以罪犯搜查和抑制為目的、在ATM中裝載生物識別的公知例子，有專利文獻(xiàn)1。在專利文獻(xiàn)1中，驗(yàn)證卡上記錄的生物信息和ATM操作時(shí)輸入的生物信息，在二者不一致時(shí)將生物信息保存為目標(biāo)證據(jù)。在專利文獻(xiàn)1中，舉出將指紋作為生物信息的實(shí)施例。
作為生物識別的另外例子，有通過從照相機(jī)等輸入的面部圖像識別(面部圖像識別)。面部圖像識別與指紋識別等相比識別精度低，因此不適合于在ATM等個(gè)人識別中單獨(dú)使用。面部圖像識別多用于認(rèn)證而并非識別，出入管理、對計(jì)算機(jī)的登錄功能等是其主要應(yīng)用例子。面部圖像識別中也可望有抑制犯罪的效果。關(guān)于這一觀點(diǎn)的公知例子有專利文獻(xiàn)2。在專利文獻(xiàn)2中，在利用盜用卡的情況下取得面部圖像，發(fā)送到遠(yuǎn)處的監(jiān)視傳感器。
專利文獻(xiàn)1日本專利公開2003-196710號公報(bào)專利文獻(xiàn)2日本專利公開2002-207999號公報(bào)專利文獻(xiàn)3日本專利公開平8-272973號公報(bào)發(fā)明內(nèi)容本發(fā)明要解決的問題是通過在使用ATM時(shí)使用生物信息檢測嫌疑人來提高ATM使用的安全性。具體說，本發(fā)明的課題是，本來的卡使用者不需要事先登錄生物信息，而通過使用來自照相機(jī)的圖像信息進(jìn)行面部檢測或識別，就可檢測盜用卡或偽造卡的使用以及窺探密碼等非法行為，或者將其防患于未然。
更具體說，第1課題是檢測出ATM的非法交易慣犯。專利文獻(xiàn)1的方式是卡中記錄的生物信息與使用者的生物信息的一一驗(yàn)證。因此，出現(xiàn)的問題是如果使用者不預(yù)先登錄生物信息，則不能判定是否為本來的使用者。此外，卡中需要保存生物信息，因此存在盜得了卡，也盜得了生物信息的問題。
另一方面，進(jìn)行非法現(xiàn)金取出和假鈔使用的罪犯在短時(shí)間內(nèi)集中為同一人的情況很多。這種情況下，從過去的犯罪記錄和監(jiān)視照相機(jī)的圖像等可特定出犯人的面部，但肯定有不能分辨使用何種卡的狀況出現(xiàn)。因此，僅登錄犯人數(shù)多的犯人的生物信息，需要與使用者的生物信息進(jìn)行一對N的識別。專利文獻(xiàn)1的方式是認(rèn)證，因此不能用于該用途。
專利文獻(xiàn)2的方式中，僅在使用盜用卡時(shí)取得面部圖像，將圖像送到監(jiān)視中心。但是該方式下，如果作為盜用卡預(yù)先未被登錄，則不能檢測出罪犯，從而不能檢測出上述僅判明了面部的罪犯。
本發(fā)明中要解決的第2課題是檢測用多個(gè)卡進(jìn)行交易的人。這是因?yàn)楹芏嗲闆r下罪犯使用多個(gè)卡進(jìn)行交易。
針對該課題，專利文獻(xiàn)1的方式中，存在不預(yù)先登錄生物信息就不能進(jìn)行檢測的問題。專利文獻(xiàn)2的方式中，也是不作為盜用卡登錄就不能檢測。
本發(fā)明要解決的第3課題是檢測進(jìn)行密碼窺探等在他人使用ATM中進(jìn)行不合法的行為的人。
專利文獻(xiàn)1和專利文獻(xiàn)2中都以檢測出非法使用者為目的，但未關(guān)注于使用者周圍的嫌疑人，也不能檢測。
為解決這樣的課題而發(fā)明的第1信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從裝設(shè)在裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在面部區(qū)域的情況下，與預(yù)先登錄的面部信息進(jìn)行面部識別的處理；根據(jù)面部識別結(jié)果判定使用者是否為預(yù)先登錄的嫌疑人的處理；以及之后，如果為嫌疑人則執(zhí)行與嫌疑人對應(yīng)的處理。
此外，為解決這樣的課題，發(fā)明的第2信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從存儲使用者ID信息的存儲媒體得到該存儲媒體的合法使用者ID信息、從裝設(shè)在裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在面部區(qū)域的情況下，將面部信息和上述合法使用者的ID信息成對登錄的處理。
此外，為解決這樣的課題，發(fā)明的第3信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從裝設(shè)在裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在面部區(qū)域的情況下，與預(yù)先登錄的面部信息進(jìn)行面部識別的處理；根據(jù)面部識別結(jié)果判定是否同一人使用多個(gè)卡的處理；在同一人使用多個(gè)卡的情況下將其視為嫌疑人并進(jìn)行與嫌疑人對應(yīng)的處理。
此外，為解決這樣的課題，發(fā)明的第4信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從裝設(shè)在裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出交易中使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在該使用者的面部區(qū)域的情況下，判定該使用者后面有無該使用者以外的面部存在的處理；在有該使用者以外的面部存在的情況下，將其判定為窺探該使用者操作的嫌疑人并進(jìn)行與嫌疑人對應(yīng)的處理。
此外，為解決這樣的課題，發(fā)明的第5信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從裝設(shè)裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在面部區(qū)域的情況下、在判定為當(dāng)前使用中的交易的卡號被登錄為被窺探了的卡的情況下，對照與被窺探了的卡的卡號成對地被登錄的面部信息和使用者的面部信息的處理；在使用者被判斷為是過去曾窺探過該卡號卡交易的人之際，將其作為嫌疑人進(jìn)行對應(yīng)的處理。
此外，為解決這樣的課題，發(fā)明的第6信息處理裝置，在根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理方法中，其特征在于執(zhí)行如下處理從裝設(shè)在裝置上的照相機(jī)獲取使用者的面部圖像的處理；從圖像中檢測出使用者的面部區(qū)域的處理；判定圖像中有無面部區(qū)域的處理；在存在面部區(qū)域的情況下，與預(yù)先登錄的面部信息進(jìn)行面部識別的處理；根據(jù)識別結(jié)果判定使用者是否為預(yù)先被登錄的嫌疑人的處理；如果為嫌疑人則執(zhí)行對應(yīng)嫌疑人的處理；在面部區(qū)域存在的情況下，將面部信息和卡號成對登錄的處理；在面部區(qū)域存在的情況下，與預(yù)先被登錄的面部信息進(jìn)行面部識別的處理；根據(jù)面部識別結(jié)果判定是否同一人使用多個(gè)卡的處理；在同一人使用多個(gè)卡的情況下，將其視為嫌疑人并進(jìn)行對應(yīng)嫌疑人的處理；在面部區(qū)域存在的情況下，判定使用者后面是否有使用者以外的面部存在的處理；在有使用者以外的面部存在的情況下，將其視為窺探使用者操作的嫌疑人，執(zhí)行對應(yīng)嫌疑人的處理，在面部區(qū)域存在的情況下，當(dāng)前使用中的交易的卡號被登錄為被窺探的卡號的情況下，對照與被窺探的卡號成對地登錄的面部信息和使用者的面部信息的處理；在判斷為使用者是過去曾窺探過該卡號的卡交易的人的情況下，將其作為嫌疑人進(jìn)行對應(yīng)的處理。
發(fā)明效果本發(fā)明的效果是利用TAM時(shí)防止嫌疑人造成的安全性降低。更具體地說，本發(fā)明的第1效果是能夠在使用TAM時(shí)檢測出預(yù)先登錄面部圖像的罪犯。第2效果是能夠檢測出使用多個(gè)卡的人。這多是由于罪犯使用多個(gè)卡引起的。第3效果是能夠檢測出窺探他人密碼等的罪犯。第4效果是能夠檢測出窺探他人密碼等的人使用窺探到的卡密碼進(jìn)行的不合法交易。


圖1是表示第1實(shí)施例的嫌疑人檢測流程的圖；圖2是本發(fā)明的ATM的結(jié)構(gòu)圖；圖3是本發(fā)明的系統(tǒng)結(jié)構(gòu)圖；圖4是表示第1實(shí)施例的嫌疑人檢測和登錄流程圖；
圖5是表示第1實(shí)施例的嫌疑人檢測和紙幣鑒別閾值操作流程圖；圖6是表示第1實(shí)施例的嫌疑人檢測和交易停止流程圖；圖7是表示第1實(shí)施例的面部信息登錄流程圖；圖8是表示第1實(shí)施例的嫌疑人檢測流程圖；圖9是表示第3實(shí)施例的密碼窺探者檢測流程圖；圖10是表示第4實(shí)施例的密碼窺探者檢測流程圖；圖11是表示第5實(shí)施例的嫌疑人檢測流程圖；圖12是面部識別處理流程圖；圖13是表示面部檢測結(jié)果的例子的圖。
符號說明200 控制部210 顯示部220 操作部230 攝影部240 卡讀取部250 錢出入部260 存儲部270 通信部290 ATM裝置300 主計(jì)算機(jī)310 交易DB320 生物信息DB330 屬性信息DB340 網(wǎng)絡(luò)
具體實(shí)施例方式
下面為本發(fā)明的整體記述，提供幾個(gè)特定的具體例子。但是，本發(fā)明沒有這些特定的細(xì)節(jié)也能實(shí)用化，這一點(diǎn)對于本領(lǐng)域技術(shù)人員而言是不言自明的。本說明書的記述和附圖是本領(lǐng)域人員向其他領(lǐng)域人員公開發(fā)明內(nèi)容所使用的通常方式。此外，本說明書中，記述為“一實(shí)施例”的情況下，并非僅僅相當(dāng)于同一實(shí)施例，各個(gè)實(shí)施例不相互限定。還有，表示本發(fā)明實(shí)施例的處理作業(yè)順序不由例示限定。
首先，說明具體實(shí)施例之前，在圖2中表示出本發(fā)明的ATM裝置，在圖3中表示出系統(tǒng)結(jié)構(gòu)。
圖2是本發(fā)明的ATM290的結(jié)構(gòu)圖。控制部200控制顯示部210、操作部220、攝影部230、卡讀取部240、錢出入部250、存儲部260和通信部270?？刂撇?00不僅進(jìn)行ATM整體290的控制，還進(jìn)行面部識別、卡識別和紙幣鑒別等的處理。顯示部210顯示服務(wù)內(nèi)容引導(dǎo)和處理順序等，作為例子可舉出CRT和液晶顯示器。操作部220輸入菜單選擇和密碼輸入等來自使用者的信息，作為例子可舉出鍵盤和觸摸屏。攝影部230作為例子可舉出以面部圖像攝影為主要目的的照相機(jī)?？ㄗx取部240是用于讀出磁卡和IC卡上存儲的信息的。錢出入部250進(jìn)行用來存入的紙幣的投入、用來取出的紙幣的排出等的用于交易的紙幣的進(jìn)出。存儲部260存儲用于在ATM的處理的信息，作為例子可舉出硬盤和存儲器。為了實(shí)施本申請的發(fā)明，使攝影部230、控制部200、通信部270等動(dòng)作的程序被存儲在存儲部260中。通信部270通過線路進(jìn)行ATM290與外部的計(jì)算機(jī)和數(shù)據(jù)庫之間的通信。此外，由于與本發(fā)明無關(guān)而未作說明，但ATM290中除200到270以外還存在賬單打印機(jī)等其他裝置和處理。
卡是指用于存儲特定賬戶所需要的信息等的磁卡、IC卡等的存儲媒體?？ǖ暮戏ㄊ褂谜叩腎D信息是指該卡的賬戶的建立者或建立者認(rèn)定的其他使用者等的在識別中使用的密碼、面部圖像·指紋等生物信息等。此外，本發(fā)明的說明中所謂的交易中的使用者，是指除了從將卡插入ATM至接受卡返還的狀態(tài)下的使用者之外，還包含在非?？拷麬TM的位置處、可判斷為從該位置可使用的或可判斷為剛使用完的人。此外，交易中的使用者面部圖像和數(shù)據(jù)中存儲的面部信息除從照相機(jī)輸入的面部照片以外，還可以是從面部照片提取出特征部分或進(jìn)行模型化的信息。
圖3是本發(fā)明的基本系統(tǒng)結(jié)構(gòu)圖。ATM290經(jīng)由網(wǎng)絡(luò)340被連接在主計(jì)算機(jī)300、其他ATM、用于進(jìn)行取錢存錢等交易的交易DB(數(shù)據(jù)庫)310、存儲面部圖像和將面部圖像模型化的信息的生物信息DB320、以及存儲與個(gè)人的生物信息對應(yīng)的卡號和嫌疑人的等級劃分等的屬性信息的屬性信息DB330。此外，圖3中，生物信息DB320和屬性信息DB330也可不經(jīng)網(wǎng)絡(luò)分別安裝在ATM290內(nèi)。交易DB310中存儲的信息中包含卡的合法使用者的ID信息。生物信息DB和屬性信息DB也可以是稱為嫌疑人DB的總括的數(shù)據(jù)庫。
實(shí)施例1作為本發(fā)明的第1實(shí)施例，使用圖1和圖3到圖6來說明已經(jīng)登錄的嫌疑人的檢測的例子。圖像輸入處理100從被搭載在ATM上的照相機(jī)230輸入圖像。面部檢測處理110中，從圖像中檢測出面部區(qū)域。面部檢測處理110的細(xì)節(jié)在后面說明。面部檢測判定處理120中，未檢測出面部區(qū)域時(shí)，反復(fù)面部檢測處理。檢測出面部的情況下，在面部識別處理130中，識別出檢測出的面部能否與作為嫌疑人登錄的生物信息DB320中的面部相一致。關(guān)于面部識別處理130的細(xì)節(jié)使用圖12說明在后面說明。面部識別判定處理140中，使用者被判定為已經(jīng)登錄的嫌疑人時(shí)，進(jìn)行嫌疑人應(yīng)對處理150。關(guān)于嫌疑人應(yīng)對處理150的細(xì)節(jié)在后面說明。使用者被判定為并非嫌疑人時(shí)，進(jìn)行存入和取出等的通常交易160。通過嫌疑人應(yīng)對處理150的內(nèi)容，也可在嫌疑人應(yīng)對處理之后進(jìn)行通常交易160。
該處理流程中，尤其是從100、110、120的圖像輸入到面部檢測的一連串的處理設(shè)為170。此外，從130、140、150的面部識別到嫌疑人應(yīng)對的一連串的處理設(shè)為180。
此外，通常交易的開始是由卡插入或觸摸屏的操作來進(jìn)行的。用于嫌疑人檢測處理的圖像輸入100在通常交易開始之前、通常交易160開始之后均可。關(guān)于這一點(diǎn)，在以后的處理流程中也是同樣。
面部檢測和面部識別在圖1中僅是1次，但通過反復(fù)從100到150的處理可進(jìn)行多次。此外，通常交易期間也可進(jìn)行從100到150的處理。還有，也可以是沒有通常交易160的處理流程。即，檢測出ATM前面的人的情況下，不管有無通常交易都進(jìn)行嫌疑人判定。關(guān)于這3點(diǎn)，在以后的處理流程中也是同樣。面部識別處理130使用的作為嫌疑人登錄在生物信息DB中的信息可通過例如從現(xiàn)存有交易記錄等手動(dòng)地選擇有不合法交易記錄的人，登錄該人的面部圖像來實(shí)現(xiàn)。此外，如后面的實(shí)施例所示，也可自動(dòng)地進(jìn)行面部圖像的登錄。
接著來說明嫌疑人應(yīng)對處理150。作為嫌疑人應(yīng)對處理150的一個(gè)例子，如圖4所示，是嫌疑人信息的登錄152。這里登錄的信息是將被判斷為嫌疑人的人的面部圖像等登錄在生物信息DB320中、將使用的卡號等登錄在個(gè)人屬性DB330中。這些生物信息和屬性信息成對登錄。這些信息可在罪犯的搜查、之后的嫌疑人檢測時(shí)使用。
作為嫌疑人應(yīng)對處理150的另一個(gè)例子，如圖5所示，在判斷為有假鈔使用記錄的嫌疑人的情況下，變更紙幣真?zhèn)闻卸?紙幣鑒別)的判定閾值(154)。投入了未知的種類的紙幣的情況下，有不能按原來閾值判斷假鈔的可能性。因此，判斷為嫌疑人時(shí)，通過將判定閾值設(shè)定的比通常更嚴(yán)格，而將假鈔的投入防患于未然。這些實(shí)施例具有利用面部識別處理變更紙幣鑒別處理和ATM控制的特征。
此外，作為嫌疑人應(yīng)對處理150的又一個(gè)例子，有對警衛(wèi)和銀行職員等進(jìn)行警告的處理等。例如，可在ATM中鳴響警鐘或向經(jīng)網(wǎng)絡(luò)連接的另一裝置輸送通知異常的信號和從照相機(jī)輸入的嫌疑人的面部圖像。
此外，作為嫌疑人應(yīng)對處理150的再一個(gè)例子，如圖6所示，舉出在嫌疑人信息登錄152之后停止交易600。此時(shí)，與圖1的流程不同，交易停止后不進(jìn)行通常交易。作為交易停止的例子，還包含卡的回收。
此外，作為圖1的嫌疑人應(yīng)對處理150的一個(gè)例子，舉出了152、154、600和警告等，但這些不僅可單獨(dú)使用，還可組合2個(gè)以上來使用。
在本實(shí)施例中，可通過對照交易中的使用者面部圖像和預(yù)先登錄的嫌疑人的面部圖像來識別嫌疑人。在預(yù)先已知要關(guān)注的嫌疑人并且知曉了其面部信息的情況下，具有可將嫌疑人的非法交易防患于未然的效果。
實(shí)施例2作為本發(fā)明的第2實(shí)施例，使用圖7和圖8來說明將使用多個(gè)卡的人檢測為嫌疑人的例子。
圖7是ATM使用時(shí)的面部信息的登錄流程。在面部檢測處理170中從圖像中檢測出面部區(qū)域。面部被檢測出的情況下，進(jìn)行交易中的使用者信息的登錄700。在這里，交易中的使用者的面部照片等登錄在生物信息DB320中、使用的卡的卡號等登錄在個(gè)人屬性DB330中。這些生物信息和屬性信息成對登錄。在圖7的情況下，與實(shí)施例1不同，登錄全部的使用者信息。以后進(jìn)行通常交易160。
圖8是判定交易中的ATM使用者是否為嫌疑人的流程。在面部檢測處理170之后，面部識別處理800使用由圖7的登錄處理700登錄在生物信息DB320中的面部信息來進(jìn)行檢測出的面部的識別處理。面部判定處理810中，如果未判定出使用者的面部是作為過去的使用者已經(jīng)登錄的面部，則繼續(xù)通常的交易(160)。判定為已經(jīng)登錄的面部時(shí)，在卡號判定處理820中判定個(gè)人屬性DB330中登錄的過去使用時(shí)的卡號等的屬性信息和本次交易的卡號等的屬性信息是否相同。如果是相同卡號，則繼續(xù)通常的交易(160)。如果是不同卡號，則判定為同一人使用多個(gè)卡，從而為嫌疑人的可能性高，要進(jìn)行嫌疑人應(yīng)對處理830。之后，進(jìn)行通常交易160。
此外，在預(yù)先登錄卡的合法使用者的面部信息的情況下，在700中，可不登錄全部的使用者信息，僅在交易中的使用者的面部圖像和登錄的合法使用者的面部信息不一致等的用合法使用者ID信息的識別失敗的情況下，登錄交易中的使用者信息即可。此外，該情況下，在面部判定處理810中，在交易中的使用者的面部圖像和登錄的合法使用者的面部信息一致的情況下，可省略與作為過去的使用者已經(jīng)登錄的面部信息的識別處理。
該處理流程中，尤其是800、810、820、830的一連串的處理設(shè)為840。作為嫌疑人應(yīng)對處理830的一個(gè)例子，有對警衛(wèi)等進(jìn)行警告等。作為嫌疑人應(yīng)對處理830的另一個(gè)例子，是將該生物信息和屬性信息作為嫌疑人登錄。作為其實(shí)現(xiàn)例子之一，舉出在700中登錄的屬性信息DB中設(shè)置表示是否有嫌疑人的字段的例子。在表示是嫌疑人的字段中，也可以包含隨著判斷為同一人使用不同卡的次數(shù)增加而提高排名的要關(guān)注度。該要關(guān)注度高時(shí)，降低接著進(jìn)行面部判定處理810時(shí)同一人的判定閾值，或者可以為了實(shí)施例1等的用途而通過手動(dòng)用于作為嫌疑人登錄。作為嫌疑人應(yīng)對處理830的再一個(gè)例子，有圖5的紙幣鑒別閾值處理154。作為嫌疑人應(yīng)對處理830的又一個(gè)例子，有圖6的交易停止處理600。
此外，一般而言，隨著生物信息DB中登錄的人數(shù)增加，有面部識別的識別率降低的傾向。因此，通過用日期、場所等限定生物信息DB320的識別對象可限定識別對象人數(shù)。例如，由于罪犯在一定區(qū)域內(nèi)、在短時(shí)間內(nèi)反復(fù)犯罪的情況很多，因此舉出可僅將1周以內(nèi)在特定區(qū)域內(nèi)登錄的人作為對象等。
此外，僅檢測出連續(xù)在同一ATM使用多個(gè)卡的情況下，僅將該交易之前的使用者作為對象即可。此時(shí)，生物信息DB320和屬性信息DB330不需要經(jīng)由網(wǎng)絡(luò)，因此也可安裝在ATM內(nèi)的存儲部250中。
以上表示了多個(gè)嫌疑人應(yīng)對處理830，但關(guān)于該處理，不僅可單獨(dú)實(shí)施各個(gè)例子，還可組合多個(gè)處理來實(shí)施。
根據(jù)該實(shí)施例，可以以同一人使用多個(gè)卡為基礎(chǔ)判定嫌疑人，因此不需要預(yù)先進(jìn)行作為嫌疑人的登錄，可減少系統(tǒng)管理的工時(shí)數(shù)。此外，該實(shí)施例可以將被判定為嫌疑人的使用者作為要關(guān)注人進(jìn)行登錄，因此可以容易構(gòu)筑嫌疑人數(shù)據(jù)庫。
實(shí)施例3作為本發(fā)明的第3實(shí)施例，使用圖9來說明將窺探他人密碼的人作為嫌疑人檢測出的例子。在面部檢測處理170中，從圖像中檢測出面部區(qū)域。接著，進(jìn)行窺探判定900。是否有進(jìn)行窺探的人可在交易中途、尤其是輸入密碼前后，通過檢測出除使用者面部以外在圖像中是否還有另外的面部來判定。圖13是從照相機(jī)輸入的圖像1300檢測出面部的例子。位于前面的面部1310(畫得大的面部)為交易中的使用者，位于后面的面部1320被視為窺探者。但是，圖像中也獲取了排在后面隊(duì)列的人等，因此不僅可單純地通過面部數(shù)目，還可通過面部大小和方向等來判定。雖然在使用者后方，但按某種程度以上的大小反映出面部，或可推定為能從眼部區(qū)域的位置等觀察到交易中使用者的手的動(dòng)作的情況下，可將其判定為窺探者。如果沒有窺探者，則繼續(xù)進(jìn)行通常交易(160)，如果判斷為窺探者，則在進(jìn)行嫌疑人應(yīng)對處理910后繼續(xù)進(jìn)行通常交易(160)。
該處理流程中，尤其是900、910的一連串的處理設(shè)為920。作為嫌疑人應(yīng)對處理910的一個(gè)例子，將被判定為窺探的人的面部登錄在生物信息DB320中。此時(shí)，作為將來有非法使用可能性的卡號，在關(guān)于進(jìn)行窺探時(shí)交易中的卡的存儲于屬性信息DB320中的信息上，追加與生物信息DB中登錄的窺探者的面部信息的關(guān)聯(lián)。作為嫌疑人應(yīng)對處理910的再一個(gè)例子，是向使用者警告被窺探行為?？膳e出在顯示部210顯示促使注意的消息，或亮燈、鳴響警報(bào)器等。作為嫌疑人應(yīng)對處理910的另一個(gè)例子，有向警衛(wèi)等發(fā)出警告等。
此外，在窺探判定900中還可使用被推定為窺探行為之后的使用者的信息。例如，被推定為窺探者的人在被推定為被窺探的使用者之后進(jìn)行ATM交易，如果該交易是合法交易，則還要考慮是由于以前曾排在使用者后面而偶然進(jìn)入了圖像中的情況。因此，可應(yīng)對的措施是刪除在嫌疑人應(yīng)對處理910中登錄的關(guān)于窺探的信息，或者降低表示嫌疑人的要關(guān)注度的字段的排名等。
此外，與上述情況相反，在被推定為窺探者的人的面部信息與照相機(jī)獲取的下一使用者的面部圖像不一致的情況下，盡管不使用TAM，但仍在其他TAM使用者附近出現(xiàn)，認(rèn)為其為窺探者的概率高。此外，在被判斷為同一人的面部在多人的使用者交易期間在圖像中被檢測出的情況下，認(rèn)為其為窺探者的概率高。在為窺探者的概率很高的情況下，可應(yīng)對的措施是升高表示嫌疑人的要關(guān)注度的字段排名等。
根據(jù)該實(shí)施例，由于可以以窺探的行為為基準(zhǔn)判定嫌疑人，即便未預(yù)先作為嫌疑人登錄，也可提高ATM的使用安全性。此外，通過該實(shí)施例，被判定為嫌疑人的窺探者可與被窺探的卡對應(yīng)登錄，可靈活用于提高被窺探的卡在將來使用中的安全性。還有，還可將要關(guān)注度的排名高的嫌疑人的信息用于實(shí)施例1等中使用的嫌疑人數(shù)據(jù)庫的構(gòu)建。
實(shí)施例4作為本發(fā)明的第4實(shí)施例，使用圖10來說明檢測出利用他人密碼進(jìn)行非法交易的人的例子。
首先，通過圖9的處理流程，將窺探密碼的人的信息登錄在生物信息DB320和屬性信息DS330中。
接著，通過圖10的處理流程，進(jìn)行嫌疑人檢測。首先，在面部檢測處理170中從圖像中檢測出面部區(qū)域。判定交易中的卡號是否為作為被窺探對象而已經(jīng)登錄在屬性信息DB330中的卡號(1000)。如果被未登錄，則進(jìn)行通常交易(160)。如果被登錄了，則判別是本來的所有者在使用還是窺探者在使用(1010)。窺探面部識別處理1010驗(yàn)證檢測出的面部、和與屬性信息DB330中登錄的被窺探卡號對應(yīng)的生物信息DB320中登錄的面部信息(該卡過去的窺探者)。在窺探者判定處理1020中，并非窺探者的情況下，繼續(xù)進(jìn)行通常交易(160)。判定為是窺探者的情況下，進(jìn)行嫌疑人應(yīng)對處理1030。之后，也可繼續(xù)進(jìn)行通常交易(160)，但是在此時(shí)，也可以為了在后面能進(jìn)行人的特定，而追加要求面部照片、指紋等的生物信息等與不是窺探者的情況不同的處理，或限制可進(jìn)行的ATM交易。
在該處理流程中，尤其是1000、1010、1020、1030的一連串的處理設(shè)為1040。作為嫌疑人應(yīng)對處理1030的一個(gè)例子，有圖4的嫌疑人信息的登錄152。作為嫌疑人應(yīng)對處理1030的另一個(gè)例子，有對警衛(wèi)和銀行職員等警告的處理等。作為嫌疑人應(yīng)對處理1030的再一個(gè)例子，可舉出如圖6所示的停止交易600。此時(shí)，與圖10的流程不同，在交易停止后不進(jìn)行通常交易。作為交易停止的例子，包含卡的回收。此外，嫌疑人應(yīng)對處理1030的例子不僅可單獨(dú)使用還可組合2個(gè)以上使用。
此外，考慮有與進(jìn)行窺探的人協(xié)同的另外的人使用窺探到的信息進(jìn)行非法ATM交易的情況。該情況下，也可從屬性信息DB判斷至少該卡過去曾成為被窺探對象。關(guān)于曾成為窺探對象的卡，在窺探者判定處理1020中，在判斷為交易中的使用者并非過去的窺探者的情況下，通過與通常相比更嚴(yán)格的使用者認(rèn)證處理、紙幣硬幣鑒別處理、交易內(nèi)容的限制等可確保安全性。此外，還可以進(jìn)行登錄為其他卡的窺探者的信息、與其他卡的已經(jīng)登錄的嫌疑人信息的驗(yàn)證。
根據(jù)該實(shí)施例，由于可特定認(rèn)為過去被窺探的卡，因此對于擔(dān)心被窺探的卡，可進(jìn)行保證更高安全性的處理。并且，在進(jìn)行與過去的窺探者的驗(yàn)證的情況下，與如實(shí)施例1所示那樣和不特定多數(shù)的嫌疑人進(jìn)行驗(yàn)證的情況相比，可按更高精度進(jìn)行驗(yàn)證。
實(shí)施例5作為本發(fā)明的第5實(shí)施例，圖11示出可同時(shí)執(zhí)行實(shí)施例1到4的處理流程。首先，在面部檢測處理170中，從圖像中檢測出面部區(qū)域。接著，將面部信息和卡號成對登錄在生物信息DB320和屬性信息DB330中(700)。接著，進(jìn)行嫌疑人檢測和應(yīng)對處理180。隨后，進(jìn)行多卡使用者檢測和應(yīng)對處理840。再接著進(jìn)行窺探者監(jiān)測和應(yīng)對處理920。隨后，進(jìn)行窺探者的卡非法使用檢測和應(yīng)對處理1040。最后進(jìn)行通常交易160。
此外，在上述流程中，700、180、840、920、1040的處理順序不限定于圖11。也可更換順序。此外，這些處理不需要全部進(jìn)行，也可僅選擇必要的處理。此外，在這些處理中，也可中途中斷交易。
下面說明用于實(shí)施實(shí)施例1到實(shí)施例5的各個(gè)處理流程的具體細(xì)節(jié)。但是，下面說明的處理只是一個(gè)例子，不限定實(shí)施例1到實(shí)施例5的各個(gè)處理。
首先，作為面部檢測處理的實(shí)施例，有日本專利公開平8-272973號公報(bào)(專利文獻(xiàn)3)公開的技術(shù)。其是通過從圖像中判定膚色區(qū)域來檢測出面部區(qū)域的，從圖像的H(色度)、S(飽和度)、V(亮度)的圖像信息來檢測出面部區(qū)域。利用來自通常照相機(jī)的輸入，可將RGB信號轉(zhuǎn)換為HSV信號。
圖12是說明面部識別處理130的實(shí)施例的圖。窺探面部識別處理1010也是DB不同，原理相同。
面部器官檢測處理1200從面部區(qū)域的圖像檢測出眼睛、鼻子、嘴巴等面部器官的位置。檢測出的器官不僅是上面所述，還可以是眼角和眼梢兒、眉毛、鼻翼、嘴邊、輪廓等，可任意決定。這些面部器官成為求出用于面部識別的面部特征量的基準(zhǔn)位置。
作為面部器官檢測1200的一個(gè)例子，可以利用從灰度圖像中求出中心暗、周邊亮的區(qū)域的處理。其理由是眼睛、鼻孔、嘴巴等的像素的亮度與周邊像素相比亮度低。作為該處理的具體例子，可以通過比較從關(guān)注像素開始的半徑R1以內(nèi)的區(qū)域內(nèi)的像素平均與分散、以及半徑R1到R2的區(qū)域內(nèi)的像素的平均與分散的過濾(filter)運(yùn)算求出。通過該過濾處理，可將暗的區(qū)域作為面部器官候選檢測出多個(gè)。此時(shí)，面部器官候選中包含實(shí)際并非面部器官的部分，不能判別各個(gè)面部器官候選對應(yīng)哪個(gè)面部器官。因此，利用過濾值等對面部器官候選加上優(yōu)先級，使用面部期間候選之間的配置信息來特定面部器官。
特征提取處理1210是從求出的面部器官的位置來檢測出用于識別面部的特征量的。作為其具體例子，有各器官、其周邊像素的亮度和灰度變化的空間頻率信息等?？梢耘e出按各個(gè)器官算出這些信息并矢量化的情況。該被矢量化的信息被登錄在生物信息DB320中。
對照處理1220對照從輸入圖像算出的特征量和登錄在生物信息DB320中的特征量。DB內(nèi)對照對象的特征量為1個(gè)、判定是否與該特征量的人一致的情況即為驗(yàn)證。DB內(nèi)的對照對象的特征量為多個(gè)、從其中判定與哪個(gè)人一致或是否與誰都不一致的情況即為識別。作為對照處理的具體例子，可舉出最近相鄰法。其是評價(jià)2個(gè)矢量間的距離。2個(gè)矢量的距離越小，為同一人的概率越高。在驗(yàn)證的情況下，通過評價(jià)距離值是否在閾值以內(nèi)判定是否為同一人。在識別的情況下，求出與DB內(nèi)的各特征量的距離，距離最小的特征量的人作為識別結(jié)果。但是，如果該距離在閾值以上，則判定為并非DB內(nèi)登錄的任何人。
說明面部識別時(shí)的處理700等的生物信息的登錄例子。在登錄中，從面部檢測170檢測出的面部區(qū)域進(jìn)行面部器官檢測處理1200，進(jìn)行特征提取處理1210，之后還將特征量存儲在生物信息DB320中。
權(quán)利要求
1.一種根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理裝置，具有照相機(jī)和控制部，其特征在于從上述照相機(jī)獲取交易處理中的使用者的面部圖像，在上述控制部執(zhí)行如下處理從上述獲取的圖像中檢測出使用者的面部區(qū)域的處理；根據(jù)上述檢測出的面部區(qū)域、和在該信息處理裝置中包含的或在經(jīng)網(wǎng)絡(luò)連接的存儲裝置中預(yù)先登錄的面部信息，進(jìn)行面部識別的處理；根據(jù)面部識別結(jié)果判定使用者是否為預(yù)先登錄的嫌疑人的處理；如果為嫌疑人則執(zhí)行嫌疑人應(yīng)對處理。
2.根據(jù)權(quán)利要求1所述的信息處理裝置，其特征在于作為上述嫌疑人應(yīng)對處理，將被判定為嫌疑人的人的面部登錄在數(shù)據(jù)庫中。
3.根據(jù)權(quán)利要求1所述的信息處理裝置，其特征在于作為上述嫌疑人應(yīng)對處理，在被判定為嫌疑人的情況下控制對投入的紙幣的真?zhèn)闻卸ǖ拈撝怠?br> 4.根據(jù)權(quán)利要求1所述的信息處理裝置，其特征在于上述嫌疑人應(yīng)對處理是停止交易。
5.一種根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理裝置，具有從由該使用者交付的卡讀取包含卡號的信息的卡讀取部、照相機(jī)和控制部，其特征在于從上述照相機(jī)獲取交易處理中的使用者的面部圖像，在上述控制部中執(zhí)行如下處理從上述獲取的圖像中檢測出使用者的面部區(qū)域的處理；使上述檢測出的面部區(qū)域的面部信息和上述交易處理中的卡號對應(yīng)，將其登錄在該信息處理裝置中包含的或經(jīng)網(wǎng)絡(luò)連接的存儲裝置中的處理；根據(jù)上述檢測出的面部區(qū)域的面部信息和上述存儲裝置中預(yù)先登錄的面部信息，進(jìn)行面部識別的處理；根據(jù)該面部識別結(jié)果判定是否同一人想要用多個(gè)卡進(jìn)行交易處理的處理；在判斷為同一人想要用多個(gè)卡進(jìn)行交易處理的情況下，將該同一人視為嫌疑人，執(zhí)行嫌疑人應(yīng)對處理。
6.根據(jù)權(quán)利要求5所述的信息處理裝置，其特征在于作為上述嫌疑人應(yīng)對處理，在被判定為嫌疑人的情況下控制對投入的紙幣的真?zhèn)闻卸ǖ拈撝怠?br> 7.根據(jù)權(quán)利要求5所述的信息處理裝置，其特征在于將停止交易作為上述嫌疑人應(yīng)對處理。
8.根據(jù)權(quán)利要求5所述的信息處理裝置，其特征在于在根據(jù)上述檢測出的面部區(qū)域的面部信息和上述存儲裝置中預(yù)先登錄的面部信息進(jìn)行面部識別的處理中，該預(yù)先登錄的面部信息是對應(yīng)在緊接著該交易處理而使用不同卡進(jìn)行的交易處理而被存儲的面部信息。
9.一種根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理裝置，具有從由該使用者交付的卡讀取包含卡號的信息的卡讀取部、照相機(jī)和控制部，其特征在于上述照相機(jī)在進(jìn)行交易處理時(shí)獲取圖像，上述控制部執(zhí)行根據(jù)上述獲取的圖像，檢測出除進(jìn)行上述交易處理的使用者以外的進(jìn)行窺探的嫌疑人的處理，檢測出上述嫌疑人的情況下執(zhí)行嫌疑人應(yīng)對處理。
10.根據(jù)權(quán)利要求9所述的信息處理裝置，其特征在于上述控制部在檢測出上述嫌疑人的處理中，利用上述獲取的圖像中檢測出的面部圖像數(shù)來檢測出嫌疑人。
11.根據(jù)權(quán)利要求9所述的信息處理裝置，其特征在于上述控制部在檢測出上述嫌疑人的處理中，根據(jù)上述獲取的圖像中的除進(jìn)行上述交易處理的使用者以外的面部圖像、與進(jìn)行上述交易處理的使用者的圖像的位置關(guān)系來判斷是否為進(jìn)行窺探的嫌疑人。
12.根據(jù)權(quán)利要求9所述的信息處理裝置，其特征在于上述控制部在檢測出上述嫌疑人的處理中，利用上述獲取的圖像中的除進(jìn)行上述交易處理的使用者以外的面部圖像、與在該交易處理之后的交易處理時(shí)獲取的第二圖像中的面部圖像來判斷嫌疑人。
13.根據(jù)權(quán)利要求9所述的信息處理裝置，其特征在于上述控制部在上述嫌疑人應(yīng)對處理中，將檢測出的嫌疑人的面部信息和該交易處理中使用的卡的卡號對應(yīng)，并將其存儲在該信息處理裝置中包含或經(jīng)網(wǎng)絡(luò)連接的存儲裝置中。
14.一種根據(jù)來自使用者的處理要求輸入而執(zhí)行處理的信息處理裝置，具有從由該使用者交付的卡讀取包含卡號的信息的卡讀取部、照相機(jī)和控制部，其特征在于上述照相機(jī)在進(jìn)行交易處理時(shí)獲取圖像，上述控制部執(zhí)行如下處理從上述獲取的圖像檢測出使用者的面部區(qū)域的處理；根據(jù)該檢測出的面部區(qū)域、和在信息處理裝置包含的或經(jīng)網(wǎng)絡(luò)連接的存儲裝置中作為過去進(jìn)行了窺探而存儲的嫌疑人的面部信息來進(jìn)行面部識別的處理；在通過該面部識別將上述面部區(qū)域判斷為上述嫌疑人的面部的情況下，進(jìn)行嫌疑人應(yīng)對處理。
15.根據(jù)權(quán)利要求14所述的信息處理裝置，其特征在于上述控制部使用上述存儲裝置中存儲的信息中、與交易處理中的卡對應(yīng)的過去窺探者的面部信息，來進(jìn)行面部識別。
16.根據(jù)權(quán)利要求14所述的信息處理裝置，其特征在于上述控制部停止上述交易處理，作為上述嫌疑人應(yīng)對處理。
17.根據(jù)權(quán)利要求14所述的信息處理裝置，其特征在于上述控制部回收上述交易處理中的卡，作為上述嫌疑人應(yīng)對處理。
全文摘要
本發(fā)明利用面部圖像檢測ATM的非法使用者。從來自照相機(jī)輸入的圖像檢測出面部區(qū)域，對照已經(jīng)登錄的罪犯面部圖像DB的特征和使用者的面部圖像的特征，如果判斷為罪犯，則停止交易，進(jìn)行警告、面部圖像的再登錄等。此外，在圖像中檢測出有多人的情況下，判定為從后面的人的位置等窺探使用者的操作，進(jìn)行該人的面部圖像的登錄、警告等。
文檔編號G06Q40/00GK1746929SQ20051008602
公開日2006年3月15日 申請日期2005年7月20日 優(yōu)先權(quán)日2004年9月10日
發(fā)明者新莊廣, 永吉洋登, 酒勾裕 申請人:日立歐姆龍金融系統(tǒng)有限公司