專利名稱:屬性確定方法、屬性確定裝置、程序、記錄介質(zhì)及屬性確定系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及屬性確定方法、屬性確定裝置、程序、記錄介質(zhì)以及屬性確定系統(tǒng)。
背景技術(shù):
從圖像中檢測(cè)人并且確定諸如年齡和性別等屬性的系統(tǒng)在各種場(chǎng)合中使用,例如,各種圖像通信(例如,視頻會(huì)議和視頻電話);數(shù)據(jù)庫(kù)搜索;安全系統(tǒng)(例如,建筑物安全);以及臉部識(shí)別系統(tǒng)。例如,存在一種方法,通過利用作為人臉的特征部位的臉部部位(例如,眼睛、眉毛、鼻孔和嘴)執(zhí)行模式識(shí)別來確定圖像示出了人的臉部,檢測(cè)圖像中的人,并且進(jìn)一步確定人的屬性(例如,參見專利文獻(xiàn)I)。按照以下順序執(zhí)行檢測(cè)臉部部位的方法。首先檢測(cè)人的頭部,然后提取臉部部位?,F(xiàn)有技術(shù)文獻(xiàn)[專利文獻(xiàn)][專利文獻(xiàn)I] JP HlO (1998)-307923 A
發(fā)明內(nèi)容
本發(fā)明要解決的問題然而,在使用臉部的屬性確定方法中,存在以下問題:如果臉部特征部位的一部分被隱藏,以及如果只能針對(duì)幾乎正面面向的人來執(zhí)行檢測(cè)和確定,則對(duì)人的檢測(cè)和對(duì)人的屬性的確定是困難的。因此,在將這種類型的方法應(yīng)用于人檢測(cè)和人屬性確定的情況下,需要在適合拍攝正面面向的人的位置處提供攝像機(jī)。然而,通常在這樣的位置提供攝像機(jī)是困難的。此外,由于人的移動(dòng)通常不規(guī)則,因此不能始終檢測(cè)到正面面向的臉部。因此,本發(fā)明意在提供一種具有對(duì)于人的高檢測(cè)精度的屬性確定方法、屬性確定裝置、程序、記錄介質(zhì)以及屬性確定系統(tǒng),利用這樣的方法、裝置和系統(tǒng)甚至例如在臉部的特征部位被隱藏的情況下也能夠確定人的屬性。解決問題的手段為了實(shí)現(xiàn)上述目的,本發(fā)明的屬性確定方法包括:圖像獲取步驟,在所述圖像獲取步驟中獲取待確定人的圖像;屬性確定區(qū)域檢測(cè)步驟,在所述屬性確定區(qū)域檢測(cè)步驟中檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域;以及屬性確定步驟,在所述屬性確定步驟中基于至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性。本發(fā)明的屬性確定裝置包括:圖像獲取單元,所述圖像獲取單元獲取待確定人的圖像;屬性確定區(qū)域檢測(cè)單元,所述屬性確定區(qū)域檢測(cè)單元檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域;以及
屬性確定單元,所述屬性確定單元基于至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性。本發(fā)明的程序使計(jì)算機(jī)執(zhí)行根據(jù)本發(fā)明的屬性確定方法。本發(fā)明的記錄介質(zhì)記錄有根據(jù)本發(fā)明的程序。本發(fā)明的屬性確定系統(tǒng)包括:圖像獲取單元,所述圖像獲取單元獲取待確定人的圖像;屬性確定區(qū)域檢測(cè)單元,所述屬性確定區(qū)域檢測(cè)單元檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域;屬性確定單元,所述屬性確定單元基于至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性;輸出單元,所述輸出單元輸出屬性確定的結(jié)果,其中所述圖像獲取單元和所述輸出單元經(jīng)由所述系統(tǒng)外部設(shè)置的通信網(wǎng)絡(luò)連接至所述屬性確定區(qū)域檢測(cè)單元和所述屬性確定單元。本發(fā)明的效果根據(jù)本發(fā)明,可以提供一種具有對(duì)于人的高檢測(cè)精度的屬性確定方法、屬性確定裝置、程序、記錄介質(zhì)以及屬性確定系統(tǒng),利用這樣的方法、裝置和系統(tǒng)甚至例如在臉部的特征部位被隱藏的情況下也能夠確定人的屬性。
圖1A是示出了本發(fā)明的屬性確定方法的示例(第一示例性實(shí)施例)的流程圖。圖1B是示出了本發(fā)明的屬性確定裝置的示例(第一示例性實(shí)施例)配置的框圖。圖1C是示出了第一示例性實(shí)施例的屬性確定裝置的另一示例的配置的框圖。圖2A(a)和(b)是用于說明本發(fā)明中對(duì)用于學(xué)習(xí)的圖像應(yīng)用頭部區(qū)域(正例)的示例的視圖。圖2B是用于說明本發(fā)明中對(duì)用于學(xué)習(xí)的圖像應(yīng)用臉部區(qū)域(正例)的示例的視圖。圖2C是用于說明本發(fā)明中對(duì)用于學(xué)習(xí)的圖像應(yīng)用全身區(qū)域(正例)的示例的視圖。圖2D(a)至(C)是用于說明計(jì)算頭部區(qū)域與臉部區(qū)域的交疊度的示例的視圖。圖2E是用于說明計(jì)算頭部區(qū)域與全身區(qū)域的交疊度的示例的視圖。圖3A(a)至(C)是用于說明本發(fā)明中屬性確定區(qū)域檢測(cè)步驟和屬性確定步驟的示例的視圖。圖3B(a)至(C)是用于說明本發(fā)明中屬性確定區(qū)域檢測(cè)步驟和屬性確定步驟的另一示例的視圖。圖4是示出了使用本發(fā)明的屬性確定裝置的屬性確定系統(tǒng)的示例(第三示例性實(shí)施例)的配置的框圖。
具體實(shí)施例方式在本發(fā)明中,其他區(qū)域可以是包括頭部區(qū)域或臉部區(qū)域的區(qū)域,并且其他區(qū)域的示例包括全身和全身的一部分(上身等)。接著,描述本發(fā)明的實(shí)施例。這里應(yīng)注意,本發(fā)明不限于以下描述的實(shí)施例。在以下圖1至4中,相同部分由相同的數(shù)字和符號(hào)來指示。[示例性實(shí)施例1]第一示例性實(shí)施例是其他區(qū)域是全身的情況的示例。圖1A示出了第一示例性實(shí)施例的屬性確定方法的流程圖。圖1B示出了第一示例性實(shí)施例的屬性確定裝置的框圖。如圖1B所示,第一示例性實(shí)施例的屬性確定裝置包括圖像獲取裝置(單元)111、計(jì)算裝置(單元)120、輸出裝置(單元)131和數(shù)據(jù)存儲(chǔ)裝置(單元)140,作為主要部件。圖像獲取裝置111連接至計(jì)算裝置120。計(jì)算裝置120連接至輸出裝置131和數(shù)據(jù)存儲(chǔ)裝置140。計(jì)算裝置120包括屬性確定區(qū)域檢測(cè)裝置(單元)121和屬性確定裝置(單元)122。預(yù)先獲得的屬性確定區(qū)域檢測(cè)模型141和屬性確定模型142存儲(chǔ)在數(shù)據(jù)存儲(chǔ)裝置140中。屬性確定區(qū)域檢測(cè)裝置121連接至屬性確定區(qū)域檢測(cè)模型141。屬性確定裝置122連接至屬性確定模型142。屬性確定區(qū)域檢測(cè)模型141包括頭部區(qū)域檢測(cè)模型141a、臉部區(qū)域檢測(cè)模型141b和全身區(qū)域檢測(cè)模型141c。屬性確定模型142包括頭部區(qū)域?qū)傩源_定模型142a、臉部區(qū)域?qū)傩源_定模型142b和全身區(qū)域?qū)傩源_定模型142c。圖像獲取裝置111的示例包括電荷耦合器件(CXD)攝像機(jī)、互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)攝像機(jī)和圖像掃描儀。計(jì)算裝置120的示例包括中央處理單元(CPU)。輸出裝置131的示例包括通過圖像輸出數(shù)據(jù)的監(jiān)視器(例如,諸如液晶顯示器(LCD)和陰極射線管(CRT)顯示器等圖像顯示器)、通過打印輸出數(shù)據(jù)的打印機(jī)、以及通過聲音輸出數(shù)據(jù)的揚(yáng)聲器。輸出裝置131是可選部件。本發(fā)明的屬性確定裝置優(yōu)選地包括輸出裝置131,盡管該裝置并不始終是必要的。數(shù)據(jù)存儲(chǔ)裝置140的示例包括隨機(jī)存取存儲(chǔ)器(RAM)、只讀存儲(chǔ)器(ROM)、硬盤(HD)、光盤和軟(注冊(cè)商標(biāo)名稱)盤(FD)。例如,數(shù)據(jù)存儲(chǔ)裝置140可以是內(nèi)置型或外部型,例如,外部存儲(chǔ)設(shè)備。關(guān)于圖像獲取裝置,計(jì)算裝置、輸出裝置和數(shù)據(jù)存儲(chǔ)裝置,同樣適用于以下描述的實(shí)施例。在本發(fā)明中,屬性是與人相關(guān)的屬性,并且屬性的示例包括性別、年齡、種族、頭部的角度、頭發(fā)長(zhǎng)度、戴或不戴帽子、頭發(fā)顏色、發(fā)型、臉部的方向、臉部表情、戴或不戴眼鏡或太陽鏡、戴或不戴面具、以及有或沒有髭或胡須。例如,使用如下圖1B的屬性確定裝置來執(zhí)行第一示例性實(shí)施例的屬性確定方法。首先,在執(zhí)行屬性確定方法之前,通過使用機(jī)器學(xué)習(xí)(模式識(shí)別)技術(shù)執(zhí)行學(xué)習(xí)來形成頭部區(qū)域檢測(cè)模型141a和頭部區(qū)域?qū)傩源_定模型142a ;臉部區(qū)域檢測(cè)模型141b和臉部區(qū)域?qū)傩源_定模型142b ;以及全身區(qū)域檢測(cè)模型141c和全身區(qū)域?qū)傩源_定模型142c。<頭部區(qū)域檢測(cè)模型和頭部區(qū)域?qū)傩源_定模型>利用作為正例的用于學(xué)習(xí)的圖像的頭部區(qū)域和作為反例的用于學(xué)習(xí)的圖像的非頭部區(qū)域,通過機(jī)器學(xué)習(xí)(模式識(shí)別)來執(zhí)行學(xué)習(xí),形成頭部檢測(cè)模型141a。具體地,例如,如圖2A(a)和(b)所示,首先,通過分別對(duì)用于學(xué)習(xí)的圖像IOa(正面面向的男性)和IOb(背面面向的女性)施加標(biāo)記Ila和11b,來應(yīng)用頭部區(qū)域。具體地,例如,人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)頭部區(qū)域的訓(xùn)練數(shù)據(jù)的應(yīng)用??紤]到檢測(cè)精度,用于學(xué)習(xí)的圖像的數(shù)目越多越好。此外,優(yōu)選地準(zhǔn)備大量用于學(xué)習(xí)的圖像(例如,側(cè)面面向的圖像)來形成頭部區(qū)域檢測(cè)模型。
接著,通過對(duì)頭部區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)并且使用各自被應(yīng)用了用于確定屬性的訓(xùn)練數(shù)據(jù)的多個(gè)頭部區(qū)域,由機(jī)器學(xué)習(xí)(模式識(shí)別)來形成頭部區(qū)域?qū)傩源_定模型142a。在第一示例性實(shí)施例的屬性確定方法中,用于確定屬性的訓(xùn)練數(shù)據(jù)的示例包括諸如性別和年齡。具體地,例如,對(duì)圖2A(a)中示出的用于學(xué)習(xí)的圖像的頭部區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)“性別:男性”,“年齡:30”等。例如,對(duì)圖2A(b)中示出的用于學(xué)習(xí)的圖像的頭部區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)“性別:女性”,“年齡:20”等。人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)用于確定屬性(例如,性別、年齡等)的訓(xùn)練數(shù)據(jù)的應(yīng)用。此外,在使用用于屬性確定的頭部區(qū)域的“方向”項(xiàng)目的情況下,例如,也可以應(yīng)用用于確定頭部區(qū)域的方向?qū)傩缘挠?xùn)練數(shù)據(jù),例如,以I度為基礎(chǔ)指示的方向數(shù)據(jù)(例如,向左60° ),根據(jù)8個(gè)方向的方向數(shù)據(jù)(例如,0°,45° ,90°等)等。此外,例如,可以不采用學(xué)習(xí)而是采用人制定規(guī)則并確定屬性的方法(頭部區(qū)域?qū)傩源_定規(guī)則)來執(zhí)行屬性確定。<臉部區(qū)域檢測(cè)模型和臉部區(qū)域?qū)傩詤^(qū)域模型>通過機(jī)器學(xué)習(xí)(模式識(shí)別)來學(xué)習(xí)用于學(xué)習(xí)的圖像的臉部區(qū)域(包括人臉的特征部位的區(qū)域,例如,眼睛、眉毛、鼻孔和嘴),形成臉部區(qū)域檢測(cè)模型141b。具體地,例如,如圖2B所示,首先,通過對(duì)用于學(xué)習(xí)的圖像IOc (正面面向的男性)施加標(biāo)記lie,來應(yīng)用臉部區(qū)域。人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)臉部區(qū)域的訓(xùn)練數(shù)據(jù)的應(yīng)用。考慮到檢測(cè)精度,用于學(xué)習(xí)的圖像的數(shù)目越多越好。此外,優(yōu)選地準(zhǔn)備大量用于學(xué)習(xí)的圖像來形成臉部區(qū)域檢測(cè)模型。例如,臉部區(qū)域檢測(cè)模型可以包括臉部部位的相對(duì)位置、尺寸等。接著,通過對(duì)臉部區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)并且使用各自被應(yīng)用了用于確定屬性的訓(xùn)練數(shù)據(jù)的多個(gè)臉部區(qū)域,由機(jī)器學(xué)習(xí)(模式識(shí)別)來形成臉部區(qū)域?qū)傩源_定模型142b。在第一示例性實(shí)施例的屬性確定方法中,用于確定屬性的訓(xùn)練數(shù)據(jù)的示例包括性別和年齡。具體地,例如,對(duì)圖2B中示出的用于學(xué)習(xí)的圖像的臉部區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)“性別:男性”,“年齡:30”等。人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)用于確定屬性(例如,性別、年齡等)的訓(xùn)練數(shù)據(jù)的應(yīng)用。此外,例如,可以不采用學(xué)習(xí)而是采用人制定規(guī)則并確定屬性的方法(臉部區(qū)域?qū)傩源_定規(guī)則)來執(zhí)行屬性確定。<全身區(qū)域檢測(cè)模型和全身區(qū)域?qū)傩源_定模型>利用作為正例的用于學(xué)習(xí)的圖像的全身區(qū)域和作為反例的用于學(xué)習(xí)的圖像的非全身區(qū)域,通過機(jī)器學(xué)習(xí)(模式識(shí)別)來執(zhí)行學(xué)習(xí),形成全身區(qū)域檢測(cè)模型141c。具體地,例如,如圖2C所示,首先,通過對(duì)用于學(xué)習(xí)的圖像IOb(正面面向的男性)施加標(biāo)記lld,來應(yīng)用全身區(qū)域。人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)全身區(qū)域的訓(xùn)練數(shù)據(jù)的應(yīng)用。考慮到檢測(cè)精度,用于學(xué)習(xí)的圖像的數(shù)目越多越好。此外,優(yōu)選地準(zhǔn)備大量用于學(xué)習(xí)的圖像來形成全身區(qū)域檢測(cè)模型。接著,通過對(duì)全身區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)并且使用各自被應(yīng)用了用于確定屬性的訓(xùn)練數(shù)據(jù)的多個(gè)全身區(qū)域,由機(jī)器學(xué)習(xí)(模式識(shí)別)來形成全身區(qū)域?qū)傩源_定模型142c。在第一示例性實(shí)施例的屬性確定方法中,用于確定屬性的訓(xùn)練數(shù)據(jù)的示例包括性別和年齡。具體地,例如,對(duì)圖2C中示出的用于學(xué)習(xí)的圖像的全身區(qū)域應(yīng)用用于確定屬性的訓(xùn)練數(shù)據(jù)“性別:男性”,“年齡:30”等。人使用傳統(tǒng)已知的輸入裝置(例如,鍵盤、鼠標(biāo)等)進(jìn)行輸入,來進(jìn)行對(duì)用于確定屬性(例如,性別、年齡等)的訓(xùn)練數(shù)據(jù)的應(yīng)用。此外,例如,可以不采用學(xué)習(xí)而是采用人制定規(guī)則并確定屬性的方法(全身區(qū)域?qū)傩源_定規(guī)則)來執(zhí)行屬性確定。此外,在使用用于屬性確定的身體的“方向”項(xiàng)目的情況下,例如,也可以應(yīng)用用于確定身體區(qū)域的方向?qū)傩缘挠?xùn)練數(shù)據(jù),例如,以I度為基礎(chǔ)指示的方向數(shù)據(jù)(例如,向左60° )和根據(jù)8個(gè)方向的方向數(shù)據(jù)(例如,0°,45° ,90°等)等。接著,如圖1A的流程圖所示,執(zhí)行以下步驟。首先,圖像獲取裝置111獲取待確定人的圖像(步驟SI I)。接著,屬性確定區(qū)域檢測(cè)裝置121參考使用多個(gè)用于學(xué)習(xí)的圖像執(zhí)行學(xué)習(xí)來預(yù)先形成的屬性確定區(qū)域檢測(cè)模型141,這些圖像已各自被應(yīng)用了屬性確定區(qū)域的訓(xùn)練數(shù)據(jù),屬性確定區(qū)域檢測(cè)裝置121從待確定人的圖像中檢測(cè)從頭部區(qū)域、臉部區(qū)域和全身區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域的數(shù)據(jù)(步驟S21)?!搭^部區(qū)域數(shù)據(jù)的檢測(cè)〉具體地,例如,通過指定想要檢測(cè)的頭部區(qū)域(例如方形)的尺寸并且參考預(yù)先形成的頭部區(qū)域檢測(cè)模型141a,通過從待確定人的圖像的端部開始沿著水平方向移動(dòng)圖像補(bǔ)丁并且按順序連續(xù)向下移動(dòng),通過所謂的光柵掃描來搜索頭部區(qū)域數(shù)據(jù)。此外,例如,通過改變待確定人的圖像的獲取尺寸并且搜索頭部區(qū)域,檢測(cè)頭部區(qū)域的數(shù)據(jù)。優(yōu)選地以這種方式檢測(cè)頭部區(qū)域的數(shù)據(jù),這是因?yàn)榭梢酝瑫r(shí)執(zhí)行頭部區(qū)域的對(duì)準(zhǔn)。這里應(yīng)注意,頭部區(qū)域數(shù)據(jù)的方向不限于該示例。例如,可以通過將待確定人的圖像中的圓形對(duì)象檢測(cè)為頭部區(qū)域并且執(zhí)行對(duì)檢測(cè)到的頭部區(qū)域的對(duì)準(zhǔn),來執(zhí)行檢測(cè)。例如,可以通過計(jì)算裝置中包含的對(duì)準(zhǔn)裝置(單元)(未示出)來執(zhí)行對(duì)準(zhǔn)。〈臉部區(qū)域數(shù)據(jù)的檢測(cè)〉具體地,例如,通過參考預(yù)先形成的臉部區(qū)域檢測(cè)模型141b,作為與臉部區(qū)域檢測(cè)模型141b匹配的部位來從待確定人的圖像中檢測(cè)臉部區(qū)域數(shù)據(jù)?!慈韰^(qū)域數(shù)據(jù)的檢測(cè)〉具體地,例如,通過指定想要檢測(cè)的全身區(qū)域(例如矩形)的尺寸并且參考預(yù)先形成的全身區(qū)域檢測(cè)模型141c,通過與頭部區(qū)域檢測(cè)相同的方法來檢測(cè)全身區(qū)域數(shù)據(jù)。接著,屬性確定裝置122通過參考預(yù)先形成的屬性確定模型142,基于至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性(步驟S22),其中屬性確定模型142是使用各自被應(yīng)用了用于確定屬性的訓(xùn)練數(shù)據(jù)的許多屬性確定區(qū)域來執(zhí)行學(xué)習(xí)而預(yù)先形成的。具體地,例如確定每個(gè)屬性確定區(qū)域圖像的屬性,以確定每個(gè)屬性確定區(qū)域圖像是否屬于同一人,并且通過將屬于同一人的各屬性確定區(qū)域圖像相組合來確定屬性。在通過機(jī)器學(xué)習(xí)執(zhí)行屬性確定的情況下,可以使用估計(jì)諸如年齡等連續(xù)值的方法(回歸)和估計(jì)諸如男性/女性等類別的方法(分類)二者。<基于頭部區(qū)域圖像的屬性確定>基于頭部區(qū)域圖像的屬性確定的確定項(xiàng)目的示例包括性別、年齡、種族、頭部的角度、頭發(fā)長(zhǎng)度、戴或不戴帽子、頭發(fā)顏色、發(fā)型、臉部的方向、臉部表情、戴或不戴眼鏡或太陽鏡、戴或不戴面具、以及有或沒有髭或胡須。例如,在確定項(xiàng)目是性別的情況下,基于性別度(例如,O到I)來進(jìn)行確定。可以基于頭部區(qū)域數(shù)據(jù)來計(jì)算性別度。具體地,例如準(zhǔn)則設(shè)定如下。即,如果性別度是“O到小于0.5”,則確定為“女性”,如果性別度是“0.5到I”則確定為“男性”。根據(jù)計(jì)算的性別度的值來執(zhí)行對(duì)性別的確定。用于根據(jù)性別度來確定性別的準(zhǔn)則不限于該示例。例如,準(zhǔn)則可以如下。即,如果性別度是“O到0.3”則確定為“女性”,并且如果性別度是“0.7到I”則確定為“男性”,如果性別度是“大于0.3并小于0.7”,則確定為“不可確定”。同樣關(guān)于年齡等,例如通過設(shè)定預(yù)定準(zhǔn)則,根據(jù)基于頭部區(qū)域數(shù)據(jù)計(jì)算的值來執(zhí)行對(duì)年齡等的確定。<基于臉部區(qū)域圖像的屬性確定>基于臉部區(qū)域圖像的屬性確定的確定項(xiàng)目的示例包括針對(duì)基于頭部區(qū)域圖像的屬性確定的確定項(xiàng)目而描述的那些示例。例如,基于臉部區(qū)域圖像的屬性可以按照與基于頭部區(qū)域圖像的屬性確定的相同方式來確定。<基于全身區(qū)域圖像的屬性確定>基于全身區(qū)域圖像的屬性確定的確定項(xiàng)目的示例包括針對(duì)基于頭部區(qū)域圖像的屬性確定的確定項(xiàng)目而描述的那些示例。例如,基于全身區(qū)域圖像的屬性可以按照與基于頭部區(qū)域圖像的屬性確定的相同方式來確定。〈確定各屬性確定區(qū)域圖像是否屬于同一人〉接著,確定頭部區(qū)域、臉部區(qū)域和全身區(qū)域中的每一個(gè)是否屬于同一人。使用以下公式(3)表示的交疊度來進(jìn)行該確定。這里注意,例如,可以在各屬性確定區(qū)域圖像的屬性確定之前進(jìn)行是否屬于同一人的確定。即,例如,在預(yù)先確定頭部區(qū)域、臉部區(qū)域和全身區(qū)域中的每一個(gè)是否屬于同一人之后,可以進(jìn)行對(duì)屬于同一人的頭部區(qū)域、臉部區(qū)域和全身區(qū)域的屬性確定。交疊度=(2XXXY)/(X+Y)(3)X:交疊區(qū)域的面積與屬性確定區(qū)域之一的面積之比,其中交疊區(qū)域是指所述屬性確定區(qū)域之一和通過使除了所述屬性確定區(qū)域之一以外的屬性確定區(qū)域以預(yù)定比率變形而獲得的區(qū)域相交疊的區(qū)域。Y:交疊區(qū)域的面積與通過以預(yù)定比率變形而獲得的所述區(qū)域的面積之比。<交疊度計(jì)算的具體示例>以下參照具體示例描述由公式(3)表示的交疊度。然而,交疊度不限于以下示例。<臉部區(qū)域和頭部區(qū)域的交疊度>首先,描述臉部區(qū)域與頭部區(qū)域的交疊度。S卩,首先,如圖2D(a)所示,從待確定人的獲得圖像中檢測(cè)頭部區(qū)域(A)21和臉部區(qū)域22。接著,如圖2D(b)所示,以預(yù)定比率使檢測(cè)到的臉部區(qū)域22變形。該區(qū)域是指頭部區(qū)域(B) 21a。具體地,例如,在臉部區(qū)域的橫向尺寸是X并且臉部區(qū)域22的縱向尺寸是y的情況下,通過分別沿著右方向和左方向?qū)⒛槻繀^(qū)域22延伸0.5乘X、沿著向上方向?qū)⒛槻繀^(qū)域22延伸0.8乘y、并、沿著向下方向?qū)⒛槻繀^(qū)域22延伸0.2乘y而獲得的區(qū)域是指頭部區(qū)域(B)21a。接著,如圖2D(c)所示,計(jì)算其中頭部區(qū)域(A)21與頭部區(qū)域(B)21a交疊的區(qū)域(C,對(duì)角陰影區(qū)域)24的面積。然后,如以下公式(I)所指示,計(jì)算交疊區(qū)域(C)的面積與頭部區(qū)域(A)的面積之比(X)。X = C/A (I)此外,如果以下公式(2)所指示,計(jì)算交疊區(qū)域(C)的面積與頭部區(qū)域(B)的面積之比⑴。
Y = C/B (2)基于比值⑴和⑴如以下公式(3)所指示,計(jì)算頭部區(qū)域與臉部區(qū)域的交疊度。交疊度=(2XXXY)/(X+Y)(3)<頭部區(qū)域與全身區(qū)域的交疊度>接著,描述頭部區(qū)域與全身區(qū)域的交疊度。即,首先,從待確定人的獲得圖像中檢測(cè)頭部區(qū)域(A)和全身區(qū)域。接著,如圖2Ε所示,以預(yù)定比率使檢測(cè)到的全身區(qū)域23變形。該區(qū)域是指頭部區(qū)域(D)21b。具體地,例如,在全身區(qū)域23的橫向尺寸是X并且全身區(qū)域23的縱向尺寸是y的情況下,通過分別沿著右方向和左方向?qū)⑷韰^(qū)域23縮窄0.3乘X,沿著向下方向?qū)⑷韰^(qū)域23縮窄0.8乘y而獲得的區(qū)域是指頭部區(qū)域(D) 21b。在圖2E中,21e是指頭部區(qū)域(A)。接著,按照與上述相同的方式,計(jì)算其中頭部區(qū)域(A)與頭部區(qū)域(D)交疊的區(qū)域(C)的面積。接著,按照與公式(I)相同的方式,計(jì)算交疊區(qū)域(C)的面積與頭部區(qū)域(A)的面積之比(X)。此外,按照與公式(2)相同的方式,計(jì)算交疊區(qū)域(C)的面積與頭部區(qū)域(D)的面積之比。然后,基于比值(X)和(Y),如以下公式(3)所指示的,計(jì)算頭部區(qū)域和全身區(qū)域的交疊度。交疊度=(2XXXY)/(X+Y)(3)除了上述兩個(gè)具體示例以外,在計(jì)算臉部區(qū)域與全身區(qū)域的交疊度的情況下,例如,可以利用通過以預(yù)定比率縮窄(變形)全身區(qū)域而作為臉部區(qū)域獲得的區(qū)域,按照與上述相同的方式來計(jì)算交疊度。此外,例如,可以利用通過以預(yù)定比率縮窄(變形)頭部區(qū)域而作為臉部區(qū)域獲得的區(qū)域,按照與上述相同的方式來計(jì)算頭部區(qū)域與臉部區(qū)域的交疊度。此外,例如,利用通過以預(yù)定比率延伸(變形)頭部區(qū)域而作為全身區(qū)域獲得的區(qū)域,按照與上述相同的方式來計(jì)算頭部區(qū)域與全身區(qū)域的交疊度。交疊度表達(dá)為從I (最大值)到O (最小值)的數(shù)值。在第一示例性實(shí)施例的屬性確定方法中,例如,在交疊度等于或大于預(yù)定閾值的情況下(例如,交疊度> 0.7),可以確定頭部區(qū)域、臉部區(qū)域和全身區(qū)域中的每一個(gè)屬于同一人。<通過屬性確定區(qū)域圖像的組合的屬性確定>接著,通過將確定為屬于同一人的頭部區(qū)域、臉部區(qū)域和全身區(qū)域的圖像組合來確定屬性??梢酝ㄟ^以下公式(4)來執(zhí)行確定項(xiàng)目(確定結(jié)果)的組合。在以下公式(4)中,“η”指示待確定圖像(幀)的個(gè)數(shù),“i”指示待確定圖像的圖像編號(hào)。
權(quán)利要求
1.一種屬性確定方法,包括: 圖像獲取步驟,在所述圖像獲取步驟中獲取待確定人的圖像; 屬性確定區(qū)域檢測(cè)步驟,在所述屬性確定區(qū)域檢測(cè)步驟中檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域;以及 屬性確定步驟,在所述屬性確定步驟中基于所述至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性。
2.根據(jù)權(quán)利要求1所述的方法,其中,所述其他區(qū)域包括全身和所述全身的一部分。
3.根據(jù)權(quán)利要求1或2所述的方法,其中,在所述屬性確定步驟中,通過將所述至少兩個(gè)屬性確定區(qū)域的所述圖像組合來確定屬性。
4.根據(jù)權(quán)利要求3所述的方法,其中,在所述圖像的組合中,使用以下公式(3)表示的交疊度來確定所述至少兩個(gè)屬性確定區(qū)域是否屬于同一人: 交疊度=(2XXXY)/(X+Y) (3) X:其中所述屬性確定區(qū)域之一和通過使除了所述屬性確定區(qū)域之一以外的屬性確定區(qū)域以預(yù)定比率變形而獲得的區(qū)域相交疊的區(qū)域的面積與所述屬性確定區(qū)域之一的面積之比; Y:交疊區(qū)域的面積與所述以預(yù)定比率變形而獲得的區(qū)域的面積之比。
5.根據(jù)權(quán)利要求4所述的方法,其中,在所述交疊度等于或大于預(yù)定閾值的情況下,確定所述至少兩個(gè)屬性確定區(qū)域?qū)儆谕蝗恕?br>
6.一種屬性確定裝置,包括:` 圖像獲取單元,所述圖像獲取單元獲取待確定人的圖像; 屬性確定區(qū)域檢測(cè)單元,所述屬性確定區(qū)域檢測(cè)單元檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域;以及 屬性確定單元,所述屬性確定單元基于所述至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性。
7.根據(jù)權(quán)利要求6所述的裝置,其中,所述其他區(qū)域包括全身和所述全身的一部分。
8.根據(jù)權(quán)利要求6或7所述的裝置,其中,所述屬性確定單元通過將所述至少兩個(gè)屬性確定區(qū)域的所述圖像組合來確定屬性。
9.根據(jù)權(quán)利要求8所述的裝置,其中,在所述圖像的組合中,使用以下公式(3)表示的交疊度來確定所述至少兩個(gè)屬性確定區(qū)域是否屬于同一人: 交疊度=(2XXXY)/(X+Y) (3) X:其中所述屬性確定區(qū)域之一和通過使除了所述屬性確定區(qū)域之一以外的屬性確定區(qū)域以預(yù)定比率變形而獲得的區(qū)域相交疊的區(qū)域的面積與所述屬性確定區(qū)域之一的面積之比; Y:交疊區(qū)域的面積與所述以預(yù)定比率變形而獲得的區(qū)域的面積之比。
10.根據(jù)權(quán)利要求9所述的裝置,其中,在所述交疊度等于或大于預(yù)定閾值的情況下,確定所述至少兩個(gè)屬性確定區(qū)域?qū)儆谕蝗恕?br>
11.一種程序,其中,使計(jì)算機(jī)執(zhí)行根據(jù)權(quán)利要求1至5中任一項(xiàng)所述的屬性確定方法。
12.—種記錄介質(zhì),記錄有根據(jù)權(quán)利要求1所述的程序。
13.—種屬性確定系統(tǒng),包括:圖像獲取單元,所述圖像獲取單元獲取待確定人的圖像; 屬性確定區(qū)域檢測(cè)單元,所述屬性確定區(qū)域檢測(cè)單元檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成的組中選擇的至少兩個(gè)屬性確定區(qū)域; 屬性確定單元,所述屬性確定單元基于所述至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性; 輸出單元,所述輸出單元輸出屬性確定結(jié)果,其中所述圖像獲取單元和所述輸出單元經(jīng)由所述系統(tǒng)外部設(shè)置的通信網(wǎng)絡(luò)連接至所述屬性確定區(qū)域檢測(cè)單元和所述屬性確定單元。
全文摘要
本發(fā)明提供具有針對(duì)人的高檢測(cè)精度的屬性確定方法、屬性確定裝置、程序、記錄介質(zhì)以及屬性確定系統(tǒng),利用這樣的方法、裝置和系統(tǒng),甚至在臉部的特征部位被隱藏的情況下也能夠確定人的屬性。本發(fā)明的屬性確定方法包括圖像獲取步驟(S11),獲取待確定人的圖像;屬性確定區(qū)域檢測(cè)步驟(S21),檢測(cè)從來自待確定人的圖像的頭部區(qū)域、臉部區(qū)域以及其他區(qū)域構(gòu)成組中選擇的至少兩個(gè)屬性確定區(qū)域;以及屬性確定步驟(S22),基于至少兩個(gè)屬性確定區(qū)域的圖像來確定屬性。
文檔編號(hào)G06T7/00GK103201763SQ20118005068
公開日2013年7月10日 申請(qǐng)日期2011年9月22日 優(yōu)先權(quán)日2010年10月22日
發(fā)明者植木一也 申請(qǐng)人:Nec軟件有限公司