一種表情識(shí)別方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及圖像處理技術(shù)領(lǐng)域,特別涉及一種表情識(shí)別方法和裝置。
【背景技術(shù)】
[0002] 人臉表情識(shí)別是指智能分析檢測(cè)人臉圖像中人臉的表情,以確定出人臉圖像中被 識(shí)別對(duì)象的心情,如傷心、開心、饑餓等等。目前對(duì)人臉表情識(shí)別的方式主要是,建立起各種 心情如傷心等,對(duì)應(yīng)的特征區(qū)域如眼睛、嘴巴、眉毛等的模型或者拓?fù)浣Y(jié)構(gòu),通過(guò)在圖像中 提取出圖像中的特征點(diǎn)如眼睛的像素點(diǎn)、眉毛的像素點(diǎn)等或者幾何特征區(qū)域如眼睛的特征 區(qū)域、嘴巴的特征區(qū)域,并將這些特征點(diǎn)或者幾何特征區(qū)域與已經(jīng)建立好的模型或者拓?fù)?結(jié)構(gòu)進(jìn)行對(duì)比,這一過(guò)程需要對(duì)圖像的像素要求較高,造成現(xiàn)有技術(shù)對(duì)圖像表情的識(shí)別性 較低。
【發(fā)明內(nèi)容】
[0003] 本發(fā)明提供一種表情識(shí)別方法和裝置,從而提高對(duì)圖像表情的識(shí)別性。
[0004] -種表情識(shí)別方法,確定表情標(biāo)準(zhǔn)值與心理狀態(tài)的映射關(guān)系,還包括:
[0005] 確定圖像中至少一個(gè)目標(biāo)區(qū)域的信息;
[0006] 根據(jù)所述至少一個(gè)目標(biāo)區(qū)域的信息,計(jì)算所述圖像的表情值;
[0007] 將所述計(jì)算得到的所述圖像的表情值與所述確定的表情標(biāo)準(zhǔn)值進(jìn)行對(duì)比;
[0008] 根據(jù)所述表情標(biāo)準(zhǔn)值與心理狀態(tài)的映射關(guān)系,確定所述至少一個(gè)目標(biāo)區(qū)域?qū)?yīng)的 心理狀態(tài)。
[0009] 優(yōu)選地,所述確定表情標(biāo)準(zhǔn)值與心理狀態(tài)的映射關(guān)系,包括:
[0010] 選取已經(jīng)確定出心情狀態(tài)的至少兩幅圖像中頭像的眼睛、嘴巴和鼻子區(qū)域;
[0011] 對(duì)于所述眼睛、嘴巴和鼻子區(qū)域中的每一個(gè)區(qū)域,均執(zhí)行計(jì)算所述至少兩幅圖像 的相對(duì)像素差值,并對(duì)所述眼睛、嘴巴和鼻子區(qū)域的相對(duì)像素差值求和,作為表情標(biāo)準(zhǔn)值;
[0012] 建立所述表情標(biāo)準(zhǔn)值與所述已經(jīng)確定出心情狀態(tài)的對(duì)應(yīng)關(guān)系。
[0013] 優(yōu)選地,所述確定圖像中至少一個(gè)目標(biāo)區(qū)域的信息,包括:
[0014] 對(duì)圖像進(jìn)行灰度化處理;
[0015] 確定所述灰度化處理后的圖像中頭像的眼睛、鼻子和嘴巴分別對(duì)應(yīng)的像素點(diǎn)的灰 度和。
[0016] 優(yōu)選地,該方法進(jìn)一步包括:確定標(biāo)準(zhǔn)中性圖像,并計(jì)算所述標(biāo)準(zhǔn)中性圖像中頭像 的眼睛、鼻子和嘴巴分別對(duì)應(yīng)的標(biāo)準(zhǔn)像素點(diǎn)的灰度和;
[0017] 所述計(jì)算所述圖像的表情值,包括:
[0018] 計(jì)算所述灰度化處理后的圖像中頭像的眼睛、鼻子和嘴巴分別對(duì)應(yīng)的像素點(diǎn)的灰 度和與所述標(biāo)準(zhǔn)中性圖像中對(duì)應(yīng)的標(biāo)準(zhǔn)像素點(diǎn)的灰度和之間的灰度差值;
[0019] 根據(jù)下述公式,計(jì)算所述至少一個(gè)目標(biāo)區(qū)域的表情值;
[0020]
[0021] 其中,Xl表征每一張圖像中目標(biāo)區(qū)域i的灰度差值;f(Xl)表征每一張圖像中目標(biāo) 區(qū)域i的表情值;c表征表情參數(shù);radom表征經(jīng)驗(yàn)值;
[0022] 利用所述至少一個(gè)目標(biāo)區(qū)域的表情值,根據(jù)下述公式,計(jì)算圖像的表情值;
[0023]
[0024]其中,征圖像j的表情值;w^表征圖像中目標(biāo)區(qū)域i的權(quán)重;bj表征圖像的 閾值;η表征目標(biāo)區(qū)域的個(gè)數(shù);rand(Xl)表征目標(biāo)區(qū)域i的平衡值。
[0025] 優(yōu)選地,該方法進(jìn)一步包括:記錄表情經(jīng)驗(yàn)值與表情狀態(tài)的對(duì)應(yīng)關(guān)系;
[0026] 在所述計(jì)算所述圖像的表情值之后,在所述將所述計(jì)算得到的所述圖像的表情值 與所述確定的表情標(biāo)準(zhǔn)值進(jìn)行對(duì)比之前,進(jìn)一步包括:判斷所述圖像的表情值與所述記錄 的表情經(jīng)驗(yàn)值是否相同,如果是,則確定所述圖像對(duì)應(yīng)的心理狀態(tài)為所述表情經(jīng)驗(yàn)值對(duì)應(yīng) 的心理狀態(tài);否則,執(zhí)行所述將所述計(jì)算得到的所述圖像的表情值與所述確定的表情標(biāo)準(zhǔn) 值進(jìn)行對(duì)比。
[0027] 優(yōu)選地,該方法進(jìn)一步包括:確定至少兩張連續(xù)的圖像;
[0028] 所述將所述計(jì)算得到的所述圖像的表情值與所述確定的表情標(biāo)準(zhǔn)值進(jìn)行對(duì)比,包 括:
[0029] 判斷所述至少兩張連續(xù)的圖像的表情值是否收斂于一個(gè)表情標(biāo)準(zhǔn)值,如果是,則 確定該表情標(biāo)準(zhǔn)值對(duì)應(yīng)的心理狀態(tài)為所述至少兩張連續(xù)的圖像對(duì)應(yīng)的心理狀態(tài)。
[0030] -種表情識(shí)別裝置,包括:
[0031] 第一確定單元,用于確定表情標(biāo)準(zhǔn)值與心理狀態(tài)的映射關(guān)系;
[0032] 計(jì)算單元,用于確定圖像中至少一個(gè)目標(biāo)區(qū)域的信息,根據(jù)所述至少一個(gè)目標(biāo)區(qū) 域的信息,計(jì)算所述圖像的表情值;
[0033] 對(duì)比單元,用于將所述計(jì)算單元計(jì)算得到的所述圖像的表情值與所述第一確定單 元確定的表情標(biāo)準(zhǔn)值進(jìn)行對(duì)比;
[0034] 第二確定單元,用于根據(jù)所述確定單元確定的表情標(biāo)準(zhǔn)值與心理狀態(tài)的映射關(guān)系 和所述對(duì)比單元的對(duì)比結(jié)果,確定所述至少一個(gè)目標(biāo)區(qū)域?qū)?yīng)的心理狀態(tài)。
[0035] 優(yōu)選地,所述第一確定單元,用于選取已經(jīng)確定出心情狀態(tài)的至少兩幅圖像中頭 像的眼睛、嘴巴和鼻子區(qū)域,對(duì)于所述眼睛、嘴巴和鼻子區(qū)域中的每一個(gè)區(qū)域,均執(zhí)行計(jì)算 所述至少兩幅圖像的相對(duì)像素差值,并對(duì)所述眼睛、嘴巴和鼻子區(qū)域的相對(duì)像素差值求和, 作為表情標(biāo)準(zhǔn)值,建立所述表情標(biāo)準(zhǔn)值與所述已經(jīng)確定出心情狀態(tài)的對(duì)應(yīng)關(guān)系。
[0036] 優(yōu)選地,所述計(jì)算單元,進(jìn)一步用于對(duì)圖像進(jìn)行灰度化處理,確定所述灰度化處理 后的圖像中頭像的眼睛、鼻子和嘴巴分別對(duì)應(yīng)的像素點(diǎn)的灰度和。
[0037] 優(yōu)選地,上述裝置進(jìn)一步包括:第三確定單元,其中,
[0038] 所述第三確定單元,用于確定標(biāo)準(zhǔn)中性圖像,并計(jì)算所述標(biāo)準(zhǔn)中性圖像中頭像的 眼睛、鼻子和嘴巴分別對(duì)應(yīng)的標(biāo)準(zhǔn)像素點(diǎn)的灰度和;
[0039] 所述計(jì)算單元,用于計(jì)算所述灰度化處理后的圖像中頭像的眼睛、鼻子和嘴巴分 別對(duì)應(yīng)的像素點(diǎn)的灰度和與所述第三確定單元計(jì)算的標(biāo)準(zhǔn)中性圖像中對(duì)應(yīng)的標(biāo)準(zhǔn)像素點(diǎn) 的灰度和之間的灰度差值;
[0040] 根據(jù)下述公式,計(jì)算所述至少一個(gè)目標(biāo)區(qū)域的表情值;
[0041 ]
[0042] 其中,Xl表征每一張圖像中目標(biāo)區(qū)域i的灰度差值;f(xJ表征每一張圖像中目標(biāo) 區(qū)域i的表情值;c表征表情參數(shù);radom表征經(jīng)驗(yàn)值;
[0043] 利用所述至少一個(gè)目標(biāo)區(qū)域的表情值,根據(jù)下述公式,計(jì)算圖像的表情值;
[0044]
[0045]其中,征圖像j的表情值;w^表征圖像中目標(biāo)區(qū)域i的權(quán)重;bj表征圖像的 閾值;η表征目標(biāo)區(qū)域的個(gè)數(shù);rand(Xl)表征目標(biāo)區(qū)域i的平衡值。
[0046] 優(yōu)選地,上述裝置,進(jìn)一步包括:記錄單元和判斷單元,其中,
[0047] 所述記錄單元,用于記錄表情經(jīng)驗(yàn)值與表情狀態(tài)的對(duì)應(yīng)關(guān)系;
[0048] 所述判斷單元,用于判斷所述圖像的表情值與所述記錄單元記錄的表情經(jīng)驗(yàn)值是 否相同,如果是,則觸發(fā)所述第二確定單元;否則,觸發(fā)所述對(duì)比單元;
[0049] 所述第二確定單元,用于在接收到所述判斷單元的觸發(fā)時(shí),確定所述圖像對(duì)應(yīng)的 心理狀態(tài)為所述表情經(jīng)驗(yàn)值對(duì)應(yīng)的心理狀態(tài);
[0050] 所述對(duì)比單元,用于在接收到所述判斷單元的觸發(fā)時(shí),將所述計(jì)算得到的所述圖 像的表情值與所述確定的表情標(biāo)準(zhǔn)值進(jìn)行對(duì)比。
[0051] 優(yōu)選地,所述第一確定單元,進(jìn)一步用于確定至少兩張連續(xù)的圖像;
[0052] 所述對(duì)比單元,用于判斷所述至少兩張連