欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種基于AU引導的微表情識別方法及裝置

文檔序號:40609602發(fā)布日期:2025-01-07 20:51閱讀:來源:國知局

技術(shù)特征:

1.一種基于au引導的微表情識別方法,其特征在于,所述微表情識別方法包括:

2.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,獲取原始微表情視頻,對所述原始微表情視頻預處理,得到微表情序列,包括:

3.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,

4.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,將運動文本描述送入文本編碼器,得到文本運動特征,包括:

5.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,將視覺運動特征和文本運動特征經(jīng)過兩個可學習的投影頭映射到聯(lián)合的多模態(tài)空間,得到視覺運動向量和文本嵌入向量;利用文本編碼器對比損失函數(shù)進行視覺嵌入向量和文本嵌入向量的語義對齊,包括:

6.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,通過將視覺運動特征送入模型情緒推理模塊進行情緒分類,包括:

7.根據(jù)權(quán)利要求1所述的基于au引導的微表情識別方法,其特征在于,對模型訓練,動態(tài)調(diào)節(jié)所述文本編碼器對比損失函數(shù)和目標分類損失函數(shù)的權(quán)重,訓練后的模型用于微表情識別任務,包括:

8.一種基于au引導的微表情識別裝置,其特征在于,包括:

9.一種電子設備,包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序,其特征在于,所述處理器執(zhí)行所述程序時實現(xiàn)如權(quán)利要求1至7中任一項所述的基于au引導的微表情識別方法。

10.一種非暫態(tài)計算機可讀存儲介質(zhì),其上存儲有計算機程序,其特征在于,該計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至7中任一項所述的基于au引導的微表情識別方法的步驟。


技術(shù)總結(jié)
本發(fā)明公開了一種基于AU引導的微表情識別方法及裝置,所述微表情識別方法包括:對微表情樣本視頻預處理,得到微表情序列;通過公開數(shù)據(jù)集的AU編碼標簽以及面部動作編碼系統(tǒng),為每個微表情樣本生成面部肌肉運動文本描述;將處理好的微表情序列送入視覺編碼器,得到編碼好的視覺運動特征;將運動文本描述送入文本編碼器,得到文本運動特征;通過生成AU引導的細粒度的微表情面部肌肉運動文本描述,并利用CLIP對比損失進行跨模態(tài)的語義對齊,可提升模型對微弱局部的微表情運動的感知與捕捉,學習到顯著的時空微表情運動特征,將運動特征有效轉(zhuǎn)化為情緒特征,并使用Focal?Loss分類損失來解決微表情數(shù)據(jù)類不平衡的問題,大幅提升了模型的識別性能。

技術(shù)研發(fā)人員:陳恩紅,趙思蕊,劉世鳳,徐童,毛星蘢
受保護的技術(shù)使用者:中國科學技術(shù)大學
技術(shù)研發(fā)日:
技術(shù)公布日:2025/1/6
當前第2頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
盐城市| 泰顺县| 新田县| 西吉县| 蕲春县| 微博| 蒙山县| 石屏县| 鸡泽县| 镇安县| 阜新| 三台县| 赫章县| 玉溪市| 江门市| 通榆县| 宜兰市| 两当县| 浦县| 甘洛县| 分宜县| 丹江口市| 正定县| 离岛区| 图木舒克市| 长子县| 格尔木市| 清苑县| 泸州市| 衡阳县| 正定县| 博罗县| 壶关县| 新田县| 临潭县| 宜丰县| 潍坊市| 邵阳县| 德清县| 五寨县| 德庆县|