欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種促進(jìn)多模態(tài)信息融合的情感分析方法及裝置

文檔序號(hào):40581982發(fā)布日期:2025-01-07 20:21閱讀:來(lái)源:國(guó)知局

技術(shù)特征:

1.一種促進(jìn)多模態(tài)信息融合的情感分析方法,其特征在于,所述方法包括:

2.根據(jù)權(quán)利要求1所述的情感分析方法,其特征在于,所述獲取多模態(tài)數(shù)據(jù),分別對(duì)各模態(tài)數(shù)據(jù)進(jìn)行預(yù)處理,得到各模態(tài)的初始特征的步驟,包括:

3.根據(jù)權(quán)利要求1所述的情感分析方法,其特征在于,所述獲取訓(xùn)練集,基于k-means算法對(duì)訓(xùn)練集進(jìn)行聚類(lèi)以學(xué)習(xí)聲學(xué)詞匯和視覺(jué)詞匯,分別建立聲學(xué)詞匯表和視覺(jué)詞匯表的步驟,包括:

4.根據(jù)權(quán)利要求3所述的情感分析方法,其特征在于,通過(guò)聲學(xué)詞匯表和視覺(jué)詞匯表分別對(duì)音頻模態(tài)的初始特征和視頻模態(tài)的初始特征進(jìn)行查詢(xún)的計(jì)算公式如下:

5.根據(jù)權(quán)利要求1所述的情感分析方法,其特征在于,所述將非文本模態(tài)的單詞索引序列嵌入至文本模態(tài)的初始特征中建立非語(yǔ)言位移向量,并將所述非語(yǔ)言位移向量添加至文本模態(tài)的初始特征中進(jìn)行移位操作,輸出多模態(tài)向量的步驟,包括:

6.根據(jù)權(quán)利要求5所述的情感分析方法,其特征在于,

7.根據(jù)權(quán)利要求1所述的情感分析方法,其特征在于,所述transformer模型由多頭注意力機(jī)制、一個(gè)前向網(wǎng)絡(luò)、殘差連接層與層歸一化模塊組成。

8.一種促進(jìn)多模態(tài)信息融合的情感分析裝置,其特征在于,所述裝置包括:

9.一種計(jì)算機(jī)設(shè)備,包括存儲(chǔ)器和處理器,所述存儲(chǔ)器存儲(chǔ)有計(jì)算機(jī)程序,其特征在于,所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1-7任一所述的情感分析方法的步驟。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其上存儲(chǔ)有計(jì)算機(jī)程序,其特征在于,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7任一所述的情感分析方法的步驟。


技術(shù)總結(jié)
本發(fā)明公開(kāi)了一種促進(jìn)多模態(tài)信息融合的情感分析方法及裝置,方法包括:基于K?Means算法建立聲學(xué)詞匯表和視覺(jué)詞匯表并查詢(xún)非文本模態(tài)的特征,得到非文本模態(tài)的單詞索引序列并嵌入至文本模態(tài)的初始特征中建立非語(yǔ)言位移向量;將非語(yǔ)言位移向量添加至文本模態(tài)的初始特征中進(jìn)行移位操作,得到多模態(tài)向量;將多模態(tài)向量進(jìn)行上下文感知和情感分析,得到并輸出情感分析結(jié)果。在本發(fā)明中,通過(guò)K?Means算法將非文本模態(tài)的特征序列轉(zhuǎn)換為與文本模態(tài)一樣的單詞索引序列,縮小融合時(shí)語(yǔ)言文本模態(tài)和非語(yǔ)言文本模態(tài)特征的分布差距,便于后續(xù)的特征融合;在特征融合時(shí)通過(guò)非語(yǔ)言位移向量來(lái)增強(qiáng)語(yǔ)言文本模態(tài)的表示,從而提升情感分析的準(zhǔn)確性。

技術(shù)研發(fā)人員:盤(pán)皓然,馮廣,周垣樺,李偉辰
受保護(hù)的技術(shù)使用者:廣東工業(yè)大學(xué)
技術(shù)研發(fā)日:
技術(shù)公布日:2025/1/6
當(dāng)前第2頁(yè)1 2 
網(wǎng)友詢(xún)問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
黄陵县| 观塘区| 永济市| 固始县| 大兴区| 天全县| 呼伦贝尔市| 陆丰市| 出国| 阜南县| 马公市| 罗甸县| 敦煌市| 石河子市| 昭通市| 宁晋县| 阳春市| 曲麻莱县| 永年县| 娄底市| 陇西县| 龙门县| 台湾省| 息烽县| 肇庆市| 牡丹江市| 通江县| 睢宁县| 东城区| 上栗县| 孙吴县| 喀喇| 建阳市| 新平| 霍城县| 东山县| 浙江省| 永仁县| 绥芬河市| 米泉市| 北票市|