技術(shù)特征:1.基于對(duì)比學(xué)習(xí)的跨模態(tài)特征對(duì)齊與融合方法,其特征在于,步驟如下:
技術(shù)總結(jié)本發(fā)明公開一種跨模態(tài)特征對(duì)齊與融合方法,屬于多模態(tài)推薦領(lǐng)域。首先,通過構(gòu)建項(xiàng)目語義圖捕捉同一模態(tài)下項(xiàng)目之間的語義關(guān)系,并在此基礎(chǔ)上對(duì)整體特征和模態(tài)特定特征進(jìn)行圖卷積操作,增強(qiáng)其在該模態(tài)下的表達(dá)能力。捕獲并利用特征之間的潛在信息,緩解模態(tài)間不完全匹配的問題。然后,利用對(duì)比學(xué)習(xí)方法在每個(gè)模態(tài)下對(duì)比增強(qiáng)的整體特征與模態(tài)特征,促進(jìn)跨模態(tài)的信息傳遞與互補(bǔ)。通過聯(lián)合分析不同模態(tài)的項(xiàng)目語義圖,實(shí)現(xiàn)對(duì)模態(tài)間復(fù)雜關(guān)系的有效建模。本發(fā)明確??缒B(tài)的語義一致性,從而減少模態(tài)融合過程中的冗余和噪音,并提高多模態(tài)推薦的準(zhǔn)確率。
技術(shù)研發(fā)人員:原旭,齊安格,吳徽南,王嘉強(qiáng)
受保護(hù)的技術(shù)使用者:大連理工大學(xué)
技術(shù)研發(fā)日:技術(shù)公布日:2025/1/9