技術(shù)特征：

1.一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，步驟s1，具體包括：

3.根據(jù)權(quán)利要求2所述的一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，在步驟s13之后，還包括步驟s14，計(jì)算源分類損失，如下：

4.根據(jù)權(quán)利要求3所述的一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，在步驟s14之后，還包括使用mcc損失使目標(biāo)預(yù)測(cè)中的類混淆最小化的步驟，如下：

5.根據(jù)權(quán)利要求3所述的一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，步驟s1中還包括使用對(duì)抗損失函數(shù)來(lái)更新分類器的步驟，如下：

6.根據(jù)權(quán)利要求1所述的一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法，其特征在于，步驟s2，具體包括：

7.一種基于權(quán)利要求1-6中任意一項(xiàng)權(quán)利要求所述基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法實(shí)現(xiàn)的基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類系統(tǒng)，其特征在于，包括：域適應(yīng)模塊和視覺-語(yǔ)言對(duì)齊模塊，其中：

技術(shù)總結(jié)
本發(fā)明提供一種基于多模態(tài)的無(wú)監(jiān)督域適應(yīng)高光譜圖像分類方法及系統(tǒng)。本發(fā)明方法，包括：通過(guò)圖像編碼器提取全局特征，使用雙分類器對(duì)圖像樣本進(jìn)行分類，對(duì)齊源域與目標(biāo)域同類的分布，并為目標(biāo)域生成偽標(biāo)簽；通過(guò)文本編碼器提取文本特征，將文本特征和圖像特征進(jìn)行對(duì)比學(xué)習(xí)，拉近同類別的文本、圖像特征間的距離，提升數(shù)據(jù)的可分離性。本發(fā)明系統(tǒng)，包括域適應(yīng)模塊和視覺?語(yǔ)言對(duì)齊模塊，其中：域適應(yīng)模塊由圖像編碼器得到圖像特征，由雙分類器得到預(yù)測(cè)結(jié)果，并選擇其中一個(gè)預(yù)測(cè)結(jié)果作為目標(biāo)域偽標(biāo)簽；視覺?語(yǔ)言對(duì)齊模塊利用源域標(biāo)簽和目標(biāo)域偽標(biāo)簽得到相應(yīng)文本描述，在由文本編碼器得到文本特征后，文本特征與域適應(yīng)部分得到的圖像特征進(jìn)行對(duì)齊。

技術(shù)研發(fā)人員：房卓群,何宇彤,李照奎,李飛,王巖,曾琳琳,張鳳儀,羅少騰,戚銘泰,程文
受保護(hù)的技術(shù)使用者：沈陽(yáng)航空航天大學(xué)
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/23