用于跨模態(tài)艦船圖像檢索的判別性對(duì)抗哈希變換器

摘要： 針對(duì)當(dāng)前主流的基于卷積神經(jīng)網(wǎng)絡(luò)(CNN)范式的跨模態(tài)圖像檢索算法無(wú)法有效提取艦船圖像細(xì)節(jié)特征，以及跨模態(tài)“異構(gòu)鴻溝”難以消除等問(wèn)題，該文提出一種基于對(duì)抗機(jī)制的判別性哈希變換器(DAHT)用于艦船圖像的跨模態(tài)快速檢索。該網(wǎng)絡(luò)采用雙流視覺(jué)變換器(ViT)結(jié)構(gòu)，依托ViT的自注意力機(jī)制進(jìn)行艦船圖像的判別性特征提取，并設(shè)計(jì)了Hash Token結(jié)構(gòu)用于哈希生成；為了消除同類別圖像的跨模...