基于Transformer融合的遥感图像文本跨模态检索方法
吴媛媛1
夏沭涛2
孙炜玮2
1.91001部队 北京 1000362.海军航空大学信息融合研究所 烟台 264001
摘要:论文提出了一种基于Transformer融合的遥感图像文本跨模态检索方法,模型采用包含自注意力模块的单模态编码器获取各模态的特征表示,再经基于交叉注意力的跨模态融合模块使得不同模态信息相交互,并通过对比损失充分挖掘遥感图像和文本表示之间的潜在语义关系,进一步提高了遥感图像跨模态检索性能,在多个公开数据集上进行了实验验证,结果表明所提方法能够较准确地实现这两种模态信息之间的相互检索,验证了所提方法的有效性.
关键词:跨模态检索遥感图像Transformer注意力机制
分类号:TP751.1(遥感技术)
论文发表日期:2023-08-20
在线出版日期:2025-08-15(本平台首次上网日期,不代表文献的发表时间)
页数:7( 64-70 )
英文信息展开
舰船电子工程

舰船电子工程

CSTPCD
ISSN:1672-9730
年,卷(期):2023,43(8)
所属栏目:信息融合技术