基于注意力和双线性融合的图文情感分析
夏欢
胡勇
四川大学网络空间安全学院四川成都 610065
摘要：近年来,社交媒体上以图像和文本为主要内容的多模态信息不断增多,不同模态之间的情感信息相互关联,互为补充.利用海量的不同模态的社交媒体数据信息,有助于更好地对公众情感进行分析.为充分利用图像与文本各自模态中的情感信息,充分挖掘图像与情感信息之间的交互信息,提出一种基于注意力机制和双线性融合的多模态混合融合情感分析模型,构建BERT-BiGRU-Att文本分类模型和ResNet-Att图像分类模型,基于双线性融合的特征融合模型,并利用Dempster组合规则作为决策融合方式构建混合融合模型.在推特图文情感分析数据集上进行了实验,实验结果显示模型能够有效挖掘各模态特征,利用图文信息之间的相关性,在情感分析任务中获得更好的性能.
关键词：注意力机制双线性融合情感分析多模态融合社交媒体
论文发表日期：2022-05-28
在线出版日期：2026-05-22（本平台首次上网日期，不代表文献的发表时间）
页数：4( 38-41 )