基于深度图文细粒度对齐的弱监督多模态情感分析

  • 打印
  • 收藏
收藏成功


打开文本图片集

摘 要:针对现有多模态情感分析方法在模态对齐上不够精细,深度特征融合时易丢失重要信息的问题,提出了一种图文深度交互模型。该模型摈弃使用图像区域强监督的方式检测图片中的物体,首先将图片平等划分成更精细的区域序列,通过双路融合流的深度融合层来对齐多模态数据中蕴涵的潜在模式,并使用自适应门阀优化残差注意力信息的传递。(剩余19040字)

目录
monitor