基于自适应融合技术的多模态实体对齐模型

  • 打印
  • 收藏
收藏成功
微博 QQ空间 微信


打开文本图片集

摘 要：多模态实体对齐旨在识别由结构三元组和与实体相关的图像组成的不同的多模态知识图谱之间的等价实体。现有的多模态实体对齐的研究主要集中在多模态融合策略，忽略了模态缺失和不同模态难以融合的问题，未能充分利用多模态信息。为了解决上述问题，提出了MACEA模型，该模型使用多模态变分自编码方法主动补全缺失的模态信息，动态模态融合方法整合不同模态的信息并相互补充，模态间对比学习方法对模态间进行建模，这些方法有效解决了模态缺失与模态难以融合的问题。（剩余15614字）

试读结束

目录
monitor