MEQ提出互反馈多模态表征学习架构

论文提出互反馈架构 MEQ，通过两个模态组件持续交换信息，将输入精炼为相互耦合的嵌入，并把交互固定点定义为最终输出。理论分析讨论了模型解释与避免失败的设计，分类和视觉定位实验显示，MEQ 在基于拼接的多模态分类任务上表现更优或具有竞争力，并能逐步改善视觉定位。