跳到正文
原文
arXiv · 多模态、视频与世界模型· Shuyang Jiang·· 4 天前AI 评分74

梯度冲突能预测理解与生成的权衡吗?对统一多模态模型冲突指标有效性的受控审计

Does Gradient Conflict Predict the Understanding--Generation Trade-off? A Controlled Audit of Conflict-Metric Validity in Unified Multimodal Models

AI 导读

这项研究在受控测试床 GRIDUMM 中审计梯度冲突指标能否预测统一多模态模型的理解与生成权衡。在 63 个配置和 372 个测量检查点中,没有方向性冲突指标达到绝对 Spearman 相关系数 0.3 且置信区间排除零;单调压低冲突也未改变权衡结果。研究发现,功能干扰指标优于方向性冲突指标,训练损失则能较强地追踪该权衡,作者计划在论文接收后公开审计代码。

来源:arXiv · 多模态、视频与世界模型 · arxiv.org