跳到正文
热点事件历史事件

Exo2EgoHOI提出交互保持视频生成框架

1 篇报道1 个报道来源4 天前更新

先了解这件事

AI 综述

2026年9月30日,arXiv报道了Exo2EgoHOI,一种面向手物交互保持的第三人称到第一人称视频生成框架。该方法将第三人称操作视频转换为第一人称观察,并结合4D HOI先验、双分支残差适配器和分解式门控交叉注意力,以保持手物交互及对象一致性。研究在ARCTIC-HOI和Ego-Exo4D上进行实验;在ARCTIC-HOI上,相比对应最佳基线,object mIoU提升32.3%,MPJPE降低34.7%,PA-MPJPE降低50.0%。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

9月30日
  1. arXiv · 多模态、视频与世界模型
    Exo2EgoHOI:面向手物交互保持的第三人称到第一人称视频生成

    Exo2EgoHOI提出一种手物交互感知的视频生成框架,将第三人称操作视频转换为第一人称观察,以保持手物交互和对象一致性。该方法结合4D HOI先验、双分支残差适配器和分解式门控交叉注意力,在ARCTIC-HOI和Ego-Exo4D上进行实验;在ARCTIC-HOI上,相比对应最佳基线,object mIoU提升32.3%,MPJPE和PA-MPJPE分别降低34.7%和50.0%。