跳到正文
原文
HF Daily Papers·· 1 天前精选AI 评分45

Video-Point Model 通过点轨迹预测学习4D世界

Learning the 4D World through Point Trajectory Forecasting

AI 导读

Video-Point Model(VPM)根据多视角视频历史和语言指令,联合预测任意视角的未来视频与持久场景点的3D轨迹。它在预训练世界模型中加入相机条件多视角处理和轨迹头,并构建 VPM-Data 仿真语料与 VP-WorldBench 预测基准。

推荐理由

将多视角视频预测与持续点轨迹监督结合,并通过仅视频对照及模拟和真实机器人实验呈现共享3D表征的作用。

来源:HF Daily Papers · huggingface.co