微软与浙大发布 World-R1,强化学习破解视频生成 3D 一致性难题

Source

品玩4月29日讯,据 Arxiv 页面显示,微软研究院与浙江大学联合团队正式发布文生视频模型训练框架 World-R1。

该框架创新性地利用强化学习技术,使视频生成模型在无需修改架构且不依赖 3D 数据集的情况下,成功习得 3D 几何一致性,有效解决了镜头大幅移动时物体变形或消失的“几何幻觉”痛点。

World-R1 的核心机制在于将 3D 一致性约束转化为强化学习的奖励信号。系统通过 Depth Anything 3 重建 3DGS 场景并渲染新视角,结合 Qwen3-VL 评分与重建误差计算奖励,利用 Flow-GRPO 算法反馈给模型。同时,团队引入了每 100 步一次的“动态微调”策略,在强化几何约束的同时,确保人物运动等动态效果的流畅性。