大晓机器人联合南洋理工大学S-Lab、上海人工智能实验室发布人–场景交互重建研究HSImul3R,该成果已被全球计算机视觉顶级会议ECCV2026正式接收。

HSImul3R被定义为首个面向非标定稀疏视角输入、实现稳定可仿真人–场景交互重建的框架,并支持单目视频输入。HSImul3R在Easy、Medium、Hard三档任务中的交互稳定率分别为53.68%、30.56%和13.92%,高于HSfM的10.52%、4.50%和2.66%,并将人–场景三维穿模率从69.51%降至22.90%。HSImul3R提出物理闭环双向优化框架,包括面向场景的强化学习和直接仿真奖励优化。团队将优化后的人体动作迁移至UnitreeG1人形机器人,实现从日常图像/视频到三维人–场景交互重建、物理仿真优化、人形机器人动作迁移、真实机器人执行的完整链路。