NVIDIA 推出 Warp 和 Gaussian Splatting 的先进机器人模拟
realtime news Jul 22, 2025 16:52
探索 NVIDIA 利用 Warp 和 Gaussian Splatting 的创新机器人模拟方法，能够实时创建数字孪生体，以提升机器人的感知和交互能力。
NVIDIA 正在机器人模拟技术领域开辟新前沿，通过集成 Warp 和 Gaussian Splatting 技术来开发物理世界的动态数字表示。据 NVIDIA 博客撰写的 Jad Abou-Chakra，这种新方法旨在创建实时数字孪生，从而增强机器人的感知和交互能力。
机器人心理模型的进步
该创新的核心在于物理化高斯体的概念，使机器人能够维持其环境的实时内部模拟。这个系统不仅依赖原始图像流，还构建了与现实同步的连续、具备物理感知的世界模型。这个方法是向在机器人中复制类人视觉和物理推理的一大飞跃。
可微分渲染的作用
特别是通过 Gaussian Splatting 的可微分渲染在初始化和监督机器人模拟器中起着至关重要的作用。通过不断将渲染图像与现实观察对齐，系统形成了一个强大的反馈循环。即使是有缺陷的模拟，由于实时修正补偿了任何差异，也能长时间保持精确。
在机器人领域中利用先验知识
NVIDIA 方法解决的一个关键挑战是依赖多个摄像头进行精确模拟。通过利用先验知识——如机器人的姿态、几何形状和与物体的交互——系统可以用更少的摄像头有效运行。视觉和物理数据的整合确保了表示不仅基于外观，还根植于物理。
双重表示：粒子和高斯体
模拟器基于两个主要组件：粒子 和 三维高斯体。粒子代表物理结构，并由快速稳定的物理引擎管理。同时，三维高斯体捕捉视觉外观，使用 Gaussian Splatting 渲染。这一双重系统形成了一个闭环，物理和视觉不断互相修正，保持环境的精确模型。
由 NVIDIA Warp 和 gsplat 驱动
NVIDIA 的模拟器利用 NVIDIA Warp 作为其物理引擎，而 gsplat 处理可微分渲染。这种结合实现了高效的实时模拟，推动了机器人人工智能领域的显著进步。
如需详细的技术概览和访问开源资源，请访问 NVIDIA 博客。
Image source: Shutterstock.jpg)