NVlabs/mimicgen

This code corresponds to simulation environments used as part of the MimicGen project.

它解决了什么问题

训练机器人在现实世界中执行任务通常需要大量的人类演示,而收集这些演示既缓慢又昂贵。MimicGen 通过从少量人类示例中生成许多新的任务演示来解决这个问题,因此机器人学习可以在无需人类记录每种变体的情况下进行扩展。

工作原理

MimicGen 提供的代码可以获取任务的人类演示,并利用模拟合成具有不同物体放置、机器人起始位置和其他变体的额外演示。它包括现成的模拟环境和预生成的数据集。发布的数据集包含涵盖 12 个任务的超过 48,000 个演示,该工具还可以根据需要创建更多演示。该系统基于同名的 CoRL 2023 论文。

适用人群

从事机器人学习的研究人员和开发人员,特别是那些希望在不物理收集每个演示的情况下,使用大量多样化演示数据来训练策略的人。它对于研究机器人操作的可扩展数据生成的人员也很有用。

亮点

  • 已发布涵盖 12 个不同任务的超过 48,000 个演示
  • 数据生成工具可以创建无限的额外演示
  • 包含模拟环境和完整的数据生成代码
  • 来自 NVIDIA Labs 的官方发布,提供用于入门、自定义环境和重现已发表结果的文档和教程
  • 数据集在宽松的 CC-BY 4.0 许可下发布

相关

  • 项目
  • 项目
  • 项目
  • 项目