AgibotTech/genie_sim

解决的问题

Genie Sim 是一个全面的仿真平台，旨在加速具身智能（机器人学）的开发。它通过提供高保真环境重建、合成数据收集以及机器人策略的自动评估工具，减少了对物理硬件的依赖。

工作原理

该平台结合了 3D 重建（使用 3D 高斯泼溅）和视觉生成模型，创建逼真的仿真环境。它利用 LLM 从自然语言提示生成多样化的场景，并提供与 ROS 2 集成的实时（RT）引擎以实现交互式仿真。系统包含一个包含超过 10 万个场景的基准测试套件，用于评估模型在操作和认知方面的能力。

适用人群

专为专注于具身 AI 的机器人开发者和 AI 研究人员设计，特别是那些需要生成大规模合成数据集或在部署到真实硬件之前验证机器人策略的用户。

主要亮点

• LLM 驱动的场景生成：通过对话式交互即时创建复杂仿真场景。
• 面向智能体的 SKILLs：机器可读的配方，使 AI 编码智能体（如 Claude Code）无需人工干预即可操作仿真器。
• 高保真资产库：涵盖零售、工业、餐饮、家庭和办公环境的 5,000 多个经过验证的 3D 资产。
• 零样本仿真到现实迁移：生成的合成数据可使模型以高成功率将能力迁移到真实机器人上。
• 基于 VLM 的自动评估：使用视觉-语言模型（VLM）的自动化系统，对模型的操作和认知技能进行分析。