AgibotTech/genie_sim

解决的问题

Genie Sim 是一个为加速体感智能（机器人学）开发而设计的综合性仿真平台。它通过提供高保真环境重建、合成数据收集以及机器人策略的自动化评估工具，减少了对物理硬件的依赖。

工作原理

该平台整合了3D重建与视觉生成技术，创建逼真的仿真环境。它利用LLM驱动技术，通过自然语言提示生成多样化的场景和评估配置。系统基于原生ROS 2引擎，支持多种物理后端（如Isaac Sim PhysX和Newton），并包含CLI用于管理Docker生命周期和工作区构建。

适用人群

适用于从事体感AI开发与研究的开发者和研究人员，特别是那些正在构建和测试机器人操作与运动-操作策略的人。

主要亮点

• LLM驱动的场景生成：通过对话式交互和自然语言提示，即时生成仿真场景。
• Genie Sim基准测试：一个标准化工具，包含超过10万个场景和200多个任务，用于建立AI模型的能力画像。
• 高保真资产：涵盖零售、工业、餐饮、家庭和办公环境的5,000多个经过验证的3D资产。
• 合成数据流水线：提供超过10,000小时的合成数据，以及用于VR远程操作和使用cuRobo自动数据收集的工具。
• 面向智能体的SKILLs：包含机器可读的配方（SKILL.md），允许AI编码智能体（如Claude Code或Cursor）无需人工干预即可操作仿真器。
• 仿真到现实的迁移：支持在合成数据上训练的模型零样本迁移到真实机器人上。