在机器人技术的前沿探索中,智元机器人近期推出了一项重大创新——AgiBot Digital World大型仿真框架,这一成果为机器人操作技能的研究与应用开辟了新路径。与此同时,智元还慷慨地开源了与之配套的海量仿真数据集,为行业内外的研究者与实践者提供了宝贵的资源。
AgiBot Digital World是专为机器人操作技能量身打造的仿真平台,集成了种类繁多、高度逼真的三维资产,这些资产覆盖了从物体到场景乃至机器人模型的全方位内容。借助人工精细建模、三维重建技术和生成式人工智能(AIGC)的先进手段,该框架能够满足复杂多变的机器人操作任务仿真需求。通过高保真度的视觉渲染和精确的物理模拟,AgiBot Digital World确保了仿真情景与真实世界之间的微小域差异,为用户提供了近乎真实的感知和交互体验。
在AgiBot Digital World中,光影效果自然流畅,物体的物理行为也极为真实。例如,当机器人将小车放入篮子时,两者会随之晃动,这种细节的真实感大大增强了仿真的可信度。该框架还引入了多模态大模型,支持基于资产库自动生成操作任务,以及根据指定任务自动构建操作场景和物体布局,从而实现了数据闭环,极大提升了仿真任务的多样性和灵活性。
为了进一步提升数据的多样性和模型的泛化能力,AgiBot Digital World提供了多元化的专家轨迹生成策略。这些策略包括真机操作数字孪生、具身智能体自动生成以及仿真遥操作。通过这些手段,用户可以轻松获取丰富的专家演示数据,为机器人的策略学习提供有力支持。同时,数据生成引擎还支持环境光照、物体材质和物理属性的随机化,以及多种操作轨迹增强方式,从而生成具有鲁棒性的专家轨迹数据。
智元机器人此次开源的仿真数据集涵盖了家居、商超、办公、餐饮和工业五大场景,其中家居场景最为丰富,占比高达36%。数据集包含了超过180种具体物品,涉及9大品类和9种主要材质。还囊括了12种核心技能,如抓、放、插、倒等,这些技能可以灵活组合,应对各种复杂任务。这些数据集具有高质量、易泛化、任务多样和应用灵活等特点,为端到端模型的可靠训练提供了坚实基础。
随着AgiBot Digital World的推出和仿真数据的开源,智元机器人在具身智能技术领域迈出了重要一步。这些资源不仅为研究者提供了丰富的实验素材,也为实践者提供了强大的开发基础。可以预见,这将极大地加速具身智能技术的开发和应用进程,推动机器人技术迈向更加广阔的未来。