ToddlerBot— 斯坦福大学开源的机器学习与人形机器人平台

斯坦福大学开源的toddlerbot:一款用于运动操作的人形机器人平台

ToddlerBot是斯坦福大学推出的一款开源人形机器人平台,专为高效收集大规模、高质量的运动操作训练数据而设计。它拥有30个主动自由度,采用Dynamixel电机驱动,总成本控制在6000美元以内。凭借数字孪生技术和零点校准,ToddlerBot实现了模拟到现实的零样本迁移,并支持远程操作和高效的现实世界数据采集。在臂展、负载能力、耐力和动态运动等方面,ToddlerBot均展现出优异性能。其开源设计和详细的组装手册方便复制和维护,非常适合科研和教育应用。

ToddlerBot的核心功能:

  • 高效数据采集: 在模拟和真实环境中同步采集高质量训练数据,满足大规模机器学习需求。
  • 全身运动与操作: 30个自由度赋予其执行复杂全身运动和操作的能力,例如行走、俯卧撑、引体向上、双臂操作以及全身协调操作。
  • 零样本模拟到现实迁移: 基于高精度数字孪生技术和电机系统辨识,实现模拟策略到真实世界的无缝转移。
  • 远程操作与数据采集: 配备直观的远程操控设备,方便基于人类演示快速采集真实世界数据,用于学习运动技能。
  • 人机交互与协作: 支持多机器人协作任务,例如共同完成房间清洁等复杂场景。

ToddlerBot的技术原理详解:

  • 数字孪生与零点校准: 高保真数字孪生模型基于精确的物理模型和系统辨识技术构建,确保模拟数据与真实世界的一致性;3D打印的校准设备则快速校准机器人零点位置,保证运动控制精度。
  • 电机系统辨识 (SysID): 通过电机跟踪扫频信号,采集位置跟踪数据并拟合执行模型,确保动态参数的准确性,从而使机器人在模拟和真实环境中保持一致的运动特性。
  • 远程操作技术: 以第二个上肢作为远程操作设备,结合力敏电阻和手持游戏电脑(如Steam Deck或ROG Ally X),实现对机器人运动的直观控制,方便操作员引导机器人完成复杂任务。
  • 强化学习与模仿学习: 采用MuJoCo和PPO算法进行强化学习,训练步行和转向策略,输出关节位置设定值,实现高效的运动控制;模仿学习则基于远程操作采集的真实世界数据,训练扩散策略(Diffusion Policy),以完成复杂的操作任务。

项目资源:

  • 项目官网: https://www.kunjuke.com/link/813b02a0d7aae51c1a84fca601b52cad
  • GitHub仓库: https://www.kunjuke.com/link/813b02a0d7aae51c1a84fca601b52cad
  • arXiv技术论文: https://www.kunjuke.com/link/813b02a0d7aae51c1a84fca601b52cad

ToddlerBot的应用前景:

  • 家庭玩具整理: 两个机器人协作,一个负责拾取玩具,另一个负责推车,共同完成玩具收纳。
  • 教育编程平台: 学生可以通过编程让机器人完成行走、俯卧撑等任务。
  • 实验室运动技能研究: 利用强化学习训练机器人完成跳跃、攀爬等高难度动作。
  • 家庭陪伴机器人: 与儿童互动,进行拼图或运动游戏。
  • 工业零部件操作: 操作小型电子元件或机械零件。

以上就是ToddlerBot— 斯坦福大学开源的机器学习与人形机器人平台的详细内容,更多请关注昆居客【www.kunjuke.com】。

相关推荐:

开源虚拟化软件 VirtualBox 7.2.12 发布:修复 Arch Linux 内核崩溃、为 Win11 提升 DX11 性能

7 月 2 日消息,科技媒体 Neowin 昨日(7 月 1 日)发布博文,报道称甲骨文更新开源虚拟化工具 VirtualBox,在最新 7.2.12 维护版本更新中,重点修复影响 Arch Linux 用户的内核崩溃错误。本次维护更新重点修复 7.2.10 版本中存在的严重 Bug,此前版本启动 Arch Linux 虚拟机后,主机内核可能会完全卡死,且会截断日志记录,导致用户在不重启情况下无法...

葡萄牙发布首个欧洲葡语开源大语言模型 AMALIA

7 月 2 日消息,葡萄牙政府当地时间本月 1 日宣布,首个基于欧洲葡萄牙语开发的开源大语言模型 AMALIA 正式发布。了解到作为葡萄牙的国家战略项目,AMALIA 模型由来自葡萄牙多家学术机构的 60 余位研究人员历时 18 个月开发而成,先期投资 550 万欧元,利用了 Deucalion、MareNostrum 5 等算力基础设施。其开发的首个阶段利用约 4 万亿个葡语单词训练出 9B 规...

马斯克晒特斯拉 Optimus 擎天柱人形机器人量产团队合照,坦言生产初期会极其缓慢、和造车不一样

感谢网友 刺客 的线索投递! 7 月 2 日消息,特斯拉 CEO 埃隆 · 马斯克昨日(7 月 1 日)发布了一张大合照,并配文称,在弗里蒙特工厂参观 Optimus 擎天柱机器人生产线。虽然马斯克没有透露其他信息,但部分媒体认为这一言论可能代表着特斯拉的人形机器人 Optimus 正进入关键的量产阶段。有网友猜测,特斯拉近期减少 Optimus 公开演示,可能是因为量产进度已超出市场预期。对此,...

开源照片备份平台 Immich 3.0 发布:引入工作流自动化,移动端新增无损照片编辑

7 月 3 日消息,科技媒体 Neowin 昨日(7 月 2 日)发布博文,报道称开源照片备份应用 Immich 3.0 发布,新增移动端无损照片编辑、Workflows(工作流)自动化、网页自定义视频播放器,并调整 Android 与 iOS 后台备份机制。针对移动端,Immich 3.0 新增无损照片编辑功能,在保留原始源文件情况下,支持用户在手机上裁剪和旋转图片。用户现在可以在移动应用中裁剪...

开源兼容层 Wine 11.12 发布:整合 FFmpeg 库,修复 27 项问题

6 月 30 日消息,科技媒体 Linuxiac 昨日(6 月 29 日)发布博文,报道称 Wine 11.12 发布,整合 FFmpeg 库,升级 Mono 11.2,并修复了 27 项问题。注:Wine 是一个开源兼容层,通过把 Windows 应用调用转换为 Linux、macOS 等系统可识别的接口,让部分 Windows 软件和游戏直接运行,常用于兼容跨平台办公软件、老游戏和专业工具。在...

开源家庭影院软件 Kodi 22 Beta 发布:升级 FFmpeg 8.1 等

6 月 30 日消息,科技媒体 Linuxiac 昨日(6 月 29 日)发布博文,报道称开源家庭影院软件 Kodi 22 已迈入 Beta 测试阶段,内部代号为“Piers”,已基本完成主要功能开发,后续重心转向提高稳定性、优化性能。视频处理层面,Kodi 22 测试版升级至 FFmpeg 8.1,新版本为视频新增实时码率信息标签,改进章节处理,并将书签整合到快进与快退跳转逻辑,以及修复启用关键...

开源游戏引擎 Godot 修改贡献指南,禁止开发者为项目引入 AI 直接生成的代码

7 月 1 日消息,Godot 基金会宣布,将正式修改贡献指南,明确禁止开发者为 Godot 项目引入 AI 直接生成的代码、由 AI 智能体提交的 Pull Request,同时要求开发者互相沟通时禁止使用 AI 翻译器生成的文本,以应对近几个月愈发严重的“AI slop”问题。该基金会表示,此类低质量贡献正在持续消耗维护者精力、打击社区审查者积极性。注意到,今年 2 月时 Godot 基金会就...

瑞银:约六成企业收紧 AI 开支,DeepSeek 等开源大模型有望受益

7 月 1 日消息,瑞银分析师表示,企业高管如今对人工智能相关开支的管控意识正在不断增强。瑞银分析师卡尔 · 基尔斯泰德、蒂莫西 · 阿尔库里、泰勒 · 麦金尼斯与团队同僚在近期一份研报中写道:“过去几周,我们与十几位企业信息技术负责人深度交流后发现,约六成企业已出台各类管控措施,在不同程度上收紧人工智能方面的开支。”随着首席财务官与首席技术官发现人工智能相关账单持续走高,词元(token)调用成...