当前位置: 首页 > news >正文

Helix 02 :移动+操作融合,解锁人形机器人全身控制的VLA模型

移动操作一直是人形机器人领域的关键挑战。真正的难点不在于实现其中任何一种单一能力,而在于将二者无缝融合为单一、连贯的行为。

移动与操作相互影响、动态耦合:托举物体会改变身体平衡,移动步伐会影响肢体的可操作范围,机器人的四肢动作始终处于相互制约的动态状态。尽管当今的人形机器人已能完成跳跃、舞蹈等高动态动作,却仍普遍面临一个根本局限:缺乏真正的自主可控性。

多数系统仅能复现经离线规划的动作,且仅能接收有限的反馈信息。一旦环境出现预期之外的偏移或接触变化,整个任务便容易失效。为此,传统方案往往采取折中策略:将移动与操作拆分为独立模块,再用状态机进行拼接。机器人只能按固定流程分步执行——例如先行走、再停止、调整平衡、伸手抓取、然后继续行走。这种方式切换迟缓、鲁棒性低,动作也显得僵化而不自然。

实现真正的自主,需要一套全新的技术路径:一个能对机器人全身进行一体化实时推理的统一学习系统。它必须能够在移动中操作、在操作中调整平衡,并能从失误中即时恢复,完成感知-决策-执行的持续闭环。

基于此,Figure 公司于2026年1月发布了 Helix 的升级版 ——Helix 02,将控制能力从机器人上半身拓展至全身,实现了行走、操作与平衡三大功能的一体化协同控制。

一、Helix 02模型架构

在模型架构层面,Helix 02 在初代 Helix 的“System1、System2” 双系统架构基础上,新增了基础层 System 0,各系统均按自身固有时间尺度独立运行,各司其职、协同配合:

  • System2(以下简称“S2”:针对任务目标进行低速推理,专注于场景解析、语言理解与行为序列规划;

  • System1(以下简称“S1”):具备高速决策能力,以 200 Hz 的频率将感知信息转化为全身关节运动目标;

  • System0(以下简称“S0”:执行频率高达 1 KHz,负责全身平衡维持、接触感知与动作协同。

三者紧密配合,共同构成一套从视觉像素到关节力矩输出的高度集成化层级架构。其中,S2 支撑起复杂长时程任务所需的语义推理能力,S1 实现全传感器与全执行器之间的高速联通,S0 则提供经由学习训练的全身控制能力。

依托于三层架构的高效协同,Helix 02 构建出能够支持人形机器人在室内环境中无缝融合行走与操作的连续自主控制能力。

1)System 2:场景理解与语言交互

初代Helix 中,系统S2是一个 70亿(7B)参数的预训练VLM模型,用于处理机器人单目视觉图像和机器人状态信息(包括手腕姿态和手指位置),并将它们投影到视觉语言嵌入空间中。S2 将所有语义任务相关信息提炼为一个连续的潜在向量,以7-9 Hz的频率传递给 S1 ,为机器人的行为决策提供高层次的指导。

在Helix 02 系统中,S2 依旧作为语义推理层,承担场景解析、语言理解的任务,并为S1生成隐式任务目标。但是,Helix 02大幅拓展了S2 可指定的动作行为范围:此前其仅能下达简单指令,如 “拿起番茄酱”,如今可下达复杂的连续动作指令,例如:“走到洗碗机旁并打开柜门”、“将碗具端至操作台”、“返回上层碗架取拿杯子”。

S2无需规划底层的步序动作,也无需明确规定四肢的协同方式,只需生成一系列语义隐状态,由S1将其解析为运动控制指令,最终交由 S0 执行即可。

2)System 1:“全传感器输入、全关节输出” 的视觉运动策略网络

初代Helix 中,S1 仅实现对机器人上半身的控制,输入数据为关节状态与视觉图像信息,然后以 200Hz 频率输出包括手腕姿态、手指弯曲和外展控制,以及躯干和头部方向在内的上半身控制指令。

而在Helix 02中,S1仍是一个 8000万(80M)参数的Transformer模型,但接入了机器人的头部相机、掌心相机、指尖触觉传感器、全身本体感知所有传感器,实现机器人全身的全关节级控制,涵盖腿部、躯干、头部、手臂、腕部及单根手指。

S1依旧是基于S2隐状态的Transformer模型,如今可输出全身关节运动目标,由 S0以1KHz的频率实时跟踪执行。

3)System 0 :基于人类数据的类人化全身控制

S0是类人化全身控制的基础模型,通过学习人类维持平衡与稳定的运动模式,形成运动习得先验,为Helix 02的物理具身提供核心支撑 —— 在上层网络进行任务规划与推理时,S0可保障所有动作流畅、安全、稳定执行。

无需为行走、转身、下蹲、伸展等动作单独设计奖励函数,S0可直接从海量多样化运动数据集中学习并复刻人类运动模式,同步掌握力的协同调控与身体姿态动态调整能力,在通用移动操作全流程中持续维持身体平衡。

  • 训练数据:超过1000小时的关节级重定向人类运动数据;

  • 模型架构:一个含1000万(10M)参数的神经网络,以全身关节状态与基座运动信息为输入,以1000Hz的频率输出关节级执行器控制指令;

  • 仿真训练:全程在仿真环境中进行,覆盖20 万个并行仿真实例,并采用大规模域随机化技术,确保模型能直接迁移至实体机器人,并在不同机器人平台上具备优秀的泛化能力。

http://www.jsqmd.com/news/326814/

相关文章:

  • Java计算机毕设之基于springboot的个性化推荐电商平台的设计与实现基于SpringBoot的网上购物商城设计与实现(完整前后端代码+说明文档+LW,调试定制等)
  • 如何用 Python 对接实时股票 API 并构建预警系统?:实战分享
  • 文件名速提助手:全自动扫描目录子目录文件名一键导出TXT清单文件名提取软件
  • 【毕业设计】基于springboot的个性化推荐电商平台的设计与实现(源码+文档+远程调试,全bao定制等)
  • Java计算机毕设之基于Springboot的体育器材入库、出库、维修、报废管理系统基于springboot+bs架构的校园体育器材管理系统设计与实现(完整前后端代码+说明文档+LW,调试定制等)
  • Elasticsearch入门指南:从安装到实战
  • jsp高考辅助推荐系统o4udh-程序+源码+数据库+调试部署+开发环境
  • PolarDB-X 集群暂停 / 恢复完整运维文档
  • 【计算机毕业设计案例】基于springboot电商个性化推荐系统设计与实现基于springboot的个性化推荐电商平台的设计与实现(程序+文档+讲解+定制)
  • jsp钢铁集团公司安全管理系统e2160(程序+源码+数据库+调试部署+开发环境)
  • 【计算机毕业设计案例】基于SpringBoot+Vue校园体育器材管理系统基于springboot+bs架构的校园体育器材管理系统设计与实现(程序+文档+讲解+定制)
  • 【毕业设计】基于springboot的员工绩效管理系统的设计与实现(源码+文档+远程调试,全bao定制等)
  • React Native for OpenHarmony:Image 组件的加载、渲染与性能优化全解析
  • 告别知识孤岛!Wiki.js打造知识库,cpolar实现随处可用。
  • 【课程设计/毕业设计】基于bs架构的校园活动管理系统基于springboot+bs架构的校园活动管理系统【附源码、数据库、万字文档】
  • 手把手玩转北方苍鹰优化随机森林
  • 【计算机毕业设计案例】基于SpringBoot + Vue的校园活动管理系统设计与实现基于springboot+bs架构的校园活动管理系统(程序+文档+讲解+定制)
  • Java毕设项目:基于springboot+bs架构的校园活动管理系统(源码+文档,讲解、调试运行,定制等)
  • C++的函数是否可以做到完全覆盖Linux和windows的跨平台
  • 【Python大数据选题推荐】基于Django+Hadoop+Spark肺癌分析系统开发教程 毕业设计 选题推荐 毕设选题 数据分析 机器学习 数据挖掘
  • Java毕设项目:基于springboot+bs架构的校园体育器材管理系统设计与实现(源码+文档,讲解、调试运行,定制等)
  • 《提问的智慧》泛读总结
  • 【毕业设计】基于springboot+bs架构的校园体育器材管理系统设计与实现(源码+文档+远程调试,全bao定制等)
  • RTL9301管理型交换机模块DHCP Server使用方法
  • Java计算机毕设之基于springboot+bs架构的校园活动管理系统基于bs架构的springboot vue框架校园活动管理系统(完整前后端代码+说明文档+LW,调试定制等)
  • 如何理解“广州靠谱的PHP开发”:从技术本质到实践选择
  • 2026隐形车衣哪个牌子好?行业热门品牌实力解析
  • 2026性价比高的隐形车衣品牌推荐
  • 2026隐形车衣品牌推荐:热门口碑品牌大盘点
  • 2026年国产隐形车衣品牌有哪几家?实力品牌盘点