当前位置: 首页 > news >正文

无意识+有意识双路径学习,悟界·RoboBrain Orca 成通用世界基础模型基石

大语言模型学会了预测“下一个词”,于是有了会写代码、会做题、会对话的ChatGPT、DeepSeek、Qwen。视频生成模型学会了预测“下一帧”,于是有了越来越逼真的图像和视频生成模型,例如Seedance、Sora。具身模型学会了预测“下一个动作”,于是机器人开始能完成越来越复杂的任务。而悟界·RoboBrain Orca的目标是做一件更底层的事:让AI在“脑海中”形成一个表征,该表征是对当前世界状态的高度“浓缩”,基于该表征,AI能够建模向前和向后世界状态的演变。这就是悟界·RoboBrain Orca作为“多模态表征世界模型”的核心哲学:The World is in Your Mind。

悟界·RoboBrain Orca:从预测“下一个具体模态输出”,走向预测“下一个世界状态”

悟界·RoboBrain Orca在看到一段视频、一张图、一个指令、一段事件描述后,先在内部形成一个统一的世界潜在表征空间。这个世界潜在表征空间就像AI的“脑海中的世界”,它把视觉、语言、事件、任务意图等多模态的信号组织起来,学习物体如何运动、场景如何变化、动作会带来什么后果、事件之间有什么因果关系;当前状态如何走向未来状态;甚至在某些条件下,世界会不会朝另一个方向演化。悟界·RoboBrain Orca的核心变化:从Next Token/Next Frame/Next Action,走向Next State Prediction。

悟界·RoboBrain Orca的技术哲学:先利用多模态世界信号学习世界表征,再做好一切任务

悟界·RoboBrain Orca把世界学习拆成了两条互补路径:无意识学习和有意识学习。

婴儿会看到东西掉落,会看到人走动,会看到门被推开,会看到球滚到桌子下面。这些经验不是通过标签学习的,而是通过连续观察自然世界获得的。悟界·RoboBrain Orca的无意识学习也是如此,它客观地看世界,通过海量真实世界的视频,让它先学会“世界自己怎么动”。悟界·RoboBrain Orca的有意识学习,即主观地交互世界,就是用语言描述的事件、任务指令和VQA问答,帮助模型学习稀疏但有具体意义的状态转移。

12.5万小时视频,1.6亿条事件标注,且预训练持续Scaling

悟界·RoboBrain Orca随着训练数据的增加,下游任务能力可随之提升,且具备持续Scaling的潜力。悟界·RoboBrain Orca学到的表征可通过多种解码器读出。在文本读出上,悟界·RoboBrain Orca更擅长状态转移的理解和动态运动的推理;在图像读出上,悟界·RoboBrain Orca更能展现真实场景的交互预测能力;在动作读出上,悟界·RoboBrain Orca没有在预训练中学习动作标签,也能帮助下游机器人更好地泛化。

悟界·RoboBrain Orca所代表的世界学习范式有可能从具身智能进一步走向科学发现、复杂系统建模乃至更广阔的认知边界。它是多模态表征世界模型的一个早期版本,但有可能成为通用世界基础模型的一块重要基石。

http://www.jsqmd.com/news/1145621/

相关文章:

  • b+树存储数据概图
  • Java毕设项目: 基于 SpringBoot 的母婴护理日志记录系统的设计与实现 基于 SpringBoot+Vue 的月子服务评价反馈系统(源码+文档,讲解、调试运行,定制等)
  • RK3588为什么成为AI边缘计算热门平台?从芯片架构到产品落地深度分析
  • 调研这件事,别再凭感觉拍脑袋了
  • 计算机Java毕设实战-基于前后端分离的手机问卷调查系统 APP 的设计与实现 基于 SpringBoot 的移动端问卷采集 APP 【完整源码+LW+部署说明+演示视频,全bao一条龙等】
  • 影刀RPA ADB指令大全:手机自动化操作的底层命令详解
  • Trae编辑器:基于TypeScript与Monaco重构的现代IDE架构
  • 面试官冷笑:“Agent 都能自己偷密钥了,你还说加提示词就安全?” 我反问:“那你知道护栏应该放几层吗?” 他坐直:“噢?那你讲讲”
  • VLA模型主动拒判:K样本几何验证与车载实时实现
  • 金融 AI 大爆发:华尔街的 “模型战“ 已经结束,“连接战“ 刚刚开始
  • python生成svg
  • 门窗五大性能选购优先级技术指南:抗风压、水密、气密、保温、隔音详解
  • 2026年排烟净化设备技术革新与市场应用白皮书
  • GND、BATT 车载电路引脚含义(ECU 硬件通用)
  • 【计算机Java毕业设计案例】基于 SpringBoot 的公交实时信息推送系统的设计与实现 基于小程序的公交收藏与出行规划系统(程序+文档+讲解+定制)
  • MCUQuickStart:一键生成 STM32 / GD32 的 Keil、CMake、RTOS 工程
  • 2026国内IT学习TOP5!广东广州等地培训公司口碑广受好评
  • 高盛推出“2026年最重要交易“:AI金融应用从“讲故事“进入“算回报“时代
  • 国内首场Houdini 22技术大会落地深圳
  • 企业AI生产力为什么需要一个网关?大模型API距离可控还有多远?【魔芋网关MAI Gateway】
  • 多头注意力头数选择:从 Baichuan-7B 的 32 头到 LLaMA-2 70B 的 64 头设计分析
  • Linux环境变量课程内容完整总结
  • 鼎讯TXMN-BLSG1 实测风电基地,电磁仿真有了规范化工具
  • 影刀RPA API文档自动生成:从代码到Swagger
  • 个别设备 OTG 偶发无法认U盘。
  • 2026 国产工业阀门品牌评测:一份从认证到响应的选型参考
  • SSE 和 WebSocket 怎么选?实时推送场景的技术取舍
  • 毕业证公证认证要多久?毕业证公证认证材料有啥?
  • 微信 API 开发实战:基于 GeWe 构建自动化任务调度系统
  • 过表达质粒构建伯远生物过表达质粒构建