当前位置: 首页 > news >正文

移动灵巧手高速抓取能靠触觉稳住吗?FastGrasp仿真未见物体成功率达到50.09%

高速抓取不只是“抓得准”,还要在移动底盘、机械臂和灵巧手高速协同时处理冲击、滑移和物体反弹。FastGrasp 提出一个学习式全身控制框架,把抓取候选生成、移动操作控制和触觉反馈放到同一个高速抓取流程里。实验中,FastGrasp 在仿真未见物体完整点云条件下平均成功率达到50.09%,在部分点云条件下达到38.51%。真实机器人低速设置下平均成功率达到34.62%

核心逻辑:

物体点云输入 ➔ CVAE 生成多样化抓取候选 ➔ GWC/GDC 选择高质量抓取引导 ➔ 强化学习全身控制底盘、机械臂和灵巧手 ➔ 二值触觉反馈修正接触状态 ➔ 实现移动高速灵巧抓取

具体的实验流程与核心架构解析

1. 移动灵巧手高速抓取系统

FastGrasp 的真实平台由 Agilex Bunker Mini 移动底盘、Dobot CR5 机械臂、16 自由度 LeapHand、RealSense D435i 相机和触觉传感器组成。策略在真实部署中以15Hz推理,尽量保持和仿真训练一致。

图 1:FastGrasp 在仿真和真实场景中的演示。该图展示了 FastGrasp 在 Isaac Sim 仿真和真实机器人上的高速抓取场景,突出移动底盘、机械臂和灵巧手的协同执行。

2. 系统设置

FastGrasp 不采用固定底座灵巧手,而是让移动底盘参与全身控制,从而扩大可操作范围。物体被放置在机器人前方至少2.0m处,方便底盘加速并形成高速接近过程。

图 2:系统设置。该图展示了真实机器人系统和仿真环境设置,包括移动底盘、机械臂、灵巧手、腕部 RGB-D 相机和触觉输入。

3. 两阶段策略框架

第一阶段用 CVAE 根据物体点云生成多样化抓取候选;第二阶段让强化学习策略根据最优抓取引导,控制底盘速度、机械臂关节和灵巧手关节。

图 3:FastGrasp 框架总览。该图展示了从点云感知、抓取候选生成、抓取质量筛选到全身控制策略执行的完整流程。

实验表现

表 1:仿真未见物体的成功率和手-物距离。

FastGrasp 在完整点云条件下平均成功率达到50.09%,高于两阶段力方向选择方法的41.99%。在部分点云条件下,FastGrasp 仍达到38.51%,而多个基线方法退化到0%

表 2:奖励、触觉和抓取引导消融实验。

消融结果显示,去掉触觉观测会让平均成功率下降15.65 个百分点,去掉触觉奖励会下降11.56 个百分点。这说明触觉不是装饰,而是在高速接触中稳定抓取的关键反馈。

表 3:真实机器人成功率。

真实实验中,FastGrasp 在高速设置下平均成功率为32.00%,在较低速度设置下平均成功率为34.62%。没有域随机化、低通滤波或触觉适配时,真实成功率会明显下降甚至归零。

结论

FastGrasp 的价值在于,它把移动操作、灵巧抓取和触觉反馈放到高速场景里一起考虑,而不是只做静态抓取或简单移动夹取。在仿真未见物体上,FastGrasp 完整点云成功率达到50.09%,部分点云成功率达到38.51%;真实机器人低速设置下达到34.62%。不过真实成功率仍不算高,说明高速灵巧抓取的 sim-to-real gap、触觉建模和接触稳定性仍是后续关键难点。

http://www.jsqmd.com/news/1177753/

相关文章:

  • C++11中列表初始化机制的概念与实例详解
  • XUnity自动翻译器:3步让任何Unity游戏变身中文版的终极指南
  • 影刀RPA 压缩与解压:ZIP文件的处理
  • 【6.26】芯片测试入门 从零搭自动化测试框架|PyVISA+OOP 保姆级教程
  • 实现快速开发:从环境配置到自动化工具的最佳实践
  • Midjourney插画风格时效红利窗口期仅剩47天?深度解析平台风格推荐算法迭代倒计时与抢占策略
  • LinkSwift架构设计与实现原理:多网盘直链解析技术深度解析
  • Vue + Webpack 5 生产环境配置:避免源码泄露的4个关键设置
  • 【开题神器】专业级AI论文网站:研究框架、文献综述一键搭建
  • AI代写文章月入过万:爆款指令+复制粘贴,当天赚到第一桶金
  • 5分钟掌握猫抓:浏览器资源嗅探与媒体捕获的终极指南
  • DDD 系列:事件风暴入门
  • 企业私有化部署网盘选型盘点:三款方案技术解析
  • 逻辑地址与物理地址转换:操作系统内存管理核心技术详解
  • PCL 基于欧几里得聚类的点云分割
  • Winhance:免费开源Windows系统优化工具的安全使用指南
  • Typora 跨版本(0.9.x-1.x)界面适配:解决4K宽屏下编辑区域过窄问题
  • 2026重庆黄金回收白银回收铂金回收靠谱临街实体公安备案支持到店核验门店联系方式推荐
  • Centos7配置国内yum源
  • ArcGIS Pro 3.2 三维地质建模实战:7步从钻孔数据生成MultiPatch地质体
  • AI医疗应用的技术边界与伦理实践:从视觉刺激到真实疗效
  • 金融数据分析入门:先学财报、指标还是工具?
  • BiliRoamingX:解锁B站完整观影体验的三大核心解决方案
  • 2026年7月最新江诗丹顿深圳罗湖万象城维修保养服务电话 - 江诗丹顿官方服务中心
  • 从Swagger手写到AI秒生成:ChatGPT驱动API文档升级(附GitHub高星开源工具链+校验脚本)
  • 社区居家养老服务平台开题报告
  • 从源码编译完整版Qt:包含QtWebEngine与QDoc的实战指南
  • PyInstaller 与 Nuitka 打包 EXE 逆向对比:2 种工具源码保护强度实测
  • Ubuntu下PlatformIO下载极慢?一招配置proxy,完美解决ESP32依赖包下载超时!
  • 用原生 JavaScript 实现一个基础代谢率(BMR)在线计算器:从公式到落地