当前位置: 首页 > news >正文

LeRobot SO-101 机械臂从底层控制到 VLA 视觉语言动作模型完整实操复盘

Task 1

本次任务主要完成 LeRobot SO-101 机械臂的环境搭建、串口连接、机械臂校准、关节复位控制以及主从臂遥操作。

实验设备为 MacBook Air M5,机械臂由一台 Leader 主动臂和一台 Follower 从动臂组成。除了运行 LeRobot 自带的校准和遥操作程序外,我还编写了Task1.py,用于控制机械臂平滑运动到不同目标姿态。

实验代码已经上传至以下仓库:

https://github.com/LongtermFcq/lerobot-so101-vla-end2end-demo

其中本任务对应的代码文件命名为:

Task1.py

一、搭建 LeRobot 开发环境

首先创建 Python 3.12 的 Conda 虚拟环境:

conda create -y -n lerobot python=3.12 conda activate lerobot

随后安装 FFmpeg:

conda install ffmpeg=7.1.1 -c conda-forge -y

安装完成后,可以通过下面的命令进行验证:

ffmpeg -version

接下来下载并安装 LeRobot:

git clone https://github.com/huggingface/lerobot.git cd lerobot pip install -e ".[feetech]"

安装完成后运行:

lerobot-info

也可以进入 Python,检查相关模块是否能够正常导入:

import lerobot import torch import scservo_sdk

如果没有报错,说明 LeRobot 和飞特舵机相关依赖已经安装成功。


二、查看机械臂串口

将 Leader 和 Follower 机械臂连接到电脑后,执行:

ls /dev/tty.*

本次实验中,两台机械臂对应的串口如下。

Follower 从动臂:

/dev/tty.usbmodem5B3D0458541 /dev/tty.wchusbserial5AE60814261

Leader 主动臂:

/dev/tty.usbmodem5B3D0457201 /dev/tty.wchusbserial5AE60570281

在 macOS 中,同一个舵机控制板可能同时显示为usbmodemwchusbserial两种串口名称。这是正常现象,两个端口通常对应同一个物理设备,实际使用时选择其中一个即可。

如果程序提示没有串口权限,可以执行:

sudo chmod 666 /dev/tty.usbmodem5B3D0458541 sudo chmod 666 /dev/tty.usbmodem5B3D0457201

需要注意,重新插拔设备后,串口名称和权限可能发生变化,因此每次实验前最好重新检查一次。


三、校准 Leader 和 Follower

正式校准前,需要先使用飞特舵机调试工具检查各个舵机的位置范围。

舵机原始位置应处于0~4095之间,不能出现负数或超过范围的数值。完成上下限检查后,将各个关节移动到大约2047的中位位置。

首先校准 Follower 从动臂:

lerobot-calibrate \ --robot.type=so101_follower \ --robot.port=/dev/tty.usbmodem5B3D0458541 \ --robot.id=monica_follower_arm

然后校准 Leader 主动臂:

lerobot-calibrate \ --teleop.type=so101_leader \ --teleop.port=/dev/tty.usbmodem5B3D0457201 \ --teleop.id=monica_leader_arm

运行命令后,根据终端提示移动机械臂各个关节,完成运动范围采集(第5个关节不用转动)。


四、使用 Task1.py 完成机械臂复位

完成校准后,运行仓库中的Task1.py

python Task1.py

该脚本用于控制机械臂平滑运动到指定姿态。为了避免机械臂突然运动产生冲击,程序采用分步插值方式,将整个运动过程划分为 60 步。

实验参数如下:

参数数值
运动时间3 秒
运动步数60 步
每步间隔50 ms
到位容差±3°

本次共测试了三种姿态:

姿态说明
Home默认复位姿态
Zero所有关节运动到 0°
Custom自定义安全姿态

Home 姿态的目标角度设置如下:

{ "shoulder_pan.pos": 0, "shoulder_lift.pos": -20, "elbow_flex.pos": 40, "wrist_flex.pos": 0, "wrist_roll.pos": 30, "gripper.pos": 40, }

实验完成后,程序会读取机械臂的实际关节位置,并计算实际角度与目标角度之间的误差。

测试结果如下:

姿态最大误差结果
Home2.46°通过
Zero2.46°通过
Custom2.42°通过

三组姿态的最大误差均小于设定的±3°,说明机械臂能够较稳定地运动到目标位置。其中误差较大的关节主要是elbow_flex.pos,但仍然满足实验要求。


五、主从臂遥操作

完成 Leader 和 Follower 校准后,可以运行 LeRobot 的遥操作命令:

lerobot-teleoperate \ --robot.type=so101_follower \ --robot.port=/dev/tty.usbmodem5B3D0458541 \ --robot.id=monica_follower_arm \ --teleop.type=so101_leader \ --teleop.port=/dev/tty.usbmodem5B3D0457201 \ --teleop.id=monica_leader_arm

其中:

  • so101_leader表示主动臂;

  • so101_follower表示从动臂。

程序启动后,手动移动 Leader 主动臂,Follower 从动臂会同步执行对应动作。

第一次遥操作时,建议缓慢移动主动臂,并提前清理机械臂周围的障碍物,避免从动臂与桌面、底座或其他设备发生碰撞。

本次实验中,从动臂能够正常跟随主动臂运动,并完成了遥操作视频录制。


六、实验总结

本次任务完成了 MacBook Air M5 上的 LeRobot 环境搭建,以及 SO-101 机械臂的串口连接、舵机校准、关节复位和主从遥操作。

通过Task1.py测试了 Home、Zero 和 Custom 三种姿态。三组姿态的最大误差均控制在±3°以内,机械臂能够平稳到达目标位置。

在遥操作实验中,Leader 主动臂能够同步控制 Follower 从动臂,说明机械臂的校准配置和主从控制流程均能够正常工作。

通过本次实验,我基本熟悉了 LeRobot SO-101 从环境安装、设备连接到关节控制和遥操作的完整流程。


参考资料

硬件组装教程:

https://www.bilibili.com/video/BV1oBjL6JEo8

舵机校准与遥操作教程:

https://www.bilibili.com/video/BV1r6UUBFECD

实验代码:

https://github.com/LongtermFcq/lerobot-so101-vla-end2end-demo
http://www.jsqmd.com/news/1265673/

相关文章:

  • 多模态大模型技术解析与工业应用实践
  • 【Linux系统编程】进程状态的理解
  • 2026 年现阶段大同专业的冷补彩色沥青优质厂家哪家专业,破了的彩色路面不用铲重铺?这玩意儿竟能速修又好看还省钱!-恒达新材料 - 行业推荐官【官方】
  • 5个实用技巧,让每个人都能轻松保存抖音直播回放和批量下载内容
  • 外贸成交38 | 诊断式销售:像医生一样和客户对话 - 外贸圈集团
  • AI降重后论文人工复核的8个关键要点
  • 总结STM32单片机的C语言基础
  • 2024大厂C++笔试备战:从算法模板到工程实践的系统指南
  • C#编程的最佳工具
  • Linux PCI设备探测机制与驱动绑定详解
  • AM62L DDR防火墙寄存器配置实战:从原理到调试
  • 空间语义描述子增强技术与多模态特征融合实践
  • 2026 年 7 月新发布:金坛诚信的下水道疏通施工队哪家好,堵塞瞬间,别慌!自救的三个隐藏技巧 - 行业推荐官【官方】
  • LLM与数学求解器融合的智能决策系统实践
  • AWS FIS混沌工程实战:主动故障注入提升云系统韧性
  • Git基本操作-新手入门
  • 局域网通信原理 --- IP与MAC与ARP与交换机(更新)
  • 专科生论文写作神器:智能工具全解析
  • 实时光照校正技术:提升恶劣环境图像质量
  • AI助手如何撰写合规技术博客指南
  • 智能水位识别系统:基于YOLOv5与U-Net的水尺图像解析技术
  • HarmonyOS ArkTS API 24+ 实战:构建、安装并验证 M1 首个可运行版本
  • 视频字幕提取终极指南:3分钟学会本地OCR字幕生成SRT文件
  • Nginx PID文件缺失问题解析与解决方案
  • 2026 年新发布:宜宾热门的路易保罗瓷砖订制厂家选哪家,别再踩雷!这套瓷砖如何让你的厨房焕然一新? - 实业推荐官【官方】
  • ScrapeGraphAI:自然语言驱动的智能爬虫开发实践
  • VeADK Agent容器化部署实战指南
  • Ubuntu 18.04安全升级Python 3.12:5分钟搞定PPA安装与虚拟环境配置
  • AI原生应用开发:思维框架与工程实践指南
  • 全球唯一最高阶的 AI 底层治理模型