当前位置：首页 > news >正文

智谱AutoGLM从零开始：环境搭建、设备连接、指令执行

news 2026/7/23 2:50:58

智谱AutoGLM从零开始：环境搭建、设备连接、指令执行

1. 什么是AutoGLM-Phone？

AutoGLM-Phone是一个基于视觉语言模型的AI手机智能助理框架。它能理解手机屏幕内容，并通过自动化操作帮助用户完成任务。想象一下，你只需要说"打开小红书搜美食"，它就能自动完成整个操作流程，无需手动点击。

这个框架的核心特点包括：

多模态理解：能同时处理图像和文字信息
自动化操作：通过ADB控制设备执行点击、滑动等操作
智能规划：将复杂任务分解为可执行步骤
安全机制：敏感操作需要确认，支持人工接管

2. 环境准备与工具安装

2.1 硬件与软件要求

在开始前，请确保你具备以下条件：

操作系统：Windows 10/11或macOS
Python环境：Python 3.10或更高版本
安卓设备：Android 7.0+手机或模拟器
ADB工具：Android Debug Bridge

2.2 安装Python

建议使用Python 3.10+版本，可以从官网下载：

https://www.python.org/downloads/

安装时注意勾选"Add Python to PATH"选项，这样可以在命令行直接使用python命令。

验证安装是否成功：

python --version

2.3 配置ADB工具

ADB是连接和控制安卓设备的关键工具，安装步骤如下：

下载ADB工具包：

https://developer.android.com/tools/releases/platform-tools

解压到自定义目录
配置环境变量：

Windows系统：

解压下载的包
Win + R输入sysdm.cpl → 高级 → 环境变量
在System Path中添加ADB解压路径
命令行输入adb version验证

macOS系统：

export PATH=${PATH}:~/Downloads/platform-tools

3. 设备连接设置

3.1 手机端设置

要让电脑控制你的安卓设备，需要完成以下设置：

开启开发者模式：
- 进入设置 → 关于手机 → 版本号
- 连续点击"版本号"7次，直到提示"开发者模式已启用"
启用USB调试：
- 进入设置 → 开发者选项 → 勾选"USB调试"
安装ADB键盘：
- 下载并安装ADB Keyboard APK
- 在手机"语言与输入法"设置中，将默认输入法切换为ADB Keyboard

3.2 连接方式选择

AutoGLM支持两种连接方式：

USB连接：

adb devices # 输出应包含device ID

WiFi远程连接：

# 先用USB连接开启tcpip adb tcpip 5555 # 断开USB，连接手机IP adb connect 192.168.x.x:5555

4. 部署控制端代码

4.1 获取Open-AutoGLM代码

在本地电脑上克隆仓库并安装依赖：

# 克隆仓库 git clone https://github.com/zai-org/Open-AutoGLM cd Open-AutoGLM # 安装依赖 pip install -r requirements.txt pip install -e .

4.2 配置模型服务

AutoGLM需要连接模型服务才能工作，有两种方式：

使用智谱官方API（推荐新手）：
- 访问智谱官网获取API Key
- 替换以下命令中的your-bigmodel-api-key
本地部署模型（适合开发者）：
- 参考项目文档部署vLLM服务
- 需要具备GPU环境

5. 运行AI代理

5.1 命令行方式运行

在Open-AutoGLM目录下执行：

python main.py \ --device-id <你的设备ID或IP:5555> \ --base-url https://open.bigmodel.cn/api/paas/v4 \ --model "autoglm-phone" \ --apikey "your-bigmodel-api-key" \ "打开抖音搜索抖音号为：dycwo11nt61d的博主并关注他"

参数说明：

--device-id：通过adb devices获取的设备ID
--base-url：模型服务地址
--model：使用的模型名称
--apikey：智谱API Key
最后字符串：自然语言指令

5.2 Python API方式

你也可以通过Python代码控制：

from phone_agent.adb import ADBConnection, list_devices # 创建连接管理器 conn = ADBConnection() # 连接远程设备 success, message = conn.connect("192.168.1.100:5555") print(f"连接状态: {message}") # 列出已连接设备 devices = list_devices() for device in devices: print(f"{device.device_id} - {device.connection_type.value}") # 在USB设备上启用TCP/IP success, message = conn.enable_tcpip(5555) ip = conn.get_device_ip() print(f"设备IP: {ip}") # 断开连接 conn.disconnect("192.168.1.100:5555")