mitmproxy工具
目录
1.Mitmproxy 简介
2.手机配置代理
2.1 安装 mitmproxy
2.2. 启动 mitmproxy
2.3. 安装CA证书
2.4 配置完成
3.关联数据结构
1.Mitmproxy 简介
mitmproxy 是一款功能强大且灵活的开源中间人代理工具，主要用于拦截、查看、修改和重放 HTTP/HTTPS 流量。它在网络调试、安全测试、API 开发以及协议分析等领域有着广泛的应用。
- Mitmproxy本意为中间人攻击代理；
- 在爬虫中主要用作抓取 http_connect、request、response 等数据；
- mitmproxy官方文档地址：Introduction；
【提示】
Mitmproxy 相较于 fillder、wireshark 的不同：
-- mitmproxy 不仅可以截获请求、帮助开发者查看、分析、更可以通过自定义脚本进行二次开发，修改爬虫行为；
下载Python 官网 安装时勾选Add Python to PATH
python --version
2.手机配置代理
2.1 安装 mitmproxy
pip install mitmproxy
安装好后检查安装情况。
mitmdump --version
查看版本号、支持的Python版本、OpenSSL协议等
2.2. 启动 mitmproxy
mitmweb # mitmproxy有三种启动方式，此处使用的命令可以提供一个web交互界面
mitmproxy有三种启动命令：
(1) mitmweb（推荐）
-- 提供一个web界面；
-- 代理端口：绑定了 *:8080作为代理端口；
-- 交互界面地址：localhost:8081；
(2) mitmproxy
-- 提供命令行界面；
-- 可以通过命令过滤请求；
(3) mitmdump
-- 【TODO】
得到下图，表示启动成功，端口号默认为 8080。
mitmproxy服务器绑定了 *:8080作为代理端口
此时，浏览器自动打开下图页面，这是 mitmproxy 提供的 web 交互界面。
上图为mitmproxy自动打开的web交互界面
2.3. 安装CA证书
第一步，将电脑和手机连到同一个 WiFi 中；
第二步，获取本机的内网IP地址；
ipconfig
得到电脑本机的内网IP地址为 10.26.36.142。
第三步，给手机WiFi配置代理
服务器地址为电脑内网IP地址，端口为8080
第四步，安装CA证书：mitm.it（代理配置生效，手机会打开下载，选择自己的手机系统）
使用手机浏览器访问 mitm.it
第五步，证书信任设置
进入设置->通用->关于本机->证书信任设置，信任新安装的证书即可
2.4 配置完成
此时，mitmweb 页面出现下图内容，红框中的为 mitmproxy 抓取的手机的请求。
3.关联数据结构
- 准备
- 下载文件Mitmproxy
- cases：加入必须定义需要代理的接口
- Json转yaml：http://www.esjson.com/jsontoyaml.html
- 操作流程
1. dos 执行：python -m pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pyyaml mitmproxy
2. 打开电脑设置代理 127.0.0.1:8999（此代理目前适合线上代理，本地需要使用IP访问才可以生效）
2.1. http://mitm.it/下载安装：🔏 Get mitmproxy-ca-cert.p12
3. 双击 windows_go.bat或者:python "D:\\ITWindows\\Mitmproxy\\case-capturePacket.py"
- 功能
- 代理自创数据结构