### 问题解构 用户核心诉求是：**在 Python 生态中，如何结合 Charles 抓包工具实现自动化脚本编写与网络请求分析**。需明确三点： 1. **Charles 本身是 Java 编写的 GUI/CLI 抓包代理（非 Python 原生库）**，无法直接用 `import charles` 调用，其脚本能力依赖外部机制； 2. **“用 Charles 做脚本” 实际指两类典型场景**： - ✅ **场景 A**：用 Charles 抓取真实流量 → 导出 `.har` 或 `.chls` → 用 Python 解析/转换为自动化测试用例（如 HttpRunner、Requests 脚本）； - ✅ **场景 B**：通过 Charles 的 **Scripting 功能（JavaScript）或 CLI + Python 调用** 实现动态规则注入、请求改写、Mock 响应等，再由 Python 驱动流程； 3. 用户隐含需求是**工程化落地**：需覆盖配置（CA 证书、端口）、数据流转（Har → YAML/Python）、二次开发（mitmproxy 替代方案对比）。 --- ### 方案推演与技术选型 | 维度 | Charles 原生方案 | mitmproxy（Python 原生替代） | HttpRunner（YAML 驱动） | |------|------------------|------------------------------|--------------------------| | **抓包控制粒度** | GUI/CLI 配置规则，支持 JS 脚本（`onRequest`, `onResponse`） | 完全 Python 控制，可写任意逻辑（如动态 token 注入、加密解密） | 仅支持静态用例回放，无实时逻辑干预能力 | | **Python 集成方式** | 通过 `subprocess` 调用 `charles.exe --port 8888`；用 `requests` 访问 Charles API（需开启 Remote Access）[ref_1][ref_4] | 直接 `pip install mitmproxy`，编写 `addons.py` 即可嵌入项目 [ref_1] | `har2case` 工具将 Charles 导出的 `.har` 转为 `.yml`，再 `hrun` 执行 [ref_5] | | **移动端适配成本** | 需手动配置 Android/iOS CA 证书（信任 Charles 根证书），且模拟器需 adb 设置代理 [ref_6] | 同样需证书，但可通过 `mitmdump --set confdir=./certs` 自动管理 [ref_1] | 依赖 Charles 抓包，适配成本与 Charles 一致 [ref_5] | | **适用场景** | 快速调试、UI 流程录制、非侵入式 Mock | 高定制化需求（如协议加解密、风控绕过） | 团队标准化接口回归测试（YAML 可读性强） | > ✅ **结论**：若目标是「Python 主导的自动化脚本」，**优先采用 mitmproxy 替代 Charles 的脚本功能**；若必须用 Charles，则聚焦于 **Har 文件解析 + Python 用例生成流水线**。 --- ### 具体实施代码（三类核心方案） #### ✅ 方案一：Charles 导出 Har → Python 自动生成 Requests 脚本 ```python # pip install haralyzer requests from haralyzer import HarParser import json def har_to_requests_script(har_path: str, output_py: str): with open(har_path, "r", encoding="utf-8") as f: har_data = json.load(f) parser = HarParser(har_data) # 提取第一个页面的所有请求（可按 pageId 过滤） entries = parser.pages[0].entries if parser.pages else [] with open(output_py, "w", encoding="utf-8") as f: f.write("# Auto-generated from HAR by Python\nimport requests\n\n") for i, entry in enumerate(entries[:3]): # 仅生成前3个请求示例 url = entry.request.url method = entry.request.method headers = {h.name: h.value for h in entry.request.headers} # 简化处理：忽略 POST body 复杂结构（实际需判断 content-type） body = entry.request.post_data.text if entry.request.post_data else "" f.write(f"# Request {i+1}: {method} {url}\n") f.write(f"response_{i} = requests.{method.lower()}(\n") f.write(f" '{url}',\n") f.write(f" headers={json.dumps(headers, indent=4, ensure_ascii=False)},\n") if body: f.write(f" data='{body[:100]}...', # truncated\n") f.write(")\n\n") # 使用示例：Charles 中导出 test.har → 生成 test_script.py har_to_requests_script("test.har", "test_script.py") ``` #### ✅ 方案二：Charles CLI 启动 + Python 控制代理生命周期 ```bash # Charles 启动命令（Windows） charles.exe --port 8888 --remote-access --no-ui ``` ```python # python_control_charles.py import subprocess import time import requests # 启动 Charles（后台进程） charles_proc = subprocess.Popen( ["charles.exe", "--port", "8888", "--remote-access", "--no-ui"], stdout=subprocess.DEVNULL, stderr=subprocess.DEVNULL ) time.sleep(3) # 等待启动 # Python 发起请求（经 Charles 代理） proxies = {"http": "http://127.0.0.1:8888", "https": "http://127.0.0.1:8888"} try: response = requests.get("https://httpbin.org/get", proxies=proxies, verify=False) print("Status:", response.status_code) finally: charles_proc.terminate() # 关闭 Charles ``` #### ✅ 方案三：mitmproxy 替代 Charles 脚本（推荐） ```python # addon.py —— mitmproxy 的 Python 插件 from mitmproxy import http def request(flow: http.HTTPFlow) -> None: # 动态修改请求头（例如添加 token） flow.request.headers["X-Authorization"] = "Bearer auto-generated-token" def response(flow: http.HTTPFlow) -> None: # 拦截响应并注入调试信息 if "application/json" in flow.response.headers.get("content-type", ""): try: data = flow.response.get_text() modified = json.loads(data) modified["debug_info"] = {"via": "mitmproxy-addon", "timestamp": time.time()} flow.response.set_text(json.dumps(modified)) except: pass # 启动命令：mitmdump -s addon.py --mode upstream:http://127.0.0.1:8888 ``` --- ### 关键配置注意事项（Charles 移动端必做） | 步骤 | 操作 | 依据 | |------|------|------| | **① Windows 端口配置** | Charles → Proxy → Proxy Settings → Port 改为 `8888`（避免被杀毒软件拦截） | [ref_6] | | **② Android 证书安装** | 在 Chrome 访问 `chls.pro/ssl` → 下载证书 → 设置 → 安装证书（需设置锁屏密码）→ 信任该证书 | [ref_6] | | **③ Mumu 模拟器代理** | `adb connect 127.0.0.1:7555` → `adb shell settings put global http_proxy 127.0.0.1:8888` | [ref_6] | | **④ iOS 信任证书** | Safari 访问 `chls.pro/ssl` → 安装描述文件 → 设置 → 已下载描述文件 → 安装 → 通用 → 关于本机 → 证书信任设置 → 开启 Charles Proxy CA | [ref_6] | > ⚠️ **安全警告**：Charles 证书本质是中间人（MITM），**切勿在生产环境或金融类 APP 中启用**，否则可能触发风控（如支付宝、微信会检测证书链异常）[ref_3]。 --- ### 性能与替代方案对比（决策依据） | 工具 | 启动速度 | 脚本灵活性 | 移动端兼容性 | 学习曲线 | 推荐指数 | |------|----------|------------|--------------|----------|----------| | **Charles** | 中（Java 启动慢） | 低（JS 脚本受限） | 高（官方文档完善） | 低（GUI 友好） | ⭐⭐⭐☆ | | **mitmproxy** | 快（Python 原生） | 极高（任意 Python 逻辑） | 中（需手动配证书） | 中（需理解事件驱动） | ⭐⭐⭐⭐⭐ | | **Fiddler Everywhere** | 快 | 中（C# 脚本） | 高 | 中 | ⭐⭐⭐☆ | | **Browser DevTools** | 即时 | 无（仅前端） | 仅 WebView | 低 | ⭐⭐ | > 最终建议：**新项目统一采用 mitmproxy**，旧项目维护可沿用 Charles + `har2case` 流水线 [ref_5]。