### 三级标题：Python 解码 gzip、deflate 和 br 编码数据的方法 在HTTP请求中，服务器可能会使用 `gzip`、`deflate` 或 `br`（Brotli）等压缩算法对响应内容进行压缩。为了正确获取原始文本内容，客户端需要根据 `Content-Encoding` 头信息选择对应的解压方法。 #### 解码 gzip 编码数据 对于使用 `gzip` 压缩的响应数据，可以通过 Python 的 `gzip` 模块结合 `StringIO` 来解压： ```python from gzip import GzipFile from io import BytesIO def decompress_gzip(data): with GzipFile(fileobj=BytesIO(data)) as f: return f.read() ``` 该方法适用于 HTTP 响应头中声明 `Content-Encoding: gzip` 的情况 [^4]。 #### 解码 deflate 编码数据 `deflate` 是一种基于 DEFLATE 算法的压缩格式，但部分服务器可能错误地将 zlib 格式标识为 `deflate`。因此，使用 `zlib.decompress` 并指定参数 `-zlib.MAX_WBITS` 可以兼容这两种格式： ```python import zlib def decompress_deflate(data): try: # 尝试按照标准 deflate 解压 return zlib.decompress(data, -zlib.MAX_WBITS) except zlib.error: # 如果失败，尝试默认 zlib 格式解压 return zlib.decompress(data) ``` 此函数可用于处理 HTTP 响应头中 `Content-Encoding: deflate` 的情况 [^4]。 #### 解码 br (Brotli) 编码数据 对于采用 Brotli 压缩算法的数据，需安装第三方库 `Brotli` 进行解压处理。解码过程如下： ```bash pip install brotli ``` ```python import brotli def decompress_br(data): return brotli.decompress(data) ``` 该方法适用于 HTTP 响应头中声明 `Content-Encoding: br` 的情况 [^1]。 #### 综合处理 HTTP 压缩数据 在实际网络爬虫开发中，通常需要同时处理多种压缩类型。以下是一个综合示例，用于解析不同编码方式的响应数据： ```python import urllib.request import gzip import zlib import brotli from io import BytesIO def fetch_url(url): request = urllib.request.Request(url) request.add_header('Accept-Encoding', 'gzip, deflate, br') response = urllib.request.urlopen(request) content = response.read() encoding = response.info().get('Content-Encoding') if encoding == 'gzip': with gzip.GzipFile(fileobj=BytesIO(content)) as f: content = f.read() elif encoding == 'deflate': try: content = zlib.decompress(content, -zlib.MAX_WBITS) except zlib.error: content = zlib.decompress(content) elif encoding == 'br': content = brotli.decompress(content) return content.decode('utf-8') ``` 上述代码实现了从请求到自动识别并解压 `gzip`、`deflate` 和 `br` 压缩数据的过程，最终返回 UTF-8 编码的字符串结果 [^2]。 ---