### 如何使用 Python 爬取微博热搜数据并保存为 CSV 文件 为了完成这一任务，可以采用 `requests` 和 `BeautifulSoup` 库来爬取微博热搜数据，并通过 Python 的内置模块 `csv` 将其保存到本地文件中。以下是具体方法： #### 安装依赖库 首先需要安装必要的第三方库： ```bash pip install requests beautifulsoup4 lxml csv ``` #### 编写爬虫代码 以下是一个完整的示例代码，用于爬取微博热搜并将结果保存至 CSV 文件。 ```python import requests from bs4 import BeautifulSoup import csv # 设置目标URL和请求头 url = "https://weibo.com/ajax/side/hotSearch" # 微博热搜API接口 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/99.0.4844.82 Safari/537.36' } # 发起HTTP GET请求 response = requests.get(url, headers=headers) if response.status_code == 200: data = response.json() # 解析JSON响应 hot_search_list = data['data']['realtime'] # 获取实时热搜列表 # 准备CSV文件的内容 rows = [['排名', '关键词', '热度']] # 表头 for idx, item in enumerate(hot_search_list, start=1): keyword = item['note'] heat = item['hot_val'] row = [idx, keyword, heat] rows.append(row) # 写入CSV文件 with open('weibo_hotsearch.csv', mode='w', newline='', encoding='utf-8') as file: writer = csv.writer(file) writer.writerows(rows) else: print(f"请求失败，状态码：{response.status_code}") ``` 此代码实现了以下几个功能： 1. 使用 API 接口获取微博热搜数据[^3]。 2. 提取热搜词及其对应的热度值。 3. 将提取的数据整理成表格形式，并保存为名为 `weibo_hotsearch.csv` 的文件。 #### 数据结构说明 在上述代码中，每一行代表一条热搜记录，包含三个字段： - **排名**：热搜词条的顺序编号； - **关键词**：热搜的具体主题名称； - **热度**：该条热搜的关注度数值。 #### 注意事项 - 需要确保网络环境正常以及目标站点未屏蔽 IP 地址。 - 如果遇到反爬机制（如验证码），可能需引入更复杂的解决方案，比如 Selenium 或者代理池[^1]。 - 对于某些动态加载内容，仅靠 Requests 可能无法完全抓取，此时可考虑切换到 Puppeteer 或 Playwright 工具。 问题