### 爬取历史天气数据的实现方案 为了根据用户输入的城市和日期爬取历史天气数据，可以参考以下方法。此方法结合了引用中的内容以及爬虫技术的基本原理。 首先，需要设置请求头以模拟浏览器访问网站，并通过解析 HTML 获取所需的数据。以下是完整的代码示例： ```python import requests from bs4 import BeautifulSoup def get_weather_data(city, date): # 构造 URL base_url = "http://lishi.tianqi.com/" url = f"{base_url}{city}/{date}.html" # 设置 headers headers = { 'User-Agent': 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:22.0) Gecko/20100101 Firefox/22.0', 'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8', 'Accept-Encoding': 'gzip, deflate, compress', 'Accept-Language': 'en-us;q=0.5,en;q=0.3', 'Connection': 'keep-alive' } # 发送请求 response = requests.get(url, headers=headers) if response.status_code != 200: return "无法获取数据，请检查城市或日期是否正确。" # 解析网页内容 soup = BeautifulSoup(response.content, "lxml") weather_data = [] # 查找日期、最高气温、最低气温、天气等信息 ul_list = soup.select('ul') for ul in ul_list: li_list = ul.select('li') for li in li_list: if li.string is not None: weather_data.append(li.string.strip()) return weather_data # 用户输入 city = input("请输入城市名称（如 beijing）：") date = input("请输入日期（格式为 YYYYMM，如 202009）：") # 调用函数并输出结果 result = get_weather_data(city, date) if isinstance(result, list): print("历史天气数据如下：") for data in result: print(data) else: print(result) ``` #### 代码说明 - **URL 构造**：根据用户输入的城市和日期，构造目标 URL[^1]。 - **Headers 设置**：通过设置 `headers` 模拟浏览器行为，避免被反爬虫机制阻止[^2]。 - **HTML 解析**：使用 `BeautifulSoup` 解析网页内容，提取日期、最高气温、最低气温、天气等信息[^3]。 - **错误处理**：如果返回状态码不是 200，则提示用户检查输入的城市或日期是否正确。 #### 注意事项 - 确保输入的城市名称和日期格式正确。例如，城市应为拼音形式（如 `beijing`），日期应为 `YYYYMM` 格式（如 `202009`）。 - 如果目标网站的结构发生变化，可能需要调整解析逻辑。