### 使用Python爬取中国天气网的数据 要实现对中国天气网数据的爬取，可以按照以下方法操作。以下是完整的解决方案： #### 1. 数据请求模块 使用 `requests` 库发送 HTTP 请求以获取网页内容。 ```python import requests def fetch_weather_page(url): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36' } response = requests.get(url, headers=headers) if response.status_code == 200: return response.text else: raise Exception(f"Failed to load page {url}, status code: {response.status_code}") ``` 此函数会返回目标页面的 HTML 文本[^1]。 --- #### 2. 解析网页结构 利用 `BeautifulSoup` 提取所需的信息。例如，从 `<li>` 标签中解析每日天气详情。 ```python from bs4 import BeautifulSoup def parse_weather_data(html_content): soup = BeautifulSoup(html_content, "html.parser") weather_list = [] # 定位包含天气信息的部分 forecast_items = soup.find_all('li', attrs={'class': 'sky skyid'}) for item in forecast_items: try: date = item.h1.string.strip() condition = item.p['title'].strip() if item.p and 'title' in item.p.attrs else "未知" temp_tag = item.find('p', class_='tem') high_temp = temp_tag.span.string.strip() if temp_tag and temp_tag.span else "未知高温" low_temp = temp_tag.i.string.strip().replace('℃', '') if temp_tag and temp_tag.i else "未知低温" wind_info = item.find('p', class_='win').i.string.strip() if item.find('p', class_='win') and item.find('p', class_='win').i else "未知风力" weather_entry = { 'date': date, 'condition': condition, 'high_temperature': high_temp, 'low_temperature': low_temp, 'wind_force': wind_info } weather_list.append(weather_entry) except AttributeError as e: continue return weather_list ``` 该函数通过定位特定标签提取日期、天气状况、高低温以及风力等字段[^2]。 --- #### 3. 主程序逻辑 将以上两步封装为主流程脚本。 ```python if __name__ == "__main__": url = "http://www.weather.com.cn/weather/101010100.shtml" # 替换为目标城市的URL html_text = fetch_weather_page(url) parsed_data = parse_weather_data(html_text) for entry in parsed_data: print(entry) ``` 运行后即可打印出每条记录的具体信息[^3]。 --- ### 注意事项 - **反爬机制**：某些网站可能会设置 IP 频率限制或其他防护措施。建议适当延时访问或更换代理。 - **动态加载**：如果遇到 JavaScript 动态渲染的内容，则需借助 Selenium 或 Pyppeteer 工具模拟浏览器行为抓取数据。 - **合法性验证**：确保遵守目标站点的服务条款，在合理范围内合法合规地采集公开资源。