### 使用 Python 爬虫获取汽车之家车辆售价数据 为了实现这一目标，可以采用 `requests` 和 `BeautifulSoup` 库来抓取网页并解析 HTML 文档。下面是一个简单的例子说明如何构建这样的爬虫程序。 #### 导入必要的库 ```python import requests from bs4 import BeautifulSoup ``` #### 获取页面内容 定义函数用于发送 HTTP 请求到指定 URL 并返回响应对象的内容。 ```python def get_page_content(url): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)', } response = requests.get(url, headers=headers) if response.status_code == 200: return response.text else: print(f"Failed to retrieve page {url}") return None ``` #### 解析HTML文档提取所需信息 创建一个新的方法用来处理接收到的数据，并从中抽取特定的信息比如车型名称以及价格等。 ```python def parse_car_prices(html_content): soup = BeautifulSoup(html_content, "html.parser") cars_info = [] items = soup.find_all('div', class_='car-item') # 假设这是存储每辆车信息的 div 的类名 for item in items: try: name = item.find('h3').get_text(strip=True) # 车型名字通常位于 h3 标签内 price_tag = item.select_one('.price-tag strong') price = float(price_tag.get_text().replace('万', '')) * 10000 if price_tag else None car_data = {"name": name, "price": price} cars_info.append(car_data) except AttributeError as e: continue return cars_info ``` #### 数据保存至文件 最后一步就是把收集好的资料存下来以便后续分析使用。 ```python import json def save_to_file(data_list, filename='cars.json'): with open(filename, mode='w', encoding='utf-8') as f: json.dump(data_list, f, ensure_ascii=False, indent=4) ``` #### 主流程控制 组合以上各个部分形成完整的脚本运行逻辑。 ```python if __name__ == '__main__': url = 'https://www.autohome.com.cn/beijing/' # 替换成实际的目标网址 html = get_page_content(url) if html is not None: prices = parse_car_prices(html) save_to_file(prices) print("Data has been successfully saved.") ``` 此段代码展示了从访问目标站点开始直到最终将结果写入 JSON 文件的过程[^1]。