要使用Python实现懂车帝评论爬虫，可以参考以下示例代码及思路。 ### 代码示例 ```python import requests from bs4 import BeautifulSoup # 构造排序和翻页 j = 1 # 循环爬取页面 for i in range(9): # 获取第i页面资源 html = requests.get('https://www.dongchedi.com/auto/series/score/733-54189-x-x-x-x-' + str(i + 1)) # 解析获取的页面资源 soup = BeautifulSoup(html.text, 'lxml') # 筛选 2022款帝豪 第4代 1.5L CVT尊贵车型页面资源 data = soup.select('article.tw-grid .tw-col-span-40') # 输出第i页资源内容 for d in data: # 构造for循环输出想要的部分内容 if j % 2 == 1: print(f'第{int((j + 1) / 2)}位车主评价内容为：' + d.text + '\n') with open('jl_car_count.txt', 'a', encoding='utf8') as f: f.write(f'第{int((j + 1) / 2)}位车评：' + d.text + '\n') j += 1 ``` 上述代码的主要思路是： 1. 导入必要的库`requests`和`BeautifulSoup`。 2. 构造循环来遍历不同的页面。 3. 使用`requests`库发送HTTP请求获取页面内容。 4. 使用`BeautifulSoup`库解析页面内容。 5. 筛选出需要的车评数据并输出和保存到文件中。 ### 多车型爬取示例 ```python def fetch_car_reviews(base_url, page_param, total_pages, output_filename, headers): with open(output_filename, 'a', encoding='utf8') as f: for page in range(1, total_pages + 1): url = base_url + page_param.format(page) html = requests.get(url, headers=headers) soup = BeautifulSoup(html.text, 'lxml') data = soup.select('article.tw-grid .tw-col-span-40') j = 1 for d in data: if j % 2 == 1: f.write(f'第{int((j + 1) / 2)}位车评：' + d.text + '\n') j += 1 # 示例URL，请务必替换为实际观察到的URL模式 # 假设科鲁泽的URL模式是：https://www.dongchedi.com/auto/series/score/x-x-x-x-x-{页码} # 假设帝豪的URL模式是：https://www.dongchedi.com/auto/series/score/y-y-y-y-y-{页码} headers = {} # 可以根据需要添加请求头 # 爬取雪佛兰科鲁泽 (假设爬5页) cruze_base_url = "https://www.dongchedi.com/auto/series/score/3094-57238-S0-x-x-x-" fetch_car_reviews( base_url=cruze_base_url, page_param="{}", # 因为URL末尾直接加页码，所以参数就是{} total_pages=5, output_filename='cruze_reviews_raw.txt', headers=headers ) # 爬取吉利帝豪 (假设爬5页) emgrand_base_url = "https://www.dongchedi.com/auto/series/score/733-54189-x-x-x-x-" fetch_car_reviews( base_url=emgrand_base_url, page_param="{}", total_pages=5, output_filename='emgrand_reviews_raw.txt', headers=headers ) print("两款车型的原始数据爬取完毕！") ``` 这个示例定义了一个函数`fetch_car_reviews`，可以用于爬取不同车型的评论数据。 ### 注意事项 - 要根据实际情况替换URL模式。 - 可以根据需要添加请求头`headers`来模拟浏览器访问，避免被网站反爬机制拦截。 - 要注意网站的反爬规则，避免过度请求导致IP被封禁。