### 使用Python爬取京东商品评论和图片数据的方法及代码示例 在爬取京东商品评论和图片数据时，需要结合网络爬虫技术与京东的API或网页结构。以下将分别介绍如何爬取京东商品评论和图片数据，并提供相应的代码示例。 #### 1. 爬取京东商品评论 爬取京东商品评论需要分析其动态加载的数据接口，通常可以通过抓包工具（如Fiddler或Chrome开发者工具）找到评论数据的API地址。以下是一个简单的示例代码，展示如何使用`requests`库获取评论数据： ```python import requests def fetch_comments(product_id, page=0): url = f"https://club.jd.com/comment/productPageComments.action?productId={product_id}&score=0&sortType=5&page={page}&pageSize=10" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36" } response = requests.get(url, headers=headers) if response.status_code == 200: data = response.json() comments = data.get("comments", []) for comment in comments: print(f"用户名: {comment['nickname']}, 评论内容: {comment['content']}") else: print("请求失败") ``` 上述代码通过调用京东评论API获取指定商品的评论信息[^2]。需要注意的是，实际使用中可能需要处理分页、反爬机制等问题。 #### 2. 爬取京东商品图片 爬取京东商品图片同样需要解析网页结构或使用API。以下是一个示例代码，展示如何使用`BeautifulSoup`库提取商品详情页中的图片链接： ```python from bs4 import BeautifulSoup import requests def fetch_images(product_id): url = f"https://item.jd.com/{product_id}.html" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36" } response = requests.get(url, headers=headers) if response.status_code == 200: soup = BeautifulSoup(response.text, 'html.parser') images = soup.find_all('img', class_='err-product') for img in images: print(img['src']) else: print("请求失败") ``` 上述代码通过解析商品详情页的HTML结构提取图片链接[^1]。需要注意的是，不同商品页面的结构可能有所不同，需根据实际情况调整选择器。 #### 注意事项 - 在爬取数据时，务必遵守相关法律法规和网站规定。 - 需要处理反爬机制，例如设置合适的`User-Agent`、添加延时等。 - 动态加载的内容可能需要借助`Selenium`或其他工具模拟浏览器行为。