### ### 使用 Python 实现从小红书爬取女生头像图片 为了完成此任务，需注意小红书可能具有反爬机制以及数据接口的安全措施。以下是一个基本框架，展示如何利用 `requests` 和 `BeautifulSoup` 或其他工具抓取目标页面中的图像链接，并保存到本地。 #### 1. 准备工作 安装必要的库： ```bash pip install requests beautifulsoup4 lxml ``` #### 2. 请求网页并解析 HTML 数据 通过模拟请求获取搜索结果页的内容，从中提取头像 URL 链接。 ```python import requests from bs4 import BeautifulSoup import os def fetch_avatar_urls(keyword, num_pages=1): base_url = "https://www.xiaohongshu.com/search" headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36' } avatar_urls = [] for page in range(1, num_pages + 1): params = {'keyword': keyword, 'page': page} response = requests.get(base_url, headers=headers, params=params) if response.status_code != 200: print(f"Failed to retrieve data from page {page}. Status code: {response.status_code}") continue soup = BeautifulSoup(response.text, 'lxml') avatars = soup.find_all('img', class_='avatar') # 假设类名为'avatar' for img_tag in avatars: src = img_tag.get('src') if src and ('http' in src): # 确保是完整的URL avatar_urls.append(src) return avatar_urls ``` 此处假设头像标签的 CSS 类名可能是 `'avatar'`，实际开发中需要根据具体页面结构调整选择器[^1]。 #### 3. 下载头像图片至本地文件夹 定义函数用于下载这些头像链接对应的图片资源。 ```python def download_images(image_urls, output_dir='avatars'): if not os.path.exists(output_dir): os.makedirs(output_dir) for idx, url in enumerate(image_urls): try: res = requests.get(url, stream=True) file_name = f"{output_dir}/image_{idx+1}.{url.split('.')[-1]}" with open(file_name, 'wb') as out_file: for chunk in res.iter_content(chunk_size=8192): out_file.write(chunk) print(f"Downloaded image {idx+1}/{len(image_urls)} successfully.") except Exception as e: print(f"Error downloading image at index {idx}: {e}") if __name__ == "__main__": search_keyword = "女生" pages_to_scrape = 2 urls = fetch_avatar_urls(search_keyword, pages_to_scrape) download_images(urls[:10]) # 只下载前10张作为测试 ``` 以上脚本实现了从指定关键词的结果集中抽取头像链接列表的功能，并将其存储为单独文件。需要注意的是，在真实环境中应当遵循目标站点的服务条款与隐私政策规定，合理合法地使用此类技术手段[^1]。 ---