### 使用 Python 实现网页图片爬取 要通过 Python 编写程序来爬取网页上的图片，可以遵循以下方法。以下是详细的说明以及代码示例。 #### 1. 安装必要的库 为了完成此任务，需要使用 `requests` 库发送 HTTP 请求并获取页面内容，还需要用到正则表达式模块 `re` 来解析 HTML 页面中的图片链接[^4]。如果尚未安装 `requests` 库，则可以通过运行以下命令进行安装： ```bash pip install requests ``` #### 2. 发送请求并提取图片 URL 下面是一个简单的例子，展示如何从指定的网页中提取所有的图片链接。这里假设目标网页已经允许被爬取，并且不涉及复杂的反爬机制[^2]。 ```python import re import requests def fetch_image_urls(url): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36' } response = requests.get(url, headers=headers) html_content = response.text # 正则匹配 img 标签内的 src 属性值 pattern = r'<img.*?src="(.*?)".*?>' image_links = re.findall(pattern, html_content) return image_links ``` 上述函数会返回一个列表，其中包含了该网页上所有 `<img>` 标记指向的图片路径或 URL 地址[^3]。 #### 3. 下载图片至本地存储 一旦获得了这些图片链接之后，就可以进一步处理它们——比如保存下来或者上传到其他地方去。下面是下载功能的一个简单实现方式： ```python import os from urllib.request import urlretrieve def download_images(image_urls, save_dir='./images'): if not os.path.exists(save_dir): os.makedirs(save_dir) for i, link in enumerate(image_urls): try: filename = f"{save_dir}/image_{i}.jpg" urlretrieve(link, filename=filename) print(f"Downloaded {link} -> saved as {filename}") except Exception as e: print(f"Failed to download {link}: {e}") if __name__ == "__main__": target_url = "http://example.com/" # 替换为目标网址 images = fetch_image_urls(target_url) download_images(images) ``` 这段脚本将会把找到的所有图片依次存入当前目录下的 `./images` 文件夹里。 --- #### 注意事项 - **合法性**：在实际应用前，请务必确认目标站点的服务条款是否允许此类行为；尊重版权与隐私权是非常重要的原则之一。 - **效率优化**：对于大规模的数据采集工作来说，可能要考虑多线程或多进程技术提高速度，同时也要注意不要给服务器带来过重负担。