### 使用Python爬虫抓取指定网站上的所有图片 为了从特定网站抓取所有的图片，可以采用Python中的`requests`库来发送HTTP请求，并利用正则表达式或BeautifulSoup解析网页源码以找到所有的图片链接。最后通过`urllib.request.urlretrieve()`函数下载这些图片至本地。 #### 准备工作 安装必要的第三方库可以通过pip命令完成： ```bash pip install requests beautifulsoup4 ``` #### 抓取流程说明 定义目标URL以及存储路径，在此过程中需要注意遵循robots协议和网站版权规定[^1]。 创建一个名为`fetch_images.py`的脚本文件，其内部结构如下所示： ```python import os from urllib.parse import urljoin import requests from bs4 import BeautifulSoup from urllib.request import urlretrieve def fetch_all_image_links(base_url): response = requests.get(base_url) soup = BeautifulSoup(response.text, 'html.parser') img_tags = soup.find_all('img') # 查找页面内的所有<img>标签 urls = [] for img in img_tags: try: img_url = img['src'] # 获取每个<img>标签下的'src'属性值作为图片的真实地址 full_img_url = urljoin(base_url, img_url) # 将相对路径转换成绝对路径 urls.append(full_img_url) except KeyError as e: continue return urls def download_images(img_urls, save_dir='./images'): if not os.path.exists(save_dir): os.makedirs(save_dir) # 如果不存在该目录，则新建之 count = 0 for link in img_urls: filename = f"{save_dir}/image_{count}.jpg" try: urlretrieve(link, filename) # 下载每一张图片并保存到指定位置 print(f'Successfully downloaded {filename}') count += 1 except Exception as err: print(err) if __name__ == '__main__': target_site = input("请输入要抓取的目标网址:") all_imgs = fetch_all_image_links(target_site) download_images(all_imgs) ``` 上述代码实现了两个主要功能：一是提取HTML文档中所有的图片链接；二是根据获得的链接列表逐个下载对应的资源文件[^3]。 请注意，实际操作前应当了解目标站点的服务条款，确保行为合法合规。同时也要考虑到服务器负载等因素合理设置访问频率等参数。