### 编写Python网页爬虫抓取美食网分类页并保存为HTML文件 为了完成这个任务，可以采用`requests`库发送HTTP请求获取目标网页内容，并利用`BeautifulSoup`进行HTML解析。下面展示了一个简单的例子，该实例展示了如何构建一个基本的爬虫程序来抓取指定URL下的页面内容，并将其保存至本地磁盘作为HTML文件。 #### 导入必要的模块 ```python import requests from bs4 import BeautifulSoup ``` #### 定义函数用于抓取和保存网页内容 定义名为`fetch_and_save_html`的函数接收两个参数：一个是待访问的目标网址(`url`)；另一个是要保存文件的位置路径(`file_path`)。 ```python def fetch_and_save_html(url, file_path): try: # 发起GET请求获取网页源码 response = requests.get(url) # 如果状态码不是200，则抛出异常 response.raise_for_status() # 使用lxml解析器创建BeautifulSoup对象 soup = BeautifulSoup(response.text, 'lxml') # 将整个文档转换回字符串形式以便于后续操作 html_content = str(soup.prettify()) # 把整理好的HTML代码存入指定位置 with open(file_path, mode='w', encoding='utf-8') as f: f.write(html_content) print(f"成功保存 {file_path}") except Exception as e: print(f"发生错误: {e}") ``` 此部分实现了向给定链接发起请求、检查响应是否正常返回、使用BS4解析接收到的数据流、最后把经过美化后的HTML文本写出到硬盘上相应地址的功能[^1]。 #### 调用上述方法执行具体任务 假设要抓取的是某个特定美食网站上的分类列表页，那么只需要调用上面定义的方法即可： ```python if __name__ == "__main__": target_url = "http://example.com/category" output_file = "./category_page.html" fetch_and_save_html(target_url, output_file) ``` 这里设置了一个虚拟的例子URL (`target_url`) 和输出文件名 (`output_file`) ，实际应用时应替换为目标站点的真实地址以及期望存储的结果文件名称。 通过这种方式能够有效地从互联网上收集公开可用的信息资源，并按照需求对其进行加工处理后持久化下来供进一步分析研究之用[^2]。