要使用 Python 模拟浏览器访问网页，可以通过多种方式实现，具体取决于是否需要完全加载页面内容、执行 JavaScript 或模拟用户交互等需求。 ### 使用 Selenium 控制真实浏览器 如果需要完全模拟用户的浏览器行为，包括加载页面、执行 JavaScript 和与页面交互，推荐使用 **Selenium**。Selenium 可以控制诸如 Firefox、Chrome 等真实浏览器，适合需要高度模拟用户行为的场景。 #### 安装依赖 ```bash pip install selenium ``` #### 示例代码：使用 Selenium 控制 Firefox 浏览器 ```python from selenium import webdriver # 设置 Firefox 浏览器的驱动路径（确保 geckodriver 在系统 PATH 中） driver = webdriver.Firefox() # 访问目标网站 driver.get("https://www.example.com") # 获取页面标题 print(driver.title) # 关闭浏览器 driver.quit() ``` 此代码展示了如何启动 Firefox 浏览器，访问一个网页，并在操作完成后关闭浏览器[^1]。 ### 使用 Requests 和 BeautifulSoup 获取静态页面内容 如果只需要获取网页的 HTML 内容，而不需要执行 JavaScript 或加载动态内容，可以使用 **Requests** 和 **BeautifulSoup**。这种方法速度快、资源消耗低，但不适用于需要 JavaScript 渲染的页面。 #### 安装依赖 ```bash pip install requests beautifulsoup4 ``` #### 示例代码：使用 Requests 获取网页内容 ```python import requests from bs4 import BeautifulSoup # 发送 HTTP 请求 response = requests.get("https://www.example.com") # 解析 HTML 内容 soup = BeautifulSoup(response.text, "html.parser") # 输出页面标题 print(soup.title.string) ``` 此方法适用于静态页面抓取，不支持 JavaScript 渲染的内容[^1]。 ### 使用 Playwright 或 Puppeteer（通过 Pyppeteer） 对于需要加载 JavaScript 的页面，还可以使用 **Playwright** 或 **Pyppeteer**（Python 的 Puppeteer 实现）。这些工具可以无头模式运行 Chrome 或 Chromium 浏览器，适合爬取动态加载的内容。 #### 安装 Playwright ```bash pip install playwright playwright install ``` #### 示例代码：使用 Playwright 访问网页 ```python from playwright.sync_api import sync_playwright with sync_playwright() as p: browser = p.chromium.launch(headless=True) page = browser.new_page() page.goto("https://www.example.com") print(page.title()) browser.close() ``` 此代码展示了如何使用 Playwright 以无头模式启动浏览器并访问网页。 --- ###