### 使用 Pyppeteer 获取 eBay 商品详情页面的 HTML 源代码 为了获取 eBay 商品详情页面的 HTML 源代码，可以利用 Python 的 `pyppeteer` 库来模拟浏览器行为并抓取网页内容。此方法能够处理 JavaScript 动态加载的内容。 #### 安装依赖库 首先需要安装 pyppeteer 及其相关依赖项： ```bash pip install pyppeteer ``` #### 编写爬虫脚本 下面是一个简单的例子展示如何使用 Pyppeteer 来访问指定的商品链接，并提取完整的 HTML 文档： ```python import asyncio from pyppeteer import launch async def get_html(url): browser = await launch(headless=True, args=['--no-sandbox']) page = await browser.newPage() # 设置视窗大小以适应不同分辨率下的布局变化 await page.setViewport({'width': 1920, 'height': 1080}) try: await page.goto(url, {'waitUntil': 'networkidle2'}) # 执行滚动操作确保加载全部动态内容 await auto_scroll(page) content = await page.content() print(content[:500]) # 输出前500字符作为示例 finally: await browser.close() async def auto_scroll(page): last_height = await page.evaluate('document.body.scrollHeight') while True: await page.evaluate('window.scrollTo(0, document.body.scrollHeight)') await asyncio.sleep(2) new_height = await page.evaluate('document.body.scrollHeight') if new_height == last_height: break last_height = new_height if __name__ == '__main__': url = "https://www.ebay.com/sch/i.html?_nkw=laptop" loop = asyncio.get_event_loop() loop.run_until_complete(get_html(url)) ``` 这段代码会启动无头模式下的 Chromium 浏览器实例，导航到目标 URL 并等待直到网络连接几乎处于空闲状态 (`'networkidle2'`) ，这有助于确保大部分异步资源已经完成下载[^1]。接着通过不断向下滚动的方式触发更多内容加载，最后读取整个文档对象模型 (DOM) 转换成字符串形式即为所需的 HTML 源码。