### 使用 Python 爬虫抓取完整的微博内容包括展开部分 为了实现这一目标，通常会采用 Selenium 或者 Requests 结合正则表达式的方案来处理动态加载的内容。Selenium 可以模拟浏览器行为，自动执行页面上的操作，比如点击“展开全文”的按钮。 #### 方法一：利用 Selenium 抓取带展开内容的微博 通过使用 Selenium WebDriver 来控制网页浏览过程中的交互动作，可以有效地获取那些需要用户互动才能显示出来的信息片段。下面是一段简单的代码示例： ```python from selenium import webdriver import time def get_weibo_full_content(url): options = webdriver.ChromeOptions() options.add_argument('headless') # 设置无头模式运行Chrome driver = webdriver.Chrome(options=options) try: driver.get(url) time.sleep(3) # 等待页面加载完成 while True: expand_buttons = driver.find_elements_by_link_text("展开全文") if not expand_buttons: break for btn in expand_buttons: driver.execute_script("arguments[0].click();", btn) time.sleep(1) # 防止触发反爬机制 weibos = [] contents = driver.find_elements_by_css_selector(".WB_detail .content") for content in contents: text = content.text.strip().replace("\n", "") weibos.append(text) return weibos finally: driver.quit() url = 'https://weibo.com' print(get_weibo_full_content(url)) ``` 这段脚本首先启动了一个 Chrome 浏览器实例，在后台打开了指定 URL 的微博首页，并等待一段时间让页面充分渲染完毕；接着查找所有的“展开全文”链接并依次点击它们，直到找不到更多为止；最后提取每条微博的具体文字描述作为返回结果[^1]。 需要注意的是，由于微博网站可能会不断更新其 HTML 结构和 JavaScript 行为，因此上述 CSS Selectors 和 XPath 路径可能需要根据实际情况调整。此外，频繁请求服务器可能导致 IP 地址被封禁，建议合理设置延时间隔或采取代理池策略规避风险。 #### 方法二：基于 API 请求的方式 如果希望更高效地获得数据而不必依赖于真实的浏览器环境，则可以直接调用微信开放平台或其他第三方接口服务提供商所提供的 RESTful APIs 获取公开发布的微博消息列表及其详情页链接。这种方式不仅速度快而且稳定性更高，不过往往存在访问频率限制等问题需提前了解清楚条款规定再做决定。