创建一个功能强大的 Python 爬虫涉及到多个方面，比如网络请求、数据解析以及错误处理等。下面我将为你展示如何构建这样一个简单的爬虫框架，并实现从网页中抓取特定提示词的文字内容。 首先需要安装必要的库： ```bash pip install requests beautifulsoup4 lxml ``` 然后我们可以开始编写我们的爬虫代码了: ```python import requests from bs4 import BeautifulSoup class TextScraper: def __init__(self): self.headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36'} # 获取页面HTML文本 def get_page_html(self, url): try: response = requests.get(url, headers=self.headers) if response.status_code == 200: return response.text else: print(f"Failed to retrieve page {url}, status code:",response.status_code) return None except Exception as e: print("Error occurred while fetching the URL",e) return None # 根据关键词提取文本 def extract_text_by_keyword(self, html_content, keyword): soup = BeautifulSoup(html_content,'lxml') for tag in soup.find_all(text=True): if keyword.lower() in str(tag).lower(): parent_tag = tag.parent.name # 找到包含关键字所在的标签 yield f"{parent_tag}: " + ''.join(soup.find(parent=parent_tag).stripped_strings) def main(): scraper = TextScraper() target_url = input('请输入目标网站URL:') key_word = input('请输入您想查找的关键字:') content = scraper.get_page_html(target_url) if not content: exit(-1) results=list(scraper.extract_text_by_keyword(content,key_word)) if len(results)>0: for result in set(results): # 去重显示结果 print(result) else: print('未找到含有该词汇的内容') if __name__=='__main__': main() ``` 此段程序实现了基本的功能需求——通过用户输入的目标网址及想要搜索的提示词，在获取相应网页源码后利用BeautifulSoup对文档树结构进行分析并定位至含有所需信息的位置最终将其打印出来供查看。 需要注意的是实际应用时还需要考虑更复杂的场景如登录验证、翻页加载更多数据等情况；此外也要遵守robots协议尊重对方服务器设定避免过度频繁访问造成负担。 --