### 如何使用 Python 编写爬虫抓取电影排名数据 要实现一个能够抓取电影排名数据的 Python 程序，可以参考以下方法。此过程涉及发送 HTTP 请求、解析 HTML 或 JSON 数据以及提取所需的信息。 以下是基于 Douban 电影排行榜的一个具体示例： #### 发送请求 通过 `requests` 库向目标 URL 发起 GET 请求，并传递必要的参数和头部信息来模拟浏览器行为[^3]。 ```python import requests url = "https://movie.douban.com/j/chart/top_list" get_params = { "type": "22", # 类型：剧情片 "interval_id": "100:90", # 排名区间 "action": "", # 动作为空 "start": "0", # 起始索引 "limit": "10" # 获取数量 } headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 Safari/537.36" } response = requests.get(url=url, params=get_params, headers=headers) data = response.json() ``` #### 解析响应数据 Douban 的 API 返回的是 JSON 格式的结构化数据，因此可以直接调用 `.json()` 方法将其转换为字典列表形式。随后遍历这些条目以打印每部电影的名字和其他属性。 ```python for movie in data: title = movie['title'] score = movie['score'] vote_count = movie['vote_count'] print(f"Title: {title}, Score: {score}, Votes: {vote_count}") ``` #### 处理异常情况 为了提高程序健壮性，在实际开发过程中还需要考虑网络错误或者服务器返回非预期状态码的情况处理机制[^3]。 ```python try: response.raise_for_status() # 如果发生HTTP错误，则抛出异常 except requests.exceptions.HTTPError as errh: print ("Http Error:",errh) except requests.exceptions.ConnectionError as errc: print ("Error Connecting:",errc) except requests.exceptions.Timeout as errt: print ("Timeout Error:",errt) except requests.exceptions.RequestException as err: print ("OOps: Something Else",err) ``` 以上代码片段展示了如何构建一个简单的爬虫应用去收集指定条件下的豆瓣高分影片基本信息。