### 将Python爬虫获取的数据写入不同类型的文件 #### 使用的库 为了将数据保存到不同的文件格式中，可以使用以下 Python 库： - **pandas**: 用于处理和操作表格型数据，支持读取和写出 Excel 和 CSV 文件。 - **openpyxl**: 专门用于读写 Excel (.xlsx) 文件。 - **csv**: 内置模块，适用于处理 CSV 文件。 - **os**: 提供了一种方便的方式与操作系统交互。 安装所需的库可以通过 pip 完成： ```bash pip install pandas openpyxl xlrd ``` #### 数据准备 假设有一个简单的列表 `data` 表示通过网络爬虫抓取的信息： ```python data = [ {"name": "Alice", "age": 28, "city": "New York"}, {"name": "Bob", "age": 24, "city": "Los Angeles"} ] ``` #### 导出至Excel文件 要将上述字典形式的数据转换并存储为 Excel 文件，可采用如下方法[^1]: ```python import pandas as pd df = pd.DataFrame(data) # 创建 Excel writer 对象 (指定引擎为 'openpyxl') writer = pd.ExcelWriter('output.xlsx', engine='openpyxl') # 将 DataFrame 写入工作表 df.to_excel(writer, index=False) # 关闭 writer 并保存文件 writer.close() print("Data has been written to output.xlsx successfully.") ``` #### 导出至CSV文件 对于 CSV 文件的操作相对简单得多，可以直接利用 Pandas 或者内置 csv 模块来完成。这里展示两种方式之一——Pandas 的实现: ```python import pandas as pd df = pd.DataFrame(data) df.to_csv('output.csv', encoding='utf-8-sig', index=False) print("Data has been written to output.csv successfully with UTF-8 BOM encoding.") ``` 注意，在此例子中选择了带有 BOM 的 utf-8 编码以确保某些应用程序能够正确识别字符集。 #### 导出至TXT文件 当目标是纯文本文件时，则不需要依赖额外的第三方库；只需打开一个新文件并将所需内容逐行写入即可: ```python with open('output.txt', mode='w') as file: for item in data: line = f"{item['name']},{item['age']},{item['city']}\n" file.write(line) print("Data has been written to output.txt successfully.") ```