python如何保存数据集

林译川

2026-09-24 • 👁 0人浏览过

在 Python 中，保存数据集的方法有：使用 pickle 模块对 Python 对象进行序列化。使用 NumPy 的 save 和 load 方法保存和加载 NumPy 数组。使用 Pandas 的 to_csv 和 read_csv 方法保存和加载数据框。使用 HDF5 文件存储大型数据集。 Python 如何保存数据集在 Python 中，保存数据集有以下几种方法：一、使用 pickle 模块 Pickle 模块用于对 Python 对象进行序列化和反序列化。它支持保存复杂的 Python 对象，包括列表、字典和类实例。

import pickle

# 将数据集保存为文件
with open('dataset.pkl', 'wb') as f:
    pickle.dump(dataset, f)

# 从文件中加载数据集
with open('dataset.pkl', 'rb') as f:
    dataset = pickle.load(f)

二、使用 NumPy 的 save 和 load 方法 NumPy 提供了

save

和

load

方法，专门用于保存和加载 NumPy 数组。它比 pickle 更高效，尤其是对于大型数组。

import numpy as np

# 保存数据集
np.save('dataset.npy', dataset)

# 加载数据集
dataset = np.load('dataset.npy')

三、使用 Pandas 的 to_csv 和 read_csv 方法 Pandas 提供了

to_csv

和

read_csv

方法，用于保存和加载数据框。它支持将数据框导出为 CSV 文件，该文件可以方便地被其他程序读取。 Python 3.14.3 微软官方的 Python 扩展，是 VS Code 安装量最高的扩展（209M+）。集成 IntelliSense（通过 Pylance）、调试（通过 Python Debugger）、代码检查、格式化、重构和单元测试等功能。支持 Jupyter Notebook、虚拟环境管理和多 Python 版本切换。下载立即学习 “ Python免费学习笔记（深入） ”；

import pandas as pd

# 保存数据集
dataset.to_csv('dataset.csv', index=False)

# 加载数据集
dataset = pd.read_csv('dataset.csv')

四、使用 HDF5 文件 HDF5 文件是一种二进制文件格式，专为存储大型数据集而设计。它支持创建具有复杂结构和元数据的层次数据集。

import h5py

# 创建 HDF5 文件
with h5py.File('dataset.h5', 'w') as f:
    f.create_dataset('dataset', data=dataset)

# 加载数据集
with h5py.File('dataset.h5', 'r') as f:
    dataset = f['dataset'][:]

选择哪种方法取决于数据集的类型、大小和所需的性能。

相关文章