首页 > 其他 > 详细

利用h5py存储数据

时间:2017-03-10 14:06:02      阅读:1541      评论:0      收藏:0      [点我收藏+]

两类容器:group & dataset

group类似文件夹,字典。 dataset是数据集,类似数组

支持更多的对外透明的存储特征,数据压缩,误差检测,分块传输

 

import h5py

读:

f = h5py.File(file, mode=‘r‘)

f.keys()

dset = f[‘mydataset‘]

写:

f = h5py.File(file, mode=‘w‘)

dset = f.create_dataset(name, dataOrSize, dtype, )

可选项:

chunks: True自动分块, 如果手动分块则输入元组

 

可以对数据块设置attrs

dset.attrs[‘abc‘] = 1

 

高级特性:

滤波器组?加入参数compression = ‘gzip‘

hdf5文件本身大小没有限制

一个dataSet最多32维, 每个维最多2^64个值

一个chunk最大4G,

 

利用h5py存储数据

原文:http://www.cnblogs.com/yesuuu/p/6530367.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!