如何在不解压缩的情况下将文件加载到内存中? (HDF5)

时间:2019-09-02 01:37:55

标签: python numpy compression hdf5 h5py

通过gzipcompression_opts=9压缩Numpy数组可减少文件大小3.38倍-显着。但是,目标是将更多批次加载到RAM中以加速深度学习-压缩不启用,因为HDF5-s在加载时会被解压缩

这就是说,是否可以根据需要加载HDF5文件而无需解压缩-要在以后 解压缩?例如

hdf5_compressed = h5py.load_without_decompression(filepath)
# do stuff
batch = do_decompression(hdf5_compressed)

0 个答案:

没有答案