将巨大的 Pandas HD5 数据帧写入磁盘

时间:2021-05-28 18:56:32

标签: python pandas

我有一个非常大的多索引 Pandas 数据框,由每列中的对象(大约 81900 行 × 24 列)组成,我需要将其保存为 hdf,但是当我这样做时:

df.to_hdf(path2filename,mode='a',key='main')

它没有告诉我:

OverflowError: value too large to convert to int

保存如此庞大的数据帧的最佳方法是什么。我想要 hdf,因为此数据帧是我希望将其组合在一起的一组数据帧的一部分,但如果没有解决方案,我可以探索其他可能性。

0 个答案:

没有答案