Python - 用于大量数据文件的高效I / O.

时间:2017-07-17 11:56:03

标签: python io

我需要将每日降水数据汇总为7年的月平均值,所有数据都以.dat格式存储。我知道如何用NumPy读取数据,一旦数据在数组中,我可以处理其余的数据。

我预见到的问题是,这将是一个IO绑定的过程,看我如何打开和读取2360+数据文件。 Python中是否有一种机制可以让我有效地执行这么多的I / O?

我过去做过类似的事情,将几个arr[k++] = str;循环嵌套在彼此之内并让它运行直到它完成或我的计算机爆炸,但我觉得必须有更好的方法。

感谢任何帮助!

0 个答案:

没有答案