将python中的大量数据检索到文件 - 内存不足

时间:2018-03-28 13:31:17

标签: python out-of-memory buffer

让我们假设我们使用python代码从Internet下载大量数据。而且我们无法将其融入记忆中。

在python中是否存在一些解决方案可以下载到某个缓冲区(固定大小,比方说1 MB)并在溢出的情况下刷新到磁盘上的文件?

一般来说,如何在python中解决它?

说到确切的用例,我的意思是使用现有的python客户端从数据库中检索数据。数据的目标是文件。

0 个答案:

没有答案