将大数据文件导入到pandas中

Question

我有一个1.5 GB .dat文件，我需要导入为pandas数据帧，我遇到内存问题（8GB RAM）。如何将dat文件分成块来执行分析？

Answer 1

pd.read_csv('file.csv', chunksize = x)

返回一个迭代器，一次从x提供file.csv行。