限制在Pandas中读取read_csv中读取的GB数

时间:2016-02-03 18:31:21

标签: python-3.x pandas

我经常使用大小为100 GB的csv个文件。有没有办法告诉read_csv只从MB文件中读取固定数量的csv

更新

看起来chunkschunksize可以用于此,但文档看起来有点苗条。如何使用真正的csv文件执行此操作的示例是什么? (例如说一个100GB文件,只读行约~10MB}

1 个答案:

答案 0 :(得分:1)

您可以将nrows=number_of_rows_to_read传递给read_csv函数以限制读取的行。