我有一个JSON文件,其中数据存储在记录中。
[{"count": 3, "articleTag": "muslims,myanmar,viral sach", "articleId": "587044", "deviceId": "0652c917-6241-4f1d-bad2-520ce8df0db5", "articleCategory": "VIDEO"}, {"count": 2, "articleTag": "vyakti vishesh,story,kim jong", "articleId": "587057", "deviceId": "0652c917-6241-4f1d-bad2-520ce8df0db5", "articleCategory": "VIDEO"}]
如果我读了这个文件pd.read_json(filepath,orient='records')
。然后我的系统被绞死了。什么是以块的形式读取文件的最佳方式。
文件大小将以GB为单位。我需要以大块的形式阅读它。