Python json.load()需要永远

时间:2015-11-16 01:21:29

标签: python python-2.7 pandas count

我正在编写一个python代码(python 2.7.6)来计算包含目标关键字的推文数量。对于一些推文json文件,它工作得非常好。对于其他一些有问题的推文json文件,该脚本将在python json.load()中停留数小时而未完成。

执行后数小时,作业监视器中仍有2 GB内存。所以我不认为这是一个记忆问题。恕我直言,json文件中存在问题,因为它是一个凌乱的实时推文数据。我试图找到json验证器来证实我的假设。我曾尝试使用jsonlint,但它只是生成奇怪的错误消息,无法在Google上找到任何解决方案(其他帖子https://stackoverflow.com/questions/33731844/jsonlint-error-message-throw-new-rangeerrorattempt-to-allocate-buffer-larger)。 COuld任何大师启迪?谢谢!任何解决方案或指导将不胜感激。

0 个答案:

没有答案