我正在研究Scrapy,我从网页中获取数据并尝试将它们存储在csv文件中。
实际上我有2560
行要写入csv文件的数据。
当我试图在OpenOffice中打开文件时,我收到此错误:
The maximum number of rows has been exceeded. Excess rows were not imported.
我可以打开该文件,但我只获得600
行,剩余的行将被删除。
如何让Scrapy将所有2560行下载到一个csv文件中?
答案 0 :(得分:1)
看来您的问题只是OpenOffice(或LibreOffice)拒绝加载这么长的.csv。数据本身应该没问题 - 其余的行根本就没有导入。
如果您在纯文本编辑器(例如vi
或nano
)中打开文件,您应该会看到所有内容都在那里。
或者,您可以尝试以下方法:
$ wc -l file.csv
结果应为2560(表示文件中有2560行)。