我从曾经存储为磁带的大文件(fwf和csv)导入数据,因此在写入磁带时可能会产生错误。
旧文件采用固定宽度文件(fwf)格式 较新的文件采用.csv格式(使用&#34 ;;"作为分隔符)
错误可能类似于:
用于fwf文件:
用于csv文件:
有没有办法将其导入R跳过错误行,但保留错误日志以便以后可以手动检查?
或者我应该使用R外部的其他工具?在这种情况下,哪个工具?
我有大约100个文件非常大的文件(每个90GB)所以我更喜欢一些data.table :: fread,或者其他一些快速的解决方案。