在zip文件中读取超过50 000个csv时,r-unzip速度变慢

时间:2018-04-10 14:04:15

标签: r performance csv unzip

我试图用unzip函数解压缩7zip文件。该zip文件包含大约155 000个csv文件。当它开始解压缩时,前5 000分钟内会读取前25 000个csv文件,然后它会开始减速并在近一个小时内读取所有文件。这是一种常见的行为。

我知道不提供可重复的例子会让每个人的生活更加困难,但我无法分享我工作的数据。我只是感兴趣是否有另一种方法从zip中提取zip文件,调整函数或调用外部程序或其他东西?

在R之外用7zip提取需要20分钟的顶部,这就是为什么我认为这是一个与R相关的问题

0 个答案:

没有答案