如何更快地处理WARC文件?

时间:2019-06-20 14:27:15

标签: parsing parallel-processing gpu

我正在在单个服务器上使用Python从WARC文件中提取链接,并使用多个内核运行多个解析器脚本实例。我想知道的是,是否可以更快地在GPU上处理/解析WARC(或文本)文件?

或者还有其他有效的方法吗?

0 个答案:

没有答案