使用巨大文件中的并行到grep模式并将每个模式打印到新文件

时间:2019-03-08 17:57:42

标签: parallel-processing grep

我正在尝试将使用grep搜索的模式从文件打印到每个都有模式的新文件中,但是由于原始文件很大,因此需要花费很多时间。我的目标是在这些方面:

cat All_microbes_nonewline.fna | parallel --pipe --block 2000M -j5 fgrep -A1 -f {} < kunju.txt > {}.fna

您能帮我吗?

1 个答案:

答案 0 :(得分:0)

我相信这就是您要寻找的:

parallel --pipe --block 2000M grep模式