将许多.gz文件中的特定列粘贴在一起

时间:2011-10-25 21:09:11

标签: bash text

未压缩的

具有相同的行数和相同的列数。

所有文件都位于同一个目录中。

是否可以从每个文件中拉出每5-6列并将它们粘贴在一起而不必转储临时文件?

这样的东西
for i in *.gz
do
   gunzip -c $i |cut -f5-6 >$i.tmp;
done

paste *.tmp

由于

2 个答案:

答案 0 :(得分:6)

您可以创建一个命令行来评估和使用bash进程替换来避免临时文件:

command=paste
for i in *.gz; do
    command="$command <(gzip -cd $i | cut -f5-6)"
done
eval $command

答案 1 :(得分:1)

for f in *.gz ; do
  printf '_fn %s\n' "$f" 
  gunzip -c "$f"  
done | 
  awk 'END {
    for (i = 0; ++i <= m;)
      for (j = 0; ++j <= fc;)
        printf "%s", (d[j, i] (j < fc ? OFS : RS))    
    }
  $1 == "_fn" {
    fn = $2; fnr = x; ++fc
    next
    }
  { 
    d[fc, ++fnr] = $5 OFS $6
    fnr > m && m = fnr
    }' OFS='\t'