如何在linux中合​​并类似的行

时间:2013-07-27 11:30:21

标签: linux shell sed awk merge

我的linux系统上有一个文件test.txt,其中包含以下格式的数据:

first second third fourth 10  
first second third fourth 20  
fifth sixth seventh eighth 10  
mmm nnn ooo ppp 10  
mmm nnn ooo ppp 20   

我需要修改格式如下 -

first second third fourth 10 20  
fifth sixth seventh eighth 10 0  
mmm nnn ooo ppp 10 20  

我尝试过以下代码

cat test.txt | sed 'N;s/\n/ /' | awk -F" " '{if ($1~$5){print $1" "$2" "$3" "$4" "$8} else { print $0 }}'

但这并没有提供所需的输出。如果有一行在其下方没有类似的行,则此命令失败。你可以建议我解决这个问题吗?

3 个答案:

答案 0 :(得分:0)

这是一种方法:

awk ' {
  last=$NF; $NF=""
  if($0==previous) {
    tail=tail " " last
  }
  else {
    if(previous!="") {
      if(split(tail,foo)==1) tail=tail " 0"
      print previous tail
    }
    previous=$0
    tail=last
  }
}
END {
    if(previous!="") print previous tail
}
'

答案 1 :(得分:0)

Perl解决方案:

perl -ne '/^(.*) (\S+)/ and push @{ $h{$1} },$2 }{ print "$_ @{$h{$_}}\n" for keys %h' < test.txt

答案 2 :(得分:0)

重用my solution(J4F)

cat file.txt | sort | while read L;
do
  y=`echo $L | rev | cut -f2- -d' ' | rev`;
  {
    test "$x" = "$y" && echo -n " `echo $L | awk '{print $NF}'`";
  } || 
  {
    x="$y";echo -en "\n$L"; 
  };
done