awk要求合并两个文件

时间:2015-04-06 17:46:24

标签: linux bash awk sed

我通过AWK命令将两个不同的文件与Same Key组合在一起。 如果没有密钥匹配比较File1和File2那么只是 改为“\ t \ t \ t \ t”。

我有以下AWK命令。

awk -F"\t" '
{key = $1}
NR == 1 {header = key}
!(key in result) {result[key] = $0 ; next}
{ for (i=2; i <= NF; i++) result[key] = result[key] FS $i }
END {
    print result[header],"\tValue2","\tValue3","\tValue4"
    delete result[header]
    PROCINFO["sorted_in"] = "@ind_str_asc"    # if using GNU awk
    for (key in result) print result[key]
}
' $1 $2 > $3

示例组合 文件1

Key    Value1
 A     10000
 B     20000
 C     30000
 D     40000

文件2

 B     50000      20000     10000   
 C     20000      10000     50000   

然后预期结果

Key    Value1    Value2    Value3    Value4
 A     10000       -         -         -
 B     20000     50000     20000     10000   
 C     30000     20000     10000    50000   
 D     40000       -         -         -

我的AWK命令秀

Key    Value1    Value2    Value3    Value4
 A     10000       
 B     20000     50000     20000     10000   
 C     30000     20000     10000    50000   
 D     40000       

我已经尝试过以下几种方式

!(key in result) {result[key] = $0"\t-\t-\t-" ; next}

但看起来这并不涵盖所有情况。 有人有更好的想法吗? 谢谢!

2 个答案:

答案 0 :(得分:2)

此解决方案不会硬编码File2中有3个额外字段

awk '
    BEGIN { FS = OVS = "\t" }
    NR == FNR {
        key = $1
        $1 = ""
        store[key] = $0
        num_extra_fields = NF-1
        next
    } 
    FNR == 1 {
        printf "%s", $0
        for (i=1; i <= num_extra_fields; i++) 
            printf "%sValue%d", OFS, i+(NF-1)
        print ""
        next
    } 
    $1 in store {
        print $0  store[key]
        next
    } 
    { 
        for (i=1; i <= num_extra_fields; i++) 
            $(++NF)="-"
        print
    }
' file2 file1 

由于stackoverflow显示标签

的方式,输出看起来有点奇怪
Key Value1  Value2  Value3  Value4
A   10000   -   -   -
B   20000   20000   10000   50000
C   30000   20000   10000   50000
D   40000   -   -   -

要修复代码,您需要跟踪file2中用于更新结果的密钥。变化

{ for (i=2; i <= NF; i++) result[key] = result[key] FS $i }

{ updated[key]=1; for (i=2; i <= NF; i++) result[key] = result[key] FS $i }

,在END块中,更改

  for (key in result) print result[key]

  for (key in result) {
    if (!(key in updated)) result[key] = result[key] FS "-" FS "-" FS "-"
    print result[key]
  }

答案 1 :(得分:1)

使用awk你可以这样做:

awk -v OFS='\t' 'NR==FNR {if (!n) {n=NF-1; s="-"; for(i=2; i<=n; i++) s=s OFS "-"}
   a[$1]=$0;next} $1 in a{sub($1, "&" OFS $2, a[$1]);
   print a[$1]; next} {print $0, s}' file2 file1

A   10000   -       -       -
B   20000   50000   20000   10000
C   30000   20000   10000   50000
D   40000   -       -       -