如何在bash中查找和打印特定字符

时间:2016-09-05 13:40:34

标签: bash parsing awk find

我的文件如下:

AA,A=14,B=356,C=845,D=4516
BB,A=65,C=255,D=841,E=5133,F=1428
CC,A=88,B=54,C=549,F=225

我永远不知道该行中是否缺少A,B,C或D值。但我需要将此文件转换为:

AA,A=14,B=356,C=845,D=4516,-,-
BB,A=65,-,C=255,D=841,E=5133,F=1428
CC,A=88,B=54,C=549,-,-,F=225

因此,如果缺少任何值,则只打印-标记。我的计划具有相同数量的列以便于解析。我更喜欢awk解决方案。感谢您提出任何建议或帮助。

我的第一次尝试是:

awk '{gsub(/[,]/, "\t")}; BEGIN{ FS = OFS = "\t" } { for(i=1; i<=NF; i++) if($i ~ /^ *$/) $i = "-" }; {print $0}'

但后来我注意到,缺少一些值。

编辑:

从我的标题中我知道有值A,B,C,D,E,F ......

4 个答案:

答案 0 :(得分:3)

$ cat file.txt
AA,A=14,B=356,C=845,D=4516
BB,A=65,C=255,D=841,E=5133,F=1428
CC,A=88,B=54,C=549,F=225

$ perl -F, -le '@k=(A..F);
   $op[0]=$F[0]; @op[1..6]=("-")x6;
   $j=0; for($i=1;$i<=$#F;){ if($F[$i] =~ m/$k[$j++]=/){$op[$j]=$F[$i]; $i++} }
   print join(",",@op)
   ' file.txt
AA,A=14,B=356,C=845,D=4516,-,-
BB,A=65,-,C=255,D=841,E=5133,F=1428
CC,A=88,B=54,C=549,-,-,F=225
  • -F,,上拆分输入行并保存到@F数组
  • -l从输入行中删除换行符,将新行添加到输出
  • @k=(A..F);使用@kA等初始化B数组,直到F
  • $op[0]=$F[0]; @op[1..6]=("-")x6;初始化@op数组,第一个元素为@F,其余六个元素为-
  • for循环遍历@F数组,如果元素与相应索引中的@k数组元素匹配,后跟=,则更改@op元素
  • print join(",",@op)打印@op数组,,作为分隔符

答案 1 :(得分:2)

Perl救援!

您尚未指定如何获取标头信息,因此在以下脚本中,将直接填充@header数组。

%to_idx哈希将列名映射到它们的索引(A =&gt; 0,B =&gt; 1等)。

每行分为字段,每个字段与预期字段($next)进行比较,并在需要时打印短划线。丢失的尾随字段也是如此。

#!/usr/bin/perl
use warnings;
use strict;

my @header = qw( A B C D E F );

my %to_idx = map +($header[$_] => $_), 0 .. $#header;

open my $IN, '<', shift or die $!;
while (<$IN>) {
    chomp;
    my @fields = split /,/;
    print shift @fields;
    my $next = 0;
    for my $field (@fields) {
        my ($name, $value) = split /=/, $field;
        print ',-' x ($to_idx{$name} - $next);
        print ",$name=$value";
        $next = $to_idx{$name} + 1;
    }
    print ',-' x (1 + $#header - $next);  # Missing trailing fields.
    print "\n"
}

答案 2 :(得分:1)

TXR

中的解决方案
@(do
   (defstruct fill-missing nil
     strings
     (hash (hash :equal-based))

     (:postinit (self)
       (each ((s self.strings))
         (set [self.hash s] "-")))

     (:method add (self str val)
       (set [self.hash str] `@str=@val`))

     (:method print (self stream)
       (put-string `@{(mapcar self.hash self.strings) ","}` stream))))
@(repeat)
@  (bind fm @(new fill-missing strings '#"A B C D E F"))
@{label},@(coll)@{sym /[^,=]+/}=@{val /[^,]+/}@(do fm.(add sym val))@(end)
@  (do (put-line `@label,@fm`))
@(end)

执行命令

$ txr missing.txr data
AA,A=14,B=356,C=845,D=4516,-,-
BB,A=65,-,C=255,D=841,E=5133,F=1428
CC,A=88,B=54,C=549,-,-,F=225

答案 3 :(得分:1)

BEGIN {                                  
    PROCINFO["sorted_in"]="@ind_str_asc" # order for for(i in a)
    for(i=65;i<=90;i++)                  # create the whole alphabet to array a[]
        a[sprintf("%c", i)]              # you could read the header and use that as well
}
{
    split($0,b,",")                      # split record by ","
    printf "%s", b[1]                    # printf first element (AA, BB...)
    delete b[1]                          # get rid of it
    for(i in b) 
        b[substr(b[i],1,1)]=b[i]         # take the first letter to use as index (A=12)
    for(i in a)                          # go thru alphabet and printf from b[]
        printf "%s%s", OFS, (i in b?b[i]:"-"); print ""
}

awk -v OFS=\, -f parsing.awk tbparsed.txt
AA,A=14,B=356,C=845,D=4516,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-
BB,A=65,-,C=255,D=841,E=5133,F=1428,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-
CC,A=88,B=54,C=549,-,-,F=225,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-,-

它打印&#34; - &#34;对于记录中未找到的每个字母。如果数据有标题,您可以split到二维数组b[NR]并将for(i in a)更改为for(i in b[1]) ... printf ... b[NR][b[1][i]] ...,如果您不需要静态优先列,删除第一个printfdelete