Question

我遇到了这样的问题：我有两个带密钥的文件：

file1: aa, bb, cc, dd, ee, ff, gg;

file2: aa, bb, cc, zz, yy, ww, oo;

我需要使用 grep / sed 编写一个脚本来生成两个文件：

res1.txt - will contain similar keys from both files: aa, bb, cc;

res2.txt - will contain ONLY keys from file2 which differs from files1: zz, yy, ww, oo.

我可以使用这些工具来完成它以及我需要使用python脚本来完成这项工作吗？感谢。

我正在使用Windows。

Answer 1

您可以使用comm来显示常用行，但您必须对文件进行排序（并通过tr将它们转换为每行的键格式）：

comm -12 <(tr -s ' ,' '\n' < file1 | sort) <(tr -s ' ,' '\n' < file2 | sort)
comm -13 <(tr -s ' ,' '\n' < file1 | sort) <(tr -s ' ,' '\n' < file2 | sort)

Answer 2

GNU sed的丑陋工作：

sed -r 's#(\w+)[,;]\s*#/\1/{x;s/.*/\&\1,/;x};#g;s#.*#&x;s/,$/;/#' file1|sed -rf - file2 > res1.txt
sed -r 's#(\w+),\s#\1[,;]\\s*|#g;s#(.*);#s/\1//g#' file1|sed -rf - file2 > res2.txt

$ cat file1 file2
aa, bb, cc, dd, ee, ff, gg;
aa, bb, cc, zz, yy, ww, oo;

$ sed -r 's#(\w+)[,;]\s*#/\1/{x;s/.*/\&\1,/;x};#g;s#.*#&x;s/,$/;/#' file1|sed -rf - file2
aa,bb,cc;

$ sed -r 's#(\w+),\s#\1[,;]\\s*|#g;s#(.*);#s/\1//g#' file1|sed -rf - file2
zz, yy, ww, oo;

引用Windows：

sed -r "s#(\w+)[,;]\s*#/\1/{x;s/.*/\&\1,/;x};#g;s#.*#&x;s/,$/;/#" file1|sed -rf - file2 > res1.txt
sed -r "s#(\w+),\s#\1[,;]\\s*|#g;s#(.*);#s/\1//g#" file1|sed -rf - file2 > res2.txt

Answer 3

每个UNIX安装附带的通用文本处理工具名为awk：

awk -F', *|;' '
NR==FNR { for (i=1; i<NF;i++) file1[$i]; next }
{
    for (i=1; i<NF; i++) {
        sfx = ($i in file1 ? 1 : 2)
        printf "%s%s", sep[sfx], $i > ("res" sfx ".txt")
        sep[sfx]=", "
    }
}
END { for (sfx in sep) print ";" > ("res" sfx ".txt") }
' file1 file2

Answer 4

在Python中，您可以执行以下操作。

string1 = "aa, bb, cc, dd, ee, ff, gg;"
string2 = "aa, bb, cc, zz, yy, ww, oo;"

list1 = string1.rstrip(';').split(', ')
list2 = string2.rstrip(';').split(', ')

common_words = filter(lambda x: x in list1, list2)
unique_words = filter(lambda x: x not in list1, list2)

>>> common_words
['aa', 'bb', 'cc']
>>> unique_words
['zz', 'yy', 'ww', 'oo']

如果需要，您可以将这些内容写入文件。

E.g：

common_string = ', '.join(common_words) + ';'
with open("common.txt", 'w') as common_file:
    common_file.write(common_string)

用grep或sed合并两行

4 个答案: