如何在linux中的文本文件中捕获重复的条目

Question

文字档案：

1 1
2 2
3 3
1 1

我希望将1 1视为重复的

Answer 1

您的问题不是很明确，但您可以过滤掉重复的行与uniq：

sort file.txt | uniq

或只是

sort -u file.txt

（感谢RobEarl）

您还可以仅使用

打印重复行

sort file.txt | uniq -d

Answer 2

使用GNU awk的一种方式：

awk 'array[$0]++' file.txt 

结果：

1 1

Answer 3

您可以轻松使用它：

sort -u file.txt

OR

awk '!x[$0]++' file.txt