将从文件中删除重复行的工具？

Question

是否有可以检测文件中重复项的mac文件比较工具？这非常接近我正在寻找的东西，除了它适用于Windows：http://www.rlvision.com/dupli/about.asp。此外，我需要比较两个文件中的重复内容。如果不出意外，我可以将file2内容附加到file1的底部。

Answer 1

我不知道有一个GUI应用程序可以做到这一点，但在终端上相当容易：

cat file1.txt file2.txt | sort | uniq -d

-d会让它只显示重复的行。如果您只想要输出没有重复，请离开-d。