Linux命令行进行文件内容去重

在 Linux 命令行中，可以使用 sort 和 uniq 命令组合来对文件内容进行去重。下面是一个简单的示例：

1. 首先，使用 cat 命令查看文件内容：

cat input_file.txt

2. 然后，将文件内容通过管道传递给 sort 命令进行排序：

cat input_file.txt | sort

3. 接下来，将排序后的结果传递给 uniq 命令进行去重：

cat input_file.txt | sort | uniq

4. 最后，如果你想将去重后的结果保存到一个新文件中，可以使用重定向操作符 >：

cat input_file.txt | sort | uniq > output_file.txt

这样，output_file.txt 文件中就包含了去重后的内容。请注意，这个方法仅适用于文本文件，并且假设文件中的每一行都是唯一的。