Linux命令行实现文件去重处理
短信预约 -IT技能 免费直播动态提醒
在 Linux 命令行中，可以使用 uniq 命令来去除文件中的重复行
假设你有一个名为 input.txt 的文件，内容如下：
apple
banana
apple
orange
banana
要使用 uniq 命令去除重复行，你可以将输出重定向到一个新文件 output.txt：
uniq input.txt > output.txt
现在，output.txt 文件的内容应该是：
apple
banana
orange
如果你想直接在原文件上去除重复行，可以使用 -c 选项并加上 --nocheck-order 选项（这是默认行为），如下所示：
uniq -c --nocheck-order input.txt > temp_file && mv temp_file input.txt
这将会修改 input.txt 文件，去除重复行。现在文件内容应该是：
apple
banana
orange
免责声明：
① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的，并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据，供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。
② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341
