Linux-017-删除重复行

Linux系统中,使用如下命令可快速去除文件或数据集中的重复行

sort -k2n {file} | uniq > a.out

方便对数据的后续处理。比如遍历行数据,统计去重后的数据量等

我本渺小,但山峰,我一次次绝顶!


PS:若有错误,敬请告知,不胜感激!
Copyright @范丰平 版权所有,如需转载请标明本文原始链接出处,严禁商业用途! 我的个人博客链接地址:http://www.cnblogs.com/fengpingfan
原文地址:https://www.cnblogs.com/fengpingfan/p/14298289.html