Linux 文本去重 之 命令sort 与

Posted 潇水鱼米

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Linux 文本去重 之 命令sort 与相关的知识,希望对你有一定的参考价值。

 sort [-fbMnrtuk] [file or stdin]
选项与参数:
-f  :忽略大小写的差异,例如 A 与 a 视为编码相同;
-b  :忽略最前面的空格符部分;
-M  :以月份的名字来排序,例如 JAN, DEC 等等的排序方法;
-n  :使用『纯数字』进行排序(默认是以文字型态来排序的);
-r  :反向排序;
-u  :就是 uniq ,相同的数据中,仅出现一行代表;
-t  :分隔符,默认是用 [tab] 键来分隔;
-k  :以那个区间 (field) 来进行排序的意思

sort -u 可以去重
[[email protected] ~]# uniq [-icu]
选项与参数:
-i   :忽略大小写字符的不同;
-c  :进行计数
-u  :只显示唯一的行
 

 uniq命令可以去除排序过的文件中的重复行,但是重复行必须是相邻的

所以去重还是推荐sort -u

 



以上是关于Linux 文本去重 之 命令sort 与的主要内容,如果未能解决你的问题,请参考以下文章

Linux高级命令

Linux高级命令

利用Linux命令行进行文本按行去重并按重复次数排序

shell编程之sort命令和uniq命令:数据排序去重命令

Linux常用文本操作命令整理

linux命令之----sort命令用于将文本文件内容加以排序