linux环境下根据文件的某一列进行去重

Posted 子雅陌曦

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux环境下根据文件的某一列进行去重相关的知识,希望对你有一定的参考价值。

[email protected]:~/user/txt$ cat test.txt
1 chen nihao
2 chen hello
3 li nimenhao
4 he dajiahao
5 li nimenhao
[email protected]:~/user/txt$ sort -k2,2 -u test.txt
1 chen nihao
4 he dajiahao
3 li nimenhao

 

[email protected]:~/user/txt$ cat test1.txt
1 chen nihao
2 chen hello
3 li nimenhao
4 he dajiahao
5 li nimenhao
6 she nimenhao
[email protected]:~/user/txt$ sort -k3,3 -u test1.txt
4 he dajiahao
2 chen hello
1 chen nihao
3 li nimenhao





















以上是关于linux环境下根据文件的某一列进行去重的主要内容,如果未能解决你的问题,请参考以下文章

linux脚本怎么读取文本的某一列进行操作

想用Python对csv表格中的某一列数据进行关键词筛选

linux脚本怎么读取文本的某一列进行操作

如何用awk命令提取文件中的某一列并统计该列中某个数字出现的次数?

Python读取csv文件中的某一列

Linux:使用awk命令获取文本的某一行,某一列