linux-指定特殊域去重

Posted 指尖上的艺术

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux-指定特殊域去重相关的知识,希望对你有一定的参考价值。

测试数据:

2017-10-24 14:14:11:1123 [ INFO] order_type=add,order_id=915
2017-10-24 14:14:11:1123 [ INFO] order_type=close,order_id=915
2017-10-24 14:14:11:1123 [ INFO] order_type=close,order_id=915088223308001066480010
2017-10-24 14:14:11:1123 [ INFO] order_type=add,order_id=915

从第5块域开始去重:

-u 去重;-k 空格

sort -u -k 5 console.log

从第5块域开始去重后,按照多个字符串条件统计行数

sort -u -k 5 console.log | grep ‘2017-10-24‘ | grep order_type=pkg_add | wc -l




以上是关于linux-指定特殊域去重的主要内容,如果未能解决你的问题,请参考以下文章

python去重(汉字一样,里面的编码不一样)?

链表Linked List注意事项

一个特殊的List去重问题的解决方案

SQL快速入门

SQL快速入门

SQL快速入门