日志查找排序统计

Posted hehe735845436

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了日志查找排序统计相关的知识,希望对你有一定的参考价值。

背景:查找10万个请求中,异常返回的请求get 1是否与省份有关?集中在部分省份还是所有省份?

技术图片

 

命令:head -n 100000 test.log|grep  "get 1" |awk ‘{print $8}‘|cut -d = -f 3|sort|uniq -c|sort -r

1、head -n 100000 test.log:显示test.log中开头的10万行

延伸阅读转载:https://www.cnblogs.com/zdz8207/p/linux-log-tail-cat-tac.html

                         https://blog.csdn.net/qq_28286027/article/details/81121473

                         https://www.cnblogs.com/kbkiss/p/7567725.html

linux查看日志文件命令,tail、cat、tac、head、echo、sed;第二类:进入vim编辑器中查找

应用场景一:按行号查看---过滤出关键字附近的日志

应用场景二:根据日期查询日志

应用场景三:日志内容特别多,打印在屏幕上不方便查看

2、grep  "get 1" |awk ‘{print $8}‘|cut -d = -f 3|sort|uniq -c|sort -r:过滤出异常请求,取数据所在列,用“=”分割取到具体数值,(注:uniq得和sort并用)排序去重统计,再按照统计数排序,最终效果

技术图片

转载:https://www.cnblogs.com/maybe2030/p/5325530.html#_label0

Linux文本操作命令,包括wc(统计)、cut(切分)、sort(排序)、uniq(去重)、grep(查找)、sed(替换、插入、删除)、awk(文本分析)

 

以上是关于日志查找排序统计的主要内容,如果未能解决你的问题,请参考以下文章

windows 日志文件查找符合条件的列并统计

List集合元素的计算排序查找统计

每日一shell日志IP统计排序

Linux学习29-awk提取log日志信息,统计日志里面ip访问次数排序

python统计apachenginx访问日志IP访问次数并且排序(显示前20条)

awk, uniq, sort统计日志信息