前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >awk和sed截取nginx和tomcat时间段日志

awk和sed截取nginx和tomcat时间段日志

作者头像
匿名用户的日记
发布2021-12-14 11:03:31
1.7K0
发布2021-12-14 11:03:31
举报
文章被收录于专栏:匿名用户的日记
nginx日志截取示例

日志路径:/usr/local/nginx/logs, 截取access.log中2019年3月24日17点00~02之间的日志:  写法1:

代码语言:javascript
复制
cat access.log | awk '$4 >="[24/Mar/2019:17:00:00" && $4 <="[24/Mar/2019:17:02:00"'

 写法2:

代码语言:javascript
复制
cat access.log | egrep "24/Mar/2019" | awk -F':' '$2 = 17 && $3 >= 00 && $3 <= 02'

 写法3:

代码语言:javascript
复制
cat access.log |egrep "24/Mar/2019" |sed -n '/17:00:00/,/17:02:00/p'
tomcat日志截取示例

日志路径:/usr/local/tomcat/logs, 截取catalina.out中2019年3月24日17点00~02之间的日志: 写法1:

代码语言:javascript
复制
sed -n '/2019-03-24 17:00:/,/2019-03-24 17:02:/p'  catalina.out

写法2:

代码语言:javascript
复制
cat catalina.out| egrep "2019-03-24" | awk -F':' '$2 = 17 && $3 >= 00 && $3 <= 02'
awk统计nginx日志的ip访问量
代码语言:javascript
复制
nginx日志事先截取一部分:tail -n500 access.log >access.log1

第一种:使用awk sort,$1表示以空格为分割符的第一列,也就是文件中的ip地址,使用sort对结果排序,uniq -c进行计数,最后sort -n是以“数字”来排序,针对统计后的访问次数来排序

代码语言:javascript
复制
awk '{print $1}' access.log1|sort |uniq -c|sort -n

第二种:awk for,即数组; 默认变量为0,对每一行的$1作为key,count数组++,实现ip的计数。计数结束后END。然后把结果打印出来,最后sort -n以“数字”排序。

代码语言:javascript
复制
awk '{count[$1]++;}END{for(i in count){printf("%s\t%s\n", count[i], i);}}' access.log1|sort -n
取nginx日志访问接口次数

通过上面的方法将某个时间段日志取出来,查询该时间段访问接口最多的前10:

代码语言:javascript
复制
#!/bin/bash
 #统计接口的访问次数
 TODAY=`date +%d/%b/%Y`
 cat $1 |awk -F '"' '{print $2}'|awk '{split($2,res,"?") ; print res[1] }'|sort|uniq -c|sort -gr |head -n10
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020-11-25,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • nginx日志截取示例
  • tomcat日志截取示例
  • awk统计nginx日志的ip访问量
  • 取nginx日志访问接口次数
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档