免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 3486 | 回复: 7
打印 上一主题 下一主题

apache日志分析问题 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2011-06-24 15:23 |只看该作者 |倒序浏览
apache的日志我已经用awk整理缩减了
现在的格式如下:
[22/Jun/2011:22:00:22 +0800] 406
[22/Jun/2011:22:03:37 +0800] 309
[22/Jun/2011:22:03:45 +0800] 402
.......


现在需要将没一分钟的后面的数字(即上面  405  309  402)  相加  等到如下类型的结果
[22/Jun/2011:22:00   相加结果
[22/Jun/2011:22:01   相加结果
[22/Jun/2011:22:02   相加结果
[22/Jun/2011:22:03   相加结果
即没一分钟内的相加结果

求教了

论坛徽章:
10
天蝎座
日期:2013-09-22 22:32:23程序设计版块每日发帖之星
日期:2016-08-07 06:20:00lufei
日期:2016-06-17 17:38:40程序设计版块每日发帖之星
日期:2016-06-12 06:20:002016科比退役纪念章
日期:2016-05-31 15:47:20CU十四周年纪念徽章
日期:2016-05-27 12:24:562015年亚洲杯之阿曼
日期:2015-05-03 21:01:352015年辞旧岁徽章
日期:2015-03-03 16:54:15天蝎座
日期:2013-10-20 21:05:24程序设计版块每日发帖之星
日期:2016-08-11 06:20:00
2 [报告]
发表于 2011-06-24 15:35 |只看该作者
本帖最后由 liion631818 于 2011-06-24 15:41 编辑

  1. awk 'BEGIN{FS=":| "}{a[$1":"$2":"$3]+=$6}END{for(i in a){print i,a[i]}}' file
复制代码

论坛徽章:
0
3 [报告]
发表于 2011-06-24 15:41 |只看该作者

  1. awk -F'[: ]+' -v OFS=":" '{n=$NF;NF-=3;}NR>1&&a!=$0{print a " " b;a=$0;b=0}{a=$0;b+=n}END{print a" "b}'

复制代码

论坛徽章:
0
4 [报告]
发表于 2011-06-24 15:46 |只看该作者
awk -F'[ :]' '{if($0!="")a[$1":"$2":"$3]+=$NF}END{for(i in a)print i"\t"a[i]}' file
做题速度不够快啊,被楼上抢先了

论坛徽章:
10
天蝎座
日期:2013-09-22 22:32:23程序设计版块每日发帖之星
日期:2016-08-07 06:20:00lufei
日期:2016-06-17 17:38:40程序设计版块每日发帖之星
日期:2016-06-12 06:20:002016科比退役纪念章
日期:2016-05-31 15:47:20CU十四周年纪念徽章
日期:2016-05-27 12:24:562015年亚洲杯之阿曼
日期:2015-05-03 21:01:352015年辞旧岁徽章
日期:2015-03-03 16:54:15天蝎座
日期:2013-10-20 21:05:24程序设计版块每日发帖之星
日期:2016-08-11 06:20:00
5 [报告]
发表于 2011-06-24 15:51 |只看该作者
回复 4# ljbzju


   
还是做慢点的对啊,空行我没判断, 用$6也够烂的

论坛徽章:
0
6 [报告]
发表于 2011-06-24 16:08 |只看该作者
  1. awk '{sub(/:[^:]*$/,"",$1)}$1!=v{print v,s;s=0}{v=$1;s+=$3}' file
  2. awk '{sub(/:[^:]*$/,"",$1);a[$1]+=$3}END{for (i in a) print i,a[i]}' file
复制代码

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
7 [报告]
发表于 2011-06-24 16:45 |只看该作者
apache的日志我已经用awk整理缩减了
现在的格式如下:
[22/Jun/2011:22:00:22 +0800] 406
[22/Jun/2011:2 ...
xiachunmen 发表于 2011-06-24 15:23



$ echo '[22/Jun/2011:22:00:22 +0800] 406
[22/Jun/2011:22:03:37 +0800] 309
[22/Jun/2011:22:03:45 +0800] 402' | awk -F':.. .+ ' '{sub("[[]","",$1);t[$1]+=$2}END{for(n in t)print n" "t[n]}'
22/Jun/2011:22:00 406
22/Jun/2011:22:03 711

论坛徽章:
0
8 [报告]
发表于 2011-06-24 17:22 |只看该作者
tmp_time=`date '+%d/%m/%Y:%H:%M'`
echo $tmp_time >tmp
MOn=`date '+%d/%m/%Y:%H:%M' | awk -F "/" '{print $2}'`
statistics()
{
if [ "$MOn" = "01" ];then
NMOn=Jan
elif [ "$MOn" = "02" ];then
NMOn=Feb
elif [  "$MOn" = "03" ];then
NMOn=Mar
elif [  "$MOn" = "04" ];then
NMOn=Apr
elif [  "$MOn" = "05" ];then
NMOn=May
elif [  "$MOn" = "06" ];then
NMOn=Jun
elif [  "$MOn" = "07" ];then
NMOn=Jul
elif [  "$MOn" = "08" ];then
NMOn=Aug
elif [  "$MOn" = "09" ];then
NMOn=Sep
elif [  "$MOn" = "10" ];then
NMOn=Oct
elif [  "$MOn" = "11" ];then
NMOn=Nov
elif [  "$MOn" = "12" ];then
NMOn=Dec
fi
}
statistics
export TIME=`awk  'BEGIN{FS="/";print "'"$NMOn"'"}{print $1"/""'"$NMOn"'""/"$3}' tmp`
awk 'BEGIN{print ENVIRON["TIME"]}{if ($0~/[$TIME]/) print $0}' log | tee -a tmp.log
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP