免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: yyh
打印 上一主题 下一主题

请教这个shell的写法,统计行数 [复制链接]

论坛徽章:
0
11 [报告]
发表于 2009-07-03 10:27 |只看该作者

回复 #6 yyh 的帖子

FIFO和后面的数字从哪得到的 ?

论坛徽章:
0
12 [报告]
发表于 2009-07-03 10:31 |只看该作者
原帖由 lucash 于 2009-7-3 10:27 发表
FIFO和后面的数字从哪得到的 ?

Mon Jun 28 00:00:53 2009
09:55:54: ERROR1 /tmp/error/log.3 50 times
09:56:09: ERROR1 /tmp/error/log.14 50 times
10:56:12: ERROR1 /tmp/error/log.14 100 times
10:56:23: ERROR2 /tmp/error/log.5 50 times
11:56:26: ERROR2 /tmp/error/log.1 50 times
11:56:27: ERROR2 /tmp/error/log.5 100 times
Mon Jun 29 00:00:53 2009
15:56:29: ERROR3 /tmp/error/log.1 100 times
15:56:32: ERROR3 /tmp/error/log.1 150 times
16:56:33: ERROR4 /tmp/error/log.6 50 times
16:56:36: FIFO /tmp/error/log.6 100 times
16:56:40: FIFO /tmp/error/log.12 50 times
Mon Jun 30 00:00:53 2009

能否做成
2009|06|28|10|FIFO|109
2009|06|29|11|FIFO|1165

FIFO是第二列告警的一种,2009|06|28是从Mon Jun 28 00:00:53 2009获取,109和1165是FIFO类型的告警数目。

感谢这么多高手踊跃解答,在线等。。。

[ 本帖最后由 yyh 于 2009-7-3 10:35 编辑 ]

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
13 [报告]
发表于 2009-07-03 10:42 |只看该作者
try:
  1. awk -F "[ :]+" '!/^[0-9]/{d=$7"|"$2"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]}' urfile
复制代码

[ 本帖最后由 blackold 于 2009-7-3 11:03 编辑 ]

论坛徽章:
0
14 [报告]
发表于 2009-07-03 10:49 |只看该作者
原帖由 blackold 于 2009-7-3 10:42 发表
try:awk -F "[ =]+" !/times/{d=$7"|"$2"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]} urfile

不行哦,报错:
sh: 7: Parameter not set.

就是想在awk -F'[: \t]+' '{a[$1"|"$4]++}END{for(i in a)print i"|"a}'
的基础上加上日期,但是日期是间隔在告警日志中,不定行。

[ 本帖最后由 yyh 于 2009-7-3 10:52 编辑 ]

论坛徽章:
0
15 [报告]
发表于 2009-07-03 10:53 |只看该作者

回复 #14 yyh 的帖子

黑哥笔误,把=改为:就OK了
我这里是这样才成的。

[ 本帖最后由 lucash 于 2009-7-3 10:55 编辑 ]

论坛徽章:
0
16 [报告]
发表于 2009-07-03 10:57 |只看该作者
原帖由 lucash 于 2009-7-3 10:53 发表
黑哥笔误,把=改为:就OK了


怎么我这里还是报sh: 7: Parameter not set.

直接测试test.log
Mon Jun 28 00:00:53 2009
09:55:54: ERROR1 /tmp/error/log.3 50 times
09:56:09: ERROR1 /tmp/error/log.14 50 times
10:56:12: ERROR1 /tmp/error/log.14 100 times
10:56:23: ERROR2 /tmp/error/log.5 50 times
11:56:26: ERROR2 /tmp/error/log.1 50 times
11:56:27: ERROR2 /tmp/error/log.5 100 times
Mon Jun 29 00:00:53 2009
15:56:29: ERROR3 /tmp/error/log.1 100 times
15:56:32: ERROR3 /tmp/error/log.1 150 times
16:56:33: ERROR4 /tmp/error/log.6 50 times
16:56:36: FIFO /tmp/error/log.6 100 times
16:56:40: FIFO /tmp/error/log.12 50 times
Mon Jun 30 00:00:53 2009

times也不是每行都有,所以不能已它作为关键字,我测试
awk -F "[ :]+" !/FIFO/{d=$7"|"$2"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]} test.log

还是报sh: 7: Parameter not set.

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
17 [报告]
发表于 2009-07-03 10:58 |只看该作者

回复 #15 lucash 的帖子

谢谢提醒。

怎么把:写成=了?晕。

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
18 [报告]
发表于 2009-07-03 11:01 |只看该作者
没有单引号:
  1. awk -F "[ :]+" '!/^[0-9]/{d=$7"|"$2"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]}' urfile
复制代码

[ 本帖最后由 blackold 于 2009-7-3 11:03 编辑 ]

论坛徽章:
0
19 [报告]
发表于 2009-07-03 11:07 |只看该作者
原帖由 blackold 于 2009-7-3 11:01 发表
没有单引号:
awk -F "[ :]+" '!/^[0-9]/{d=$7"|"$2"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]}' urfile


测试结果为:
times|56|40|Mon|00|3

可能我描述的不清楚,搞得黑哥误解了。

日志格式:
Mon Jun 28 00:00:53 2009
09:55:54: ERROR1 /tmp/error/log.3 50 times
09:56:09: ERROR1 /tmp/error/log.14 50 times
10:56:12: ERROR1 /tmp/error/log.14 100 times
10:56:23: ERROR2 /tmp/error/log.5 50 times
11:56:26: ERROR2 /tmp/error/log.1 50 times
11:56:27: ERROR2 /tmp/error/log.5 100 times
Mon Jun 29 00:00:53 2009
15:56:29: ERROR3 /tmp/error/log.1 100 times
15:56:32: ERROR3 /tmp/error/log.1 150 times
16:56:33: ERROR4 /tmp/error/log.6 50 times
16:56:36: ERROR4 /tmp/error/log.6 100 times
16:56:40: ERROR4 /tmp/error/log.12 50 times
Mon Jun 30 00:00:53 2009

要求输出结果:
2009|06|28|09|ERROR1|2
2009|06|28|10|ERROR1|1
2009|06|28|10|ERROR2|1
2009|06|28|11|ERROR2|2
2009|06|29|15|ERROR3|2
2009|06|29|16|ERROR4|2

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
20 [报告]
发表于 2009-07-03 11:07 |只看该作者
添加月份转换(gawk)
  1. awk 'BEGIN{ FS="[: ]+";for(i=1;i<=12;i++) a[strftime("%b",mktime("2009 "i" 1 00 00 00"))]=sprintf("%02d",i)}!/^[0-9]/{d=$7"|"a[$2]"|"$3"|";next}!p{p=$1"|"$4}$1"|"$4!=p{print d p"|"a[p];p=$1"|"$4}{a[p]++ }END{print d p"|"a[p]}' urfile
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP