免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: ccie307
打印 上一主题 下一主题

关于awk问个问题 [复制链接]

论坛徽章:
0
11 [报告]
发表于 2008-12-25 14:48 |只看该作者
num=`awk '$NF > 0 && $NF < 50 {num++} END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`
        num300=`awk '$NF > 300 && $NF < 600 {num++} END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`
        num600=`awk '$NF > 600 && $NF < 900 {num++} END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`
        num900=`awk '$NF > 900 && $NF < 1500 {num++} END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`
        num1500=`awk '$NF > 1500 && $NF < 3000 {num++} END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`
        num3000=`awk '$NF > 3000 END {print num}'< <(awk '/jsp/||/htm/||/xml/' access_log.2008-12-23 )`



这样需要遍历五遍,太土了。
哪位大侠帮我一遍搞定啊

论坛徽章:
0
12 [报告]
发表于 2008-12-25 14:53 |只看该作者
awk 本来就支持条件阿
  1. awk '$NF>0&&$NF<50{num0++} $NF>300&&$NF<600{num300++}... END {print num,num300,...}' file
复制代码

论坛徽章:
0
13 [报告]
发表于 2008-12-25 14:59 |只看该作者
awk 'if {$NF > 0 && $NF < 50} {num++} else if {$NF >50 && $NF <300} END {print num}' access_log.2008-12-23
awk: if {$NF > 0 && $NF < 50} {num++} else if {$NF >50 && $NF <300} END {print num}
awk: ^ syntax error
awk: if {$NF > 0 && $NF < 50} {num++} else if {$NF >50 && $NF <300} END {print num}
awk:                                  ^ syntax error


我也写了  格式不对 呵呵

论坛徽章:
0
14 [报告]
发表于 2008-12-25 15:03 |只看该作者
原帖由 ccie307 于 2008-12-25 14:59 发表
awk 'if {$NF > 0 && $NF < 50} {num++} else if {$NF >50 && $NF  



if()

论坛徽章:
0
15 [报告]
发表于 2008-12-26 17:03 |只看该作者
接着请问大家一下
下面的文件
abc.com /js/ajax.js 200 0
abc.com /js/getUserInfo.jsp 404 0
abc.com /js/ajax.js 200 0
abc.com /js/ajax.js 404 3000
abc.com /js/ajax.js 500 5000
def.com /js/ajax.js 200 0
def.com /js/getUserInfo.jsp 404 0
def.com /js/ajax.js 200 4000
def.com /js/ajax.js 404 8000
def.com /js/ajax.js 500 0

最后一列不管,将前三列相同的汇总,打印出

2 abc.com /js/ajax.js 200
1 abc.com /js/getUserInfo.jsp 404
1 abc.com /js/ajax.js 404
1 abc.com /js/ajax.js 500
2 def.com /js/ajax.js 200
1 def.com /js/getUserInfo.jsp 404
1 def.com /js/ajax.js 404
1 def.com /js/ajax.js 500

这种格式,自己想到的方法是将 原文件用sed 变成

1 abc.com /js/ajax.js 200
1 abc.com /js/getUserInfo.jsp 404
1 abc.com /js/ajax.js 200
1 abc.com /js/ajax.js 404
1 abc.com /js/ajax.js 500
1 def.com /js/ajax.js 200
1 def.com /js/getUserInfo.jsp 404
1 def.com /js/ajax.js 200
1 def.com /js/ajax.js 404
1 def.com /js/ajax.js 500

然后再

awk {a[$2" "$3" "$4]+=$1}END{for(i in a) print i,a}

还有什么别的方法吗 ?

[ 本帖最后由 ccie307 于 2008-12-26 17:06 编辑 ]

论坛徽章:
0
16 [报告]
发表于 2008-12-26 17:19 |只看该作者
awk '{a[$1,$2,$3]+=1} END {for (i in a) print i,a}'
试出来了,但是想不明白怎么实现的啊
谁给讲下啊

[ 本帖最后由 ccie307 于 2008-12-26 17:23 编辑 ]

论坛徽章:
3
戌狗
日期:2014-09-10 17:07:162015年辞旧岁徽章
日期:2015-03-03 16:54:15wusuopu
日期:2016-06-17 17:43:45
17 [报告]
发表于 2008-12-26 18:57 |只看该作者
原帖由 ccie307 于 2008-12-26 17:19 发表
awk '{a[$1,$2,$3]+=1} END {for (i in a) print i,a}'
试出来了,但是想不明白怎么实现的啊
谁给讲下啊

使用awk的数组,索引为每行前3列组成的字串($1\034$2\034$3),每个数组元素对应的值为前3列出现的次数(每读入一行会对以本行前3列为索引的数组元素+1)

说的不够明白,man awk或info awk看看数组部分。
  1. awk '{a[$1,$2,$3]+=1} END {for (i in a) {j=i;gsub(/\034/, " ", i);print a[j],i;}}' urfile
复制代码

论坛徽章:
0
18 [报告]
发表于 2008-12-26 19:16 |只看该作者
恩 想明白了 呵呵

论坛徽章:
0
19 [报告]
发表于 2008-12-26 19:19 |只看该作者
继续  呵呵  我现在想对最后一列 进行分区间计算

awk '$NF>0&&$NF<300 {a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,0} \
        $NF>300&&$NF<600{a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,300} \
        $NF>600&&$NF<900{a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,600} \
        $NF>900&&$NF<1500{a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,900} \
        $NF>1500&&$NF<3000{a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,1500} \
        $NF>3000{a[$1" "$2" "$3]+=1}END{for(i in a) print i,a,3000}'`



算出的结果竟然是  

+----------+----------+
| sum(Num) | Time_KEY |
+----------+----------+
|  5795718 |        0 |
|  5575218 |      300 |
|  5575218 |      600 |
|  5575218 |      900 |
|  5575218 |     1500 |
|  5575218 |     3000 |
+----------+----------+


后来知道原因是因为 END的关系,改了格式

awk 'if ( $NF>0&&$NF<300 ) {a[$1" "$2" "$3]+=1} \
else if ($NF>300&&$NF<600) {b[$1" "$2" "$3]+=1} \
else if ($NF>600&&$NF<900) {c[$1" "$2" "$3]+=1} \
else if ($NF>900&&$NF<1500) {d[$1" "$2" "$3]+=1} \
else if ($NF>1500&&$NF<3000) {e[$1" "$2" "$3]+=1} \
else{f[$1" "$2" "$3]+=1} END \
{for(i in a) print i,a,0; \
for(i in b) print i,b,300; \
for(i in c) print i,c,600; \
for(i in d) print i,d,900; \
for(i in e) print i,e,1500; \
for(i in f) print i,f,3000}'


又说句法错误 。。

论坛徽章:
3
戌狗
日期:2014-09-10 17:07:162015年辞旧岁徽章
日期:2015-03-03 16:54:15wusuopu
日期:2016-06-17 17:43:45
20 [报告]
发表于 2008-12-26 19:26 |只看该作者
  1. awk '{if ( $NF>0&&$NF<300 ) {a[$1" "$2" "$3]+=1} \
  2. else if ($NF>300&&$NF<600) {b[$1" "$2" "$3]+=1} \
  3. else if ($NF>600&&$NF<900) {c[$1" "$2" "$3]+=1} \
  4. else if ($NF>900&&$NF<1500) {d[$1" "$2" "$3]+=1} \
  5. else if ($NF>1500&&$NF<3000) {e[$1" "$2" "$3]+=1} \
  6. else{f[$1" "$2" "$3]+=1}} END \
  7. {for(i in a) print i,a[i],0; \
  8. for(i in b) print i,b[i],300; \
  9. for(i in c) print i,c[i],600; \
  10. for(i in d) print i,d[i],900; \
  11. for(i in e) print i,e[i],1500; \
  12. for(i in f) print i,f[i],3000}}' urfile
复制代码

END前的语句用{}括起来
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP