awk过滤log的问题

linux_kaige

根据客户的要求，要把运营人员的全部操作日志拿出来给他们，然后我这边就要对日志进行分析，过滤掉他们不需要的、接口打印的日志，举个例子，日志里面有很多这样的：
[INFO ] 2012-01-05 11:56:16,368  1791723191 [com.zxun.util.XmlParse.createXML(XmlParse.java:63)] method:开始创建xml...
[INFO ] 2012-01-05 11:56:16,368  1791723191 [com.zxun.util.XmlParse.createXML(XmlParse.java:94)] method:创建XML成功，将doc---->String
[INFO ] 2012-01-05 11:56:16,369  1791723192 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:8] method:【创建 xml 成功]
[INFO ] 2012-01-05 11:56:43,632  1791750455 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:49)] method:收到软通接口调用信息
[INFO ] 2012-01-05 11:56:43,632  1791750455 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:73)] method:COPID合法！开始查询数据库中数据！
[INFO ] 2012-01-05 11:56:43,679  1791750502 [com.zxun.dao.impl.BaseDaoImpl.findAll(BaseDaoImpl.java:53)] method:resultList：7
[INFO ] 2012-01-05 11:56:43,679  1791750502 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:77)] method:查询结果长度为:7
[INFO ] 2012-01-05 11:56:43,697  1791750520 [com.zxun.dao.impl.BaseDaoImpl.update(BaseDaoImpl.java:91)] method:update db failed.update tinformation ti set ti.dsissue = sysdate where ti.sonline=1 and ti.dsissue is null
[INFO ] 2012-01-05 11:56:43,698  1791750521 [com.zxun.util.XmlParse.createXML(XmlParse.java:63)] method:开始创建xml...
我想把这样的全部给过滤掉，如果使用$0!~/XmlParse.java:63/&&$0!~/XmlParse.java:94/ ...也可以，但不仅仅是这部分重复打印的日志，还有别的，我想可不可以这样if($0!~/XmlParse.java:63/);next下面的8行。awk是按行处理的脚本语言，对于处理当前行NR，如果~/XmlParse.java:63/，next 8次，以我目前的水平，感觉awk是不能这么做的，next只能next当前行的。所以发帖到这里，请教一下大家。用sed应该是可以这么做的，但本人只会简单的sed，复杂的不会，如果哪个朋友方便，发个脚本出来，感谢！

yinyuemi

回复 1# linux_kaige


    你重新编辑下帖子吧，把数据放到code里，看的费劲

waker

/......./{flag=8;...}
flag>0{flog--;...}

linux_kaige

回复 2# yinyuemi




根据客户的要求，要把运营人员的全部操作日志拿出来给他们，然后我这边就要对日志进行分析，过滤掉他们不需要的、接口打印的日志，举个例子，日志里面有很多这样的：

1. [INFO ] 2012-01-05 11:56:16,368  1791723191 [com.zxun.util.XmlParse.createXML(XmlParse.java:63)] method:开始创建xml...
   
2. [INFO ] 2012-01-05 11:56:16,368  1791723191 [com.zxun.util.XmlParse.createXML(XmlParse.java:94)] method:创建XML成功，将doc---->String
   
3. [INFO ] 2012-01-05 11:56:16,369  1791723192 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:8] method:【创建 xml 成功]
   
4. [INFO ] 2012-01-05 11:56:43,632  1791750455 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:49)] method:收到软通接口调用信息
   
5. [INFO ] 2012-01-05 11:56:43,632  1791750455 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:73)] method:COPID合法！开始查询数据库中数据！
   
6. [INFO ] 2012-01-05 11:56:43,679  1791750502 [com.zxun.dao.impl.BaseDaoImpl.findAll(BaseDaoImpl.java:53)] method:resultList：7
   
7. [INFO ] 2012-01-05 11:56:43,679  1791750502 [com.zxun.servlet.SoftWareServlet.doPost(SoftWareServlet.java:77)] method:查询结果长度为:7
   
8. [INFO ] 2012-01-05 11:56:43,697  1791750520 [com.zxun.dao.impl.BaseDaoImpl.update(BaseDaoImpl.java:91)] method:update db failed.update tinformation ti set ti.dsissue = sysdate where ti.sonline=1 and ti.dsissue is null
   
9. [INFO ] 2012-01-05 11:56:43,698  1791750521 [com.zxun.util.XmlParse.createXML(XmlParse.java:63)] method:开始创建xml...

复制代码

我想把这样的全部给过滤掉，如果使用$0!~/XmlParse.java:63/&&$0!~/XmlParse.java:94/ ...也可以，但不仅仅是这部分重复打印的日志，还有别的，我想可不可以这样if($0!~/XmlParse.java:63/);next下面的8行。awk是按行处理的脚本语言，对于处理当前行NR，如果~/XmlParse.java:63/，next 8次，以我目前的水平，感觉awk是不能这么做的，next只能next当前行的。所以发帖到这里，请教一下大家。用sed应该是可以这么做的，但本人只会简单的sed，复杂的不会，如果哪个朋友方便，发个脚本出来，感谢

不好意思，开始我放到code里面没发成功，就这样弄了。

   

yinyuemi

回复 4# linux_kaige

1. 
   
2. awk '{if($0~/XmlParse.java:63/){for(i=1;i<=8;i++){getline}}}1' log

复制代码

yangkyo821

1. sed '/XmlParse.java:63/{:a;N;/\n.*\n.*\n.*\n.*\n.*\n.*\n.*\n/d;$!ba;d}'

复制代码

linux_kaige

回复 5# yinyuemi
跪谢！祝您在2012里，日进斗金，身边美女如云！


   

南极雨

回复 5# yinyuemi


    这招果然高...

yinyuemi

回复 6# yangkyo821

sed '/xxx/,+7d'
   

yangkyo821

yinyuemi 发表于 2012-01-08 01:42
回复 6# yangkyo821

sed '/xxx/,+7d'

哇，可以这样，学习了