免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2230 | 回复: 5
打印 上一主题 下一主题

[文本处理] 日志文件求awk处理,麻烦哪位大拿帮忙看下,谢谢 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2014-08-04 20:48 |只看该作者 |倒序浏览
说明
程序有N个进程,并发处理M个业务,每个进程一次处理一个业务,随机进程处理随机业务;
在程序处理业务开始和结束时写入记录到日志文件,求同一个业务的处理开始和结束记录处理合并成一行

awk前示例(进程:begin:业务:开始时间  或者 进程:end:业务:结束时间)
pid1:begin:A:time1
pid2:begin:B:time2
pid1:end:A:time3
pid3:begin:C:time4
pid2:end:B:time5
pid3:end:C:time6
pid1:begin:A:time7
pid1:end:A:time8
pid2:begin:time9
pid3:begin:E:time10
pid2:end:time11
pid3:end:E:time12

awk后示例(进程:begin:业务:开始时间:进程:end:业务:结束时间)
pid1:begin:A:time1:pid1:A:end:time3
pid2:begin:B:time2:pid2:B:end:time5
pid3:begin:C:time4:pid3:C:end:time6
pid1:begin:A:time7:pid1:A:end:time8
pid2:begin:time9:pid2:end:time11
pid3:begin:E:time10:pid3:E:end:time12

论坛徽章:
0
2 [报告]
发表于 2014-08-04 20:52 |只看该作者
业务处理耗时不定.....

awk前示例(进程:begin:业务:开始时间,进程:end:业务:结束时间)
pid1:begin:A:time1
pid2:begin:B:time2
pid1:end:A:time3
pid3:begin:C:time4
pid2:end:B:time5
pid3:end:C:time6
pid1:begin:A:time7
pid1:end:A:time8
pid2:begin:C:time9
pid3:begin:E:time10
pid2:end:C:time11
pid3:end:E:time12

awk后示例()
pid1:begin:A:time1:pid1:A:end:time3
pid2:begin:B:time2:pid2:B:end:time5
pid3:begin:C:time4:pid3:C:end:time6
pid1:begin:A:time7:pid1:A:end:time8
pid2:begin:C:time9:pid2:C:end:time11
pid3:begin:E:time10:pid3:E:end:time12

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
3 [报告]
发表于 2014-08-04 20:57 |只看该作者
回复 1# lanfyisgool

$ awk -F: '$2=="begin"{a[$1,$3]=$0}$2=="end"{print a[$1,$3]":"$0}' FILE
pid1:begin:A:time1:pid1:end:A:time3
pid2:begin:B:time2:pid2:end:B:time5
pid3:begin:C:time4:pid3:end:C:time6
pid1:begin:A:time7:pid1:end:A:time8
pid2:begin:D:time9:pid2:end:D:time11
pid3:begin:E:time10:pid3:end:E:time12

   

论坛徽章:
0
4 [报告]
发表于 2014-08-04 21:12 |只看该作者
回复 3# jason680

谢谢jason680,解决了!非常感谢
   

论坛徽章:
9
寅虎
日期:2013-12-02 12:49:22巨蟹座
日期:2014-07-18 18:13:34卯兔
日期:2014-07-25 14:43:08子鼠
日期:2014-07-26 10:10:51酉鸡
日期:2014-07-31 15:09:562015亚冠之本尤德科
日期:2015-05-19 09:27:382015亚冠之卡尔希纳萨夫
日期:2015-06-20 10:30:212015亚冠之阿尔纳斯尔
日期:2015-07-01 20:46:062015亚冠之城南
日期:2015-07-15 21:12:00
5 [报告]
发表于 2014-08-04 23:02 |只看该作者
  1. awk -F: '{if($1 in a){print a[$1]":"$0;delete a[$1]}else{a[$1]=$0}}' c.txt
  2. 前提是pid1 end之前不能再有pid1 begin
复制代码

论坛徽章:
0
6 [报告]
发表于 2014-08-05 08:37 |只看该作者
回复 5# lifayi2008

前提是成立的,谢谢!


   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP