免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1681 | 回复: 5
打印 上一主题 下一主题

[文本处理] 一个依靠awk的数据统计 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-03-03 11:45 |只看该作者 |倒序浏览
cat 1.dat

3CAA-V9234-VY93U
B3MA-V9456-VY03A
E:1182
3CAV-B9234-VY93U
PMAV-B9457-VA94U
E:1181
E:1183
E:1182
PMBV-B9347-VA04U
BABB-B9123-VM05A
E:1188
E:1186
B3MA-M9456-VY03A
E:1184
E:1182

有1台电脑,每天都会产生像1.dat这样的文件,但每个文件的行与行的内容都是随机顺序排列的,就是不固定,
比如1.dat中,3CAA-V9234-VY93U 是一个16个字符的字符串,这样的字符串大约有几十个,都是16个字符的,
有E:1181 E:1182 E:1183 E:1184 E:1186 E:1188一共6个alarm code,在文件中是随机出现的,也不一定全部出现,至少出现一个
dat文件第一行一定是像3CAA-V9234-VY93U这样16个字符的字符串,末行出现alarm code或者16字符串

要求得alarm code相应的上面最邻近的16字符串的出现次数

比如1.dat,我需要的结果如下,希望利用awk得到结果,如果可以的话,列与列之间最好tab分隔开,或者其他分隔符也行,目的是最后此文件要通过excel 宏倒入到excel中,进行每天的数据汇总,谢谢各位大师,棒棒小弟,请赐教

                                     E:1181  E:1182 E:1183 E:1184 E:1186 E:1188
B3MA-V9456-VY03A                 2                       1
PMAV-B9457-VA94U    1           1           1
BABB-B9123-VM05A                                                      1          1

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
2 [报告]
发表于 2016-03-03 13:32 |只看该作者
  1. awk '/E:/{for(i in a)b[i][$1]++;c[$1];f=1;next}{if(f){delete a;f=0};a[$1]}END{for(i in b){for(j in b[i])print i" "j" "b[i][j]}}' file
复制代码

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
3 [报告]
发表于 2016-03-03 13:45 |只看该作者
@gnpdelove如上统计号后,应该在excel表上很容易转换成你要的格式吧,对excel不是很清楚

论坛徽章:
29
程序设计版块每日发帖之星
日期:2016-02-29 06:20:0015-16赛季CBA联赛之天津
日期:2016-08-10 10:33:1115-16赛季CBA联赛之深圳
日期:2016-08-17 15:07:2015-16赛季CBA联赛之佛山
日期:2016-11-07 11:33:5015-16赛季CBA联赛之广夏
日期:2016-11-15 09:13:31CU十四周年纪念徽章
日期:2016-11-24 14:12:25极客徽章
日期:2016-12-07 14:03:4015-16赛季CBA联赛之深圳
日期:2016-12-07 17:15:2715-16赛季CBA联赛之北京
日期:2016-12-22 09:30:0115-16赛季CBA联赛之深圳
日期:2016-12-22 10:49:2115-16赛季CBA联赛之山西
日期:2017-02-10 09:05:3215-16赛季CBA联赛之同曦
日期:2017-02-27 14:19:08
4 [报告]
发表于 2016-03-03 14:02 |只看该作者
  1. awk 'NR==1{s=$0;next}{if($0~/^E:/){a[s$0]++;b[s];e[$0]}else s=$0}END{printf("%17s", " ");l=asorti(e,se);for(i=1;i<=l;++i)printf se[i]"\t";print "";for(i in b){printf("%-17s",substr(i,0,16));for(j=1;j<=l;++j)printf a[i""se[j]]"\t";print ""}}'
复制代码

论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
5 [报告]
发表于 2016-03-03 14:14 |只看该作者
  1. awk 'function w(){for(i in b)a[z,i]++;delete b}/:/{s=s!~$1" "?s$1" ":s;b[$1]}!/:/{w();c[$1];z=$1}END{w();printf "%17s%s\n"," ",s;split(s,t);for(i in c){n=i;for(j in t){k=sprintf("%7s",a[i,t[j]]);n=n k};print n}}' file
复制代码

论坛徽章:
28
2015年迎新春徽章
日期:2015-03-04 10:16:53午马
日期:2015-03-20 17:11:07亥猪
日期:2015-03-20 17:11:23戌狗
日期:2015-03-20 17:11:33酉鸡
日期:2015-03-20 17:11:47申猴
日期:2015-03-20 17:11:58未羊
日期:2015-03-20 17:12:10子鼠
日期:2015-03-20 17:12:23丑牛
日期:2015-03-20 17:12:40卯兔
日期:2015-03-20 17:12:51辰龙
日期:2015-03-20 17:13:00巳蛇
日期:2015-03-20 17:13:12
6 [报告]
发表于 2016-03-03 16:40 |只看该作者
你这结果不对吧.....
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP