免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2827 | 回复: 10
打印 上一主题 下一主题

[数值计算] 如何统计站点当月的日流量 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2015-09-02 13:50 |只看该作者 |倒序浏览
请各路大神指教,问题是这样的

每次生成的文本是一个站点(如a.test.com)在一段时间(生成时从参数传入时间范围,如201508010000 201508312359)内的流量数据,每隔5分钟一行:
#日期           时间   流量(B)
2015-08-01 00:00,330227
2015-08-01 00:05,581618
...
2015-08-01 23:45,45821
2015-08-01 23:50,15178
2015-08-01 23:55,155802
...
2015-08-31 23:50,43225
2015-08-31 23:55,14300

想替换完之后的结果是:

#日期                峰值(bps)   时间       全天流量之和(B)  站点             流量峰值(B)           全天流量之和(B)
2015-08-01        2.24M        05:20        3.13G        a.test.com                2348810.24         3360811909.12
2015-08-02        1.30M        18:10        6.23G        a.test.com                1363148.80         6689411563.52
...
2015-08-31        1.46M        07:20        6.22G        a.test.com                1530920.96          6678674145.28
峰值是每天流量的最大值

这个脚本暂时不考虑数据生成时跨月的问题,要不时间处理可能就更复杂了。还请大侠指教,多谢各位!

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
2 [报告]
发表于 2015-09-02 14:39 |只看该作者
回复 1# ABrthur
这个问题比较深奥,小弟只能站脚助威,帮顶!

   

论坛徽章:
7
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:57:092015小元宵徽章
日期:2015-03-06 15:58:18程序设计版块每日发帖之星
日期:2015-08-09 06:20:00每日论坛发贴之星
日期:2015-08-09 06:20:00程序设计版块每日发帖之星
日期:2015-08-22 06:20:00程序设计版块每日发帖之星
日期:2015-08-27 06:20:00
3 [报告]
发表于 2015-09-02 15:10 |只看该作者
  1. [jay.liu@aliCloud chinaUnix]$ cat test.dat
  2. 2015-08-01 00:00,330227
  3. 2015-08-01 00:05,581618
  4. 2015-08-01 23:45,45821
  5. 2015-08-01 23:50,15178
  6. 2015-08-01 23:55,155802
  7. 2015-08-02 00:00,330227
  8. 2015-08-02 00:05,5816
  9. 2015-08-02 23:45,45821
  10. 2015-08-02 23:50,15178
  11. 2015-08-31 23:50,43225
  12. 2015-08-31 23:55,14300
  13. [jay.liu@aliCloud chinaUnix]$ awk -F"[ ,]" '{if(max[$1]=="" || max[$1] < $3){time[$1]=$2; max[$1]=$3}; sum[$1]+=$3}END{for(i in max) print i,max[i]/1024"M",time[i],sum[i]/1024/1024"G","a.test.com",max[i],sum[i]}'  test.dat
  14. 2015-08-31 42.2119M 23:50 0.0548601G a.test.com 43225 57525
  15. 2015-08-01 567.986M 00:05 1.07636G a.test.com 581618 1128646
  16. 2015-08-02 322.487M 00:00 0.378649G a.test.com 330227 397042
复制代码

论坛徽章:
9
2015亚冠之大阪钢巴
日期:2015-06-04 11:47:30丑牛
日期:2015-01-22 15:49:26巳蛇
日期:2015-01-22 10:11:18巨蟹座
日期:2014-11-20 10:55:03天蝎座
日期:2014-11-16 22:10:26处女座
日期:2014-11-16 11:01:10申猴
日期:2014-09-19 11:12:37双鱼座
日期:2014-07-25 10:09:54程序设计版块每日发帖之星
日期:2015-08-24 06:20:00
4 [报告]
发表于 2015-09-02 15:37 |只看该作者
  1. awk -F'[ ,]' 'BEGIN{print "日期  峰值 时间 全天流量之和"}/^[0-9]/{a[$1]=$NF+a[$1];if($NF>b[$1]){b[$1]=$NF;d[$1]=$2}}END{for(i in a)print i,b[i],d[i],a[i]}' urfile |column -t
复制代码

论坛徽章:
95
程序设计版块每日发帖之星
日期:2015-09-05 06:20:00程序设计版块每日发帖之星
日期:2015-09-17 06:20:00程序设计版块每日发帖之星
日期:2015-09-18 06:20:002015亚冠之阿尔艾因
日期:2015-09-18 10:35:08月度论坛发贴之星
日期:2015-09-30 22:25:002015亚冠之阿尔沙巴布
日期:2015-10-03 08:57:39程序设计版块每日发帖之星
日期:2015-10-05 06:20:00每日论坛发贴之星
日期:2015-10-05 06:20:002015年亚冠纪念徽章
日期:2015-10-06 10:06:482015亚冠之塔什干棉农
日期:2015-10-19 19:43:35程序设计版块每日发帖之星
日期:2015-10-21 06:20:00每日论坛发贴之星
日期:2015-09-14 06:20:00
5 [报告]
发表于 2015-09-02 15:44 |只看该作者
回复 2# sunzhiguolu


    你这捣什么乱呢?

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
6 [报告]
发表于 2015-09-02 16:15 |只看该作者
本帖最后由 sunzhiguolu 于 2015-09-02 16:16 编辑

回复 5# MMMIX
不知大神驾到,替您先占个地!

   

论坛徽章:
11
程序设计版块每日发帖之星
日期:2015-09-09 06:20:00CU十四周年纪念徽章
日期:2016-05-16 11:11:112016科比退役纪念章
日期:2016-05-04 17:16:57程序设计版块每日发帖之星
日期:2016-02-20 06:20:00程序设计版块每周发帖之星
日期:2015-11-06 19:30:58程序设计版块每日发帖之星
日期:2015-09-12 06:20:00程序设计版块每日发帖之星
日期:2015-09-11 06:20:00每日论坛发贴之星
日期:2015-09-10 06:20:00程序设计版块每日发帖之星
日期:2015-09-10 06:20:00每日论坛发贴之星
日期:2015-09-09 06:20:0015-16赛季CBA联赛之四川
日期:2016-12-15 15:52:10
7 [报告]
发表于 2015-09-02 16:46 |只看该作者
回复 4# Buring__


    学习了。:厉害

论坛徽章:
11
程序设计版块每日发帖之星
日期:2015-09-09 06:20:00CU十四周年纪念徽章
日期:2016-05-16 11:11:112016科比退役纪念章
日期:2016-05-04 17:16:57程序设计版块每日发帖之星
日期:2016-02-20 06:20:00程序设计版块每周发帖之星
日期:2015-11-06 19:30:58程序设计版块每日发帖之星
日期:2015-09-12 06:20:00程序设计版块每日发帖之星
日期:2015-09-11 06:20:00每日论坛发贴之星
日期:2015-09-10 06:20:00程序设计版块每日发帖之星
日期:2015-09-10 06:20:00每日论坛发贴之星
日期:2015-09-09 06:20:0015-16赛季CBA联赛之四川
日期:2016-12-15 15:52:10
8 [报告]
发表于 2015-09-02 16:47 |只看该作者
回复 5# MMMIX


    刚刚学习这个,看了好多帖子都有MMMIX大神啊,有没有什么学习指导方法?

论坛徽章:
0
9 [报告]
发表于 2015-09-08 10:26 |只看该作者
收到,多谢各位了!问题已按大神指点解决。

论坛徽章:
1
15-16赛季CBA联赛之佛山
日期:2016-04-20 15:50:45
10 [报告]
发表于 2015-09-08 14:56 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP