免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1254 | 回复: 6

[文本处理] 文本处理,按时间合并 [复制链接]

论坛徽章:
1
戌狗
日期:2014-06-09 14:33:38
发表于 2018-06-22 14:27 |显示全部楼层
有一天内按每分钟粒度的详细数据。 现在需要按5分钟粒度求和。时间为01-05的统计输出为05分,06-10统计为10这样。
PS:一分钟可能有多条数据。 也没有按时间排序
举个栗子:
11:41:00 5237
11:42:00 142
11:43:00 134
11:45:00 2668
11:44:00 17180
11:45:00 63043
11:46:00 4512
11:47:00 423
11:47:00 60002
11:48:00 0
11:49:00 5240
11:49:00 265
11:50:00 3186

要求输出结果:
11:45 88404
11:50 69116

论坛徽章:
762
金牛座
日期:2014-02-26 17:49:58水瓶座
日期:2014-02-26 18:10:15白羊座
日期:2014-04-15 19:29:52寅虎
日期:2014-04-17 19:43:21酉鸡
日期:2014-04-19 21:24:10子鼠
日期:2014-04-22 13:55:24卯兔
日期:2014-04-22 14:20:58亥猪
日期:2014-04-22 16:13:09狮子座
日期:2014-05-05 22:31:17摩羯座
日期:2014-05-06 10:32:53处女座
日期:2014-05-12 09:23:11子鼠
日期:2014-05-21 18:21:27
发表于 2018-06-22 15:07 |显示全部楼层
回复 1# kingkingdm

  1. awk '{split($1,a,":");if(a[2]%5 != 0)a[2]=(int(a[2]/5))*5+5;b[a[1]":"a[2]]+=$2} END{l=asorti(b,c);for(i=1;i<=l;i++) print c[i],b[c[i]]}' i
  2. 11:45 88404
  3. 11:50 73628
复制代码




论坛徽章:
762
金牛座
日期:2014-02-26 17:49:58水瓶座
日期:2014-02-26 18:10:15白羊座
日期:2014-04-15 19:29:52寅虎
日期:2014-04-17 19:43:21酉鸡
日期:2014-04-19 21:24:10子鼠
日期:2014-04-22 13:55:24卯兔
日期:2014-04-22 14:20:58亥猪
日期:2014-04-22 16:13:09狮子座
日期:2014-05-05 22:31:17摩羯座
日期:2014-05-06 10:32:53处女座
日期:2014-05-12 09:23:11子鼠
日期:2014-05-21 18:21:27
发表于 2018-06-22 15:08 |显示全部楼层
回复 1# kingkingdm

  1. awk '{split($1,a,":");if(a[2]%5 != 0)a[2]=(int(a[2]/5))*5+5;b[a[1]":"a[2]]+=$2} END{l=asorti(b,c);for(i=1;i<=l;i++) print c[i],b[c[i]]}' i
  2. 11:45 88404
  3. 11:50 73628
复制代码


论坛徽章:
762
金牛座
日期:2014-02-26 17:49:58水瓶座
日期:2014-02-26 18:10:15白羊座
日期:2014-04-15 19:29:52寅虎
日期:2014-04-17 19:43:21酉鸡
日期:2014-04-19 21:24:10子鼠
日期:2014-04-22 13:55:24卯兔
日期:2014-04-22 14:20:58亥猪
日期:2014-04-22 16:13:09狮子座
日期:2014-05-05 22:31:17摩羯座
日期:2014-05-06 10:32:53处女座
日期:2014-05-12 09:23:11子鼠
日期:2014-05-21 18:21:27
发表于 2018-06-22 15:12 |显示全部楼层
计算器按了下,这段数字的和是73628,楼主为什么要的是69116?
11:46:00 4512
11:47:00 423
11:47:00 60002
11:48:00 0
11:49:00 5240
11:49:00 265
11:50:00 3186

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
发表于 2018-06-22 18:09 |显示全部楼层
本帖最后由 wh7211 于 2018-06-22 18:19 编辑

回复 1# kingkingdm


有一天内按每分钟粒度的详细数据。 现在需要按5分钟粒度求和。时间为01-05的统计输出为05分,06-10统计为10这样。
PS:一分钟可能有多条数据。 也没有按时间排序

1天内24小时的数据就要考虑跨小时的情况
<<<awk4.0+
  1. cat 1
  2. 11:41:00 5237
  3. 11:42:00 142
  4. 11:43:00 134
  5. 11:45:00 2668
  6. 11:44:00 17180
  7. 11:45:00 63043
  8. 11:46:00 4512
  9. 11:47:00 423
  10. 11:47:00 60002
  11. 11:48:00 0
  12. 11:49:00 5240
  13. 11:49:00 265
  14. 11:50:00 3186
  15. 11:58:00 100
  16. 11:59:00 100
  17. 23:56:00 200
  18. 23:59:00 200

  19. awk -F"[: ]" '{a=$2%5!=0?int($2/5)*5+5:$2;b=$1;if(a==60){a="00";b+=1};if(b==24){b="00"};c[b":"a]=c[b":"a]?c[b":"a]+$4:$4;}END{PROCINFO["sorted_in"]="@ind_num_asc";for(i in c){print i,c[i]}}' 1
  20. 00:00 400
  21. 11:45 88404
  22. 11:50 73628
  23. 12:00 200
复制代码

论坛徽章:
0
发表于 2018-06-25 15:28 |显示全部楼层
本帖最后由 本友会机友会摄友会 于 2018-06-25 15:38 编辑

这道题看似简单,实际上,需要考虑小时,天的进位问题。
0---4为4,
5---9为9,
就简单了。楼主改需求吧。

否则shell脚本要败了。不如linux版powershell自带时间计算功能。

论坛徽章:
0
发表于 2018-06-26 14:14 |显示全部楼层
  1. $f ='a:\pscode\TEMP_2018\temp144\bbb.txt'
  2. $f2 = Get-Content -ReadCount 0 $f
  3. $hash = @{}


  4. foreach ($t1 in $f2)
  5. {
  6.         if ($t1[4] -eq '0')
  7.         {
  8.                 $键 = $t1[0..4] -join ''
  9.         }
  10.        
  11.         if ($t1[4] -in $('1','2','3','4','5'))
  12.         {
  13.                 $键 = '' + ($t1[0..3] -join '') + '5'
  14.         }
  15.        
  16.         if ($t1[4] -in $('6','7','8','9'))
  17.         {
  18.                 $键temp1 = '' + ($t1[0..3] -join '') + '0'
  19.                 $键temp2 = [datetime]$键temp1 + [timespan]'00:10:00'
  20.                 $键 = $键temp2.tostring('HH:mm')
  21.         }

  22.         $值 = $null
  23.         $null = [system.UInt32]::TryParse($t1.Split()[1],[ref]$值)

  24.         if ( $hash.contains($键) )
  25.         {
  26.                 $hash[$键] = $hash[$键] + $值
  27.         }
  28.         else
  29.         {
  30.                 $null = $hash.add($键,$值)
  31.         }
  32. }
  33. $hash

复制代码


用法:把代码第一行的输入文件,改成你的文件。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP