免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12
最近访问板块 发新帖
楼主: gobuhei
打印 上一主题 下一主题

[文本处理] 大佬们,小弟求助,进来看看吧 [复制链接]

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
11 [报告]
发表于 2017-10-12 15:50 |只看该作者
本帖最后由 wh7211 于 2017-10-12 16:25 编辑

回复 1# gobuhei


  1. awk 'BEGIN{FS="[,-]";OFS=","}NR>1{d2=mktime(""$3" "$4" "$5" 00 00 00");if(a==$1&&b==$2&&(d2-d1)/86400>=0&&(d2-d1)/86400<=31){c2=$3"-"$4"-"$5;d1=d2}else{if(a){print a,b,c,c2};a=$1;b=$2;c=$3"-"$4"-"$5;d1=mktime(""$3" "$4" "$5" 00 00 00");c2=c}}END{print a,b,c,c2}' file
复制代码

论坛徽章:
0
12 [报告]
发表于 2017-10-12 16:17 |只看该作者
回复 11# wh7211

让我觉得awk很强大,答主很牛。

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
13 [报告]
发表于 2017-10-12 16:21 |只看该作者
  1. echo 'AAAA,XX公司,2011-01-01
  2. AAAA,XX公司,2011-02-01
  3. AAAA,XX公司,2011-03-01
  4. AAAA,YY公司,2011-04-01'|awk -F',' '{print (s&&s!=$1$2?"@"RS:"") $0}{s=$1$2}' | awk '{split($NF,a,",");print $1","a[3]}' RS=@
复制代码
  1. AAAA,XX公司,2011-01-01,2011-03-01
  2. AAAA,YY公司,2011-04-01,2011-04-01
复制代码

?

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
14 [报告]
发表于 2017-10-12 17:28 |只看该作者
  1. #!/usr/bin/perl
  2. use strict;
  3. use warnings;
  4. use utf8;
  5. use Encode qw(encode);

  6. my ($k, $sp) = ('', ',');
  7. my @rec = ();
  8. while(<DATA>){
  9.         my $kk = substr($_, 0, rindex($_, $sp));
  10.         chomp(my @ary = split(/$sp/));
  11.         if($kk !~ /$k/){
  12.                 print(encode('gb2312', join($sp, @{$rec[0]}, $rec[-1][-1])), "\n");
  13.                 @rec = ();
  14.         }
  15.         $k = $kk;
  16.         push(@rec, [@ary]);
  17. }
  18. print(encode('gb2312', join($sp, @{$rec[0]}, $rec[-1][-1])), "\n");

  19. __DATA__
  20. AAAA,XX公司,2011-01-01
  21. AAAA,XX公司,2011-02-01
  22. AAAA,XX公司,2011-03-01
  23. AAAA,YY公司,2011-04-01
  24. AAAA,YY公司,2011-05-01
  25. AAAA,YY公司,2011-06-01
  26. AAAA,YY公司,2011-07-01
  27. BBBB,XX公司,2012-01-01
  28. BBBB,XX公司,2012-02-01
  29. BBBB,XX公司,2012-03-01
  30. AAAA,XX公司,2011-08-01
  31. AAAA,XX公司,2011-09-01
  32. AAAA,XX公司,2011-10-01
复制代码

论坛徽章:
24
申猴
日期:2014-10-10 15:56:39射手座
日期:2014-10-10 15:57:18黑曼巴
日期:2018-05-14 11:05:122016科比退役纪念章
日期:2018-05-14 11:05:0715-16赛季CBA联赛之北控
日期:2018-05-14 11:05:0015-16赛季CBA联赛之江苏
日期:2017-02-27 18:11:0715-16赛季CBA联赛之上海
日期:2018-08-15 09:48:5415-16赛季CBA联赛之佛山
日期:2018-07-20 17:14:2315-16赛季CBA联赛之佛山
日期:2019-09-10 18:08:4615-16赛季CBA联赛之山西
日期:2020-03-26 09:40:5115-16赛季CBA联赛之佛山
日期:2020-05-08 09:03:54
15 [报告]
发表于 2017-10-13 09:45 |只看该作者
  1. [root@iZuf62sazcxqandkv55wyjZ tmp]# awk -F',' 'NR==1{a=$1$2;b=$3;printf $0};NR!=1{if(a!=$1$2){printf " "b"\n"$0;a=$1$2;b=$3}}END{print " "b}' aa.log
  2. AAAA,XX公司,2011-01-01 2011-01-01
  3. AAAA,YY公司,2011-04-01 2011-04-01
  4. BBBB,XX公司,2012-01-01 2012-01-01
  5. AAAA,XX公司,2011-08-01 2011-08-01
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP