免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1789 | 回复: 3
打印 上一主题 下一主题

[文本处理] [求助]awk能否实现类似excel数据透视表功能 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-03-04 23:42 |只看该作者 |倒序浏览
本帖最后由 hgx126 于 2016-03-04 23:43 编辑

一文本如下:

  1. 机构编号,商户号,姓名,金额,等级
  2. 5411,54117648,张斌,67,100
  3. 5412,60519607,胡蓉,57,60
  4. 5412,54119444,罗鑫,17,30
  5. 5412,54119445,陈延德,38,60
  6. 5411,54119477,杨晓荣,13,30
  7. 5411,54119476,郑元兵,58,60
  8. 5411,54119476,郑元兵,98,100
  9. 5416,54119471,罗小平,21,30
  10. 5416,54119470,何燕,30,60
  11. 5416,54119470,何燕,30,60
  12. 5416,54119468,罗国江,74,100
复制代码
按机构号分为行,等级为列,统计商户号数量,金额求和,类似excel数据透视表功能,结果如下:
  1. 机构编号,30,30,60,60,100,100,合计,合计
  2. 机构编号,商户号数量,金额,商户号数量,金额,商户号数量,金额,商户号数量,金额
  3. 5411,1,13,1,58,2,165,4,236
  4. 5412,1,17,2,95,0,0,3,112
  5. 5416,1,21,2,60,1,74,4,155
  6. 总计,3,51,5,213,3,239,11,503
复制代码

论坛徽章:
6
摩羯座
日期:2013-08-24 10:43:10狮子座
日期:2013-08-25 10:27:06天秤座
日期:2013-09-11 20:28:44午马
日期:2014-09-28 16:06:0015-16赛季CBA联赛之八一
日期:2016-12-19 13:55:0515-16赛季CBA联赛之天津
日期:2016-12-20 14:01:23
2 [报告]
发表于 2016-03-05 09:09 |只看该作者
第2个表和第一个表之间的逻辑关系真心看不懂!@hgx126

论坛徽章:
7
戌狗
日期:2013-12-15 20:43:38技术图书徽章
日期:2014-03-05 01:33:12技术图书徽章
日期:2014-03-15 20:31:17未羊
日期:2014-03-25 23:48:20丑牛
日期:2014-04-07 22:37:44巳蛇
日期:2014-04-11 21:58:0915-16赛季CBA联赛之青岛
日期:2016-03-17 20:36:13
3 [报告]
发表于 2016-03-05 23:49 |只看该作者
回复 1# hgx126

awk ~ bd
shishi perl:
perl toss.pl file


toss.pl
  1. #!/usr/bin/perl
  2. use 5.010;

  3. open my $DATA, shift or die $!;
  4. readline $DATA;

  5. my ( $O, $o ) = ( [ 0, 0 ], ',' );
  6. my ( %G, %X, %H, %V, $V );

  7. while (<$DATA>) {
  8.     chomp;
  9.     my ( $n, undef, undef, $m, $g ) = split $o;
  10.     $G{$g} ||= 1;
  11.     $_->[0]++, $_->[1] += $m for $X{$n}{$g}, $H{$n}, $V{$g}, $V;
  12. }

  13. my @G = sort { $a <=> $b } keys %G;

  14. say join $o, '机构编号', map { ($_) x 2 } @G, '合计';
  15. say join $o, '机构编号', ( '商户号数量', '金额' ) x ( @G + 1 );

  16. for my $n ( sort { $a <=> $b } keys %X ) {
  17.     say join $o, $n, map( @{ $X{$n}{$_} || $O }, @G ), @{ $H{$n} };
  18. }

  19. say join $o, '总计', map( @{ $V{$_} }, @G ), @$V;
复制代码

论坛徽章:
6
羊年新春福章
日期:2015-03-03 17:16:28双子座
日期:2015-03-03 17:16:56巳蛇
日期:2015-03-03 17:17:2415-16赛季CBA联赛之福建
日期:2016-03-11 09:05:00黑曼巴
日期:2016-07-07 16:58:1215-16赛季CBA联赛之吉林
日期:2016-11-14 09:23:07
4 [报告]
发表于 2016-03-07 09:50 |只看该作者
awk -F, '{a[$1" "$2]+=$4;b[$1" "$2]++}END{for(i in a)print i,a[i],b[i]}' file|awk '{print $1,$4,$3}' |awk '{a[$1]=a[$1]","$2","$3}END{for(i in a)print i,a[i]}'
5416 ,2,60,1,21,1,74
5411 ,1,67,2,156,1,13
5412 ,1,17,1,38,1,57
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP