免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 3112 | 回复: 7
打印 上一主题 下一主题

[文本处理] awk如何进行分类汇总 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2018-09-12 11:35 |只看该作者 |倒序浏览
本帖最后由 tzaiit168 于 2018-09-12 14:26 编辑

最近想处理一个文件,两列,格式如下:
T1 aa
T1 bb
T1 aa
T1 cc
T2 aa
T2 bb
T2 dd
T2 bb
对T1,T2名称下的aa,bb,cc等进行计数,整理完后如下:
     aa bb cc dd
T1   2   1  1   0
T2   1   2   0   1
请教一下能否用shell来处理?awk可以吗?求代码,谢谢

论坛徽章:
0
2 [报告]
发表于 2018-09-12 21:04 |只看该作者
如果哪位看到类似的问题之前已经有帖子了,给个链接也行,谢谢

论坛徽章:
0
3 [报告]
发表于 2018-09-13 08:45 |只看该作者
大神给指点一下吧,这个问题的关键词叫“分类汇总吗”,用这个关键词在google都检索不出有用的信息

论坛徽章:
0
4 [报告]
发表于 2018-09-13 19:55 |只看该作者
这个excel数据透视表可以做,但是还是想学习一下shell怎么来处理这个数据

论坛徽章:
4
15-16赛季CBA联赛之青岛
日期:2018-07-09 14:17:2815-16赛季CBA联赛之八一
日期:2018-08-06 15:30:0515-16赛季CBA联赛之广东
日期:2018-08-09 09:11:2115-16赛季CBA联赛之佛山
日期:2019-02-14 09:26:31
5 [报告]
发表于 2018-09-14 10:13 |只看该作者
  1. >>cat f1
  2. T1 aa
  3. T1 bb
  4. T1 aa
  5. T1 cc
  6. T2 aa
  7. T2 bb
  8. T2 dd
  9. T2 bb
复制代码
-------------------------

  1. awk '!a[$1]++{b=b?b" "$1:$1;split(b,b1)}!a[$2]++{c=c?c" "$2:$2;split(c,c1)}{a[$1" "$2]++}END{print "- "c;for(x=1;x<=length(b1);x++){printf b1[x]" ";for(j=1;j<=length(c1);j++){if(!a[b1[x]" "c1[j]]){a[b1[x]" "c1[j]]=0}printf a[b1[x]" "c1[j]]" "}print ""}}' f1 | column -t
  2. 输出:
  3. -   aa  bb  cc  dd
  4. T1  2   1   1   0
  5. T2  1   2   0   1
复制代码


暂时先这样,有时间再简化,格式化太麻烦,column 代替了,论坛发【i】总是出问题,干脆换个 【x】 得了

论坛徽章:
0
6 [报告]
发表于 2018-10-10 16:41 |只看该作者
回复 5# christmas1102

有点复杂,好好好学习一下,谢谢

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
7 [报告]
发表于 2018-10-11 16:33 |只看该作者
回复 1# tzaiit168


<<<awk4.0+
  1. awk '{a[$2]++;b[$1][$2]++}END{PROCINFO["sorted_in"]="@ind_str_asc";for(i in a){printf(" %s",i)};printf("\n");for(i in a){for(j in b){if(b[j][i]<1){b[j][i]=0}}};for(i in b){for(j in b[i]){c=c" "b[i][j]};printf("%s %s\n",i,c);c=""}}' file
复制代码

论坛徽章:
0
8 [报告]
发表于 2018-10-12 10:35 |只看该作者
回复 7# wh7211

谢谢!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP