免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
123下一页
最近访问板块 发新帖
查看: 4231 | 回复: 21
打印 上一主题 下一主题

[文本处理] 合并多个文件 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-01-09 16:15 |只看该作者 |倒序浏览
本帖最后由 z421941982 于 2013-01-09 16:21 编辑

有多个文件:
  1. 5.txt
  2. 张三        a        1

  3. 4.txt
  4. 张三        a        2
  5. 李四        b        3

  6. 3.txt
  7. 张三        a        4
  8. 李四        b        5
  9. 王五        c        6

  10. 2.txt
  11. 张三        a        7
  12. 李四        b        8
  13. 王五        c        9
  14. 赵六        d        10

  15. 1.txt
  16. 张三        a        11
  17. 李四    a   16
  18. 李四        b        12
  19. 王五        c        13
  20. 赵六        d        14
  21. 何七        e        15
复制代码
在多个文件中,以前两列为基准, 合并文件,缺少的值用 0 补上. 得到类似如下结果:
  1. 张三        a        11        7        4        2        1
  2. 李四        a        16        0        0        0        0
  3. 李四        b        12        8        5        3        0
  4. 王五        c        13        9        6        0        0
  5. 赵六        d        14        10        0        0        0
  6. 何七        e        15        0        0        0        0
复制代码

论坛徽章:
93
2015年辞旧岁徽章
日期:2019-10-10 10:51:15CU大牛徽章
日期:2014-02-21 14:21:56CU十二周年纪念徽章
日期:2020-10-15 16:55:55CU大牛徽章
日期:2014-02-21 14:22:07羊年新春福章
日期:2019-10-10 10:51:39CU大牛徽章
日期:2019-10-10 10:55:38季节之章:春
日期:2020-10-15 16:57:40ChinaUnix元老
日期:2019-10-10 10:54:42季节之章:冬
日期:2019-10-10 10:57:17CU大牛徽章
日期:2014-02-21 14:22:52CU大牛徽章
日期:2014-03-13 10:40:30CU大牛徽章
日期:2014-02-21 14:23:15
2 [报告]
发表于 2013-01-09 16:39 |只看该作者
这个一眼看上去就应该是 awk 的强项啊:
  1. [seesea@UC ~]$ awk 'FNR==1 {file_num++}; {a[$1,$2,file_num]=$3;key[$1,$2]=$1OFS$2;}; END{for(k in key){printf("%s"OFS, key[k]); for(i=1; i<=file_num; ++i){printf("%d"OFS, a[k,i])}printf("\n")}}' {1..5}.txt
  2. 张三 a 11 7 4 2 1
  3. 王五 c 13 9 6 0 0
  4. 赵六 d 14 10 0 0 0
  5. 李四 a 16 0 0 0 0
  6. 李四 b 12 8 5 3 0
  7. 何七 e 15 0 0 0 0
复制代码

论坛徽章:
93
2015年辞旧岁徽章
日期:2019-10-10 10:51:15CU大牛徽章
日期:2014-02-21 14:21:56CU十二周年纪念徽章
日期:2020-10-15 16:55:55CU大牛徽章
日期:2014-02-21 14:22:07羊年新春福章
日期:2019-10-10 10:51:39CU大牛徽章
日期:2019-10-10 10:55:38季节之章:春
日期:2020-10-15 16:57:40ChinaUnix元老
日期:2019-10-10 10:54:42季节之章:冬
日期:2019-10-10 10:57:17CU大牛徽章
日期:2014-02-21 14:22:52CU大牛徽章
日期:2014-03-13 10:40:30CU大牛徽章
日期:2014-02-21 14:23:15
3 [报告]
发表于 2013-01-09 16:40 |只看该作者
咦?顺序不对?顺序没关系吧:)

论坛徽章:
0
4 [报告]
发表于 2013-01-09 16:40 |只看该作者
  1. cat *usrfile | awk '{if($1==x){i=i" "$2" "$3}else{if(NR>1){print i};i=$0};x=$1;y=$2}'
复制代码

论坛徽章:
93
2015年辞旧岁徽章
日期:2019-10-10 10:51:15CU大牛徽章
日期:2014-02-21 14:21:56CU十二周年纪念徽章
日期:2020-10-15 16:55:55CU大牛徽章
日期:2014-02-21 14:22:07羊年新春福章
日期:2019-10-10 10:51:39CU大牛徽章
日期:2019-10-10 10:55:38季节之章:春
日期:2020-10-15 16:57:40ChinaUnix元老
日期:2019-10-10 10:54:42季节之章:冬
日期:2019-10-10 10:57:17CU大牛徽章
日期:2014-02-21 14:22:52CU大牛徽章
日期:2014-03-13 10:40:30CU大牛徽章
日期:2014-02-21 14:23:15
5 [报告]
发表于 2013-01-09 16:46 |只看该作者
回复 4# dahaoshanhe


不是我的版本不对吧:
  1. [seesea@UC ~]$ awk '{if($1==x){i=i" "$2" "$3}else{if(NR>1){print i};i=$0};x=$1;y=$2}' {1..5}.txt
  2. 张三        a        11
  3. 李四    a   16 b 12
  4. 王五        c        13
  5. 赵六        d        14
  6. 何七        e        15
  7. 张三        a        7
  8. 李四        b        8
  9. 王五        c        9
  10. 赵六        d        10
  11. 张三        a        4
  12. 李四        b        5
  13. 王五        c        6
  14. 张三        a        2
  15. 李四        b        3
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
6 [报告]
发表于 2013-01-09 16:48 |只看该作者
  1. awk 'BEGIN{SUBSEP=" "}NF+=0{a[$1,$2]=a[$1,$2]?a[$1,$2]" "$3:$3}END{for(i in a){split(a[i],b," ");for(j=length(b);j<5;j++)a[i]=a[i]" "0;print i,a[i]}}' [1-5].txt
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
7 [报告]
发表于 2013-01-09 16:52 |只看该作者
回复 5# seesea2517


    你在UC(优视科技)工作么???

论坛徽章:
0
8 [报告]
发表于 2013-01-09 16:52 |只看该作者
回复 5# seesea2517


    你的手真快  我看时还没人回帖呢 发上去发现自己落伍了

论坛徽章:
93
2015年辞旧岁徽章
日期:2019-10-10 10:51:15CU大牛徽章
日期:2014-02-21 14:21:56CU十二周年纪念徽章
日期:2020-10-15 16:55:55CU大牛徽章
日期:2014-02-21 14:22:07羊年新春福章
日期:2019-10-10 10:51:39CU大牛徽章
日期:2019-10-10 10:55:38季节之章:春
日期:2020-10-15 16:57:40ChinaUnix元老
日期:2019-10-10 10:54:42季节之章:冬
日期:2019-10-10 10:57:17CU大牛徽章
日期:2014-02-21 14:22:52CU大牛徽章
日期:2014-03-13 10:40:30CU大牛徽章
日期:2014-02-21 14:23:15
9 [报告]
发表于 2013-01-09 17:00 |只看该作者
回复 7# reyleon


    不是啊,何出此问呢~

论坛徽章:
93
2015年辞旧岁徽章
日期:2019-10-10 10:51:15CU大牛徽章
日期:2014-02-21 14:21:56CU十二周年纪念徽章
日期:2020-10-15 16:55:55CU大牛徽章
日期:2014-02-21 14:22:07羊年新春福章
日期:2019-10-10 10:51:39CU大牛徽章
日期:2019-10-10 10:55:38季节之章:春
日期:2020-10-15 16:57:40ChinaUnix元老
日期:2019-10-10 10:54:42季节之章:冬
日期:2019-10-10 10:57:17CU大牛徽章
日期:2014-02-21 14:22:52CU大牛徽章
日期:2014-03-13 10:40:30CU大牛徽章
日期:2014-02-21 14:23:15
10 [报告]
发表于 2013-01-09 17:01 |只看该作者
回复 8# dahaoshanhe


    哈哈,其实我们差不多啦,我也是看没人,贴完就发现你回了。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP