免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1973 | 回复: 3

[文本处理] 根据一列相邻两行相不相同合并文件成一行或者按行合并在一起 [复制链接]

论坛徽章:
0
发表于 2019-02-23 09:34 |显示全部楼层
a.txt
1 2903
2 2903
3 2903
4 2903
1 21180
3 21180
4 21180
6 21180
3 27892
4 27892
想根据第二列将文件合并成这样:
b.txt:
1 2903|2 2903|3 2903|4 2903
1 21180|3 21180|4 21180|6 21180
3 27892|4 27892
我自己用的最笨的方法是这样的:
#第二列不同则插入空行
awk -vFPAT=' [a-z]+' 'a&&$2!~a{print b}{a=$2}  a.txt  >2.txt
#将空行替换成逗号
sed ':a;N;$!ba;s/\n\n/,/g'  2.txt  >3.txt
#将换行符替换成|
sed ':a;N;$!ba;s/\r\n/\|/g'  3.txt >4.txt
#将逗号替换成换行符
cat 4.txt|tr "," "\n" >5.txt
本人菜鸟一枚,求高手赐教,如果得到另外一种结果(按行合并)实在不知怎么做:
c.txt
1 2903        1 21180        3 27892
2 2903        3 21180        4 27892
3 2903        4 21180
4 2903        6 21180

论坛徽章:
25
程序设计版块每日发帖之星
日期:2016-05-03 06:20:0015-16赛季CBA联赛之八一
日期:2018-07-05 10:34:09黑曼巴
日期:2018-07-06 15:19:5015-16赛季CBA联赛之佛山
日期:2018-08-03 13:19:3315-16赛季CBA联赛之山西
日期:2018-08-07 19:46:2315-16赛季CBA联赛之广夏
日期:2018-08-08 19:31:5015-16赛季CBA联赛之青岛
日期:2018-11-26 15:21:5015-16赛季CBA联赛之上海
日期:2018-12-11 09:45:3219周年集字徽章-年
日期:2020-04-18 23:54:5215-16赛季CBA联赛之深圳
日期:2020-04-19 21:40:19黑曼巴
日期:2022-04-03 17:55:1315-16赛季CBA联赛之八一
日期:2018-07-03 16:56:46
发表于 2019-02-23 11:14 |显示全部楼层
回复 1# hechao7021

  1. cat 1
  2. 1 2903
  3. 2 2903
  4. 3 2903
  5. 4 2903
  6. 1 21180
  7. 3 21180
  8. 4 21180
  9. 6 21180
  10. 3 27892
  11. 4 27892

  12. awk '!a[$2]++{if(b){print b;b=""}}{b=b?b"|"$0:$0}END{if(b){print b}}' 1
  13. 1 2903|2 2903|3 2903|4 2903
  14. 1 21180|3 21180|4 21180|6 21180
  15. 3 27892|4 27892

  16. awk '!a[$2]++{i=0}{i++;b[i]=b[i]?b[i]" "$0:$0}END{for(i in b){print b[i]}}' 1
  17. 1 2903 1 21180 3 27892
  18. 2 2903 3 21180 4 27892
  19. 3 2903 4 21180
  20. 4 2903 6 21180
复制代码


评分

参与人数 1信誉积分 +5 收起 理由
hechao7021 + 5 很给力!

查看全部评分

论坛徽章:
0
发表于 2019-02-23 14:51 |显示全部楼层
回复 2# wh7211

啊!真是厉害呀,我什么时候也能有这种逻辑思维能力啊,多谢赐教!

论坛徽章:
0
发表于 2019-02-23 16:35 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP