免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 4617 | 回复: 13
打印 上一主题 下一主题

[文本处理] [正则] 如何合并相同列的内容? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-10-25 09:53 |只看该作者 |倒序浏览
如:
O|0,
A|1,
A|2,
A|3,
C|4,
B|5,
B|6,
D|7,

合并成:
O|1,
A|1,2,3,
C|4,
B|5,6,
D|7,
请问用sed或awk如何做?


论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
2 [报告]
发表于 2013-10-25 09:56 |只看该作者
  1. awk -F \| '{a[$1]=a[$1]$2}END{for(i in a)print i"|"a[i]}'
复制代码

论坛徽章:
7
亥猪
日期:2013-10-10 17:00:29辰龙
日期:2013-10-12 16:23:19卯兔
日期:2013-11-18 17:01:27金牛座
日期:2014-09-09 10:17:052015七夕节徽章
日期:2015-08-21 11:06:172015亚冠之柏太阳神
日期:2015-09-25 13:56:42数据库技术版块每日发帖之星
日期:2016-08-06 06:20:00
3 [报告]
发表于 2013-10-25 09:57 |只看该作者
  1. awk -F"|" '{a[$1]=a[$1]?a[$1]$2:$0}END{for(i in a)print a[i]}'
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
4 [报告]
发表于 2013-10-25 10:00 |只看该作者
这个应该算月经吧?
  1. awk -F\| '{a[$1]=a[$1]?a[$1]$2:$2}END{for(i in a)print i"|"a[i]}'
复制代码

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
5 [报告]
发表于 2013-10-25 10:13 |只看该作者
  1. [root@localhost ~]# cat i
  2. O|0,
  3. A|1,
  4. A|2,
  5. A|3,
  6. C|4,
  7. B|5,
  8. B|6,
  9. D|7,
  10. [root@localhost ~]# awk -F\| '{if(!a[$1]++)b[++n]=$1;c[$1]=c[$1]$2}END{for(i=1;i<=n;i++)print b[i]"|"c[b[i]]}' i
  11. O|0,
  12. A|1,2,3,
  13. C|4,
  14. B|5,6,
  15. D|7,
  16. [root@localhost ~]# sed -r ':1;N;/^([^|]*)(.*)\n\1\|(.*)$/s//\1\2\3/;t1;P;D' i
  17. O|0,
  18. A|1,2,3,
  19. C|4,
  20. B|5,6,
  21. D|7,
  22. [root@localhost ~]#
复制代码

论坛徽章:
50
15-16赛季CBA联赛之广夏
日期:2018-11-05 09:42:462015年亚冠纪念徽章
日期:2015-07-23 11:58:122015亚冠之广州富力
日期:2015-07-07 08:26:172015亚冠之塔什干棉农
日期:2015-06-29 09:08:072015年亚洲杯之伊朗
日期:2015-03-08 20:51:012015年迎新春徽章
日期:2015-03-04 09:58:11未羊
日期:2014-10-16 22:41:47处女座
日期:2014-10-16 15:33:33酉鸡
日期:2014-03-13 12:54:10巳蛇
日期:2014-03-10 14:39:052015亚冠之德黑兰石油
日期:2015-07-29 12:46:372015亚冠之德黑兰石油
日期:2015-08-07 12:54:11
6 [报告]
发表于 2013-10-25 10:25 |只看该作者
本帖最后由 WilliBhamlll 于 2013-10-25 10:36 编辑
  1. sed -r ':a;N;s/([^|]+\|)([^\n]+)\n\1/\1\2/;ta;P;D' file
  2. sed -r ':1;N;s/^(.+)([^\n]+)(\n.*)*\n\1\|(.*)$/\1\2\4/M;b1' file
复制代码

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
7 [报告]
发表于 2013-10-25 10:38 |只看该作者
回复 6# WilliBhamlll
  1. [root@localhost ~]# cat i
  2. O|0,
  3. A|1,
  4. A|2,
  5. A|3,
  6. C|4,
  7. B|5,
  8. B|6,
  9. D|7,
  10. [root@localhost ~]# sed -r ':1;N;s/^(.+)([^\n]+)(\n.*)*\n\1\|(.*)$/\1\2|\4/M;b1' i
  11. O|0,
  12. A|1,|2,|3,
  13. C|4,
  14. B|5,|6,
  15. D|7,
  16. [root@localhost ~]#
复制代码
是不是多了点什么?

   

论坛徽章:
50
15-16赛季CBA联赛之广夏
日期:2018-11-05 09:42:462015年亚冠纪念徽章
日期:2015-07-23 11:58:122015亚冠之广州富力
日期:2015-07-07 08:26:172015亚冠之塔什干棉农
日期:2015-06-29 09:08:072015年亚洲杯之伊朗
日期:2015-03-08 20:51:012015年迎新春徽章
日期:2015-03-04 09:58:11未羊
日期:2014-10-16 22:41:47处女座
日期:2014-10-16 15:33:33酉鸡
日期:2014-03-13 12:54:10巳蛇
日期:2014-03-10 14:39:052015亚冠之德黑兰石油
日期:2015-07-29 12:46:372015亚冠之德黑兰石油
日期:2015-08-07 12:54:11
8 [报告]
发表于 2013-10-25 10:39 |只看该作者
@yestreenstars
是的,在你回复前已经更正了。

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
9 [报告]
发表于 2013-10-25 10:41 |只看该作者
本帖最后由 yestreenstars 于 2013-10-25 10:46 编辑

看到了~ 貌似直接这样就可以了:
  1. [root@localhost ~]# cat i
  2. O|0,
  3. A|1,
  4. A|2,
  5. A|3,
  6. C|4,
  7. B|5,
  8. B|6,
  9. D|7,
  10. [root@localhost ~]# sed -r ':1;N;s/^(.*)(.*)\n\1\|(.*)$/\1\2\3/M;b1' i
  11. O|0,
  12. A|1,2,3,
  13. C|4,
  14. B|5,6,
  15. D|7,
  16. [root@localhost ~]#
复制代码
WilliBhamlll 发表于 2013-10-25 10:39
@yestreenstars
是的,在你回复前已经更正了。

论坛徽章:
50
15-16赛季CBA联赛之广夏
日期:2018-11-05 09:42:462015年亚冠纪念徽章
日期:2015-07-23 11:58:122015亚冠之广州富力
日期:2015-07-07 08:26:172015亚冠之塔什干棉农
日期:2015-06-29 09:08:072015年亚洲杯之伊朗
日期:2015-03-08 20:51:012015年迎新春徽章
日期:2015-03-04 09:58:11未羊
日期:2014-10-16 22:41:47处女座
日期:2014-10-16 15:33:33酉鸡
日期:2014-03-13 12:54:10巳蛇
日期:2014-03-10 14:39:052015亚冠之德黑兰石油
日期:2015-07-29 12:46:372015亚冠之德黑兰石油
日期:2015-08-07 12:54:11
10 [报告]
发表于 2013-10-25 10:53 |只看该作者
回复 9# yestreenstars

这样更好
   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP