免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 5257 | 回复: 16
打印 上一主题 下一主题

[文本处理] sed处理多行中首尾拼接的行 [复制链接]

论坛徽章:
3
15-16赛季CBA联赛之北控
日期:2016-06-06 21:01:08程序设计版块每日发帖之星
日期:2016-06-19 06:20:00程序设计版块每日发帖之星
日期:2016-07-17 06:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-07-14 12:07 |只看该作者 |倒序浏览
需求:将源文件file1转换为目标文件file2
解析:1)凡是file1中本行有omega,直接输出;
        2)如果本行和,下一行或者下N行中,首尾能拼接成omega,则输出这些有效行。
        3)无效行不输出。(不符合前两条规则的视为无效行)
      (特别注意:循环,如果line2和line3匹配,line3和line4匹配,则输出line2line3,line3lin4,而不是输出line2line3line4.)

[root@test]# cat file1
omega ,omega
cding .cd dzzz erg omeg
a bc dde ome
ga zerg ome  
bbb cc dde omega zz
omega zzz ome
bb

cc ome
ga
dd
om
ega,cc

bb

dd
[root@test]# cat file2
omega ,omega
cding .cd dzzz erg omega bc dde ome
a bc dde omega zerg ome  
bbb cc dde omega zz
omega zzz ome
cc omega
omega,cc

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
2 [报告]
发表于 2016-07-14 12:29 |只看该作者
回复 1# 18800375280

$ awk '/omega/{print;next}last$0~/omega/{print last$0}{last=$0}' file1 > file2

$ cat file2
omega ,omega
cding .cd dzzz erg omega bc dde ome
a bc dde omega zerg ome  
bbb cc dde omega zz
omega zzz ome
cc omega
omega,cc

   

论坛徽章:
20
卯兔
日期:2015-01-26 22:05:142015亚冠之萨济拖拉机
日期:2015-09-10 15:15:282015亚冠之阿尔希拉尔
日期:2015-09-25 17:37:53程序设计版块每日发帖之星
日期:2015-10-03 06:20:00程序设计版块每日发帖之星
日期:2015-12-09 06:20:00CU十四周年纪念徽章
日期:2015-12-17 09:07:15程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:34程序设计版块每日发帖之星
日期:2015-12-25 06:20:342015亚冠之广州富力
日期:2015-08-27 19:29:56每日论坛发贴之星
日期:2015-08-26 06:20:002015亚冠之阿尔希拉尔
日期:2015-05-18 17:26:27
3 [报告]
发表于 2016-07-14 13:25 |只看该作者
  1. sed -nr '/omega/{p;d};N;/o\nmega|om\nega|ome\nga|omeg\na/{h;s#\n##;p;x;};D' file
复制代码

论坛徽章:
3
15-16赛季CBA联赛之北控
日期:2016-06-06 21:01:08程序设计版块每日发帖之星
日期:2016-06-19 06:20:00程序设计版块每日发帖之星
日期:2016-07-17 06:20:00
4 [报告]
发表于 2016-07-14 13:28 |只看该作者
回复 2# jason680
大神的这个代码数出来的结果比较好,不过和结果文件file中有点出入,怪我没有表诉清楚题意。
如果line2和line3匹配,line3和line4匹配,则输出line2lin3,line3,line3line4(你的代码出来的结果就差少了line3这一行,其他的没有问题)!

论坛徽章:
3
15-16赛季CBA联赛之北控
日期:2016-06-06 21:01:08程序设计版块每日发帖之星
日期:2016-06-19 06:20:00程序设计版块每日发帖之星
日期:2016-07-17 06:20:00
5 [报告]
发表于 2016-07-14 13:39 |只看该作者
回复 3# songyc_2015
随意哥流弊,也是差line2line3,line3,line3line4中的line3这行。

论坛徽章:
10
天蝎座
日期:2013-09-22 22:32:23程序设计版块每日发帖之星
日期:2016-08-07 06:20:00lufei
日期:2016-06-17 17:38:40程序设计版块每日发帖之星
日期:2016-06-12 06:20:002016科比退役纪念章
日期:2016-05-31 15:47:20CU十四周年纪念徽章
日期:2016-05-27 12:24:562015年亚洲杯之阿曼
日期:2015-05-03 21:01:352015年辞旧岁徽章
日期:2015-03-03 16:54:15天蝎座
日期:2013-10-20 21:05:24程序设计版块每日发帖之星
日期:2016-08-11 06:20:00
6 [报告]
发表于 2016-07-14 15:08 |只看该作者
回复 4# 18800375280

是你最开始没说要line3单独输出。。。
    改下

awk '/omega/{print;append=0;next}last$0~/omega/{if(append==1)print last;print last$0;append=1}last$0!~/omega/{append=0}{last=$0}' file1 > file2

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
7 [报告]
发表于 2016-07-14 15:24 |只看该作者
本帖最后由 moperyblue 于 2016-07-14 17:40 编辑
  1. sed -r '/omega/b;$!N;/o\s*\nmega|om\s*\nega|ome\s*\nga|omeg\s*\na/{h;s/\s*\n//p;g};D'
  2. sed -r '/omega/{p;d};$!N;/o\s*\nmega|om\s*\nega|ome\s*\nga|omeg\s*\na/!D;h;s/\s*\n//p;g;D'
复制代码

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
8 [报告]
发表于 2016-07-14 16:08 |只看该作者

2楼 jason680的这个没问题呀, 可能是你文件每行有空格吧
你可以先去掉文件行尾的空格再试试: sed -i 's/\s\+$//g' file

$ awk '/omega/{print;next}last$0~/omega/{print last$0}{last=$0}' file1 > file2

论坛徽章:
3
15-16赛季CBA联赛之北控
日期:2016-06-06 21:01:08程序设计版块每日发帖之星
日期:2016-06-19 06:20:00程序设计版块每日发帖之星
日期:2016-07-17 06:20:00
9 [报告]
发表于 2016-07-14 17:03 |只看该作者
回复 8# reyleon
的确是,空格的问题,是自己的问题!大神们的答案都是对的!

论坛徽章:
3
15-16赛季CBA联赛之北控
日期:2016-06-06 21:01:08程序设计版块每日发帖之星
日期:2016-06-19 06:20:00程序设计版块每日发帖之星
日期:2016-07-17 06:20:00
10 [报告]
发表于 2016-07-14 17:08 |只看该作者
回复 2# jason680
是我自己文本的问题,大神的答案是正确的!我错了
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP