免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2111 | 回复: 6

[文本处理] 合并行的问题,求shell命令解决 [复制链接]

论坛徽章:
0
发表于 2012-09-19 19:53 |显示全部楼层
etc/xml/validation/dataFileFormatDefs.xml:
  destinations:
    dtsystem@app8002:/mnt/configs/production02/default/itm
    dtsystem@app8003:/mnt/configs/production03/default/itm
    dtsystem@app8004:/mnt/configs/production04/default/itm
    dtsystem@app8005:/mnt/configs/production05/default/itm
etc/xml/validation/dataFileFormatDefs.xml:
  destinations:
    dtsystem@app8002:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8003:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8004:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8005:/opt/demandtec/production/etc/xml/validation
    dtsystem@pns8001:/opt/demandtec/production/etc/xml/validation
buildNumber.txt:
  destinations:
    dtsystem@app8002:/opt/demandtec/production/lib
    dtsystem@app8003:/opt/demandtec/production/lib
    dtsystem@app8004:/opt/demandtec/production/lib

上面的文本,我要的结果是:

etc/xml/validation/dataFileFormatDefs.xml:
  destinations:
    dtsystem@app8002:/mnt/configs/production02/default/itm
    dtsystem@app8003:/mnt/configs/production03/default/itm
    dtsystem@app8004:/mnt/configs/production04/default/itm
    dtsystem@app8005:/mnt/configs/production05/default/itm
    dtsystem@app8002:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8003:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8004:/opt/demandtec/production/etc/xml/validation
    dtsystem@app8005:/opt/demandtec/production/etc/xml/validation
    dtsystem@pns8001:/opt/demandtec/production/etc/xml/validation
buildNumber.txt:
  destinations:
    dtsystem@app8002:/opt/demandtec/production/lib
    dtsystem@app8003:/opt/demandtec/production/lib
    dtsystem@app8004:/opt/demandtec/production/lib

这只是文件的一个片段,要求如果出现相同的连续两行(类似下面2行),保留第一次出现,其余出现都删除。需要查找的连续的两行中,第一行需要以小写字母开头,冒号结尾;第二行就是原封不动的“  destinations:”
etc/xml/validation/dataFileFormatDefs.xml:
  destinations:

是需要写在shell脚本里的,只要是shell命令都可以,先谢谢了~~~~

论坛徽章:
23
15-16赛季CBA联赛之吉林
日期:2017-12-21 16:39:27白羊座
日期:2014-10-27 11:14:37申猴
日期:2014-10-23 08:36:23金牛座
日期:2014-09-30 08:26:49午马
日期:2014-09-29 09:40:16射手座
日期:2014-11-25 08:56:112015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东
日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东
日期:2016-01-19 13:33:372015亚冠之山东鲁能
日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者
日期:2015-09-21 08:27:57
发表于 2012-09-19 22:28 |显示全部楼层
  1. awk '/^[a-z].*:$/{getline v;s=$0"\n"v;if(v=="  destinations:"&&a[s]++)next;else $0=s}1' urfile
复制代码

论坛徽章:
0
发表于 2012-09-19 23:30 |显示全部楼层
回复 2# ly5066113


    能麻烦讲解一下吗? 新手没看太懂

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
发表于 2012-09-20 09:10 |显示全部楼层
  1. awk '!a[$0]++{if(NR>2)sub(/:$/,":\n destinations:");print}'
复制代码
仅针对LZ给出的这种格式

论坛徽章:
0
发表于 2012-09-20 17:28 |显示全部楼层
多谢2楼, 好使

论坛徽章:
0
发表于 2012-09-25 18:02 |显示全部楼层
ly5066113 发表于 2012-09-19 22:28



学习了

论坛徽章:
15
2015年辞旧岁徽章
日期:2015-03-03 16:54:15双鱼座
日期:2015-01-15 17:29:44午马
日期:2015-01-06 17:06:51子鼠
日期:2014-11-24 10:11:13寅虎
日期:2014-08-18 07:10:55酉鸡
日期:2014-04-02 12:24:51双子座
日期:2014-04-02 12:19:44天秤座
日期:2014-03-17 11:43:36亥猪
日期:2014-03-13 08:13:51未羊
日期:2014-03-11 12:42:03白羊座
日期:2013-11-20 10:15:18CU大牛徽章
日期:2013-04-17 11:48:45
发表于 2012-09-26 08:16 |显示全部楼层
TravelCloud 发表于 2012-09-20 01:30
回复 2# ly5066113

能麻烦讲解一下吗? 新手没看太懂

哪里没看懂,如果全不懂,最好自己先看基础,置顶贴先过一遍。
awk 的代码可以分行看,说说哪行不懂。
  1. awk '/^[a-z].*:$/
  2.         {  getline v
  3.             s=$0"\n"v
  4.             if(v=="  destinations:"&&a[s]++)next
  5.             else $0=s}
  6.             1' urfile
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP