免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2089 | 回复: 4

[文本处理] 脚本求助 [复制链接]

论坛徽章:
0
发表于 2020-01-09 14:06 |显示全部楼层
求大神帮忙写个脚本处理下这个文件,感激不尽

图片左边为源文件,右边为需要处理后的样式。
目标:
1.表头都是固定位置只是每次表头内容会有点不同(处理后要去除表头
2.正文列出的只是一部分,后面还有很多类似的行(要求,有前面字母部分重复的行只保留第一个(空格跟后面的括号及括号内的数字不同的也算重复
eg:下面这几种情况只保留第一个
    basic ipin symbol (1)
basic ipin symbol (1)
   basic ipin symbol (11)
basic ipin symbol (2)

源文件
                        Design Hierarchy
*******************************************************
Library : i001
Cell    : ic01_top
View    : sc
Display : Top to bottom
*******************************************************

ic001 lbop_padring symbol (1)
  ic001 esd_36v symbol (1)
    basic ipin symbol (1)
    basic iopin symbolr (2)
    esdlib esd_io_clamp_pnp symbol (1)
      basic ipin symbol (1)
       basic ipin symbol (2)
      basic iopin symbolr (2)
      ls1 pdio_esd_3t symbol (1)
  ic001 esd_36v_io symbol (3)
    basic ipin symbol (3)
    esdlib esd_io_clamp_pnp symbol (1)
      basic ipin symbol (1)
      basic iopin symbolr (2)
  basic iopin symbolr (2)
      ls1 pdio_esd_3t symbol (1)
    basic noConn symbol (1)
  basic ipin symbol (5)
basic opin symbol (1)
  basic iopin symbolr (2)



目标文件
ic001 lbop_padring symbol (1)
ic001 esd_36v symbol (1)
basic ipin symbol (1)
basic opin symbol (1)
basic iopin symbolr (2)
esdlib esd_io_clamp_pnp symbol (1)
ls1 pdio_esd_3t symbol (1)
ic001 esd_36v_io symbol (3)
basic noConn symbol (1)
basic opin symbol (1)
basic iopin symbolr (2)

test.JPG

论坛徽章:
1
19周年集字徽章-年
日期:2020-10-29 09:39:21
发表于 2020-01-13 10:38 |显示全部楼层
就是个去重,awk的逻辑也可以这样用。
perl -ane'$.>8&&!$h{$F[0],$F[1],$F[2]}++&&print' file

评分

参与人数 1信誉积分 +10 收起 理由
ggccll77 + 10 很给力!

查看全部评分

论坛徽章:
0
发表于 2020-01-13 17:10 |显示全部楼层
去重前,不允许排序么?

评分

参与人数 1信誉积分 +5 收起 理由
ggccll77 + 5 赞一个!

查看全部评分

论坛徽章:
30
申猴
日期:2014-04-10 09:43:532015年亚洲杯纪念徽章
日期:2015-03-20 14:40:232015亚冠之阿尔纳斯尔
日期:2015-06-02 18:59:042015亚冠之阿尔希拉尔
日期:2015-06-30 15:22:572015亚冠之大阪钢巴
日期:2015-07-20 10:44:332015亚冠之阿尔纳斯尔
日期:2015-10-28 14:57:5215-16赛季CBA联赛之新疆
日期:2015-12-25 10:18:45黑曼巴
日期:2016-06-26 21:39:5315-16赛季CBA联赛之山西
日期:2016-07-25 21:54:2715-16赛季CBA联赛之北京
日期:2016-10-27 12:07:2315-16赛季CBA联赛之八一
日期:2017-07-07 16:39:0915-16赛季CBA联赛之吉林
日期:2017-09-04 12:14:43
发表于 2020-01-14 09:05 |显示全部楼层
本帖最后由 zxy877298415 于 2020-01-14 09:06 编辑

回复 1# ggccll77

  1. awk -F "(" '/Design/{p=3}/^\*/{p--;t++}p>1{next;}t==2{p=0;t=0;next}{gsub(/^ +/,"",$1);$1=$1}!p&&!a[$1]++' OFS="("  file
复制代码

评分

参与人数 2可用积分 +10 信誉积分 +50 收起 理由
ggccll77 + 50 谢谢大神,完美解决问题
飘絮絮絮丶 + 10 赞一个!

查看全部评分

论坛徽章:
0
发表于 2020-02-26 22:24 |显示全部楼层
回复 1# ggccll77

  1. $ cat -n a.txt
  2.      1  Design Hierarchy
  3.      2  *******************************************************
  4.      3  Library : i001
  5.      4  Cell    : ic01_top
  6.      5  View    : sc
  7.      6  Display : Top to bottom
  8.      7  *******************************************************
  9.      8
  10.      9  ic001 lbop_padring symbol (1)
  11.     10    ic001 esd_36v symbol (1)
  12.     11      basic ipin symbol (1)
  13.     12      basic iopin symbolr (2)
  14.     13      esdlib esd_io_clamp_pnp symbol (1)
  15.     14        basic ipin symbol (1)
  16.     15         basic ipin symbol (2)
  17.     16        basic iopin symbolr (2)
  18.     17        ls1 pdio_esd_3t symbol (1)
  19.     18    ic001 esd_36v_io symbol (3)
  20.     19      basic ipin symbol (3)
  21.     20      esdlib esd_io_clamp_pnp symbol (1)
  22.     21        basic ipin symbol (1)
  23.     22        basic iopin symbolr (2)
  24.     23    basic iopin symbolr (2)
  25.     24        ls1 pdio_esd_3t symbol (1)
  26.     25      basic noConn symbol (1)
  27.     26    basic ipin symbol (5)
  28.     27  basic opin symbol (1)
  29.     28    basic iopin symbolr (2)
复制代码
因为你有前导空格,所以需要先用sed去除:
  1. $ sed -r 's/^ +//' a.txt|awk -F' \\(' 'NR>8{if(!a[$1])print;a[$1]++}'
  2. ic001 lbop_padring symbol (1)
  3. ic001 esd_36v symbol (1)
  4. basic ipin symbol (1)
  5. basic iopin symbolr (2)
  6. esdlib esd_io_clamp_pnp symbol (1)
  7. ls1 pdio_esd_3t symbol (1)
  8. ic001 esd_36v_io symbol (3)
  9. basic noConn symbol (1)
  10. basic opin symbol (1)
复制代码


您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP