脚本求助

ggccll77

求大神帮忙写个脚本处理下这个文件，感激不尽

图片左边为源文件，右边为需要处理后的样式。
目标：
1.表头都是固定位置只是每次表头内容会有点不同（处理后要去除表头）
2.正文列出的只是一部分，后面还有很多类似的行（要求，有前面字母部分重复的行只保留第一个（空格跟后面的括号及括号内的数字不同的也算重复））
eg：下面这几种情况只保留第一个
    basic ipin symbol (1)
basic ipin symbol (1)
   basic ipin symbol (11)
basic ipin symbol (2)

源文件
                        Design Hierarchy
*******************************************************
Library : i001
Cell    : ic01_top
View    : sc
Display : Top to bottom
*******************************************************

ic001 lbop_padring symbol (1)
  ic001 esd_36v symbol (1)
    basic ipin symbol (1)
    basic iopin symbolr (2)
    esdlib esd_io_clamp_pnp symbol (1)
      basic ipin symbol (1)
       basic ipin symbol (2)
      basic iopin symbolr (2)
      ls1 pdio_esd_3t symbol (1)
  ic001 esd_36v_io symbol (3)
    basic ipin symbol (3)
    esdlib esd_io_clamp_pnp symbol (1)
      basic ipin symbol (1)
      basic iopin symbolr (2)
  basic iopin symbolr (2)
      ls1 pdio_esd_3t symbol (1)
    basic noConn symbol (1)
  basic ipin symbol (5)
basic opin symbol (1)
  basic iopin symbolr (2)



目标文件
ic001 lbop_padring symbol (1)
ic001 esd_36v symbol (1)
basic ipin symbol (1)
basic opin symbol (1)
basic iopin symbolr (2)
esdlib esd_io_clamp_pnp symbol (1)
ls1 pdio_esd_3t symbol (1)
ic001 esd_36v_io symbol (3)
basic noConn symbol (1)
basic opin symbol (1)
basic iopin symbolr (2)

legs

就是个去重，awk的逻辑也可以这样用。
perl -ane'$.>8&&!$h{$F[0],$F[1],$F[2]}++&&print' file

zxy877298415

回复 1# ggccll77

1. awk -F "(" '/Design/{p=3}/^\*/{p--;t++}p>1{next;}t==2{p=0;t=0;next}{gsub(/^ +/,"",$1);$1=$1}!p&&!a[$1]++' OFS="("  file

复制代码

Looiml

回复 1# ggccll77

1. $ cat -n a.txt
   
2.      1  Design Hierarchy
   
3.      2  *******************************************************
   
4.      3  Library : i001
   
5.      4  Cell    : ic01_top
   
6.      5  View    : sc
   
7.      6  Display : Top to bottom
   
8.      7  *******************************************************
   
9.      8
   
10.      9  ic001 lbop_padring symbol (1)
    
11.     10    ic001 esd_36v symbol (1)
    
12.     11      basic ipin symbol (1)
    
13.     12      basic iopin symbolr (2)
    
14.     13      esdlib esd_io_clamp_pnp symbol (1)
    
15.     14        basic ipin symbol (1)
    
16.     15         basic ipin symbol (2)
    
17.     16        basic iopin symbolr (2)
    
18.     17        ls1 pdio_esd_3t symbol (1)
    
19.     18    ic001 esd_36v_io symbol (3)
    
20.     19      basic ipin symbol (3)
    
21.     20      esdlib esd_io_clamp_pnp symbol (1)
    
22.     21        basic ipin symbol (1)
    
23.     22        basic iopin symbolr (2)
    
24.     23    basic iopin symbolr (2)
    
25.     24        ls1 pdio_esd_3t symbol (1)
    
26.     25      basic noConn symbol (1)
    
27.     26    basic ipin symbol (5)
    
28.     27  basic opin symbol (1)
    
29.     28    basic iopin symbolr (2)

复制代码

因为你有前导空格，所以需要先用sed去除：

1. $ sed -r 's/^ +//' a.txt|awk -F' \\(' 'NR>8{if(!a[$1])print;a[$1]++}'
   
2. ic001 lbop_padring symbol (1)
   
3. ic001 esd_36v symbol (1)
   
4. basic ipin symbol (1)
   
5. basic iopin symbolr (2)
   
6. esdlib esd_io_clamp_pnp symbol (1)
   
7. ls1 pdio_esd_3t symbol (1)
   
8. ic001 esd_36v_io symbol (3)
   
9. basic noConn symbol (1)
   
10. basic opin symbol (1)

复制代码