shell文本处理，求助

qpengf

一直在隔三差五的学习shell命令，碰到问题了还是没思路，希望坛子里的大神帮忙，个人感觉不是很难，就是写不出来。。。。。。
文本：
[bes@testdb ~]$ more test.txt
dn: bbsubid=33271471, bbloginname=IP0020014591, cn=broadbanduser, uporgcode=03
20, cn=organization, dc=hbradius,dc=com
bbexpiredate: 20901230235959
bbonlinesum: 1
bbproduct: 0303010012
bbrealservice: DG0101
bbservice: 0801
bbstopstatus: normal
bbsubid: 33271471
bbsubstatus: active
bbvaliddate: 20141228001954
objectClass: BossBroadBandSubscription
objectClass: top

dn: bbsubid=39367911, bbloginname=IP0020014591, cn=broadbanduser, uporgcode=03
20, cn=organization, dc=hbradius,dc=com
bbexpiredate: 20901230235959
bbonlinesum: 1
bbproduct: 0303010001
bbrealservice: DG0101
bbservice: 4512
bbstopstatus: normal
bbsubid: 39367911
bbsubstatus: active
bbvaliddate: 20150504141856
objectClass: BossBroadBandSubscription
objectClass: top
想要加工成的格式：
IP0020014591，0801
IP0020014591，4512
就是bbloginname=的值和bbservice的值，
awk -vRS='dn:' -vFS='\n' '($1~/33271471/){split($1,a,/[=,]/);n=a[4]}($6~/bbservice/){split($1,b,":");n=b[2]}{print n,m}' test.txt
自己写了个半成品，有点问题，因为dn下面各个节点出现的顺序可能不同，$6~/bbservice/这里的数字无法写死。

关阴月飞

回复 1# qpengf

1. grep -Po '(?<=bbloginname=)[^ ]+|(?<=bbservice: ).+' urfile |paste - -
   
2. awk -vRS='bbloginname=|bbservice: ' 'NR>1{printf n++%2?$1"\n":$1 FS}'  urifle
   
3. awk -F 'bbloginname=|bbservice: ' 'NF==2{printf (split($2,a," ")>1)?a[1]" ":a[1]"\n"}' urfile
   
4. awk  '/bbloginname=/{split($3,a,"=")}/bbservice:/{print a[2],$2}' urfile
   

复制代码

liion631818

回复 1# qpengf

1. sed -nr 's/.*bbloginname=([^,]*).*/\1, /;th;s/bbservice: (.*)/\1/;tH;d;:h;h;d;:H;H;g;s/\n//p'

复制代码

liion631818

1. awk -F"[,:]" '$0~/bbloginname=/{for(i=1; i<=NF; i++)if($i~/bbloginname=/){sub(" bbloginname=", "", $i);printf("%s,", $i)}}$0~/bbservice:/{print $2}'

复制代码

回复 1# qpengf


   

jason680

回复 1# qpengf

$ awk -vs="bbloginname bbservice" -F' *[:=,] *' 'function p(n,m){for(n=1;n<=t;n++)m=m  a[k[n]]" ";print m;delete a}BEGIN{t=split(s,k," ")}sub(/^dn: */,""){if(P)p();P=1}{for(n=1;n<NF;n+=2)a[$n]=$(n+1)}END{p()}' FILE
IP0020014591 0801
IP0020014591 4512

   

zxy877298415

1. awk '{if(match($0,"bbloginname=([^,]+)",a)) printf a[1]",";if(match($0,"bbservice: (.*)",b)) print b[1]}' file
   
2. IP0020014591,0801
   
3. IP0020014591,4512

复制代码

回复 1# qpengf


   

zsszss0000

1. sed -n 's/.*bbloginname=\([^,]\+\).*/\1/p;s/bbservice: \(.*\)/\1/p' file | sed 'N;s/\n/,/'

复制代码

整个流程分为两段，通过增加过程来化简对技巧的需要

songyc_2015

1. awk -F'[\n=: ,]+' -vRS= '{for(i=1;i<=NF;i++){if($i~/bbloginname|bbservice/)s=length(s)>0?s","$(i+1):$(i+1)}print s;s=""}' e.txt
   
2. awk -F'[=: ,]+' '/bbloginname/{s=$5}/bbservice/{s=s","$2;print s;s=""}' e.txt
   
3. sed -nr '/^dn/{:a;$bb;N;/top\n/!ba;:b;s#.*bbloginname=([^,]+).*bbservice: ([^\n]+).*#\1,\2#p;}' e.txt
   
4. sed -nr '/bbloginname/{s#.*bbloginname=([^,]+).*#\1#;h};/bbservice: /{s###;H;g;s#\n#,#p}' e.txt

复制代码

回复 1# qpengf


   

qpengf

回复 2# 关阴月飞


     awk  'function x(){if(id)print id,n;id=n=""}/bbloginname=/{split($3,a,"=");id=a[2]}/bbservice/{n=$2}/^dn/{x()}END{x()}' test.txt
IP0020014591,
IP0020014591, 0801
你好，感谢你的帮忙，为什么我这样写出来的是这个结果呢？

qpengf

回复 2# 关阴月飞


    awk  '/bbloginname=/{split($3,a,"=")}/bbservice:/{b=$2}/^dn/{print a[2],b;delete a;b=""}' test.txt
这样子改之后的结果也是
IP0020014591,
IP0020014591, 0801
我这样子改是担心文本中数据不完整，这样子改之后，遇到dn开头，就把打印变量的值清空一次，这样保证打印出的每行信息在原始文本中对应一个dn节点的信息。