快过节了，来点技术小红包，awk/sed程序方面

sunzhiguolu

2.同事提出实际使用中最好能进行字段控制，这样题目比较完整。
  比如用一个文本文件或者常量数组的字段列表 fieldlist=("port","portEnable","MediaType"........)：
   一是文本文件中没有出现fieldlist中的字段，该字段取null；
   二是文本文件中超出fieldlist范围的字段，忽略本字段。

根据这些规则，具体的输出结果啥样？能否在1楼贴出来瞧瞧。

sditmaner

回复 2# haooooaaa

sunzhiguolu

$ wc -l urFile
850000 urFile

PlayPlay@PlayPlay-PC /tmp/test
$ time -p grep -oP '(DownTime|RecentUpTime)\s*:.*|(\S+\s*:\s*\S*)' urFile|sed -r '/Params|Status/d;s/\bId/port/;s/Enable|Class/port&/;s/:/ & /'|awk -F'\\s*:\\s*' '!f{a=a?a","$1:$1;b=b?b","($2?$2:"NULL"):($2?$2:"NULL");if(/RecentUpTime/)f=1}f&&!p{print a RS b;p=1;next}p{printf ($2?$2:"NULL") (/RecentUpTime/?RS:",")}'>rst
real 8.98
user 8.73
sys 0.12

PlayPlay@PlayPlay-PC /tmp/test   
$ time -p awk -F: '{gsub(" *: *",":");sub("^ *","");$0=gensub("(:[^ ]+) *([^ ]+:)","\\1:\\2","g",$0);$1=$1}/^Id/{a[$2];b=$2;next}!/^Params|^Status|^ *$/{for(i=1;i<=NF/2;i++){key[$(i*2-1)];all[b,$(i*2-1)]=$(i*2)?$(i*2):"NULL"}}END{s="port";for(i in key)s=s","i;l=split(s,t,",");print s;for(i in a){s=i;for(j=2;j<=l;j++)s=s ","all[i,t[j]];print s}}' urFile>rst
real 9.07
user 9.00
sys 0.03

你测试的数据实在是太少了。。。

有同事提出能用 lex/yacc 搞定是对实践使用一种很有吸引力的方案

有多快? 3秒内?

Windows19

很好，改天我也搞一个这样活动

sunzhiguolu

port   nofield  PortEnable     MediaType      Duplex   speed   class       Link           Duplex     speed             RecentUpTime        
1       null      enable           1000BaseT      auto      auto     802.3     down          half         10Mbps            0 years   0 days...
1       null      enable           100BaseT        auto      auto     802.3     down          half         100Mbps          0 years   0 days...

你这个 PortEnable 的值怎么弄出来的，我真是有点醉了。能不能好好玩。。。

mcwolf2000

回复 15# sunzhiguolu

不好意思，笔误。不过应该不太影响理解吧，主要也是举个例子......

greenet

很好的方式，能够多种角度解决问题，然后评估，便于在不同环境下选择方案有参考价值！

sunzhiguolu

回复 16# mcwolf2000

port   nofield  PortEnable     MediaType      Duplex   speed   class       Link           Duplex     speed             RecentUpTime        
1       null      enable           1000BaseT      auto      auto     802.3     down          half         10Mbps            0 years   0 days...
1       null      enable           100BaseT        auto      auto     802.3     down          half         100Mbps          0 years   0 days...

port 字段的缺省值为 1?

sunzhiguolu

回复 16# mcwolf2000

port   nofield  PortEnable     MediaType      Duplex   speed   class       Link           Duplex     speed             RecentUpTime        
1       null      enable           1000BaseT      auto      auto     802.3     down          half         10Mbps            0 years   0 days...
1       null      enable           100BaseT        auto      auto     802.3     down          half         100Mbps          0 years   0 days...

另外，对于输出结果你希望如何进行控制。能否给予一个说明。

sunzhiguolu

Class,Duplex,Duplex,Link,MediaType,NoField,Port,PortEnable,RecentUpTime,Speed,Speed
802.3,auto,half,down,1000BaseT,NULL,NULL,NULL,0 years 0 days 0 hours 0 minutes 0 seconds,auto,10Mbps
802.3,auto,half,down,1000BaseT,NULL,NULL,NULL,0 years 0 days 0 hours 0 minutes 0 seconds,auto,10Mbps

这种结果是否符合要求?