大量数据的解析与比较处理

说不过去

我解析了一个服务器日志文件 然后得出一些数据要与我的标准进行比较 数据量大

1.      -------------------------------------------------------
   
2.     |  /vobs/rru/rsl/acl/tacl:TEST RESULT        
   
3.     |-------------------------------------------------------
   
4.     |   3 cases passed
   
5.     |-------------------------------------------------------
   
6.     |   555:  =========== gcov_run : Coverage of acl = 57.45%  ===========
   
7.     -------------------------------------------------------
   
8.     -------------------------------------------------------
   
9.     |  /vobs/rru/rsl/ampcontrol/tampcontrol:TEST RESULT        
   
10.     |-------------------------------------------------------
    
11.     |   Run: 3   Failure total: 2   Failures: 2   Errors: 0
    
12.     |-------------------------------------------------------
    
13.     |   592:  =========== gcov_run : Coverage of ampcontrol = 2.73106% ===========
    
14.     -------------------------------------------------------

复制代码

类似上面的数据 假设第一种情况我要解析出 3 和 57.45%  第二种情况我要解析出 3  2  和  2.73106%
现在刚刚已经  大神们叫我解析

1. echo $a | awk -F '[ :]+' '/passed/{print $2}/Run/{print $3,$6}'

复制代码

但是下面怎么处理

我的标准存放在一个文本文件中

1. module          Total        Passed             Cov.
   
2.         acl                    3                              96.00%
   
3.         ampcontrol         3           <=1              83.00%

复制代码

然后我要导入我的标准 第一个是acl模块  解析出来的是 3和 57.45% 小于标准不符合要求  然后会得出判定 不合格
第二个模块是ampcontrol  解析出来的是 3 2 2.73106% 小于标准不符合要求  然后会得出判定 不合格
然后我将结果 存放到新的文件中 用下面的格式
module          Total        Passed                 Cov.       Total        Passed                 Cov
acl                  3                                   96.00%      3                                     57.45%        failed
ampcontrol       3                <=1              83.00%      3                2                    2.73106%     failed我不知道如何实现 请教  我第一次写脚本
如果愿意教我的话 请稍微写的详细些 谢谢啦

Shell_HAT

判断是否合格就是比较那个百分比吗？

说不过去

回复 2# Shell_HAT
判断是考虑2个原因 第一就是那个覆盖率的高低  第二个是数据中解析出如果有fail的话 fail的值是不能大于标准中的passed

   

rdcwayx

说不过去 发表于 2014-02-13 12:28
回复 2# Shell_HAT
判断是考虑2个原因 第一就是那个覆盖率的高低  第二个是数据中解析出如果有fail的话 f ...

你的理解有误吧， pass = total - fail， 那么第二个记录的第一个原因是符合的， 因为 pass = 3 - 2 =1 (<=1), 而不只是那pass 和fail直接比较吧。

说不过去

回复 4# rdcwayx


    这个我知道啊 关键是你把整个脚本的写的过程告诉我啊 那个我会处理的啊 谢谢啊

rdcwayx

看到源文件了，先产生个数据文件。

1. awk '/cases passed/{l=split($1,a,"[/:]");print a[l-2],$5,$18}
   
2. /Run: /{l=split($1,a,"[/:]");print a[l-2],$6,$9,$24}
   
3. ' RS="vobs" session.log
   
4. 
   
5. acl 3 57.45%
   
6. ampcontrol 3 2 2.73106%
   
7. cfr 6 58.7955%
   
8. cpmgr 16 87.0307%
   
9. digitalsensors 9 21.8677%
   
10. eeprom 5 69.987%
    
11. fcpc 13 73.7325%
    
12. gfh 14 96.0091%
    
13. hfm 9 54.8601%
    
14. pathdelay 6 73.37%
    
15. psuisr 16 92.57%
    
16. rpgc 14 82.645%
    
17. txattn 16 75.441%
    
18. tempsense 15 86.8121%
    
19. tcs 11 60.3436%
    
20. cpri 26 2 77.2301%
    
21. delaymgr 9 90.8476%
    
22. antcal 6 63.22%
    
23. dpdcpu 9 65.6931%
    
24. eh 24 77.6101%
    
25. fcpcs 9 1 81.1428%
    
26. fpgc 26 74.8622%
    
27. led 15 86.7728%
    
28. ralaisg 17 1 66.7043%
    
29. reportmgr 22 79.635%
    
30. ttlna 5 2 39.8396%
    
31. txcntl 32 76.824%
    
32. vswr 4 87.4331%
    
33. iqec 7 39.5902%
    
34. cam 53 2 72.7036%

复制代码

Herowinter

Passed<=1这个标准难以理解，难道标准是
Pass的case越少越好？

说不过去

回复 7# Herowinter


    其实你可以把这个标准中的pass理解成failed 但是他们约定的就是写pass 我也没办法

说不过去

回复 6# rdcwayx


    这个 RS="vobs" file  什么意思，怎么会报错

Herowinter

回复 8# 说不过去
不是，我理解你的需求了，应该这样的，
你的目标结果应该是记录一些case是否达到标准，
当Passed case数目比你标准里的小(<=1)或对需求（代码）
覆盖率比标准小，都判定为failed。