一个关于SHELL统计的问题，望高手解答

ahqkxfer

有如下文档，a.txt:
文件路径            IP               持续时间
/abc/data/aaa.idr,10.101.3.10,120
/abc/data/aaa.idr,10.101.3.10,500
/abc/data/aaa.idr,10.101.3.8,110
/abc/data/abc.dir,10.101.5.7,210
/abc/data/abc.dir,10.101.5.7,1000
/abc/data/aaa.idr,10.101.3.10,110

要求使用shell脚本处理后，得到
文件路径和IP相同的计数+1，但保留文件路径和IP相同的数据中任意一个持续时间
输出结果例如：
/abc/data/aaa.idr,10.101.3.10 共出现3次，持续时间120
/abc/data/aaa.idr,10.101.3.8共出现1次，持续时间110
/abc/data/abc.dir,10.101.5.7共出现2次，持续时间210

有哪位高手解答下~~执行效率高点最好~

[ 本帖最后由 ahqkxfer 于 2008-10-15 23:31 编辑 ]

aries1998

1. cat data
   
2. /abc/data/aaa.idr,10.101.3.10,120
   
3. /abc/data/aaa.idr,10.101.3.10,500
   
4. /abc/data/aaa.idr,10.101.3.8,110
   
5. /abc/data/abc.dir,10.101.5.7,210
   
6. /abc/data/abc.dir,10.101.5.7,1000
   
7. /abc/data/aaa.idr,10.101.3.10,110
   
8. 
   
9. aries@ubuntu:/tmp$ awk -F',' '{id[$1" "$2]+=1} END{for(i in id) {print i," appear " id[i] " times"}}' data
   
10. /abc/data/abc.dir 10.101.5.7  appear 2 times
    
11. /abc/data/aaa.idr 10.101.3.8  appear 1 times
    
12. /abc/data/aaa.idr 10.101.3.10  appear 3 times

复制代码

MMMIX

这也不复杂，自己先写吧

btw，这个用 Perl 或其他支持 hash 的语言来做会更简单些

ahqkxfer

考虑了一天，主要是想用系统函数来解决它，
但是一直没想到好的方法

MMMIX

原帖由 ahqkxfer 于 2008-10-15 23:41 发表
考虑了一天，主要是想用系统函数来解决它，
但是一直没想到好的方法

先写一个能用的，然后再改进

ahqkxfer

能否给点提示呢。。。

MMMIX

原帖由 ahqkxfer 于 2008-10-16 07:31 发表
能否给点提示呢。。。

不是说了么？用 hash 会比较简单点

ahqkxfer

楼上的，后面还得跟上一个持续时间~
不过还是谢谢了~

ahqkxfer

没人来说说吗？
帮下忙吧。。。。。

ahqkxfer

还是我自己解决了，用
awk 'BEGIN{OFS=FS=","} NR==FNR{a[$1]=$2}NR>FNR&&a[b=($1)]{print $0, a}'  2.log 1.log > 3.log
先把列合并了生成2.log