这条统计用的awk能优化吗？

qqfx

awk '{count[substr($7,1,index($7,":")-1)]++}END{for(name in count) print name，count[name]}'

这是我前几天为了统计文件里相同信息的条数写的，但是文件很大，运行这个也很慢，不知道能不能优化一下，或者有没有其他方法。

rwx_hc

用python来做吧

woodie

可以试着把两个函数调用去掉，用自定义的FS来抽取字段。不过估计效果不会太明显。建议搜搜本版关于大文件处理的帖子。瓶颈应该在数组对内存的占用上，也许分割文件来做比较可取。