提取vsftpd.log里的上传和下载的大小，排序--问题

shot

各位高手，现有个脚本想实现：对vsftpd.log里的记录每周统计一次，下载或者上传的文件总共大小从高到低排前十，列出用户、大小来，将结果用邮件发送出去。

文件记录示例如下：
Thu Jun 10 17:51:27 2010 1 10.94.6.72 62775 /home/user1/AB/UK19AB_LIN_top.pdf b _ o r user1 ftp 0 * c
Thu Jun 10 17:51:27 2010 1 10.94.6.72 201140 /home/user2/AB/UK19AB_LIN_transmitter.pdf b _ o r user2 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 150522 /home/user1/AB/UK19AB_LIN_wkup.pdf b _ o r user1 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 60722 /home/user2/AA/UU15AA_LIN_ESD_neg.pdf b _ o r user2 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 79139 /home/user2/AA/UU15AA_LIN_ESD_pos.pdf b _ o r user2 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 26430 /home/user1/AA/UU15AA_LIN_ESD_top.pdf b _ o r user1 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 144165 /home/user1/AA/UU15AA_LIN_rec.pdf b _ o r user1 ftp 0 * c
Thu Jun 10 17:51:28 2010 1 10.94.6.72 50140 /home/user2/AA/UU15AA_LIN_top.pdf b _ o r user2 ftp 0 * c

本人想过了方法：
1. 从文件里筛选定位出7天时间。（前5个字段）
2. 取出上传和下载的用户名。 （第14列）
3. 累加该用户上传和下载文件的大小。（不分上传或下载，累加在一起就行，第8列）
最好是要求7天时间的， 随便从星期几开始都行，只要是一周报告一次就行。

各位能帮忙写下吗？ 我只想的出这些，没办法用脚本实现。谢谢了！

lkk2003rty

3. 累加该用户上传和下载文件的大小。（不分上传或下载，累加在一起就行，第8列）
这个有没有要求是7天时间段？
还有从文件里筛选定位出7天时间。（前5个字段） 哪七天？

shot

楼上兄弟： 最好是要求7天时间的， 随便从星期几开始都行，只要是一周报告一次就行。

ywlscpl

1. awk '{c1="date +%m%d -d \""$2" "$3"\"";c1 |getline day;c2="date +%U -d \""$5day"\"";c2 |getline week;sum[week","$14]+=$8}END{for (i in sum) {split(i,m,",");print m[2],sum[i] >"week"m[1]".txt"}}' file
   
2. for i in week*.txt; do   sort -k2nr $i | head -10; done  

复制代码

shot

高手啊，俺居然格式都看不明白。汗！
我run了一下，有点出入，就是没有排序，另外就是些字段提取错误了。

i 200815497
zhaojh 138195055
cunrong 127720911
adamz 124255058
shawnwng 64530585
williamz 52873216
softmgr 1294334304
quanping 273939396
mawj 97461841
_ 83543979
ericw 64716091
jacksond 64340744
zhengkk 53523327
harrison 51425632
gloria 49078036
jimcong 49078036
maqj 299352998
clkdis 298715724
jefferyw 116986193
wadeou 99518432
jonnyluo 4966654
o 2291408
kenluo 9515

高手再改进下吧

iori809

回复 1# shot


    你这个LOG里肯定每天都会有上传或者下载吗？
也就是说总有 从MON-SUN?还是不固定的

ywlscpl

回复 5# shot


    字段提取错误可能是因为有些文件名中带空格，那么把$14改成$(NF-4)应该就可以了
排序是第二条语句完成的

for i in week*.txt; do   sort -k2nr $i | head -10 >sorted_$i; done  

sorted_week*文件就是各个星期的排行前十数据，星期数根据date +%U而来

expert1

下班了，MARK先

shot

回复  shot


    字段提取错误可能是因为有些文件名中带空格，那么把$14改成$(NF-4)应该就可以了
排序 ...
ywlscpl 发表于 2010-06-11 17:53

    got it , 我再研究下，谢谢！