一个超复杂的shell，想破脑袋了

wangliang222002

有一个文件，格式为
文章id    用户id    发表文章ip

1           1000      202.207.177.1
2           1000      202.207.177.1
3           1001     202.207.177.2
4          1002     202.207.177.2
5           1006      202.207.177.1
……

要求按照ip发文章总量来排序，即如下
202.207.177.1   3
202.207.177.2   2
这第一步好做，但除了按ip排后，同时还要求把某个ip下发文章做多的用户id统计出来，列出前5个，即需要如下结果
ip                         ip发文章数     用户id,发文章数:用户id:发文章数:...      
202.207.177.1                3     1000,2:1006,1
202.207.177.2                2      1001,1:1002,1
这个就麻烦了，何解？

liaosnet

这个似乎并不麻烦吧

1. 
   
2. awk '{a[$3]++;b[$3]=b[$3]":"$2","$1}END{for(i in a)print i,a[i],b[i]}' ufile
   

复制代码

具体的自己办法再扩展..

wangliang222002

这个似乎并不麻烦吧具体的自己办法再扩展..
liaosnet 发表于 2010-04-16 10:44

可是这个只统计出了某ip，某用户发的文章。
但还要对每行，用户发的文章数进行统计然后排序，这个麻烦呀

liaosnet

可是这个只统计出了某ip，某用户发的文章。
但还要对每行，用户发的文章数进行统计然后排序，这个麻烦 ...
wangliang222002 发表于 2010-04-16 10:57

    你想怎么排? 哦..看明白了..

springwind426

1. 
   
2. awk '{a[$3]++;b[$3" "$2]++}END{for(i in b){$0=i;printf "%s\t%d\t%s\t%d\n",$1,a[$1],$2,b[i]}}' 数据文件 | sort -k1,1 -k2,2nr -k3,3 -k4,4nr | awk '++a[$1]<6{if(ip!=$1){printf "\n%s\t%s\t%s,%s",$1,$2,$3,$4;ip=$1}else{printf":%s,%s",$3,$4}}END{print ""}'
   
3. 
   
4. 思路：
   
5. 1、用awk进行处理，统计出每个IP的文章和每个IP下每个ID的文章
   
6. 2、对IP、文章逆序、ID、文章逆序  进行排序
   
7. 3、对排序结果进行处理，每个IP的前5个显示
   

复制代码

bbgg1983

回复 6# springwind426


    相当的强悍

wangliang222002

回复 6# springwind426


    牛

ghp268

1. awk '{a[$3" "$2]++}END{for(key in a) print key"\t"a[key]}' myfile | sort -k1,1 -k3nr | awk '{if($1!=last){print last"\t"sum"\t"id;last=$1;sum=$3;id="";id=$2","$3":"}else{sum+=$3;id=id""$2","$3":"} }END{print last"\t"sum"\t"id}'

复制代码

关于那个只需要列出5个ID的，最后再用AWK过滤显示5个就可以了把

..看了前面牛人写的代码发现理解错了，$1不是文章数量，只是代表1篇文章

blackold

1. $ awk '{ip[$3]++;id[$2];u[$3"-"$2]++}END{for(i in ip) for(j in id) if(i"-"j in u) print i,ip[i],j,u[i"-"j]}' urfile|sort -nr -k2,2 -k 4,4|awk '$1!=p{if(NR>1)print "";s=0}{if(!s)printf("%s %s %s,%s",$1,$2,$3,$4);else if(s<5)printf(";%s,%s",$3,$4);s++;p=$1}END{print ""}'

复制代码