一个超复杂的shell，想破脑袋了

springwind426

1. 
   
2. sort -k1,1 -k2,2nr -k3,3 -k4,4nr
   
3. 
   
4. 需要修改成
   
5. sort -k2,2nr -k1,1 -k4,4nr -k3,3
   
6. 
   
7. 就是先按照文章数排序，如果文章数相同，按照IP地址排序，对于同一IP内，先按照文章数量数排序，如果文章数量相同，就按照ID排序
   
8. 
   
9. 不过，这样有一些问题，如果文章数相同，就会只列表ID小的5个ID
   
10. 
    

复制代码

springwind426

blackold 发表于 2010-04-16 11:29

你这个复杂了

1. 
   
2. 分解分析：
   
3. awk '{a[$3]++;b[$3" "$2]++}END{for(i in b){$0=i;printf "%s\t%d\t%s\t%d\n",$1,a[$1],$2,b[i]}}' 数据文件
   
4. a[$3]++  记录每个IP的总数
   
5. b[$3 " " $2]++  记录每个IP下ID的总数
   
6. 
   
7. for(i in b){$0=i;printf "%s\t%d\t%s\t%d\n",$1,a[$1],$2,b[i]}
   
8. 列举IP和ID的组合
   
9. $0=i 主要目的是分解
   
10. printf "%s\t%d\t%s\t%d\n",$1,a[$1],$2,b[i]
    
11. 显示信息：
    
12. IP 文章总数 ID  ID文章总数
    
13. 
    
14. | sort -k2,2nr -k1,1 -k4,4nr  -k3,3
    
15. 排序：
    
16. 先按照文章总数排序（逆序），如果文章总数相同，按照IP排序，在同一IP下，以ID的文章总数排序（逆序），如果ID文章数相同，就以ID排序
    
17. 
    
18. | awk '++a[$1]<6{if(ip!=$1){printf "\n%s\t%s\t%s,%s",$1,$2,$3,$4;ip=$1}else{printf":%s,%s",$3,$4}}END{print ""}'
    
19. 每个IP只显示前5个ID
    

复制代码

blackold

回复 12# springwind426


    基本上是一样的，只是写法有所不同。

blackold

只按IP和id的文章数量来排序就可以了吧。

blackold

还是sort -k2,2nr -k1,1 -k4,4nr  -k3,3这个排序比较严格。

crowsy001

springwind426 发表于 2010-04-16 11:08

    统计、排序、过滤 ； 思路清晰，代码简洁。  赞一个。

nuclearxin

偶第一份工作就 专门算这个东西嗒
就是 hash +  联合hash
是在不行+临时文件 就ok啦

springwind426

回复  springwind426


    基本上是一样的，只是写法有所不同。
blackold 发表于 2010-04-16 12:20

1. 
   
2. for(i in ip) for(j in id)
   
3. 这个会遍历很多没有的组合
   

复制代码

aluoyeshi

cat test.sh
#/bin/sh
for ip_name in `awk '{print $3}' $1 |sort |uniq`
do
    ip_num=`grep "$ip_name" $1 |wc -l`
    echo -n "$ip_name    $ip_num    "
    for user_id in `grep "$ip_name" $1 |awk '{print $2}' |sort |uniq`
    do
        id_num=`grep "$user_id" $1 |wc -l`
        echo -n "$user_id,$id_num:"
    done
    echo
done

用法: sh test.sh file

blackold

回复 18# springwind426


    嗯，还是你的简单。学习了。