请问对文本中重复的字段计数应该如何处理?将计数的1,2,3在添加到该行最后

qooweds

我有一个csv文件,第三个字段是ip
我想在每行的末尾添加一个字段,代表该ip出现的次数,
比如192.168.1.1在文中是第二次出现,行尾就加上2

文本内容类似为:
aa,bb,192.168.1.1,cc
dd,ee,192.168.1.2,ff
gg,hh,192.168.1.1,ii
jj,kk,192.168.1.3,ll

期待的结果为:
aa,bb,192.168.1.1,cc,1
dd,ee,192.168.1.2,ff,1
gg,hh,192.168.1.1,ii,2
jj,kk,192.168.1.3,ll,1

请问怎么处理好呢?
用sed还是awk好呢?

yestreenstars

果断用awk啦~

1. [root@localhost ~]# awk -F, '{print $0","++a[$3]}' i
   
2. aa,bb,192.168.1.1,cc,1
   
3. dd,ee,192.168.1.2,ff,1
   
4. gg,hh,192.168.1.1,ii,2
   
5. jj,kk,192.168.1.3,ll,1
   
6. [root@localhost ~]# cat i
   
7. aa,bb,192.168.1.1,cc
   
8. dd,ee,192.168.1.2,ff
   
9. gg,hh,192.168.1.1,ii
   
10. jj,kk,192.168.1.3,ll
    
11. [root@localhost ~]#

复制代码

qooweds

我自己用awk写了下
cat test.csv | awk -F"," '{print $3","$1","$2","$4}' |sort |awk -F"," 'BEGIN{i=1}{y=x;x=$1;{if(x==y){i++;print $0","i}else{i=1;print $0","i}}}'

将ip放到第一列,然后sort,通过awk把计数打印到行尾,然后再用awk将ip打印的顺序换回去,貌似很复杂...

jiaogeshahaone

回复 1# qooweds

1. awk -F, '{c[$3]++;print $0","c[$3]}'

复制代码

   

Shell_HAT

1. awk 'BEGIN{FS=OFS=","}{print $0,++a[$3]}' urfile

复制代码

qooweds

感谢大家!
懂了!
数组好方便

reyleon

1. awk 'BEGIN{FS=OFS=","}{print $0,++a[$3]}'

复制代码

这个冬天不冷

1. awk -F, '{a[$3]++;print $0,a[$3]}' 1
   

复制代码

kernel69

来个perl的

1. perl -F',' -lane 'print "$_,$h{$F[2]}" if ++$h{$F[2]}'

复制代码

回复 1# qooweds


   

yestreenstars

回复 9# kernel69
可以更短些：

1. perl -F, -lane 'print $_.",".++$h{$F[2]}'

复制代码