怎么统计文件中部分字段相同的行

motte

我现在有一个文件，内容如下：
james，110232，3210032；
tom，103234，3210032；
him，103234，3210132；
我想写个脚本，实现以下功能：
例如第一行第三个字段跟第二行第三个字段相同，但是他们的第二行不同，就不数出来；另外第三行的第二个字段跟第三行的第二个字段相同，并且他们第三个字段不相同也不输出来；对于不同行只有第三个字段且第二字段同时相同的时候才输出来（第一字段可以不同）；当然了不同行比较不是特指相邻的行比较，而是文件中所有的行两两相比较；

ywlscpl

回复 1# motte

1. [root@Mylinux tmp]# cat file
   
2. mes，110232，3210032；
   
3. tom，103234，3210032；
   
4. him，103234，3210132；
   
5. james1，110232，3210032；
   
6. him1，103234，3210132；
   
7. [root@Mylinux tmp]# awk -F， 'NR==FNR&&a[$2","$3]++{b[$2","$3]}NR>FNR&&($2","$3 in b)' file file
   
8. mes，110232，3210032；
   
9. him，103234，3210132；
   
10. james1，110232，3210032；
    
11. him1，103234，3210132；

复制代码

motte

谢谢；

motte

'NR==FNR&&a[$2","$3]++{b[$2","$3]}NR>FNR&&($2","$3 in b)'这个能否解释下什么意思么？

ywlscpl

'NR==FNR&&a[$2","$3]++{b[$2","$3]}
把$2","$3出现次数大于1的$2","$3放入数组b


NR>FNR&&($2","$3 in b)'
$2","$3如果在数组b中存在，就打印该行

motte

谢谢！

iori809

awk -F"," '{array[$2","$3]=$0"\n"array[$2","$3];array1[$2","$3]++}END{for(i in array1){if(array1[i]!=1){print array[i]}}}' test4.txt