awk 排重 求助啊

genius04121

现在有一个文件 内容为：
   1;2;3;4;5
   1;2;3;5;5
   1;2;3;4;2
   1;3;3;1;5
现在要求生成一个新的文件 如果一个竖排数字都相同就不变 如果不相同，就写入一个空格 生成文件如下
   1; ;3; ; ;
应该怎么弄啊 求助啊

yinyuemi

没测试
awk -F; '{for(i=1;i<=NF;i++){a[NF][b[i]=$i]++}}END{for(i=1;i<=NF;i++){printf a[i][b[i]]==NR?b[i]:" ";printf i==NF?"":";"};print ""}' file

yestreenstars

1. [root@localhost ~]# cat i
   
2. 1;2;3;4;5
   
3. 1;2;3;5;5
   
4. 1;2;3;4;2
   
5. 1;3;3;1;5
   
6. [root@localhost ~]# awk 'BEGIN{FS=OFS=";"}{for(i=1;i<=NF;i++)a[i,$i]++}END{for(i=1;i<=NF;i++)if(a[i,$i]<NR)$i=" ";print}' i
   
7. 1; ;3; ;
   
8. [root@localhost ~]#

复制代码

你的结果是不是多了一个分号？

genius04121

回复 3# yestreenstars


    是啊啊 哈哈 麻烦能简单解释一下吗

yestreenstars

回复 4# genius04121

1. awk 'BEGIN{FS=OFS=";"} #将输入、输出字段分隔符都设为分号
   
2. {for(i=1;i<=NF;i++)a[i,$i]++} #遍历每个字段，以该字段的序号和该字段为下标建立数组a，以确保唯一性，每重复一次值增加1
   
3. END{for(i=1;i<=NF;i++)if(a[i,$i]<NR)$i=" ";print}' #在文件末尾，遍历每个字段，如果该字段重复的个数比总行数小则设为空格，最后打印结果

复制代码

yestreenstars

提供多一个版本：

1. [root@localhost ~]# awk 'BEGIN{FS=OFS=";"}{for(i=1;i<=NF;i++){if(a[i]!=""&&$i!=a[i])$i=" ";a[i]=$i}}END{print}' i
   
2. 1; ;3; ;
   
3. [root@localhost ~]#

复制代码

genius04121

回复 6# yestreenstars


    还能问下吗 如果最后一列 不排重 而是进行求和 能实现吗

genius04121

回复 6# yestreenstars


    1; ;3; ;17  就是这个效果

genius04121

回复 6# yestreenstars


    1; ;3; ;17  就是这个效果

quanzhou722

awk -F';' '{b++;for(i=1;i<NF+1;i++){a[i]+=$i}}END{for (x=1;x<FNR+1;x++){if (length(a[x]/b)==1) {printf a[x]/b";"} else{printf " ;"} }}'