统计文本中每个单词出现次数，但每个单词在一行中出现多次的只统计一次

hxletter

例如我有如下文本：
a b c a
b c b
我想要的结果如下：
a 1
b 2
c 2

例如a在文本第一行中出现了两次，但我们只算一次

hxletter

回复 2# zooyo
每个单词在一行中只统计一次

   

udevu

1. awk '{for(i=1;i<=NF;i++){if(NR!=last[$i])a[$i]++;last[$i]=NR}}END{for(i in a)print i,a[i]}' urfile

复制代码

cao627

1. awk '{for(i=1;i<=NF;i++)if(!b[NR""$i]){a[$i]++;b[NR""$i]++}}END{for(i in a)print i,a[i]}' file
   

复制代码

hqw19881118

udevu 发表于 2013-07-09 23:46

恩，不错，学习了！

WilliBhamlll

1. awk '{for(i=1;i<=NF;i++)if(!a[$i,NR]++)b[$i]++}END{for(i in b)print i,b[i]}' file

复制代码

yinwei2012

@WilliBhamlll
赞一个！！！:wink:

WilliBhamlll

@yinwei2012
谢谢~
学习了4楼和5楼的思路~

yestreenstars

1. [root@localhost ~]# awk '{for(i=1;i<=NF;i++)if(!a[$i]++)b[$i]++;delete a}END{for(i in b)print i,b[i]}' i
   
2. a 1
   
3. b 2
   
4. c 2
   
5. [root@localhost ~]#

复制代码