找出所有单词

chinasg

各位大哥，小弟想找出一个txt文件中，所有单词使用的次数，有什么办法呢？

如果用uniq －c，只会按照行数寻找，但不是每个单词。

＃cat b
i am good good boy
i am good good boy
abc

＃cat b | uniq -c
      2 i am good good boy
      1 abc


先谢谢了

lucash

sed  's/[^a-zA-Z]/\n/g' test.txt |sed '/^$/d'|sort |uniq -c

[ 本帖最后由 lucash 于 2009-7-2 11:02 编辑 ]

star_wm_craft

每個單詞出現的次數?

[ 本帖最后由 star_wm_craft 于 2009-7-2 10:53 编辑 ]

chinasg

谢谢楼上的，还请指教，如果要把相同的单词的次数算在一起，该怎么办呢？

难道用awk $2，然后在uniq？

＃sed -e 's/[^a-z]/\n/g' b |sed '/^$/d'|uniq -c
      1 i
      1 am
      2 good
      1 boy
      1 i
      1 am
      2 good
      1 boy
      1 abc

ly5066113

try:

cat b | tr ' ' '\n' | sort | uniq -c

HH106

cat urfile | xagrs -n1 | tr 'A-Z' 'a-z' | sed 's/\.//g;s/\,//g;s/ /\n/g' | sort | uniq -c | sort -nr

blackold

tr -sc a-zA-z0-9_ '\n' < urfile|sort |uniq -c

lucash

呵呵，刚才 忘了sort了。
换一个

1. awk -v RS='[^A-Za-z]+' '{++S[$1]}END{for ( i in S) print i,S[i]}' test.txt

复制代码

[ 本帖最后由 lucash 于 2009-7-2 11:01 编辑 ]

chinasg

谢谢大家，受教了，5 6 7 8 都可以。

sh 果然是高深么测啊，

zjdick

1. 
   
2. awk '{for(j=1;j<=NF;j++)a[$j]++}END{for(i in a)print a[i],i}' file|sort
   

复制代码

[ 本帖最后由 zjdick 于 2009-7-2 13:22 编辑 ]