脚本分析

huaqi2008

我想统计下面文本中单词的个数，例如：F_OK, O_APPEND,...请高手帮忙解答一下

'F_OK', 'O_APPEND', 'O_BINARY', 'O_CREAT', 'O_EXCL', 'O_NOINHERIT', 'O_RANDOM',
'O_RDONLY', 'O_RDWR', 'O_SEQUENTIAL', 'O_SHORT_LIVED', 'O_TEMPORARY', 'O_TEXT',
'O_TRUNC', 'O_WRONLY', 'P_DETACH', 'P_NOWAIT', 'P_NOWAITO', 'P_OVERLAY', 'P_WAI
T', 'R_OK', 'SEEK_CUR', 'SEEK_END', 'SEEK_SET', 'TMP_MAX', 'UserDict', 'W_OK', '
X_OK', '_Environ', '__all__', '__builtins__', '__doc__', '__file__', '__name__',
'__package__', '_copy_reg', '_execvpe', '_exists', '_exit', '_get_exports_list'
, '_make_stat_result', '_make_statvfs_result', '_pickle_stat_result', '_pickle_s
tatvfs_result', 'abort', 'access', 'altsep', 'chdir', 'chmod', 'close', 'closerange',
'curdir', 'defpath', 'devnull', 'dup', 'dup2', 'environ', 'errno', 'error'
, 'execl', 'execle', 'execlp', 'execlpe', 'execv', 'execve', 'execvp', 'execvpe'
, 'extsep', 'fdopen', 'fstat', 'fsync', 'getcwd', 'getcwdu', 'getenv', 'getpid',
'isatty', 'linesep', 'listdir', 'lseek', 'lstat', 'makedirs', 'mkdir', 'name',
'open', 'pardir', 'path', 'pathsep', 'pipe', 'popen', 'popen2', 'popen3', 'popen
4', 'putenv', 'read', 'remove', 'removedirs', 'rename', 'renames', 'rmdir', 'sep
', 'spawnl', 'spawnle', 'spawnv', 'spawnve', 'startfile', 'stat', 'stat_float_ti
mes', 'stat_result', 'statvfs_result', 'strerror', 'sys', 'system', 'tempnam', '
times', 'tmpfile', 'tmpnam', 'umask', 'unlink', 'unsetenv', 'urandom', 'utime',
'waitpid', 'walk', 'write'

ywlscpl

回复  ywlscpl


    苍狗兄，是前面的NF+=0，我刚才也被误导了
yinyuemi 发表于 2011-06-01 14:31

明白了，NF+=0导致$0重排，默认OFS生效，故字段之间多了默认的OFS

设置新的OFS可以解决多了个空格的问题

1. ywlscpl@ubuntu:~$ cat file
   
2. 'F_
   
3. OK', 'O_APPEND'
   
4. ywlscpl@ubuntu:~$ awk -vRS="'|," -v OFS= 'NF+=0{a[$0]}END{for(i in a) print i}'  file
   
5. F_OK
   
6. O_APPEND

复制代码

walker1122

awk -v RS=, -F "'" '$2 {++a[$2];b[NR]=$2}END{for (i in a) print i,a[i]}'

huaqi2008

这道题目源于我在用python的时候，想看一下os下的库函数，因为也正在学awk，所以就想用awk统计一下函数的个数，现在问题已经完美解决了，感谢各位的热情回复。

yinyuemi

回复 19# ywlscpl


    苍狗兄，是前面的NF+=0，我刚才也被误导了

南极雨

回复 1# huaqi2008

1.    [root@~]# awk -F"['|,| ]" '{for(i=1;i<=NF;i++) phrase[$i]++} END {for(j in phrase) print j":"phrase[j]}' file

复制代码

我统计的每个单词好像就一个阿

ywlscpl

发现awk数组如果下标中有\n，会被转成空格，有趣的现象

1. [root@Mylinux tmp]# cat file
   
2. 'F_
   
3. OK', 'O_APPEND'
   
4. [root@Mylinux tmp]# awk -vRS="'|," 'NF+=0{a[$0]}END{for(i in a) print i}'  file
   
5. 
   
6. O_APPEND
   
7. F_ OK

复制代码

yinyuemi

回复 16# ywlscpl


    恩，的确是，改下：

1. awk -vRS="'|," 'NF+=0{a[$0]}END{for(i in a) ++sum;print sum}'  file

复制代码

ziyunfei

不会重复吧.在python里直接
len(dir(os)) 就行吧

ywlscpl

10楼的未考虑单词分行的情况

1. ywlscpl@ubuntu:~$ cat file
   
2. 'F_
   
3. OK', 'O_APPEND'
   
4. ywlscpl@ubuntu:~$ awk -vRS="'|," 'NF+=0{a[$1]}END{for(i in a) print i;}'  file   
   
5. F_
   
6. O_APPEND

复制代码