免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 4061 | 回复: 9
打印 上一主题 下一主题

[数值计算] 怎么统计用shell统计文档中英文单词和中文字符数目? [复制链接]

论坛徽章:
1
亥猪
日期:2013-10-30 23:29:55
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-03-24 13:43 |只看该作者 |倒序浏览
rt,文档中有英文单词也有中文字符,
wc的几个选项好像都不能用,-c统计字节数,-m会统计字符,但是会把标点符号也统计进去(还貌似会统计回车符,这个我不知道怎么过滤掉),-w是统计连续单词的数目,
不知道怎样才能满足我的需求,请各位明示~

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
2 [报告]
发表于 2013-03-24 14:58 |只看该作者
给段文本先

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
3 [报告]
发表于 2013-03-24 15:14 |只看该作者
给个建议:
先用sed把非字母的全删了再统计。中文同理。

论坛徽章:
1
亥猪
日期:2013-10-30 23:29:55
4 [报告]
发表于 2013-03-25 09:13 |只看该作者
回复 3# yestreenstars


    用sed把非文字删除了,然后直接用字符串计算的长度

然后[attach]hello[/attach]这样的标签不知道怎么删除hello

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
5 [报告]
发表于 2013-03-25 09:44 |只看该作者
  1. sed 's/\][^[]*/]/'
复制代码

论坛徽章:
0
6 [报告]
发表于 2013-03-25 09:48 |只看该作者
统计英文单词,用perl的散列,python的字典结构比较好吧。

论坛徽章:
1
亥猪
日期:2013-10-30 23:29:55
7 [报告]
发表于 2013-03-25 12:22 |只看该作者
回复 6# jack1007


    哎
可以被要求shell

论坛徽章:
1
亥猪
日期:2013-10-30 23:29:55
8 [报告]
发表于 2013-03-25 12:30 |只看该作者
本帖最后由 suanmeilizhi 于 2013-03-25 12:32 编辑

回复 5# yestreenstars


    没说完整,对于[hello]world[!],这样的串,中间的world不能删除~~~要保留
[attach]hello[/attach]这样的串,要连同中间的hello一起删除~~

论坛徽章:
32
处女座
日期:2013-11-20 23:41:20双子座
日期:2014-06-11 17:20:43戌狗
日期:2014-06-16 11:05:00处女座
日期:2014-07-22 17:30:47狮子座
日期:2014-07-28 15:38:17金牛座
日期:2014-08-05 16:34:01亥猪
日期:2014-08-18 13:34:25白羊座
日期:2014-09-02 15:03:55金牛座
日期:2014-11-10 10:23:58处女座
日期:2014-12-02 09:17:52程序设计版块每日发帖之星
日期:2015-06-16 22:20:002015亚冠之塔什干火车头
日期:2015-06-20 23:28:22
9 [报告]
发表于 2013-03-25 13:17 |只看该作者
本帖最后由 yestreenstars 于 2013-03-25 13:23 编辑
  1. sed -r 's/\[([^]]*)\][^[]*\[\/\1\]//g;s/\[[^]]*\]//g'
复制代码

论坛徽章:
1
亥猪
日期:2013-10-30 23:29:55
10 [报告]
发表于 2013-03-25 19:47 |只看该作者
回复 9# yestreenstars


    原来还有这种用法,多谢多谢
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP