免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › 如何统计出现的不重复单词的
12下一页
最近访问板块 发新帖
查看: 5245 | 回复: 17
打印 上一主题 下一主题

如何统计出现的不重复单词的 [复制链接]

Jenny.Palmy

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2008-12-09 15:10 |只看该作者 |倒序浏览
例如有一个数据集:

A B C
B D G T
J E O W R

其中出现的不重复单词为A B C D E J O R T W,
请问用什么命令可以统计出上面的结果
谢谢
blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
2楼 [报告]
发表于 2008-12-09 15:18 |只看该作者

回复 #1 Jenny.Palmy 的帖子

不重复单词？ B不重复吗？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
welcome008

论坛徽章:
0
3楼 [报告]
发表于 2008-12-09 15:18 |只看该作者
tr " " "\n" <filename|sort -u|tr "\n" " "
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
ly5066113

论坛徽章:
23
15-16赛季CBA联赛之吉林 日期:2017-12-21 16:39:27白羊座 日期:2014-10-27 11:14:37申猴 日期:2014-10-23 08:36:23金牛座 日期:2014-09-30 08:26:49午马 日期:2014-09-29 09:40:16射手座 日期:2014-11-25 08:56:112015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东 日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东 日期:2016-01-19 13:33:372015亚冠之山东鲁能 日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者 日期:2015-09-21 08:27:57
4楼 [报告]
发表于 2008-12-09 15:20 |只看该作者
awk 'BEGIN{RS="[ \n]+";ORS=" "}!a[$0]++' urfile
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
smallstar001

论坛徽章:
0
5楼 [报告]
发表于 2008-12-09 15:26 |只看该作者
原帖由 welcome008 于 2008-12-9 15:18 发表
tr " " "\n"  

tr " " "\n" <filename|sort|uniq -u|tr "\n" " "
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
smallstar001

论坛徽章:
0
6楼 [报告]
发表于 2008-12-09 15:27 |只看该作者
原帖由 ly5066113 于 2008-12-9 15:20 发表
awk 'BEGIN{RS="[ \n]+";ORS=" "}!a[$0]++' urfile


有点问题吧
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
ly5066113

论坛徽章:
23
15-16赛季CBA联赛之吉林 日期:2017-12-21 16:39:27白羊座 日期:2014-10-27 11:14:37申猴 日期:2014-10-23 08:36:23金牛座 日期:2014-09-30 08:26:49午马 日期:2014-09-29 09:40:16射手座 日期:2014-11-25 08:56:112015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:49:0315-16赛季CBA联赛之山东 日期:2017-12-21 16:39:1915-16赛季CBA联赛之广东 日期:2016-01-19 13:33:372015亚冠之山东鲁能 日期:2015-10-13 09:39:062015亚冠之西悉尼流浪者 日期:2015-09-21 08:27:57
7楼 [报告]
发表于 2008-12-09 15:31 |只看该作者

回复 #6 smallstar001 的帖子

不能只看标题。

我猜测楼主就是要!a[$0]++或sort -u这样的效果。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
welcome008

论坛徽章:
0
8楼 [报告]
发表于 2008-12-09 15:42 |只看该作者
原帖由 smallstar001 于 2008-12-9 15:26 发表

tr " " "\n"  



呵呵，为啥呢？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
Jenny.Palmy

论坛徽章:
0
9楼 [报告]
发表于 2008-12-09 15:44 |只看该作者
原帖由 welcome008 于 2008-12-9 15:18 发表
tr " " "\n"  


不好意思,标题没描述清楚. 上面的命令可以解决我的问题了, 谢谢
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
smallstar001

论坛徽章:
0
10楼 [报告]
发表于 2008-12-09 15:45 |只看该作者
原帖由 welcome008 于 2008-12-9 15:42 发表



呵呵，为啥呢？


呵呵  不知道是不是只要不重复的单词
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP