免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Linux环境编程 › 互联网文本处理挑战巨大中文分词系统设计如何面对？

1 2 3 456 / 6 页下一页

最近访问板块

发新帖

楼主: crazyhadoop

互联网文本处理挑战巨大中文分词系统设计如何面对？ [复制链接]

论坛徽章:: 0

发表于 2012-05-31 09:15 |显示全部楼层

这个只是我的想法，很多词语都有简写，或者每个词提取关键字，与注意相连，之后新词在无法识别的时候，拆分成更小的，从已知的字——》意中推断。
不过貌似处理量更大。
而且容易歧义和误译。

回复 40# huihui_2012

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 49

15-16赛季CBA联赛之福建
日期:2016-06-22 16:22:00

2015年亚洲杯之中国
日期:2015-01-23 16:25:12

丑牛
日期:2015-01-20 09:39:23

未羊
日期:2015-01-14 23:55:57

巳蛇
日期:2015-01-06 18:21:36

双鱼座
日期:2015-01-02 22:04:33

午马
日期:2014-11-25 09:58:35

辰龙
日期:2014-11-18 10:40:07

寅虎
日期:2014-11-13 22:47:15

申猴
日期:2014-10-22 15:29:50

摩羯座
日期:2014-08-27 10:49:43

辰龙
日期:2014-08-21 10:47:58

发表于 2012-05-31 10:05 |显示全部楼层

ttblmtang123 发表于 2012-05-30 17:20
还是语法呀

要分清主语，动语

早知道，弄点龙书过来坐礼品哈，嘿嘿

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

天蝎座
日期:2013-12-06 18:23:58

发表于 2012-05-31 13:07 |显示全部楼层

回复 42# send_linux

以后编译器版专门开个活动吧，哈哈

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

天蝎座
日期:2013-12-06 18:23:58

发表于 2012-05-31 13:09 |显示全部楼层

回复 35# zhanggggfd

做输入法就是一个很好的入口，把用户的数据存了下来，收集一批数据，不过要把握好度，免得侵袭隐私

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 49

15-16赛季CBA联赛之福建
日期:2016-06-22 16:22:00

2015年亚洲杯之中国
日期:2015-01-23 16:25:12

丑牛
日期:2015-01-20 09:39:23

未羊
日期:2015-01-14 23:55:57

巳蛇
日期:2015-01-06 18:21:36

双鱼座
日期:2015-01-02 22:04:33

午马
日期:2014-11-25 09:58:35

辰龙
日期:2014-11-18 10:40:07

寅虎
日期:2014-11-13 22:47:15

申猴
日期:2014-10-22 15:29:50

摩羯座
日期:2014-08-27 10:49:43

辰龙
日期:2014-08-21 10:47:58

发表于 2012-05-31 13:28 |显示全部楼层

crazyhadoop 发表于 2012-05-31 13:07
回复 42# send_linux

兄弟来CU之前，CU的编译器板块做过龙书的讨论互动啦，嘿嘿
链接如下：http://bbs.chinaunix.net/thread-2014689-1-1.html

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

天蝎座
日期:2013-12-06 18:23:58

发表于 2012-05-31 13:33 |显示全部楼层

回复 45# send_linux

嘿嘿，龙书都第三版了，啥时候要是有LLVM的讨论可以再来一批这样的书啊，哈哈

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

发表于 2012-05-31 15:42 |显示全部楼层

crazyhadoop 发表于 2012-05-29 22:42
回复 21# qdwmail

这个句子只有人能懂

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 154

2022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57

20周年集字徽章-年
日期:2022-10-26 16:44:20

15-16赛季CBA联赛之深圳
日期:2022-11-02 14:02:45

15-16赛季CBA联赛之八一
日期:2022-11-28 12:07:48

20周年集字徽章-20
日期:2023-07-19 08:49:45

15-16赛季CBA联赛之八一
日期:2023-11-04 19:23:51

15-16赛季CBA联赛之广夏
日期:2023-12-13 18:09:34

发表于 2012-06-01 16:25 |显示全部楼层

1、精彩讨论奖，选取1名优秀回复者将获得价值100元的《数据挖掘:实用机器学习工具与技术》(英文版.第3版)一书；
2、优秀讨论奖，选取3名优秀回复者将获得价值50元的《数据挖掘:实用机器学习工具与技术》(中文版.第2版)一书；

发言精彩的奖励

英文版

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

天蝎座
日期:2013-12-06 18:23:58

发表于 2012-06-03 11:08 |显示全部楼层

回复 48# shang2010

新版的哦~ 内容甚好

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 2

午马
日期:2015-01-27 11:22:39

2015年辞旧岁徽章
日期:2015-03-03 16:54:15

发表于 2012-06-04 22:24 |显示全部楼层

回复 44# crazyhadoop

这个不存在"度"的问题，在用户未知情况下进行数据收集和监控，就是侵权的～

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

1 2 3 456 / 6 页下一页

发新帖

Chinaunix › 论坛 › 程序设计 › Linux环境编程 › 互联网文本处理挑战巨大中文分词系统设计如何面对？

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP