论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2011-08-24 14:41 |只看该作者 |倒序浏览

本帖最后由 liexusong 于 2012-10-16 16:49 编辑

首先我深感遗憾，我又为高墙添砖了。不过在天朝没办法...

安装很简单，只需要make一下就行了。内含一个php的接口文件，可以方便php调用。至于速度嘛，我觉得每秒5-10万应该是没有问题的。

可以用于论坛，微薄等过滤用户的数据。

==================================================================================

为什么需要敏感词过滤服务器？你可能想用正则去过滤，不过细想一下，如果有10万个敏感词，那不是要用正则匹配10万次。

而是用敏感词过滤服务器只需要匹配一次即可，速度非常快，速度只跟你要匹配的原文长度有关。

#安装方法#

1.安装libevent(http://monkey.org/~provos/libevent/)

2.安装libdatrie(http://linux.thai.net/~thep/datrie/datrie.html)

3.make

详细参考：http://code.google.com/p/libra-server/

文库|博客

Moon_Bird

丰衣足食

论坛徽章:: 0

2楼 [报告]

发表于 2011-08-24 14:47 |只看该作者

膜拜，有空的时候好好学习下 {:3_193:}

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

wwxbei

丰衣足食

论坛徽章:: 0

3楼 [报告]

发表于 2011-08-24 15:44 |只看该作者

而是用敏感词过滤服务器只需要匹配一次即可，速度非常快，速度只跟你要匹配的原文长度有关。
liexusong 发表于 2011-08-24 14:41

是怎么做到的呢？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

peidright

富足长乐

论坛徽章:: 0

4楼 [报告]

发表于 2011-08-24 15:47 |只看该作者

, 代码写得不错,比我的整洁多了.

能否结绍下具体怎么用? ,不太了解实際的需求, 是不是每次提交一个文章
,由php 送往服务器,search?

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

liexusong

家境小康

论坛徽章:: 0

5楼 [报告]

发表于 2011-08-24 15:49 |只看该作者

本帖最后由 liexusong 于 2011-08-24 15:51 编辑

原理是是用双数组字典树，时间复杂度为O(n)，n为文章的长度。与字典的大小无关。

使用也很简单，只有4个命令：
+--------------------------------------------------------+
| VAILD       过滤字符串是否存在敏感词
| STORE       把敏感词存入敏感词字典
| DELETE       从字典中删除一个敏感词
| AUTH       验证用户
+--------------------------------------------------------+