免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 7057 | 回复: 9
打印 上一主题 下一主题

[全文检索]用PHP调用Lucene包来实现全文检索(原创) [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2006-05-12 20:51 |只看该作者 |倒序浏览
/*转贴请保留以下信息*/
作者:张杰
URL:http://newbdez33.blogspot.com/



由于工作需要,需要使用PHP实现对网站内大量数量进行全文检索,
而且目前最流行的全文检索的搜索引擎库就是Lucene了,
它是Apache Jakarta的一个子项目,并且提供了简单实用的API,
用这些API,就可以对任何基本文本的数据(包括数据库)进行全文检索。


因为PHP本身就支持调用外部Java类,所以先用Java写了一个类,
这个类通过调用Lucene的API,实现了两个方法:

    * public String createIndex(String indexDir_path,String dataDir_path)
    * public String searchword(String ss,String index_path)

其中createIndex是创建索引方法,
传入了两个参数分别是indexDir_path(索引文件的目录),dataDir_path(被索引的文件目录),返回被索引的文件列表字符串,
另一个是searchword,通过传入的关键字参数(ss)对索引进行检索,index_path就是索引文件的目录。返回所有检索到的文件。

这里是源代码,很简单,大家可以参考一下:TxtFileIndexer.java

而PHP程序就调用这两个方法,实现对Lucene的调用,从而达到全文检索的目的。
PHP的调用方法如下:
先创建一个我们写的TxtFileIndexer类的实例,

    $tf = new Java('TestLucene.TxtFileIndexer');

然后就按正常PHP类的调用方法的方式进行调用,首先创建索引:

    $data_path = "F:/test/php_lucene/htdocs/data/manual";  //定义被索引内容的目录
    $index_path = "F:/test/php_lucene/htdocs/data/search";  //定义生成的索引文件存放目录
    $s = $tf->createIndex($index_path,$data_path);  //调用Java类的方法
    print $s;  //打印返回的结果

这次再试试检索:

    $index_path = "F:/test/php_lucene/htdocs/data/search";  //定义生成的索引文件存放目录
    $s = $tf->searchword("here is keyword for search",$index_path);
    print $s;

另外要注意Java类的路径,可以在PHP里设置

    java_require("F:/test/php_lucene/htdocs/lib/");  //这是个例子,我的类和Lucene都放到这个目录下

这样就可以了,是不是很简单。

PHP源代码:test.php


接下来我把环境配置说一下,
首先需要有Java SDK,是必须的,我使用的是1.4.2版的,其它版本应该也没问题。
PHP5,试过PHP4,应该可以。

由于PHP5带的Java扩展没调通,并且以前用过调用Java效率很低,很慢,所以使用了 Php/Java Bridge 这个项目。

1.下载JavaBridge
URL:http://sourceforge.net/projects/php-java-bridge/
目前版本是
php-java-bridge_3.0.8_j2ee.zip

解包后把
JavaBridge\WEB-INF\cgi\java-x86-windows.dll
JavaBridge\WEB-INF\lib\JavaBridge.jar
复制到 c:\php\ext 目录下,并把
java-x86-windows.dll 改名为 php_java.dll


2.修改php.ini(例)
extension=php_java.dll

[Java]
java.class.path = "C:\php\ext\JavaBridge.jar;F:\test\php_lucene\htdocs"
java.java_home = "C:\j2sdk1.4.2_10"
java.library.path = "c:\php\ext;F:\test\php_lucene\htdocs"

3.重启Apache即可。

4.可以找一些文件进行索引
在test.php里可以修改索引文件和数据文件的路径。
TxtFileIndexer.java的37行限制了只索引html后缀的文件,有需要也可以修改。

根据目前的情况(JavaBridge支持Linux和Freebsd),完全可以在
linux或freebsd/apache2/php4/lucene/JavaBridge
环境下运行。



本文章可能会随时更新,另外这里可以访问:
用PHP调用Lucene包来实现全文检索

我的MSN是 z33 <at> 163.com
欢迎技术探讨:)

[ 本帖最后由 z33 于 2009-6-13 17:37 编辑 ]

论坛徽章:
0
2 [报告]
发表于 2006-05-13 10:52 |只看该作者

顶一下

不错。谢谢

论坛徽章:
0
3 [报告]
发表于 2006-05-13 11:24 |只看该作者
请问,Lucene能搜索pdf文件吗

论坛徽章:
0
4 [报告]
发表于 2006-05-13 16:12 |只看该作者
zend framework不是Lucene被包括么?有谁能给个这种例子出来没?

论坛徽章:
0
5 [报告]
发表于 2006-05-14 00:10 |只看该作者
zf不支持php4啊。

论坛徽章:
0
6 [报告]
发表于 2006-05-16 13:02 |只看该作者

回复 1楼 z33 的帖子

为什么没有用php做好的库啊?还要用java的东西,好麻烦.

论坛徽章:
0
7 [报告]
发表于 2006-05-19 10:58 |只看该作者

回复 6楼 higer 的帖子

等着你去开发呢。哈哈

论坛徽章:
0
8 [报告]
发表于 2006-06-11 13:20 |只看该作者
有人按照lz的法子走通的请举手。

论坛徽章:
0
9 [报告]
发表于 2006-06-11 13:29 |只看该作者
请教了lz,需要编译文中的.java文件

ps:我不会java,出现了如图错误,请知道的说下

lucene_error.JPG (117.88 KB, 下载次数: 67)

我的编译错误

我的编译错误

论坛徽章:
0
10 [报告]
发表于 2006-06-24 17:43 |只看该作者
楼上的问题
你可能使用的是 Lucene 2.0.0 版本的
我一开始也遇到了这个问题
看了Lucene 2.0.0的JAVADOC好想没有Field.Text方法
我换成Lucene 1.3.4编译就没有问题了
good luck

zend framwork lucene包php实现的 速度

[ 本帖最后由 ideaxp 于 2006-6-24 18:00 编辑 ]
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP