免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 6963 | 回复: 2
打印 上一主题 下一主题

如何对文件内容建立索引,以提高查询效率?? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2006-02-16 17:55 |只看该作者 |倒序浏览
现在系统的数据是一条一条地存放到文件中,不是存到数据库中的.
     形如   [rownum] /t [ip] /t [username] /t [groupname] /t [url]

      现在需要对这些数据进行检索,  问题是数据量很大,可以达一千万条. 以前用数据库查询的时侯可以对某些字段建立索引, 请问现在文件形式怎么对内容建立索引呢?? 因为像 ip , username, groupname 这些是精确匹配的,有索引的话,应该会快很多.
     不过我不知道怎么做, 网上也没找到这方面的资料, 谁可以指点一下吗?? 不胜感激.

论坛徽章:
0
2 [报告]
发表于 2006-02-16 17:59 |只看该作者
awk?

论坛徽章:
0
3 [报告]
发表于 2006-02-16 18:12 |只看该作者
awk也是需要对所有文件行检索一遍的吧
我的数据是存放到多个文件中的, 加起来一千万条数据大概有2g , 如果每次要检索一次的话消耗太大了.
所以才想建立索引的
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP