免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2925 | 回复: 10
打印 上一主题 下一主题

紧急求救高难问题,没有思路 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2007-10-18 18:07 |只看该作者 |倒序浏览
QQ数据库的用户信息表现在有5亿多条记录,现在请给出怎么样设计,使通过QQ号码查询QQ用户信息的速度更快。。用怎么样的算法算出查询大概需要多少的系统开销。。


关键是如何在最快的时间内检索出数据

论坛徽章:
0
2 [报告]
发表于 2007-10-18 18:23 |只看该作者

回复 #1 1980116 的帖子

自己顶一个

数据结构和算法是何等的重要啊

论坛徽章:
0
3 [报告]
发表于 2007-10-18 18:27 |只看该作者
你是要设计数据库还是写C程序来从文本文件中检索?

论坛徽章:
0
4 [报告]
发表于 2007-10-18 20:45 |只看该作者

回复 #3 cugb_cat 的帖子

主要是设计数据库,以支持在最短的时间内检索出数据

论坛徽章:
0
5 [报告]
发表于 2007-10-18 20:54 |只看该作者
显然数据库不是一张表,不然再怎么优化都玩完

论坛徽章:
0
6 [报告]
发表于 2007-10-18 21:40 |只看该作者
原帖由 1980116 于 2007-10-18 18:07 发表
QQ数据库的用户信息表现在有5亿多条记录,现在请给出怎么样设计,使通过QQ号码查询QQ用户信息的速度更快。。用怎么样的算法算出查询大概需要多少的系统开销。。


关键是如何在最快的时间内检索出数据


采用数据仓库
按照QQ的数位和数值,采用平衡二叉数,先查出该号段在哪个查询数据库中,然后发送给该数据库去查。控制每个数据库记录在可接收的范围。

按照你说的,5亿条,假如每个数据库放1百万条用户记录,在不考虑冗余的情况下500台数据库服务器可以满足要求。把整个号码段分成512份,配置512台服务器,应该就很容易实现快速查找了。
1、要确认一个号码的区段,2^9=512,最坏的情况9次就可以匹配。
2、然后到指定的归属数据库中找,现在的大型数据库在1百万条记录中找一条记录的时间不长吧

论坛徽章:
0
7 [报告]
发表于 2007-10-18 22:38 |只看该作者
原帖由 wuqing 于 2007-10-18 21:40 发表


采用数据仓库
按照QQ的数位和数值,采用平衡二叉数,先查出该号段在哪个查询数据库中,然后发送给该数据库去查。控制每个数据库记录在可接收的范围。

按照你说的,5亿条,假如每个数据库放1百万条用户记 ...

这个解决方案不错。

论坛徽章:
0
8 [报告]
发表于 2007-10-18 22:44 |只看该作者

回复 #6 wuqing 的帖子

方案,不错,就是自己没有这么个实际环境,理解的不深刻。

能讲一下oracle中的分区原理吗,是不是能解决这个问题

再次感谢您的作答

论坛徽章:
0
9 [报告]
发表于 2007-10-18 23:32 |只看该作者
原帖由 wuqing 于 2007-10-18 21:40 发表


采用数据仓库
按照QQ的数位和数值,采用平衡二叉数,先查出该号段在哪个查询数据库中,然后发送给该数据库去查。控制每个数据库记录在可接收的范围。

按照你说的,5亿条,假如每个数据库放1百万条用户记 ...


若只是百万条记录的数据库, 大型数据库的查询性能可能比小数据库差许多, 上千万条记录时才显出大型数据库的好处来

论坛徽章:
324
射手座
日期:2013-08-23 12:04:38射手座
日期:2013-08-23 16:18:12未羊
日期:2013-08-30 14:33:15水瓶座
日期:2013-09-02 16:44:31摩羯座
日期:2013-09-25 09:33:52双子座
日期:2013-09-26 12:21:10金牛座
日期:2013-10-14 09:08:49申猴
日期:2013-10-16 13:09:43子鼠
日期:2013-10-17 23:23:19射手座
日期:2013-10-18 13:00:27金牛座
日期:2013-10-18 15:47:57午马
日期:2013-10-18 21:43:38
10 [报告]
发表于 2007-10-19 09:19 |只看该作者
只有这么点需求的话,要啥数据库呀,自己操作文件最快
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP