免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 数据库技术 › MySQL › 【讨论中】水平分区对order by rand()效率低下有改善吗 ...
12下一页
最近访问板块 发新帖
查看: 2946 | 回复: 10
打印 上一主题 下一主题

【讨论中】水平分区对order by rand()效率低下有改善吗？ [复制链接]

bun

论坛徽章:
7
寅虎 日期:2014-08-15 12:54:11狮子座 日期:2014-10-28 23:42:142015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:48:00IT运维版块每日发帖之星 日期:2015-08-04 06:20:00IT运维版块每日发帖之星 日期:2015-08-06 06:20:00IT运维版块每日发帖之星 日期:2015-10-10 06:20:00
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2013-04-09 17:27 |只看该作者 |倒序浏览
提示: 作者被禁止或删除 内容自动屏蔽
cenalulu

论坛徽章:
9
每日论坛发贴之星 日期:2016-01-04 06:20:00数据库技术版块每日发帖之星 日期:2016-01-04 06:20:00每日论坛发贴之星 日期:2016-01-04 06:20:00数据库技术版块每日发帖之星 日期:2016-01-04 06:20:00IT运维版块每日发帖之星 日期:2016-01-04 06:20:00IT运维版块每日发帖之星 日期:2016-01-04 06:20:00综合交流区版块每日发帖之星 日期:2016-01-04 06:20:00综合交流区版块每日发帖之星 日期:2016-01-04 06:20:00数据库技术版块每周发帖之星 日期:2016-03-07 16:30:25
2楼 [报告]
发表于 2013-04-09 18:06 |只看该作者
这样的效率很差，一般不这么做，改写成 where primary_id > rand( max_primary_id) limit 10;
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
bun

论坛徽章:
7
寅虎 日期:2014-08-15 12:54:11狮子座 日期:2014-10-28 23:42:142015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:48:00IT运维版块每日发帖之星 日期:2015-08-04 06:20:00IT运维版块每日发帖之星 日期:2015-08-06 06:20:00IT运维版块每日发帖之星 日期:2015-10-10 06:20:00
3楼 [报告]
发表于 2013-04-09 18:24 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
rucypli

论坛徽章:
0
4楼 [报告]
发表于 2013-04-09 18:57 |只看该作者
你取随机id 取10次  也比你rand效率高很多
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
G8bao7

论坛徽章:
0
5楼 [报告]
发表于 2013-04-10 23:11 |只看该作者
order by rand()的效率很差，最好还是采用cenalulu的方法吧
可以参考下：http://dinglin.iteye.com/blog/1507941
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
Coolriver

论坛徽章:
0
6楼 [报告]
发表于 2013-04-11 11:52 |只看该作者
MySQL对于大SQL处理不是很好，在大SQL执行时间超过1秒时可以拆分成多次或是换种方法多次取出来。从而达到总体时间在ms级别完成。 cenalulu 的方法不错。可以试一下。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
bun

论坛徽章:
7
寅虎 日期:2014-08-15 12:54:11狮子座 日期:2014-10-28 23:42:142015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:48:00IT运维版块每日发帖之星 日期:2015-08-04 06:20:00IT运维版块每日发帖之星 日期:2015-08-06 06:20:00IT运维版块每日发帖之星 日期:2015-10-10 06:20:00
7楼 [报告]
发表于 2013-04-11 16:50 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
方兆国

论坛徽章:
19
CU大牛徽章 日期:2013-03-13 15:32:35CU大牛徽章 日期:2013-09-18 15:15:15CU大牛徽章 日期:2013-05-20 10:46:44CU大牛徽章 日期:2013-05-20 10:46:38CU大牛徽章 日期:2013-05-20 10:46:31CU大牛徽章 日期:2013-05-20 10:46:25CU大牛徽章 日期:2013-05-20 10:46:18CU大牛徽章 日期:2013-04-17 11:19:51CU大牛徽章 日期:2013-04-17 11:19:42CU大牛徽章 日期:2013-04-17 11:19:37CU大牛徽章 日期:2013-04-17 11:19:32CU大牛徽章 日期:2013-04-17 11:19:28
8楼 [报告]
发表于 2013-04-11 22:24 |只看该作者
bun 发表于 2013-04-11 16:50
现在发现， 没用 ORDER BY RAND, 仅仅 NOT IN 都导致查询很慢。


我曾在书上看到说尽量不要用NOT开头的条件
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
bun

论坛徽章:
7
寅虎 日期:2014-08-15 12:54:11狮子座 日期:2014-10-28 23:42:142015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:48:00IT运维版块每日发帖之星 日期:2015-08-04 06:20:00IT运维版块每日发帖之星 日期:2015-08-06 06:20:00IT运维版块每日发帖之星 日期:2015-10-10 06:20:00
9楼 [报告]
发表于 2013-04-15 16:49 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
cenalulu

论坛徽章:
9
每日论坛发贴之星 日期:2016-01-04 06:20:00数据库技术版块每日发帖之星 日期:2016-01-04 06:20:00每日论坛发贴之星 日期:2016-01-04 06:20:00数据库技术版块每日发帖之星 日期:2016-01-04 06:20:00IT运维版块每日发帖之星 日期:2016-01-04 06:20:00IT运维版块每日发帖之星 日期:2016-01-04 06:20:00综合交流区版块每日发帖之星 日期:2016-01-04 06:20:00综合交流区版块每日发帖之星 日期:2016-01-04 06:20:00数据库技术版块每周发帖之星 日期:2016-03-07 16:30:25
10楼 [报告]
发表于 2013-04-15 20:28 |只看该作者
回复 9# bun


    取一个随机的主键ID，然后取N行。当然也可以取随机的N个ID，各取一行。
好处是能走主键索引，且没有排序的问题
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
12下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP