mysql 单表，过4g，1千w多行数据，问题。

nbxmedia

:wink: 快一亿了,算大不,没有做什么数据分区

chuhongze

原帖由 nbxmedia 于 2008-6-6 11:05 发表
:wink: 快一亿了,算大不,没有做什么数据分区

那得分什么样的性能要求和用什么样的硬件.

netchecking

我从事过6年的数据库高负载解决方案，处理过很多的海量数据问题。我的经验是：
1。优化数据存储的算法，保证io的读写最小，这一点最容易被人忽视，而这一点确实整个问题的关键。

2。确保可读数据在磁盘上连续存储，使得磁盘指针不会“空转”。

详情请访问 中国权威的系统优化站点:http://www.distributed-cluster.com

ballbb

问一个比较傻的问题，如果分表之后还在一个硬盘分区上，那分表还有什么作用吗？谢谢

yueliangdao0608

Try to think of difference between big file and small file.

ballbb

原帖由 yueliangdao0608 于 2008-7-10 10:04 发表
Try to think of difference between big file and small file.

Good point, think that the DB server will do more of cache, pre-fetch work then just normal lseek operation. Is the effect obviously for partition table if they are still located on the same harddisk? doubt it.

chancey

七八个600多万数据的表 白天的QPS保持在1000以上 一台MYSQL跑起来跟玩一样！
配置也一般 Xeon 1.6 *2 2-core , 4G内存

[ 本帖最后由 chancey 于 2008-7-10 18:32 编辑 ]

ballbb

额的神呢，怎么做到的啊？

yueliangdao0608

原帖由 chancey 于 2008-7-10 18:30 发表
七八个600多万数据的表 白天的QPS保持在1000以上 一台MYSQL跑起来跟玩一样！
配置也一般 Xeon 1.6 *2 2-core , 4G内存

This is very normal after you have chosen the proper engine and the proper index.

odo_cd

我刚完成dz6.1
方法是手工生成posts表
使用的时候分指定表或者随机表的方式

经测试，使用随机表的压力减少很多