【讨论中】遇到个大数据表的问题 1个月的数据在2G左右

chinafenghao

其实看楼主的描述，这个应该是他的一个测试，不是业务环境。应该最大的问题是硬件。

shang2010

chinafenghao 发表于 2012-09-19 12:35
其实看楼主的描述，这个应该是他的一个测试，不是业务环境。应该最大的问题是硬件。

对，跑这么大的业务舍不得花钱是心病{:3_188:}

rucypli

select  a from  testtable group by a
这种在八千万的表上能快才怪   建议把结果集记录在小表上  没十分钟执行一次  把执行结果覆盖

badeager

呵呵，现在只是测试，不过，以后会是业务的，机器不是问题，但是性能肯定是个问题，所以决定最后肯定需要分表，可能会涉及到分区。
这样应该可以解决这个问题。

zhangshengdong

具体思路：

(1)先通过索引优化。

(2)如果不成功，可以，分区，清除历史数据，或者把表直接拆分出来。单独做OLAP。

action08

zhangshengdong 发表于 2012-09-24 10:18
具体思路：

(1)先通过索引优化。

OLAP是什么哦?好用不？

badeager

后来发现，硬件问题固然是一个点，但是硬件绝对没有办法完全解决这个问题。
现在采用了分表的方式，很好的解决了两个多月，近三个月的数据查询。
但是下一步还是需要分区，　以保证每个区的数据大小需要维持在这个状态即可。