【讨论中】每秒钟写入10万条记录，能行不？

cdtits

回复 10# horizonhyg


    应该要采用多台服务器，貌似单台撑不住的。
    请问：多台设备最好如何处理？包括存储？

horizonhyg

回复 11# cdtits


    Mysql优化的好，一般情况1w-2w的qps也就是峰值了，跟导入速度差不多，我们的应用有qps达到2w的插入，大概32G内存，1.5w转的企业磁盘，没有fushionIO,这么算下来至少得10台服务器，做5主5从，或者更多些。这你们得实地压测。架构不要太复杂，就是主从，程序水平切分。

cdtits

回复 12# horizonhyg


    请教一下：水平切分后，查询统计如何合并？应用程序来将每个数据库的结果集进行合并，还是将结果集写入另外数据库来完成查询统计合并？

yifangyou

建议用内存数据库,先让写进程把数据写到内存中，然后另外一个进程每隔一分钟把内存中的数据写到硬盘中

horizonhyg

回复 13# cdtits


    是的，阿里系的TDDL，Corba都已经开源，可以参考，不过这个是个很大规模的改造啊。。。

longxibendi

redis