关于多个服务器集群资源共享的问题

flyaflyaa

我打算把我的网络采集软件FMiner移植到服务器上，为用户提供远程采集的服务。需求是这样的：
1.每个用户独立，不需要互相联系，因此可以为每个用户单独建立数据库。
2.每个用户可能有多个采集任务运行，长时间占用CPU和内存。
3.Web访问量不大，但数据库读写较大，因为在采集时，要频繁写数据。

想用VPS做服务器，方便维护和备份。但当用户、采集任务增加时，一个服务器肯定不够，需要增加，如何合理利用多服务器资源？

开始我的设想是这样的：固定每N个用户用一台服务器，服务器安装各自的数据库，采集的数据存在这些数据库中，一台独立的web服务器根据用户名定位找到各自数据库地址，提供web服务。

但这存在的问题是：可能某些时间一台服务器上N个用户都是空闲的，而另一台服务器任务过重。如何较好地分配任务？

现在的设想是这样的：数据库放在一台服务器A上，给其他服务器合理分配采集任务，所有采集数据都存在A服务器上。但这样会不会造成数据库服务器过载太大？

如果数据库可以无限扩展，第二种方案是最好的。因为没做过集群，对这些完全不了解，请大家给些建议。

q1208c

不知道楼主说的FMiner 是什么东东.

单从楼主的需求来看. 比较合适的解决方案是每个用户一个虚拟机, 独立部署整套系统.
所有的虚拟机放在 VMware ESXi 上. 配置 动态负载调节.
其它的虚拟平台, 我不是太清楚有没有动态调节功能.

flyaflyaa

FMiner是我做的采集软件，http://www.fminer.com/ , 每个用户一个虚拟机，这样不行吧，成本太大。采集任务我可以自己用程序分配到不同的服务器运行，只是数据库方面，所有进程都写一个数据库，可能负载太大，还没有想到好的办法，如果数据库性能可以无限扩展就好了。

其实现在问题可以简化为：有大量进程（在不同服务器上）写同一个数据库，读数据库操作较轻，能否用数据库集群，或什么方法解决这个问题？

q1208c

回复 3# flyaflyaa

每个用户一个虚拟机成本也算大?  

2009_ljd

对这些完全不了解









自多宝平台 ：http://www.mbo3688.com