800MB/s的数据量，请大家帮忙看看

撒旦的使者

原帖由 bbjmmj 于 2009-8-4 21:49 发表
你们单位能鼓捣得起这么大的数据，应该是不差钱的。
去电脑市场组装一台PC，双千兆网卡，半人高的那种特大号机箱，8块家用SATA II硬盘，加块好点的8口SATA II RAID卡，大功率电源，多加几个风扇，整套系统大约 ...

很靠谱啊，可以是测试一下。
不过pc的主板没有pci-x的槽，pci-e 8x也非常少见，要买的买服务器的主板。
但是两个gb的网卡肯定不够，800m*8=6.4gb的速率，顶不住的，视频会丢帧。

撒旦的使者

最好是将数据流分散，比较安全。

storm the front

原帖由 bbjmmj 于 2009-8-10 14:22 发表


那么多服务器呢，数据不用从一个网卡走，网络结构好好做做，流量就可以分散出去了。
这个应用，至少在数据采集这块是不需要万兆网卡的。

这样分流是可以

但我问你,你说这么多服务器,那盘阵这边怎么办?给每个服务器都划一个卷来存数据吗?

bbjmmj

原帖由 撒旦的使者 于 2009-8-10 19:41 发表

很靠谱啊，可以是测试一下。
不过pc的主板没有pci-x的槽，pci-e 8x也非常少见，要买的买服务器的主板。
但是两个gb的网卡肯定不够，800m*8=6.4gb的速率，顶不住的，视频会丢帧。

台式机上可以用四端口千兆卡，也可以直接用万兆卡，测试的目的就是看看单系统的承载能力，台式机上装万兆卡太败家了

bbjmmj

原帖由 storm the front 于 2009-8-11 10:40 发表


这样分流是可以

但我问你,你说这么多服务器,那盘阵这边怎么办?给每个服务器都划一个卷来存数据吗?

每台服务器负责接收几台PC过来的数据流就可以了，纯分布式系统就可以完成采集。

loveflag

楼主抛出来个好东西 呵呵
100Mbps的网络使用samba协议读写最多在 10MB/s 徘徊，千兆网络也就90MB/s  假设磁盘读写无瓶颈，IO带宽充裕，而且随着客户端数量增加，效果肯定递减，而且samba的复杂的协议也确实不能恭维。。。。

所以使用samba的协议做这个项目不现实，考虑iscsi看看。。  呵呵。

如果楼主选择商业方案不妨听听他们有什么见解。。呵呵，如果楼主愿意使用开源方案，小弟愿意继续关注此贴。。

liaoboda

iscsi速度也不太好.不过那边是windows.

bbjmmj

这个项目只能用SAS盘阵做。

storm the front

你以前不是很推荐SATA盘的嘛

bbjmmj

原帖由 storm the front 于 2009-8-12 13:23 发表
你以前不是很推荐SATA盘的嘛

SAS盘阵，用SATA硬盘。