免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: zhanyoun
打印 上一主题 下一主题

800MB/s的数据量,请大家帮忙看看 [复制链接]

论坛徽章:
0
11 [报告]
发表于 2009-08-04 10:46 |只看该作者
原帖由 liaoboda 于 2009-8-3 17:29 发表
肯定不行的4540最大理论dd并行只能到500.万兆基本只能到600-700.建议你用7410.



4540最大理论dd并行只能到500,能不能详细解释一下?

论坛徽章:
0
12 [报告]
发表于 2009-08-04 10:49 |只看该作者
各位有什么合适的方案,稍微指点一下啊

论坛徽章:
0
13 [报告]
发表于 2009-08-04 11:16 |只看该作者
X4500系列存储服务器使用的软RAID技术,不知道实际的吞吐带宽能不能到800MB/s,理论上是可以的。
一般的NAS参数也高不到哪里去,而且价格也不便宜。

以前接触过一点视频监控的项目,用的比较多的是分布式架构,用若干小规模的NAS或者iSCSI设备,分别接受一部分采集数据,然后再在后台用管理软件做集中汇总。造价会比较低,而且性能要求也不会特别高。

论坛徽章:
0
14 [报告]
发表于 2009-08-04 12:00 |只看该作者
X4540号称:
Highest throughput rates (2.0GB/s from disks to network, 3.0GB/s to memory)

我也有点分开搞的想法,比如来两台X4540,或若干台x4500,就是管理起来稍微麻烦一点,因为还涉及到后期的集群连接处理。

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
15 [报告]
发表于 2009-08-04 13:46 |只看该作者
你这个数据采集,最大数据量能达到多少个TB?
貌似采集的时候,你那台SUN服务器也不会干别的,应该是等采集完成之后再做其它处理,是这样吗?如果是的话,考虑下多台服务器采集数据吧,这个应用实时性比较高,宁可麻烦点也要稳妥。

论坛徽章:
0
16 [报告]
发表于 2009-08-04 15:18 |只看该作者
原帖由 bbjmmj 于 2009-8-4 13:46 发表
你这个数据采集,最大数据量能达到多少个TB?
貌似采集的时候,你那台SUN服务器也不会干别的,应该是等采集完成之后再做其它处理,是这样吗?如果是的话,考虑下多台服务器采集数据吧,这个应用实时性比较高, ...


正式如此,采集的时候SUN服务器除了存文件之外什么都不干,等采集完之后有专门的集群来处理这些文件。
这个运用要求很高的实时性,持续性!

最大需要约100T,大约两台48T X4540就能满足了(或X4540外挂J4500)。

[ 本帖最后由 zhanyoun 于 2009-8-4 15:21 编辑 ]

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
17 [报告]
发表于 2009-08-04 21:49 |只看该作者
你们单位能鼓捣得起这么大的数据,应该是不差钱的。
去电脑市场组装一台PC,双千兆网卡,半人高的那种特大号机箱,8块家用SATA II硬盘,加块好点的8口SATA II RAID卡,大功率电源,多加几个风扇,整套系统大约一万块,拿这台机器测试一下,如果能带15台机器,用SUN就靠谱了。

论坛徽章:
0
18 [报告]
发表于 2009-08-05 11:33 |只看该作者
bb说的完全不靠谱

论坛徽章:
0
19 [报告]
发表于 2009-08-05 11:39 |只看该作者
推荐楼主不要走samba,性能太差,是因为协议本身的限制

走NFS或者CIFS

论坛徽章:
0
20 [报告]
发表于 2009-08-05 13:21 |只看该作者
学习中
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP