免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: zhanyoun

800MB/s的数据量,请大家帮忙看看 [复制链接]

storm the front 该用户已被删除
发表于 2009-08-06 12:15 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2009-08-06 12:47 |显示全部楼层
不好意思,43楼给的数据弄错了,应该把那组数据乘以2才对,也就是48块盘软RAID5,每秒800兆字节写入,理论上至少需要8条4G光纤通道。
两台SUN也还是不够用,估计得用四台,这个成本实在太高了。
storm the front 该用户已被删除
发表于 2009-08-06 13:05 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
0
发表于 2009-08-06 13:22 |显示全部楼层
原帖由 storm the front 于 2009-8-6 13:05 发表
说真的,软raid不好使,除了占用额外的主机资源外,一旦出问题了,做重建也麻烦

一样的,不过我强烈建议系统盘不要和存储不要用同一个sata驱动器 如果系统挂了加载驱动极其麻烦

论坛徽章:
0
发表于 2009-08-06 13:52 |显示全部楼层
小弟级的观点,
80客户端,每客户端每秒10M压力不是很大啊!
如果软件上做可调配,客户端做个缓冲每次2客户端写入3秒写一次 存储端整几个千M的机器做HA就可以了
在某个小公司的安防系统里,30多个点的摄像头采集的数据,缓冲后存储部分用的是普通PC改的工控系统,居然用得也很好

论坛徽章:
0
发表于 2009-08-06 14:36 |显示全部楼层
原帖由 unicom_2 于 2009-8-6 13:52 发表
小弟级的观点,
80客户端,每客户端每秒10M压力不是很大啊!
如果软件上做可调配,客户端做个缓冲每次2客户端写入3秒写一次 存储端整几个千M的机器做HA就可以了
在某个小公司的安防系统里,30多个点的摄像头采集的 ...

支持

论坛徽章:
0
发表于 2009-08-06 15:11 |显示全部楼层
原帖由 unicom_2 于 2009-8-6 13:52 发表
小弟级的观点,
80客户端,每客户端每秒10M压力不是很大啊!
如果软件上做可调配,客户端做个缓冲每次2客户端写入3秒写一次 存储端整几个千M的机器做HA就可以了
在某个小公司的安防系统里,30多个点的摄像头采集的 ...


并发800M的话,也不轻松了.

不了解设备参数,如果网络质量和带宽没问题的话. 系统层面的处理能力也不得不考虑.

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2009-08-06 21:01 |显示全部楼层
要是RAID5读800兆的话,理论上至少需要两条4G光纤通道;要是写入的话,理论上至少需要八条4G光纤通道才够用。

论坛徽章:
0
发表于 2009-08-06 21:07 |显示全部楼层
原帖由 unicom_2 于 2009-8-6 13:52 发表
小弟级的观点,
80客户端,每客户端每秒10M压力不是很大啊!
如果软件上做可调配,客户端做个缓冲每次2客户端写入3秒写一次 存储端整几个千M的机器做HA就可以了
在某个小公司的安防系统里,30多个点的摄像头采集的 ...


安防录像高清晰的视频码流才到512Kbps,跟10MB有天壤之别,完全不具备可比性。
800MB/s的压力是一个很疯狂的数字了。

论坛徽章:
0
发表于 2009-08-06 22:34 |显示全部楼层
看到这么多人说Samba达不到800MB/s,不得不说。一般的方法,确实很难让一台服务器Samba支持800MB/s,而且Samba不能很好地支持Scale Out,用多台服务器+群集文件系统的话也不容易提升性能(非线性)。Samba(IBM特别修改、增加了CTDB)+GPFS群集文件系统,这样就是所谓的Scale Out File System(SoFS),是可以使Samba支持800MB/s的。再细说就长篇了,就此打住,有兴趣的可以研究一下SoFS的指标,I/O node和Management都是指刀片的数量。

Large
15000 Active Conc users,
4000MB/s streaming
13 I/O Nodes
1 Management
4 DS4800 (528TB)

Medium
6000 Active Conc users,
1500MB/s streaming
6 I/O Nodes
1 Management
2 DS4700 (132TB)

Entry
3000 Active Conc users,
700MB/s streaming
3 I/O Nodes
1 Management
1 DS3400 (27TB)

[ 本帖最后由 haole 于 2009-8-6 22:42 编辑 ]
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:help@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP