免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2258 | 回复: 8
打印 上一主题 下一主题

求500G数据读方案 [复制链接]

论坛徽章:
9
CU大牛徽章
日期:2013-03-13 15:29:07CU大牛徽章
日期:2013-03-13 15:29:49CU大牛徽章
日期:2013-03-13 15:30:19CU大牛徽章
日期:2013-03-14 14:16:46CU大牛徽章
日期:2013-03-14 14:16:49CU大牛徽章
日期:2013-03-14 14:16:51CU大牛徽章
日期:2013-03-14 14:16:52处女座
日期:2014-06-11 10:34:40技术图书徽章
日期:2014-07-11 16:32:15
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2010-05-19 16:38 |只看该作者 |倒序浏览
本帖最后由 george_young 于 2010-05-19 16:47 编辑

500G数据,以16k小数据居多,局域网内部使用。
现在使用的4块SAS的硬盘做的硬RAID10无法满足要求,希望升级后IO能达到1000MBsec以上

现有如下设想,不知道是否能实现。

1.使用500g 以上的RAM做 ramdisk,开机后RAID1的数据CP到RAMDISK中,在ramdisk中运行,并与raid1定时同步。
优点:随便能得到1000MBsec
缺点: 同步到RAID1时候,阵列成为瓶颈
疑问:   有支持500G以上的性价比好的服务器?是否支持RHEL64的OS?


2.继续添加硬盘做RAID10,按每个传输100MBsec算,一直加到超过1000MBsec以上--如果RAID卡不成为新的瓶颈的话。
加网卡做负载均衡。


3.采购小容量,大IO的储存方案



那个更简单实现?

论坛徽章:
0
2 [报告]
发表于 2010-05-20 09:37 |只看该作者
500G数据,以16k小数据居多,局域网内部使用。
现在使用的4块SAS的硬盘做的硬RAID10无法满足要求,希望升级 ...
george_young 发表于 2010-05-19 16:38



    你在局域网中使用?IO达到1GB/s???

你的带宽多少?可以支持这么大传输量???

论坛徽章:
0
3 [报告]
发表于 2010-05-20 10:23 |只看该作者
难道LZ已经进入万兆网的时代?

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
4 [报告]
发表于 2010-05-20 12:05 |只看该作者
PCIE固态盘+万兆双网卡绑定。

论坛徽章:
0
5 [报告]
发表于 2010-05-20 14:53 |只看该作者
北京盛世网联EMC 小机 118032034  EMC CLARiiON AC Power Supply for EMC CX300 CX400  Series 118032034-575W电源
078-000-021   EMC PWR SPLY 850W DC SPS P/N:078-000-021电池
109002481   NEW EMC 24 INCH POWER CORD 18/3 C14 TO C13 109002481

马红华 13718259058 QQ:298659136

论坛徽章:
0
6 [报告]
发表于 2010-05-20 15:03 |只看该作者
1000MB/S?单端口SAS2才6Gb(600MB),光纤8Gb(800MB)。10Gb的以太网理论有1000MB

论坛徽章:
9
CU大牛徽章
日期:2013-03-13 15:29:07CU大牛徽章
日期:2013-03-13 15:29:49CU大牛徽章
日期:2013-03-13 15:30:19CU大牛徽章
日期:2013-03-14 14:16:46CU大牛徽章
日期:2013-03-14 14:16:49CU大牛徽章
日期:2013-03-14 14:16:51CU大牛徽章
日期:2013-03-14 14:16:52处女座
日期:2014-06-11 10:34:40技术图书徽章
日期:2014-07-11 16:32:15
7 [报告]
发表于 2010-05-20 22:19 |只看该作者
感谢LS朋友的关注。
本方案在内网

现在方案为:千M网卡*2 做负载均衡。
如果需要,可以升级设备为万兆。


硬盘准备做RAID10,假设如下
每个硬盘传输约为80MB-120M,     要做到1000M,需要26个硬盘,即26/2*80MB
网络传输部分,如果不上万兆的话,就用20个端口-即5片4口千兆网卡,只是不知道
双万M便宜还是20个千M口性价比更高

交换机48口千M


担心部分:RAID卡和SAS会不会成为新的瓶颈?

论坛徽章:
12
CU大牛徽章
日期:2013-09-18 15:20:4815-16赛季CBA联赛之同曦
日期:2016-02-01 20:28:25IT运维版块每日发帖之星
日期:2015-11-10 06:20:00操作系统版块每日发帖之星
日期:2015-10-28 06:20:002015亚冠之塔什干棉农
日期:2015-06-04 11:41:56丑牛
日期:2014-05-10 16:11:33技术图书徽章
日期:2013-09-23 13:25:58CU大牛徽章
日期:2013-09-18 15:21:17CU大牛徽章
日期:2013-09-18 15:21:12CU大牛徽章
日期:2013-09-18 15:21:06CU大牛徽章
日期:2013-09-18 15:20:58数据库技术版块每日发帖之星
日期:2016-02-08 06:20:00
8 [报告]
发表于 2010-05-20 22:46 |只看该作者
如果是随机读16KB小文件的话,机械磁盘大不了这么80MBPS带宽。

论坛徽章:
0
9 [报告]
发表于 2010-05-21 11:23 |只看该作者
感谢LS朋友的关注。
本方案在内网

现在方案为:千M网卡*2 做负载均衡。
如果需要,可以升级设备为万兆 ...
george_young 发表于 2010-05-20 22:19



   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP