免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: send_linux
打印 上一主题 下一主题

[闪存] 存储革命进入数据中心:企业级闪存设备经验谈(获奖名单已公布-2014-10-15) [复制链接]

论坛徽章:
0
21 [报告]
发表于 2014-09-11 13:00 |只看该作者
支持好活动,先mark一下。

论坛徽章:
13
午马
日期:2015-01-19 14:08:552017金鸡报晓
日期:2017-01-10 15:13:29黑曼巴
日期:2016-11-07 11:24:56PHP
日期:2016-10-25 16:06:46黄金圣斗士
日期:2015-11-24 10:43:13IT运维版块每日发帖之星
日期:2015-09-25 06:20:00IT运维版块每日发帖之星
日期:2015-09-14 06:20:002015亚冠之阿尔纳斯尔
日期:2015-07-27 11:17:582015亚冠之广州恒大
日期:2015-07-24 15:04:162015年亚洲杯之乌兹别克斯坦
日期:2015-04-01 13:28:012015年辞旧岁徽章
日期:2015-03-03 16:54:15处女座
日期:2015-01-22 16:09:16
22 [报告]
发表于 2014-09-11 15:37 |只看该作者
这个奖够大啊,先占个位   后编辑

论坛徽章:
13
CU大牛徽章
日期:2013-04-17 11:20:3615-16赛季CBA联赛之吉林
日期:2017-05-25 16:45:4715-16赛季CBA联赛之福建
日期:2017-03-13 11:33:442017金鸡报晓
日期:2017-02-08 10:39:422017金鸡报晓
日期:2017-01-10 15:13:29IT运维版块每日发帖之星
日期:2016-03-15 06:20:01IT运维版块每日发帖之星
日期:2015-10-02 06:20:00CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-09-18 15:15:45CU大牛徽章
日期:2013-09-18 15:15:15CU大牛徽章
日期:2013-04-17 11:46:39CU大牛徽章
日期:2013-04-17 11:46:28
23 [报告]
发表于 2014-09-11 16:31 |只看该作者
在企业级的应用中一般这样的要求是肯定的:
数据的存储安全
数据的读写性能
----------------------------
不过这两个问题都没有绝对的方案予以解决,所以在企业应用中都通过一些软硬件的处理来增加冗余进行保证,如数据存储安全采用了多份存档类型等进行冗余保证,读写性能可通过多盘读写实现条带化来增强带宽冗余进行保证等。SSD也不可能直接完美解决这样的需求,只是在性能上有很大增强,比较突出的是在读写性能上,因为去除了机械方面的限制,所以没有了平均寻道这样的机械运动限制等,使得对于随机数据的读写可以到达普通磁盘的数倍甚至十倍,这是常见应用中一个很大的提升,完全是数量级的提升啦。所以在企业有大量随机读写的应用中ssd有无与伦比的优势,在长期数据保存中这样对数据安全有更大要求的情况下,由于ssd当前技术限制使得比普通磁盘不具有性价比优势,所以还较少应用到,但我们可以看到这些随着相应制造技术的发展也有所改变,当然还比较缓慢,毕竟二者差距还比较大。

现在还有一种ssd的应用趋势把ssd作为类似ram的缓冲,毕竟相较ram来说,ssd又是便宜的,而且由于有持久化存储的能力,作为ram的影子,可以在一些关键应用中起到ram备份的作用,防止业务因为特殊原因的中断(而不可恢复),例如在大型计算过程中热数据保存(普通磁盘可能完全不能满足写入要求,ram镜像磁盘又不可持久化),对于这样的应用PCIe SSD突破了sata带宽限制,在ssd本身写入满足需求情况下,只要ssd本身稳定性能经受考验,我相信有很多涉及大量复杂计算过程的应用研究中会采用到PCIe SSD。例如一些设计模拟中(当然也包括大型视频特技渲染之类的应用——想当年为了渲染一点点动画,计算机工作站都是不停机,甚至也要算好几个月,而且一个工程只敢分步一点一点做,就是怕中间因故障停机,要从头开始做)

论坛徽章:
0
24 [报告]
发表于 2014-09-12 21:01 |只看该作者
本帖最后由 Nicoyo_lmn 于 2014-09-15 23:13 编辑

NAND搞得太复杂了,为了节省电路提升密度,多个存储单元共享控制信号,而且一个page内部只能写0不能同时写1,写1得在后台,而且要写就一个块全写1也就是擦,所以FTL层不得不采用RoW机制和GC。

但是当没有足够空闲块的时候,此时会导致严重写放大,这就是为什么NAND flash越用越慢的原因,降低写放大系数也是各家FTL层的关键算法。写放大产生的现象就是性能抖动。

为什么性能抖动问题会这么引人**,我猜测,只有压力很大的场景和路径很长的时候,加上对时延很敏感的场景,抖动绝对是死穴,这就像高速路堵车,一条车道出事,整个车道都要赌,因为会产生频繁换车道,一换车道,大家一起遭殃。

前端用户一旦出现高时延,用户会大量重试,压力会瞬间增大,如果路径很长,则反馈不及时,就会造成绵延数十公里的堵车。

尤其是互联网用户,在搞软件定义Flash,估计就是因为抖动的问题搞的很头疼,固态盘厂商不了解应用,就只能用通用的优化算法,而互联网又需要明确定制化。
下一代闪存一定不会这么麻烦,IBM前不久发布了赛道RAM,密度很大提升,而且掉电不丢数据,速度与DDR接近,以后真不敢想象了。

论坛徽章:
0
25 [报告]
发表于 2014-09-12 22:07 |只看该作者
好活动啊,支持

论坛徽章:
20
CU大牛徽章
日期:2013-04-17 11:48:26羊年新春福章
日期:2015-03-10 22:39:202015年中国系统架构师大会
日期:2015-06-29 16:11:282015亚冠之平阳省
日期:2015-07-31 09:19:042015七夕节徽章
日期:2015-08-21 11:06:17IT运维版块每日发帖之星
日期:2015-09-30 06:20:002015亚冠之柏太阳神
日期:2015-10-19 20:29:5915-16赛季CBA联赛之天津
日期:2016-11-29 14:03:4315-16赛季CBA联赛之北控
日期:2016-12-24 20:51:492015年辞旧岁徽章
日期:2015-03-03 16:54:15双鱼座
日期:2015-01-12 20:58:532014年中国系统架构师大会
日期:2014-10-14 15:59:00
26 [报告]
发表于 2014-09-14 08:11 |只看该作者
奖品很给力,强烈支持这样的活动

论坛徽章:
2
2015年迎新春徽章
日期:2015-03-04 09:49:45IT运维版块每日发帖之星
日期:2016-07-29 06:20:00
27 [报告]
发表于 2014-09-14 11:31 |只看该作者
laowangaitaozi 发表于 2014-09-10 16:47
我们是作行业领域的SI, 简单说一下闪存的看法。从价格以及容量来说硬盘肯定还是有优势的,至少稳定性,返修 ...

pcie前端链路速度快,辅之以nvme轻量级协议,相比scsi要高效的多,内核驱动的精简和并发度也大大提升了。

论坛徽章:
2
2015年迎新春徽章
日期:2015-03-04 09:49:45IT运维版块每日发帖之星
日期:2016-07-29 06:20:00
28 [报告]
发表于 2014-09-14 11:32 |只看该作者
LH515BEST 发表于 2014-09-10 17:03
在集群中,硬盘是最大的消耗品,常常会损坏。为了保证数据不丢失,必须对数据进行备份。

成本: 升级到SS ...


PCIE卡一般连续读取可不止700MB,一般应该上GB/s才算合格。

论坛徽章:
2
2015年迎新春徽章
日期:2015-03-04 09:49:45IT运维版块每日发帖之星
日期:2016-07-29 06:20:00
29 [报告]
发表于 2014-09-14 11:37 |只看该作者
Nicoyo_lmn 发表于 2014-09-10 21:56
我就从存储规划、运维的角度来说说看法。
从我的角度来说更希望闪存的引入不要给现有的存储系统带来“调整 ...


安装热点识别软件为何必须重启?能否不重启?再就是为什么内存会占用比较大?下一本书的内容以及什么时候出?
因为热点识别软件本质上是一层IO驱动,要插入到关键IO路径。占用内存大是因为数据块的逻辑地址和物理地址的映射关系需要随时变化,所以需要映射表追踪,这个表会比较大,看所支持的卷容量,假设32bit LBA地址长度,那么每个表项就得至少64bit长,加上一些加速查找的数据结构比如布隆、bitmap等,实际会更大,而且随着迁移数据量的增长会变大。

论坛徽章:
2
2015年迎新春徽章
日期:2015-03-04 09:49:45IT运维版块每日发帖之星
日期:2016-07-29 06:20:00
30 [报告]
发表于 2014-09-14 11:41 |只看该作者
Nicoyo_lmn 发表于 2014-09-12 21:01
个人觉得NAND从技术上看活不长久,NAND给软件带来了太大负担,其根本原因,为了节省电路提升密度,多个存储 ...

分析的非常透彻,尤其是对为何互联网用户最关注抖动的分析,多数人都只知道互联网不喜欢抖动,但是却不知道个中原因。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP