免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: send_linux
打印 上一主题 下一主题

[闪存] 存储革命进入数据中心:企业级闪存设备经验谈(获奖名单已公布-2014-10-15) [复制链接]

论坛徽章:
0
11 [报告]
发表于 2014-09-10 16:47 |只看该作者
我们是作行业领域的SI, 简单说一下闪存的看法。从价格以及容量来说硬盘肯定还是有优势的,至少稳定性,返修什么的都有数。过去两年因为客户的需求也采用了不少SATA 的SSD盘,性能肯定是上去了,初期采用时也是有一些疑虑,现在很稳定了,用得也不少。很多时候是用户主动希望整合SSD到系统里,所以我是比较看好SSD 盘的后续发展。个人感觉如果谈到每GB的成本主要还是看应用。至于PCIe, NVMe 的SSD 了解得并不多,它们相比于SATA盘有哪些优势?请专家讲讲?

论坛徽章:
0
12 [报告]
发表于 2014-09-10 17:03 |只看该作者
本帖最后由 LH515BEST 于 2014-09-10 17:42 编辑

在集群中,硬盘是最大的消耗品,常常会损坏。为了保证数据不丢失,必须对数据进行备份。

成本: 升级到SSD最大的问题是成本。
       512GB   PCIe  3100¥;
       512GB   普通固态硬盘,1500¥;
       1T一盘, 企业级<600¥。
      结论:存储数据,当然是硬盘划算,也没有人拿ssd 长久存储大规模数据。

使用寿命:
     理论上固态硬盘相对机械硬盘更不容易坏,机械硬盘是磁头读取磁盘信息,在震动的时候,容易导致磁盘坏道。
     现在的ssd 一般寿命是3000——5000p/e 。按照20M/s 的读写数据的速度,8h完成一次全盘读写,可以使用3年。
     硬盘30000小时,寿命也为 3年多。
     结论:在少规模读写数据流的时候,寿命差不多。但是当数据流大的时候,ssd的寿命略低。

读取速度
    当前普通硬盘的读取速度大概是100M/S左右,而固态硬盘的读取速度则是250M/S。
    但是,这并不是指其速度仅为普通硬盘的2.5倍,值得指出的是:这里的读取速度是指连续读取速度,
    实际计算的时候,由于普通硬盘还有寻道时间等开销,所以实际上固态硬盘的读取速度要     达到普通硬盘的7~8倍以上。

  固态硬盘由于其多块FLASH闪存芯片组成的RAID 0阵列,所以其优势在于读取多处小数据,体现在开机等操作中,这正是其开启windows
    只需要9秒时间的原因。而在读取较大文件的时候,固态硬盘的读取速度也仅仅是普通硬盘的2.5倍左右。
     
    PCIe  SSD:连续读取速度:700 MB/s :连续写 335 MB/s
    普通  SSD :连续读取最大540MB/秒,连续写入最大310MB/秒
    机械硬盘   :  100M/S
   
    结论:在读写小文件的时候,由于SSD寻道时间少,速度远大于 机械硬盘。在大文件的时候,SSD优势不那么明显。


============================================
结论:
      1. 加钱上SSD能显著提高I/O性能,尤其文件多且小的时候。
      2. 由于成本问题,SSD不适合永久存储数据
      3. 可以混合SSD和机械硬盘使用。 SSD做操作系统盘,以及小规模的对性能要求高的数据。
      4. SSD价格还是太贵。



  

论坛徽章:
13
CU大牛徽章
日期:2013-04-17 11:20:3615-16赛季CBA联赛之吉林
日期:2017-05-25 16:45:4715-16赛季CBA联赛之福建
日期:2017-03-13 11:33:442017金鸡报晓
日期:2017-02-08 10:39:422017金鸡报晓
日期:2017-01-10 15:13:29IT运维版块每日发帖之星
日期:2016-03-15 06:20:01IT运维版块每日发帖之星
日期:2015-10-02 06:20:00CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-09-18 15:15:45CU大牛徽章
日期:2013-09-18 15:15:15CU大牛徽章
日期:2013-04-17 11:46:39CU大牛徽章
日期:2013-04-17 11:46:28
13 [报告]
发表于 2014-09-10 21:29 |只看该作者
使用企业级闪存设备的经验交流:
其实大家都有一个共识,在许多企业应用领域ssd等固态存储都会逐渐取代以往的磁盘,不过还有很多领域是以往磁盘囿于其特性而没有进入的,或者应用规模不大的,我就来谈谈这方面的应用情况:
首先是以往磁盘没有涉入的领域,广播级高清视频拍摄的直接存储,以往囿于普通磁盘抗震动性,写入速度,能耗等诸多不如意,使得没有怎么进入,而固态硬盘凭借其十分优良的写入特性,完胜普通磁盘的功耗控制和抗冲击性能得以在这类以往磁盘未应用的领域展露头脚。在这一领域,对磁盘的连续写入速度和稳定性要求很高,对单盘容量和小型化要求也很高,对能耗要求严格,这些方面都是ssd类优势,也是其进一步发展方向。

其次是高清视频后期数字编辑流程的高效存储应用中,以往的视频编辑,为了满足高质量无压缩视频编辑,需要多块磁盘组成raid0实现条带化来突破读写速度,而且即使这样也囿于单块磁盘自身限制而不能达到多轨实时合成复杂特技时苛刻的多视频大数据量读和同期大数据量写的要求而影响生产效率,现在,由于企业级ssd的引入应用,使得这一流程可以通过简单的硬件更换获得效率极大提升,而且还带来了综合能耗的急剧下降好处,可以说是益处多多,当然,现在ssd的采购成本还是阻碍,而且这类应用往往对存储本身容量要求也是巨大的,这进一步加大了采购困难,所以还亟待ssd在提高容量和读写速度以及稳定性的同时,加快单g价格的下降。这是ssd重要的发展方向。

其实这里的例子体现互相促进的交互影响过程,ssd发展了,应用领域增多意味着ssd的市场增大,则ssd生产厂商会进一步加大相关研发,生产出更多更好的产品,甚至以此开拓出新的应用领域,形成新的市场需求。

当然,我们也清楚的认识到ssd当前相比传统磁盘在拥有成本上,单盘容量上的不足,不过其实这些问题归结起来主要还是成本问题(比如现在有5T容量3.5寸磁盘,用ssd技术其实也可以产出同样容量尺寸的ssd盘,但价格可能是普通磁盘的十数背),从技术角度说容量问题好解决一些成本问题短期内还不可能突破,这就限制了企业应用中ssd还是只能用在那些对读写速度有苛刻要求的关键位置中,而不能大面积采用。不过我们期待ssd能进一步向大家提供更加优质廉价的产品。

论坛徽章:
0
14 [报告]
发表于 2014-09-10 21:56 |只看该作者
我就从存储规划、运维的角度来说说看法。
从我的角度来说更希望闪存的引入不要给现有的存储系统带来“调整”,最好是透明加速。透明主要是要求两点,首先是自动识别热点并且不需要改变现有的部署包括盘符路径、容量、调用方式等。其次是要求上线后不停机。第一点所有闪存缓存解决方案都可以提供,热点识别其实大家的算法也都差不多,开源也有Flash Cache方案,但是第二点就很头疼了,在应用服务器上安装这种透明加速软件层无一例外全都需要重启机器,需要停机,只能半夜去搞。另一个困难,内存占用较大,而且貌似被加速的盘容量越大,内存占用的就越大。另外一个就是,有几个项目里实测加速不明显,用户改为要求手动将某些数据放到闪存卡上,而且还不能改变原来的盘符路径,当时这个需求我并没有找到解决方案,问了一圈好像并没有厂商能够提供手动透明迁移方案,最后眼看着机会流走了,还给这个用户造成了闪存透明加速比较鸡肋的印象。所以我感觉透明加速很多时候不能够满足需求,有些时候需要较强的定制性加速,但是这里又有个困难就是如何手动判断系统内的热点数据,其次是当前系统的IO size和时延评估,是否适合使用闪存。

顺便请教一下瓜爷,安装热点识别软件为何必须重启?能否不重启?再就是为什么内存会占用比较大?下一本书的内容以及什么时候出?嘿嘿~

论坛徽章:
0
15 [报告]
发表于 2014-09-11 08:47 来自手机 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
18
卯兔
日期:2013-09-27 17:41:0615-16赛季CBA联赛之佛山
日期:2016-07-09 17:34:45操作系统版块每周发帖之星
日期:2015-12-02 15:01:04IT运维版块每日发帖之星
日期:2015-12-02 06:20:00IT运维版块每日发帖之星
日期:2015-10-07 06:20:00IT运维版块每日发帖之星
日期:2015-10-03 06:20:00IT运维版块每日发帖之星
日期:2015-10-01 06:20:00羊年新春福章
日期:2015-04-01 17:56:06拜羊年徽章
日期:2015-04-01 17:56:062015年迎新春徽章
日期:2015-03-04 09:49:452015年辞旧岁徽章
日期:2015-03-03 16:54:15天秤座
日期:2015-01-14 06:39:28
16 [报告]
发表于 2014-09-11 08:56 |只看该作者
高端大气上档次啊! 头一次看到这样的“巨奖”

论坛徽章:
49
15-16赛季CBA联赛之福建
日期:2016-06-22 16:22:002015年亚洲杯之中国
日期:2015-01-23 16:25:12丑牛
日期:2015-01-20 09:39:23未羊
日期:2015-01-14 23:55:57巳蛇
日期:2015-01-06 18:21:36双鱼座
日期:2015-01-02 22:04:33午马
日期:2014-11-25 09:58:35辰龙
日期:2014-11-18 10:40:07寅虎
日期:2014-11-13 22:47:15申猴
日期:2014-10-22 15:29:50摩羯座
日期:2014-08-27 10:49:43辰龙
日期:2014-08-21 10:47:58
17 [报告]
发表于 2014-09-11 09:07 |只看该作者
qingduo04 发表于 2014-09-11 08:56
高端大气上档次啊! 头一次看到这样的“巨奖”


欢迎精彩分享哈~

论坛徽章:
0
18 [报告]
发表于 2014-09-11 09:22 |只看该作者
学习学习:wink:

论坛徽章:
0
19 [报告]
发表于 2014-09-11 11:36 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
33
荣誉会员
日期:2011-11-23 16:44:17天秤座
日期:2014-08-26 16:18:20天秤座
日期:2014-08-29 10:12:18丑牛
日期:2014-08-29 16:06:45丑牛
日期:2014-09-03 10:28:58射手座
日期:2014-09-03 16:01:17寅虎
日期:2014-09-11 14:24:21天蝎座
日期:2014-09-17 08:33:55IT运维版块每日发帖之星
日期:2016-04-17 06:23:27操作系统版块每日发帖之星
日期:2016-04-18 06:20:00IT运维版块每日发帖之星
日期:2016-04-24 06:20:0015-16赛季CBA联赛之天津
日期:2016-05-06 12:46:59
20 [报告]
发表于 2014-09-11 12:55 |只看该作者
如果闪存企业不从根本上解决 NAND 的寿命问题, 还一直在搞什么低价的 TLC, QLC 等等, 这个行业 就会越来越差.

现在我所知道的, 没几个人用 闪存做 持久存储, 多数是用来做 cache, 或者 前端(后端另有磁盘持久化).
原因有两个, 1, 寿命. 磁盘的寿命, 是概率事件, NAND的寿命, 是必然事件. 要是 TLC, 那更快.
2. 价格. 土豪或许会真的不差钱. 否则, 多数是 SSD + SATA HDD 的混合模式.

对于 NAND, 现在的NAND企业, 不是想办法解决成本问题, 而是把 SLC 变成了 MLC, TLC, 好象还有 QLC , 未来会不会有 OLC ...
如果能把 SLC 的价格降到现在 MLC 的价格, 那闪存这个行业会迅速壮大, 因为会有大批的存储采用SLC.

不过, 或许闪存厂家就是不想让NAND太长寿吧, 这样我们才会多买, 这样他们才能发财, 哈哈!!!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP