免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: send_linux

[其他] PCIE SSD对数据库架构的影响巨大?参与讨论得派克金笔!(获奖名单已公布-2014-6-27) [复制链接]

论坛徽章:
459
亥猪
日期:2014-05-31 12:08:03亥猪
日期:2014-05-31 12:07:38亥猪
日期:2014-05-31 12:08:04亥猪
日期:2014-05-31 12:07:43亥猪
日期:2014-05-31 12:07:52亥猪
日期:2014-05-31 12:08:09亥猪
日期:2014-05-31 12:07:51亥猪
日期:2014-05-31 12:08:02亥猪
日期:2014-05-31 12:07:59亥猪
日期:2014-05-31 12:07:37亥猪
日期:2014-05-31 12:07:50亥猪
日期:2014-05-31 12:07:39
发表于 2014-05-07 09:05 |显示全部楼层
1, 传统磁盘的随机读写IOPS只有一百多,PCIE SSD的随机读写IOPS高达惊人的50多万。 随机读写延迟也从毫秒级别降到微秒级别。我们应该怎么才能充分利用PCIE SSD这些出色的性能来优化我们的数据库架构和性能呢?
在利用SSD 优化数据库架构与性能之前,首先要了解一下SSD 的优缺点,做到扬长避短。
主要缺点:
①. erase-before-write 是SSD 的典型特征,造成写入性能被放大。从这个特点可以得出:连续的写入会相应的降低被放大。
②. 相对的价格要比普通磁盘的要高
③. 寿命相对短
以上因素都是导致不能将所有数据库数据都放在SSD 的主要原因。
PCIe闪存SSD卡通过读缓存写入的功能,将频繁访问的数据文件、甚至是元数据被放置在SSD中作为缓存使用。
   PS.日志文件访问频繁,但不适合,与第一点冲突。
在传统的存储上的数据库,当查询时需要读取大量数据并涉及到排序、hash、以及计算操作时,需要将部分的中间结果写回磁盘,可以说:这就是导致查询结果缓慢的原因,所以:要么提高磁盘的IOPS,要么增大内存。
显然,增加内存并不现实,一个大表的中间结果让内存完全容纳比较困难。
————————————————————————————————————————————————————————————————————————————————
2, 在PCIE SSD的帮助下,我们自己是否可以在普通服务器甚至PC上配置出类似Oracle Exadata性能的架构呢? 如果可以的话,应该怎么配置?
这个光靠配置是配置不出来类似 “Oracle Exadata性能的架构”滴...
正如“冬瓜头”说的那样,Oracle Exadata 不光有硬件的改进,软件算法也有改变,让我们看一下<<Oracle Exadata 技术白皮书>> 中的一句话:“Exadata 是 oracle 与 HP 联合推出的产品,其中 HP 提供了其底层的存储,oracle 提供了存储智能软件并紧密集成 Exadata 存储设备与oracle数据库的特征 ”
所以,后面的问题就不用回答了..但是可以利用SSD 大幅度改进数据库的性能。
————————————————————————————————————————————————————————————————————————————————
3,  使用PCIE SSD来保存我们公司的关键数据足够安全吗?
安全只是相对的。也就是输说:无论多么的安全,也需要进行数据库备份。
————————————————————————————————————————————————————————————————————————————————
4, 通常都是使用什么工具来评测PCIE SSD? 测试PCIE SSD应该关注哪些数据?
软件不少,各种软件所注重的地方也不同。
个人觉得,用下面的两个,关注一下相应的数据即可。
Atto Disk Benchmark:磁盘持续传输性能
AS SSD: IPOS

论坛徽章:
459
亥猪
日期:2014-05-31 12:08:03亥猪
日期:2014-05-31 12:07:38亥猪
日期:2014-05-31 12:08:04亥猪
日期:2014-05-31 12:07:43亥猪
日期:2014-05-31 12:07:52亥猪
日期:2014-05-31 12:08:09亥猪
日期:2014-05-31 12:07:51亥猪
日期:2014-05-31 12:08:02亥猪
日期:2014-05-31 12:07:59亥猪
日期:2014-05-31 12:07:37亥猪
日期:2014-05-31 12:07:50亥猪
日期:2014-05-31 12:07:39
发表于 2014-05-07 09:15 |显示全部楼层
beyondfly 发表于 2014-05-06 19:59
应该是可以,把oracle的数据存放目录放到PCIE-SSD上,再大oracle相关参数的配置



这么简单的一弄,就能达到Exadata 的性能特征,那它还能那么值钱????
另外,上oracle 官网看一下  Exadata 的技术白皮书吧..

论坛徽章:
0
发表于 2014-05-07 09:22 |显示全部楼层
beyondfly 发表于 2014-05-06 19:59
1, 传统磁盘的随机读写IOPS只有一百多,PCIE SSD的随机读写IOPS高达惊人的50多万(详细数据请参考http://ww ...


SSD寿命比传统的低很多,楼主活在3-5年前吧

论坛徽章:
19
CU大牛徽章
日期:2013-04-17 11:48:262015年辞旧岁徽章
日期:2015-03-03 16:54:15羊年新春福章
日期:2015-03-10 22:39:202015年中国系统架构师大会
日期:2015-06-29 16:11:282015亚冠之平阳省
日期:2015-07-31 09:19:042015七夕节徽章
日期:2015-08-21 11:06:17IT运维版块每日发帖之星
日期:2015-09-30 06:20:002015亚冠之柏太阳神
日期:2015-10-19 20:29:5915-16赛季CBA联赛之天津
日期:2016-11-29 14:03:43双鱼座
日期:2015-01-12 20:58:532014年中国系统架构师大会
日期:2014-10-14 15:59:00CU大牛徽章
日期:2013-04-17 11:48:40
发表于 2014-05-07 09:30 |显示全部楼层
回复 12# 2009532140


    我说 “应该是可以”,完全是个人判断,可能存在不正确性,多谢你帮我指正。另外问一下,你是oracle公司的或是代理Exadata产品的吧?

论坛徽章:
19
CU大牛徽章
日期:2013-04-17 11:48:262015年辞旧岁徽章
日期:2015-03-03 16:54:15羊年新春福章
日期:2015-03-10 22:39:202015年中国系统架构师大会
日期:2015-06-29 16:11:282015亚冠之平阳省
日期:2015-07-31 09:19:042015七夕节徽章
日期:2015-08-21 11:06:17IT运维版块每日发帖之星
日期:2015-09-30 06:20:002015亚冠之柏太阳神
日期:2015-10-19 20:29:5915-16赛季CBA联赛之天津
日期:2016-11-29 14:03:43双鱼座
日期:2015-01-12 20:58:532014年中国系统架构师大会
日期:2014-10-14 15:59:00CU大牛徽章
日期:2013-04-17 11:48:40
发表于 2014-05-07 09:32 |显示全部楼层
回复 13# zclhard


    嗯,LZ有一段时间没有关注SSD的寿命问题了,刚刚又查了一下,看到很多文章都说,SSD的寿命已经提高了很多,多谢你的指正。

论坛徽章:
459
亥猪
日期:2014-05-31 12:08:03亥猪
日期:2014-05-31 12:07:38亥猪
日期:2014-05-31 12:08:04亥猪
日期:2014-05-31 12:07:43亥猪
日期:2014-05-31 12:07:52亥猪
日期:2014-05-31 12:08:09亥猪
日期:2014-05-31 12:07:51亥猪
日期:2014-05-31 12:08:02亥猪
日期:2014-05-31 12:07:59亥猪
日期:2014-05-31 12:07:37亥猪
日期:2014-05-31 12:07:50亥猪
日期:2014-05-31 12:07:39
发表于 2014-05-07 09:44 |显示全部楼层
回复 13# zclhard


    取代HDD 基本要成为趋势了{:3_192:}
我也正想弄一个装个oracle 玩玩。

论坛徽章:
0
发表于 2014-05-07 09:50 |显示全部楼层
beyondfly 发表于 2014-05-07 09:32
回复 13# zclhard


头像很帅。

现在很多初创企业在做企业级SSD方面的工作,特别是互联网行业的需求推动,现在的发展真的很快

论坛徽章:
19
CU大牛徽章
日期:2013-04-17 11:48:262015年辞旧岁徽章
日期:2015-03-03 16:54:15羊年新春福章
日期:2015-03-10 22:39:202015年中国系统架构师大会
日期:2015-06-29 16:11:282015亚冠之平阳省
日期:2015-07-31 09:19:042015七夕节徽章
日期:2015-08-21 11:06:17IT运维版块每日发帖之星
日期:2015-09-30 06:20:002015亚冠之柏太阳神
日期:2015-10-19 20:29:5915-16赛季CBA联赛之天津
日期:2016-11-29 14:03:43双鱼座
日期:2015-01-12 20:58:532014年中国系统架构师大会
日期:2014-10-14 15:59:00CU大牛徽章
日期:2013-04-17 11:48:40
发表于 2014-05-07 10:16 |显示全部楼层
回复 17# zclhard

    PCIE-SSD是不是未来的一个发展趋势呢?

论坛徽章:
0
发表于 2014-05-07 11:41 |显示全部楼层
:wink:楼上等高手大师,有出现的时候!学习也不在话下!

论坛徽章:
18
卯兔
日期:2013-09-27 17:41:0615-16赛季CBA联赛之佛山
日期:2016-07-09 17:34:45操作系统版块每周发帖之星
日期:2015-12-02 15:01:04IT运维版块每日发帖之星
日期:2015-12-02 06:20:00IT运维版块每日发帖之星
日期:2015-10-07 06:20:00IT运维版块每日发帖之星
日期:2015-10-03 06:20:00IT运维版块每日发帖之星
日期:2015-10-01 06:20:00羊年新春福章
日期:2015-04-01 17:56:06拜羊年徽章
日期:2015-04-01 17:56:062015年迎新春徽章
日期:2015-03-04 09:49:452015年辞旧岁徽章
日期:2015-03-03 16:54:15天秤座
日期:2015-01-14 06:39:28
发表于 2014-05-07 20:46 |显示全部楼层
回复 8# forgaoqiang


    如果是自己写的,这个写的太牛了! 加精
呵呵,如果是网上摘抄的,就.................
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP