免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 39755 | 回复: 0
打印 上一主题 下一主题

走进架构新思维--分布式文件系统应如何设计 [复制链接]

论坛徽章:
17
处女座
日期:2013-08-27 09:59:352015亚冠之柏太阳神
日期:2015-07-30 10:16:402015亚冠之萨济拖拉机
日期:2015-07-29 18:58:182015年亚洲杯之巴勒斯坦
日期:2015-03-06 17:38:17摩羯座
日期:2014-12-11 21:31:34戌狗
日期:2014-07-20 20:57:32子鼠
日期:2014-05-15 16:25:21亥猪
日期:2014-02-11 17:32:05丑牛
日期:2014-01-20 15:45:51丑牛
日期:2013-10-22 11:12:56双子座
日期:2013-10-18 16:28:17白羊座
日期:2013-10-18 10:50:45
1 [报告]
发表于 2015-07-28 18:33 |显示全部楼层
1、异构存储(磁盘、SSD、内存)以及冷温热数据存储架构您觉得如何设计?比如数据热度由热到温最后到冷,对应的存储如何自适应的将数据转换和保存?
     数据的冷热与存储介存的访问性能应该是直接对应关系:内存=热,SSD=温,磁盘=冷,在SSD价格不断下滑的情况下磁盘应该在不远的将来被会替换为SSD,最终冷数据的访问应该从硬件层面上得到相关程度的缓解。数据的转移可以假设以下情况:存储介质根据访问情能分为了3个层次,数据的冷热程度分为9个层次(热1-3,温4-5,冷6-9),数据定期的根据冷热系数转移到特定的存储介存,可以增加冷热系数调整转移的缓冲期和频率。
2、有的应用读写并发并不大,而对元数据的操作确异常频繁,如何设计一个以读为主的元数据服务架构或者设计一个以写为主的元数据服务架构?
     大文件和小文件是两个完全不同的问题,小文件常常导致无数据操作频繁,那么元数据服务干脆就分开处理,一个完整的元数据服务架构由分别偏向读写的两个异构的元数据架构组成而成。
3、当前无论是CEPH还是GFS,都存在IO路径过长的问题,有什么方法能缓解这种情况?
     根据最近访问记录缓存路径信息来提供快速访问貌似是比较可行的,但是如何在访问文件时减少内部容器和模块间的信息访问和传递得视具体实现而定了。
4、使用分布式文件系统后,如何快速的检索数据?
     检索数据分为定位和读取两个操作,相对于定位来讲读取是绝对的慢操作,那么在读取时可以合并读取请求,尽可能一次读取服务多个请求。
5、云存储的数据分享、隔离和安全性怎么做?
     分享与安全是个永恒的话题,目前大多数数据安全问题出现在用户端,与访问终端合作定制对用户透明的更严格和复杂的访问规则是一个方向,同时针对数据访问本身应该提时效性处理,每一次外部数据访问都不是可持续的,其时效长度由用户的安全等级决定。
6、你对IT架构的发展前景怎么看?有什么新的想法吗?
     软件的实现一直受限于硬件的能力,所以很难在有效的条件下有颠覆性的创新,随着硬件能力的快速提升和应用规模的急剧扩大,IT架构总会不断变化以适应需求的。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP