免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 9622 | 回复: 10

[集群与高可用] 清华大学Meepo云存储的几个缺点 [复制链接]

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2012-01-09 20:35 |显示全部楼层
吃过晚饭逛微博,发现一篇资料:[HiC]云存储和云安全(武永卫).pdf,http://ishare.iask.sina.com.cn/f/22659713.html,看了看,发现几个问题。
    首先说说它的客户端。Meepo客户端通过FUSE连接到存储系统上,FUSE是LINUX下的东西,windows上有个dokan可以挂载FUSE,挂载的方式是SSHFS,也就是通过ssh挂载服务器上的文件系统。这个用法得暴露22端口,不利系统安全,而sshfs可以挂载服务器的根目录,信息泄露是难免的,据说可以通过PAM解决这个问题,但这并不是什么好办法,因为ssh的连接还是加密的,通过ssh访问文件系统,速度很受影响,服务器也会很疲劳。dokan是个很让人头疼的东西。
    Meepo的底层文件系统是moosefs。moosefs早在两年前就被我淘汰掉了,问题一大堆,MASTER存在单点故障,而且巨耗内存,它的chunk索引也很烂,HASH排序,树的深度可能很大。MFS的唯一好处是chunk server可以自动镜象数据到其它chunk server。
    Meepo核心是通过路由器接入的,但路由器并不适合文件集群这种高带宽的应用。实测表明,笔记本硬盘的读盘速度可以达到每秒155兆字节,磁盘阵列的I/O能力更强,很显然,路由器的千兆接口会成为文件系统瓶颈。PS:我知道路由器有10G的,但是成本上太不靠谱了。
    我猜测它这个云存储是为低带宽用户服务的,系统的I/O能力并没有充分挖掘,实用价值相当有限。

论坛徽章:
1
CU十二周年纪念徽章
日期:2013-10-24 15:41:34
发表于 2012-01-10 10:22 |显示全部楼层
又是云,

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2012-01-10 20:54 |显示全部楼层
云存储是个很不错的东西,比如有十个节点,可以做到任何两个节点损坏不丢失数据。云存储可以很方便地扩展到任何所需的容量规模。常规存储就没有这些能力。

论坛徽章:
0
发表于 2012-01-16 10:41 |显示全部楼层
回复 3# bbjmmj


    你说的这个应该是分布式文件系统的功能,不能算是云存储吧、

论坛徽章:
0
发表于 2012-01-16 14:17 |显示全部楼层
哇咔咔,刚发现这个帖子

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2012-01-16 19:05 |显示全部楼层
taotao1240 发表于 2012-01-16 10:41
回复 3# bbjmmj


恩,应该算是分布式存储。

论坛徽章:
0
发表于 2012-01-16 19:41 |显示全部楼层
我也很感兴趣,对这块cloud storage!现在做dedupe 的storage的项目。哈哈!

论坛徽章:
0
发表于 2012-01-17 08:35 |显示全部楼层
回复 7# zhangcz


    你做存储的技术、销售还是研发啊?

论坛徽章:
0
发表于 2012-01-19 11:32 |显示全部楼层
看得我很云(晕)

论坛徽章:
0
发表于 2012-01-19 18:50 |显示全部楼层
回复 8# taotao1240


    研发呀!! netbackup 软件!
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP