免费注册 查看新帖 |

ChinaUnix.net

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: Gray1982

【讨论】电商/搜索/广告架构中的分布式文件系统(c) [复制链接]

论坛徽章:
0
发表于 2012-03-26 17:00 |显示全部楼层
必须支持一下

论坛徽章:
0
发表于 2012-03-26 17:02 |显示全部楼层
用过nfs glusterfs hdfs gfs 。 配置比较方便快捷还是nfs,性能和nfs也差不多。有没有人搞过pnfs?

论坛徽章:
0
发表于 2012-03-26 18:05 |显示全部楼层
pnfs还真没搞过,现在在网站架构中,MFS比较多一些。
在后台海量数据的处理中,Hadoop比较多一些

论坛徽章:
4
CU大牛徽章
日期:2013-04-17 11:48:26CU大牛徽章
日期:2013-04-17 11:48:40CU大牛徽章
日期:2013-04-17 11:48:45摩羯座
日期:2013-12-06 18:10:04
发表于 2012-03-26 19:21 |显示全部楼层
进来学习。

论坛徽章:
0
发表于 2012-03-26 19:42 |显示全部楼层
回复 20# Gray1982
其实hadoop支持多语言,用python也是可以的


   

论坛徽章:
0
发表于 2012-03-27 10:35 |显示全部楼层
用PYthon开发的话,会节省很多时间滴
原来用Python写过MR

论坛徽章:
0
发表于 2012-03-27 14:47 |显示全部楼层
glusterfs被红帽收了之后感觉前景会更好一些
没直接放到过生产环境中,不知道可用性怎么样,有待研究


zh_ch_l 发表于 2012-03-26 17:02
用过nfs glusterfs hdfs gfs 。 配置比较方便快捷还是nfs,性能和nfs也差不多。有没有人搞过pnfs?

论坛徽章:
6
丑牛
日期:2013-09-17 00:18:40未羊
日期:2013-10-31 12:10:47午马
日期:2013-12-07 01:58:50水瓶座
日期:2013-12-24 22:43:12水瓶座
日期:2014-03-15 21:12:13操作系统版块每日发帖之星
日期:2016-08-07 06:20:00
发表于 2012-03-27 15:12 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
0
发表于 2012-03-27 15:26 |显示全部楼层
其实MFS也是有很多配置需要更改的,比如块大小,是吧酒哥

论坛徽章:
0
发表于 2012-03-27 16:36 |显示全部楼层
俺是流媒体方向的, 之前用过NFS, 性能不够, 主要是压力一大之后读延迟增加, 不符合要求。

有谁了解hadoop是否适合流媒体方面? 没有接触过, 但是听说延迟也比较大, 从架构上看似乎也有此问题
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

ITPUB技术栈

ITPUB技术栈是ITPUB企业打造的垂直于IT领域的知识社群平台,在这里,你既可以是创作者也可以是消费者。如果你的IT生涯丰富多彩,喷薄的个人价值尽可在小栈内体现;如果你渴望找到志同道合的伙伴,拓宽人脉,小栈比跑会场更快。 小栈特色:
1.极高的用户转化率,实现更直接的知识变现;
2.随时随地,刷个朋友圈的时间,实现更长效的信息沉淀;
3.戳痛、难点的专业咨询,更接近成功解决方案的时刻;
4.贴近意见领袖,个人高速成长,迈入更富有价值的人际圈。

----------------------------------------

技术小栈>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP