免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 21242 | 回复: 83

【讨论】电商/搜索/广告架构中的分布式文件系统(c) [复制链接]

论坛徽章:
0
发表于 2012-03-26 13:59 |显示全部楼层
获奖名单已公布,详情请看:http://bbs.chinaunix.net/thread-3727562-1-1.html

随着电商的增多,网购的趋势已经形成。企业要针对海量的数据进行分析,处理。比如,能时时显示出物品的相关信息,快速的查询等等。这些都是电商应该考虑的问题。而做为运维、架构设计的我们,能为企业设计出海量数据高效读取,并保障数据的完整性的架构是责无旁贷的。在处理海量数据方面,一个成熟的应用也不仅仅是软件的选型和配置,在系统层级也有着不少的改动。所以今天我们就各种分布式文件系统以及运行其的linux系统进行一下讨论,不仅仅在部署,在配置方面的优化也是很有必要的。

讨论话题:
1、Linux/unix系统级优化
2、各种分布式文件系统的了解
3、针对海量数据的分布式文件系统优化

活动要求:
1,针对以上话题进行讨论分享
2,网友可以提出问题,答疑解惑
           
邀请嘉宾:
周淼 (gavinzhm) 株式会社MTI 系统工程师
余洪春(yuhongchun)集群和高可用版块版主 高级运维工程师
老男孩(老男孩linux培训)老男孩Linux实战运维培训中心总裁
wenzizone 某游戏网站 高级架构师
happy_fish100   CU社区分布式文件系统版块资深版主

活动时间:2012.3.26-2012.4.20

活动有奖:我们为积极参与讨论的网友准备了乐扣乐8件套(三套),奖励给积极参与活动的网友(有意义回复超过三贴)。
1111111111111.jpg

论坛徽章:
0
发表于 2012-03-26 14:10 |显示全部楼层
欢迎大家积极参与

论坛徽章:
0
发表于 2012-03-26 14:13 |显示全部楼层
...支持一下。。

论坛徽章:
380
CU十二周年纪念徽章
日期:2014-01-04 22:46:58CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52CU大牛徽章
日期:2013-03-14 14:08:55CU大牛徽章
日期:2013-04-17 11:17:19CU大牛徽章
日期:2013-04-17 11:17:32CU大牛徽章
日期:2013-04-17 11:17:37CU大牛徽章
日期:2013-04-17 11:17:42CU大牛徽章
日期:2013-04-17 11:17:47CU大牛徽章
日期:2013-04-17 11:17:52CU大牛徽章
日期:2013-04-17 11:17:56
发表于 2012-03-26 14:13 |显示全部楼层
支持下.
没用过海量数据的架构.对Hadoop仅仅知道有这么个东西而已

论坛徽章:
0
发表于 2012-03-26 14:15 |显示全部楼层
hadoop对于海量数据分析与存储具有较大优势,而平时我们接触最多的还是MFS,GFS等

论坛徽章:
0
发表于 2012-03-26 14:18 |显示全部楼层
我也先来占个位置,慢慢聊技术

论坛徽章:
0
发表于 2012-03-26 14:20 |显示全部楼层
回复 5# zhaoke0128


    分布式文件系统,一般情况下,文件系统管理的物理存储资源不一定本机上存储,而是通过网络与其它节点通信

论坛徽章:
0
发表于 2012-03-26 14:24 |显示全部楼层
必须顶的,为了饭盒也必须的。

论坛徽章:
4
CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52戌狗
日期:2013-12-27 15:08:11
发表于 2012-03-26 14:25 |显示全部楼层
分布式文件系统大的电商公司用得比较多,hadoop这玩意很精深,小的项目nfs也可以  露个脸

论坛徽章:
0
发表于 2012-03-26 14:38 |显示全部楼层
NFS,也是C/S文件系统的一种,NFS允许一个系统在网络上与他人共享目录和文件,通过使用NFS,用户和程序可以像访问本地文件系统一样访问远端系统上的文件
好处:
    1、linux内核支持,配置方便
    2、可以减少本机存储的空间,通常存放在一台机器上即可(单点)
    3、用户不必在每个节点上建目录,这样的目录可以放在NFS上在网络中访问
缺点:
    1、可扩展性差,对于大量的存储节点和客户端的集群模式难以应对
    2、不支持数据复制,很容易出现系统的性能瓶颈
    3、有时候会出现,文件不一致的情形
    4、对于异地服务的支持能力不行
欢迎各位拍砖
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP