忘记密码   免费注册 查看新帖 |

ChinaUnix.net

  平台 论坛 博客 文库 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
最近访问板块 发新帖
查看: 48872 | 回复: 64

[Lustre] 互联网技术热点之--分布式文件系统,Lustre路在何方?(获奖名单已公布2013-4-7) [复制链接]

论坛徽章:
49
15-16赛季CBA联赛之福建
日期:2016-06-22 16:22:002015年亚洲杯之中国
日期:2015-01-23 16:25:12丑牛
日期:2015-01-20 09:39:23未羊
日期:2015-01-14 23:55:57巳蛇
日期:2015-01-06 18:21:36双鱼座
日期:2015-01-02 22:04:33午马
日期:2014-11-25 09:58:35辰龙
日期:2014-11-18 10:40:07寅虎
日期:2014-11-13 22:47:15申猴
日期:2014-10-22 15:29:50摩羯座
日期:2014-08-27 10:49:43辰龙
日期:2014-08-21 10:47:58
发表于 2013-03-04 10:16 |显示全部楼层
获奖名单已公布,详情请看:http://bbs.chinaunix.net/thread-4075405-1-1.html

随着互联网和移动信息化的飞速发展,各种业务数据爆炸性地增长,海量数据不停产生后被存储,并时刻需要被高速访问。传统的集中式存储已经很难满足这样的需求,互联网分布式存储系统也应运而生。高吞吐量、更高的性价比、更加可靠、部署友好、易于扩展、这是正是现在的互联网分布式存储的主要特性。

分布式文件系统将数据的访问和存储分布在大量的廉价存储服务器之上,通过高速网络在可靠地多备份存储的同时,还能够将来自网络上纷繁复杂的访问智能调度到分布在集群中的各个服务器之上,这是传统存储构架的一个颠覆性的发展。

Lustre是HP, Intel,Cluster File System公司联合美国能源部开发的,面向大规模集群的存储架构,基于Linux平台的开源集群并行文件系统,符合GNU GPL v2协议,其最大特征是高扩展性和高性能,能够支持数万客户端系统、PB级存储容量、GB/s级别的I/O吞吐量。Lustre 采用分布式的锁管理机制来实现并发控制,元数据和文件数据的通讯链路分开管理。

2012年7月,Intel宣布已经收购Whamcloud,同时也得到了其专为超级计算机和集群设计的文件系统Lustre,正式成为分布式文件系统Lustre的鼎力支持者。

全球顶级超级计算机系统中有大量都使用了Lustre,百强中份额超过40%,前三十名中更是占据了一半,其中就包括目前排名第一的IBM Sequoia红杉。


您现在所面对的互联网业务是否需要使用分布式文件系统?
您在考虑使用分布式文件系统时,考量的重点是什么?
目前纷繁复杂的需求催生了多种分布式问文件系统,您更看好哪个?

活动时间:2013年3月4日-3月14日

邀请嘉宾:
范勇:Intel公司文件系统专家
长期从事分布式文件系统的设计与研发,曾参与多款分布式系统的设计与实现,有十余年相关领域的实践经验。2006年加入Lustre团队,是Lustre-1.8核心系统的重要贡献者之一,以及Lustre-2.x系统架构设计及实现的核心成员之一。

刘歧:ChinaUnix论坛嵌入式版版主,现从事互联网网盘业务底层文件系统的开发和维护工作。

余庆:ChinaUnix论坛FastDFS版版主。分布式文件系统FastDFS作者,一直从事互联网研发工作,有着12年unix环境下C开发经验。对高性能服务器端编程有着比较丰富的开发经验。 现在阿里巴巴从事apache traffic server的开发和应用工作。

本期话题:
1、什么场景下需要用到分布式文件系统?有哪些好处?目前的发展瓶颈是什么?
2、您是否使用过或者评估过Lustre,有什么问题或者建议?
3、分享您在各种互联网业务中评测或者使用各种分布式文件系统的经验,或者您认为使用分布式文件系统能够给您的业务基础架构带来的优势。


本期奖品:
最佳经验分享奖两名,奖励价值120元的礼品各一份;
积极参与经验分享奖4名,奖励价值60元的礼品一份
参与投票会员,获得社区积分20分

更多参与,更多好礼!
多选投票: ( 最多可选 3 项 ), 共有 199 人参与投票
您所在的用户组没有投票权限

论坛徽章:
2
拜羊年徽章
日期:2015-03-03 16:15:4315-16赛季CBA联赛之同曦
日期:2018-07-25 19:57:32
发表于 2013-03-04 10:38 |显示全部楼层
NFS在用着,其它没条件接触

论坛徽章:
3
CU大牛徽章
日期:2013-05-20 10:43:41CU大牛徽章
日期:2013-05-20 10:44:06CU大牛徽章
日期:2013-05-20 10:44:16
发表于 2013-03-04 10:45 |显示全部楼层
我也用NFS,HDFS在部署hadoop的时候有接触,别的不是很了解

论坛徽章:
379
CU十二周年纪念徽章
日期:2014-01-04 22:46:58CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52CU大牛徽章
日期:2013-03-14 14:08:55CU大牛徽章
日期:2013-04-17 11:17:19CU大牛徽章
日期:2013-04-17 11:17:32CU大牛徽章
日期:2013-04-17 11:17:37CU大牛徽章
日期:2013-04-17 11:17:42CU大牛徽章
日期:2013-04-17 11:17:47CU大牛徽章
日期:2013-04-17 11:17:52CU大牛徽章
日期:2013-04-17 11:17:56
发表于 2013-03-04 10:47 |显示全部楼层
友情支持下,目前还没用到分布式文件系统呢

论坛徽章:
3
CU大牛徽章
日期:2013-05-20 10:43:41CU大牛徽章
日期:2013-05-20 10:44:06CU大牛徽章
日期:2013-05-20 10:44:16
发表于 2013-03-04 11:01 |显示全部楼层
chenyx 发表于 2013-03-04 10:47
友情支持下,目前还没用到分布式文件系统呢


难道NFS也没用用过么?

论坛徽章:
379
CU十二周年纪念徽章
日期:2014-01-04 22:46:58CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52CU大牛徽章
日期:2013-03-14 14:08:55CU大牛徽章
日期:2013-04-17 11:17:19CU大牛徽章
日期:2013-04-17 11:17:32CU大牛徽章
日期:2013-04-17 11:17:37CU大牛徽章
日期:2013-04-17 11:17:42CU大牛徽章
日期:2013-04-17 11:17:47CU大牛徽章
日期:2013-04-17 11:17:52CU大牛徽章
日期:2013-04-17 11:17:56
发表于 2013-03-04 11:03 |显示全部楼层
nfs用的也非常少.

论坛徽章:
0
发表于 2013-03-04 11:04 |显示全部楼层
nfs 算不了分布式,
mfs 与  fastdfs 用的比较多

论坛徽章:
131
操作系统版块每日发帖之星
日期:2016-05-11 17:06:57操作系统版块每日发帖之星
日期:2016-05-11 17:06:57数据库技术版块每日发帖之星
日期:2016-05-11 17:07:05操作系统版块每日发帖之星
日期:2016-05-11 17:06:57操作系统版块每日发帖之星
日期:2016-05-11 17:06:57综合交流区版块每日发帖之星
日期:2016-05-11 17:07:052022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57IT运维版块每日发帖之星
日期:2016-05-11 17:06:49操作系统版块每日发帖之星
日期:2016-05-11 17:06:57综合交流区版块每日发帖之星
日期:2016-05-11 17:07:05操作系统版块每日发帖之星
日期:2016-05-11 17:06:57程序设计版块每日发帖之星
日期:2016-05-11 17:06:57
发表于 2013-03-04 12:33 |显示全部楼层
ntfs/fat/ext4,接触不到那种重量级的场合,,,

论坛徽章:
4
摩羯座
日期:2014-07-22 09:03:552015元宵节徽章
日期:2015-03-06 15:50:392015亚冠之大阪钢巴
日期:2015-06-12 16:01:352015年中国系统架构师大会
日期:2015-06-29 16:11:28
发表于 2013-03-04 14:35 |显示全部楼层
回复 8# shang2010
行业不同有可能就用不到

如果数据量大的话就有可能会用到了


   

论坛徽章:
13
技术图书徽章
日期:2014-04-29 14:15:42IT运维版块每日发帖之星
日期:2015-12-12 06:20:00IT运维版块每日发帖之星
日期:2015-08-30 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-08-02 06:20:002015年亚洲杯之澳大利亚
日期:2015-04-03 15:03:12申猴
日期:2015-03-20 09:00:292015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15季节之章:冬
日期:2015-01-20 17:08:47双子座
日期:2014-11-21 16:30:31技术图书徽章
日期:2014-07-11 16:29:08
发表于 2013-03-04 14:47 |显示全部楼层
友情支持,这些都不会用到
您需要登录后才可以回帖 登录 | 注册

本版积分规则

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号 北京市公安局海淀分局网监中心备案编号:11010802020122
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员  联系我们:wangnan@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP