介绍 Gluster File System 是自由软件,主要由 Z RESEARCH 公司负责开发,十几名开发者,最近非常活跃。目前正集中提高1.3版本的可靠性,1.4版本的若干高可用特性也在开发中。 文档也比较齐全,不难上手。 主要应用在集群系统中,具有很好的可扩展性。软件的结果设计良好,易于扩展和配置,通过各个模块的灵活搭配以得到针对性的解决方案。可解决 以下问题:网络存储,联合存储(融合多个节点上的存储空间),冗余备份,大文件的负...
by xing_jia - 分布式文件系统(FastDFS) - 2008-12-15 09:59:55 阅读(2046) 回复(0)
由于业务需要,研究了一下分布式文件系统glusterfs,这个对于大文件比较合适,对于小文件太坑爹了。glusterfs 是2台服务器做replication. 测试结论 对于单机性能测试,可以用现成的测试工具来完成,比如dd,iozone,但每种工具测试的结果差异比较大 NFS 方式,读40K大小的文件就可以把网络IO占满, 写操作10Mb/s NFS 方式,对4K大小的文件性能下降非常厉害 glusterfs文件系统,没有合适的测试工具,直接采用cp,人肉测试 glust...
glusterfs as a Development Platform In this session, attendees will be treated to a deep dive on building new filesystems on glusterfs, including how to extend the platform and writing translators. We'll cover data encryption, user-specified layouts for DHT, Gluster's smarter rebalance algorithm, performance analysis, tuning and more. Kaleb Keithley, Sr. Principal Software Engineer Kaleb work...
听说这个集群文件系统还不错的~~ 也看了一段时间了~~ 有哪位大侠已经用上了么~~ 具体咋样的哈~~~ :wink: 阿三把它吹的神乎神乎的~~ 不知道实际效果有那么好的没~~
看 glusterfs 的东西也有段时间了,不过一直一来也是停留在对这个分布式系统的学习,当然对于一个软件的学习不能仅仅停留在对这个软件的熟悉,还要考虑它所适用的范围。最近就在思考,到底对于我们的什么应用合适,我这边接触的比较多的结构就是N台Web+单个NFS。我就再想,既然glusterfs是个聚合分布式文件系统,而且支持HA的功能,是不是可以使用glusterfs来替换NFS,既可以达到共享文件的用途,有可以解决了单点的问题。 先来看...
北京一家专门从事云存储系统开发公司,高薪诚聘glusterfs研发经理,要求3-5年glusterfs系统开发经验。 TEL: 400-6828-115(24小时服务) Q Q: 1169222888 E-MAIL: [email]info@initdream.com[/email]
来自红帽的消息: 今天我们很高兴的宣布 glusterfs 发布,glusterfs 是一个集群的文件系统,支持 PB 级的数据量。glusterfs 通过 RDMA 和 TCP/IP 方式将分布到不同服务器上的存储空间汇集成一个大的网络并行文件系统。该系统现在正式支持 OpenStack 的三种主要模式存储,包括:文件、块和对象。你可通过 RDO来获取相关的信息。RDO 是一个免费社区驱动的 OpenStack 分发版,基于红帽的企业 Linux、Fedora 以及相应衍生版上运行...
本帖最后由 mukey 于 2012-09-28 16:52 编辑 在这里,我只讨论图片这种小文件这个应用场景。 FUSE 非常的方便,目前主要研究了这块 1. NFS 致命的缺陷就是一旦服务器的服务挂了,客户端df, ls设计到nfs的都僵死了,这个是无法接受的,不知是否有办法解决。性能最好 2. moosefs 性能还是很不错的,适合小文件。做分布式,避免单点故障。(测试的时候没有设置goal,用的是默认的1) 3. glusterfs 用的是2台replication,小文件g...
root@IRIS1:/usr/local/glusterfs/sbin# ./gluster volume add-brick v1 192.168.12.209:/home/data9 Incorrect number of bricks supplied 1 for type STRIPE with count 7 以上是我想在一个建立的条带(raid0)卷上增加主机目录,想测试动态的增加空间,不过通过命令后报错。不知道什么原因? 请教啊!!!主机节点添加209的时候是正常的。 root@IRIS1:/usr/local/glusterfs/sbin# ./gluster peer probe 192.168.12.209 Probe su...