浩存 - 面向数据库，虚拟机等海量数据可同时提供NFS/iSCSI访问的集群存储系统

BoTtLeImP

请教个问题哈, 目录的内容一般是怎么保存比较好呢?
按常规的文件系统, 目录就是个特殊文件, 内容就是下面的文件列表, 是保存在block上的.
那分布式系统应该采取什么策略比较好呢? 也是保存一份文件列表放在chunk上吗? 这样似乎开销会比较大, 每次定位文件的时候要先定位目录, 然后读取目录内容获得文件inode号再去定位.

我看google的设计是采用放弃目录内容的方法:
GFS does not have a per-directory data structure that lists all the files in that directory
这样一来想要支持链接, 或者列出目录下的所有文件就基本没戏了.

shinelian

分布式文件系统 专业群
1. qq群：（讨论非常热烈）
   102082446  （通关密码：我爱分布式文件系统）
2. bbs讨论：
    mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署，性能测试)不断更新ing
     http://bbs.chinaunix.net/thread-1644309-1-1.html

mfs优势：
0. 通用文件系统，不需要修改上层应用就可以使用。
1. 可以在线扩容。
2. 部署简单。
3. google filesystem的一个c实现。
4. 提供web gui监控接口。
5. 提高随机读或写的效率
6. 提高海量小文件的读写效率

shinelian

分布式文件系统 专业群
1. qq群：（讨论非常热烈）
   102082446  （通关密码：我爱分布式文件系统）
2. bbs讨论：
    mfs权威指南(moosefs)分布式文件系统一站式解决方案(部署，性能测试)不断更新ing
     http://bbs.chinaunix.net/thread-1644309-1-1.html

mfs优势：
0. 通用文件系统，不需要修改上层应用就可以使用。
1. 可以在线扩容。
2. 部署简单。
3. google filesystem的一个c实现。
4. 提供web gui监控接口。
5. 提高随机读或写的效率
6. 提高海量小文件的读写效率

l540l540

www.meidisen.com,看了这个帖子，让我很感动！虽没能细细的看，不过我知道这个帖子从2005年持续至今天！很幸运，能加入到www.meidisen.com。

yftty

回复 234# l540l540


    你是哪个，msn上告诉我下～

yftty

http://www.china-pub.com/196237  欢迎大家看看这本书

Will The Cloud Deliver A 'Computer' to Every Person and Education to Every Child?
Written by Mike Kirkwood / February 1, 2010 5:30 PM / 1 Comments

These days, having computer skills is an important part of a person's resume. Likewise, it is important for a country's ability to navigate through economic opportunities of our world. In recent years, countries like India have changed their position in the world based on their population's ability to deliver computer skills and support to the rest of the world.

At the same time that these skills are becoming increasingly needed, prices are dropping dramatically for computing hardware. The netbook enjoyed a huge year in 2009. New form factors of computing devices also gained that attention of the masses, and 2010 started with a bang with the $499 iPad tablet computing device. The technology world is continuing to innovate computing systems that continue to get smaller and more portable. This video from a researcher in Japan shows a entirely new form factor of computer coming to market, in the shape of a pen with a projector and camera at the tips.

So we're asking this question: For the world to live in harmony do we all need to own one (or more) personal computers?

yftty

在这个集群文件系统产品基础上形成了我们的云主机产品方案如下面的图。

我们的架构和测试结果如下：

服务器同时运行虚拟机软件和集群存储软件，磁盘不做RAID。

SAS一块盘160 IOPS，随机的

读 IOPS = 单盘 IOPS * 盘数
写 IOPS = 单盘 IOPS * 盘数 / 副本数

单台 虚拟机 IOPS = 读写 IOPS / 虚拟机数目

盘数是指的集群内所有服务器的磁盘总数，副本数是一个文件同时冗余存储到几台服务器的磁盘上（一般2到3台）。

这样单台虚拟机可以达到非常高的IOPS能力。

例如有10台服务器，每台6块SAS盘，则总体IOPS=10 X 6 X 160 = 9600 IOPS

只运行一台虚拟机的话，则这台虚拟机可以达到 9600 IOPS的能力

fire-phoenix

chifeng

相当的nb啊，游总经过这几年的坚持，已经搞出了完善可用的部署在cluster FS上的虚拟化系统，技术实现上已经超越了Amazon那一套。是非常适合公司用来部署Private cloud环境的。。。死顶这个帖子！！！

lantian728

Unix下针对邮件,搜索,网络硬盘等海量存储的分布式文件系统项目
largeness   project