历史 很多商业化的分布式文件系统，如IBM的GPFS，Intel的PFS等，它们在性能，可用性上都有不错的表现，但一般价格昂贵，且需要特殊的存储设备的支持，普通用户构建基于此类的集群服务器代价高昂；而较老的开放源码的分布式文件系统，如NFS、AFS等，性能和可用性又不是十分理想。因此，对开放源码的新型分布式并行文件系统的需求一直比较迫切。目前，对于公开源码的分布式文件系统，声誉最好的是Clemson大学和NASA实验室联合开发的...

历史 Tiger Shark是由IBM公司Almaden研究中心为AIX操作系统设计的并行文件系统，约1993年的时候完成。它被设计用于支持大规模实时交互式多媒体应用，如交互电视（interactive television, ITV）。基于Tiger Shark文件系统，可以构建大规模的视频服务器，并能以每秒6Mb的速度传递几百个并行的MPEG流。Tiger Shark文件系统已经应用到了RS/6000的完整的产品线上，从最小的桌面机到SP-2并行超级计算机。 IBM公司Almaden研究中心不断...

4. 设计策略 4.1. 文件访问并发度方面 1． 文件块大小设置 l 因为磁盘寻道时间占据了磁盘存取总时间的绝大部分，所以在连续磁盘扇区进行读写比在磁盘上跳转具有更高的带宽效率。 l 文件块（block）要大，GPFS是16KB－1M，默认256KB，DFS是1M，MMFS是512KB，一般的文件系统是4KB。 l 这种做法文件碎片可能很大，GPFS采用的策略是把1个块分为16/32个子块，把不足一个block大小的小文件以及文件...

3. 应用需求 多媒体应用到底在那些方面提出了哪些要求？ 3.1. 播放器部分 1． 暂停（Pause）和继续（resume）支持，同时支持并行的记录（record）和回放（playback) ； 2． 同时记录两个不同的视频流 ； 3． 快速播放（Fast forward）、重放（rewind）和拖尾（through the playing program）； 4． 跳跃（Skip），支持前跳（forward）和后跳（backward ) ； 5． 在磁盘上组织文件记录，以便他们能被方便的访问； ...

1. 研究背景 1.1. 研究历史和研究现状 1． 在1990年代的中后期很火爆，能够查阅到的论文基本上是这个时期的 2． 到2000左右发生变化，相关的研究论文突然消失了，似乎没有人对这个感兴趣了，why？猜测的原因： l 1990年代可能这方面的应用刚刚起步，整个架构设计处于草创阶段，各主要大学的计算机系都对此方面展开了比较深入的研究，如CMU，NYU等等；各个商业公司对这个比较有前途的应用领域也是采取比较...

2. 相关技术 2.1. 应用特点 1. 有一定的实时要求 2. 巨大的文件大小和相当高的数据传输率 3. 多重数据流 2.2. 研究方向 1. 磁盘调度 u 成绩优先算法（Performance-oriented algorithms） u 实时保证算法（Real-time algorithms u 基于流的算法（Stream-oriented algorithms） u 混合算法（Mixed-media algorithms） 2. 数据存放 1) ...

推荐资料：《分布式文件系统研究（Distributed File System Study）》 在Panasas，Lustre，GPFS和PVFS2这几种被应用的主流高性能文件系统集群中，Lustre需要使用相对比较健壮的对象存储服务器，使用简单的分条策略，但并没有在单个结点失效后主动重分布数据的能力。PVFS2在存储结点间结点进行数据分条，但没有使用校验和冗余机制以保证系统的可用性。并且GPFS和Lustre依赖于存储结点的磁盘阵列来容忍磁盘失效， PVFS2虽然使用普通...

NSF存储分布式集群文件系统

Lustre File System 错误恢复 Lustre在设计上考虑了对网格环境的支持，一方面它考虑了文件系统的安全性策略，包括认证、授权和文件内容加密三个方面；另一方面它考虑在管理与系统状态监控方面与网格的结合，其配置信息和状态信息采用XML格式，提供通过LDAP（Light-Weight Directory Access Protocol)接口操纵配置信息，而且可以支持通过SNMP来获取和修改这些信息。 图4 MDS错误恢复 Lustre在设计时也充分考虑了系统故障时的错误恢...

Lustre File System 历史 Lustre是HP，Intel，Cluster File System公司联合美国能源部开发的Linux集群并行文件系统。它来源于卡耐基梅隆大学的NASD项目研究工作。Lustre文件系统2003年推出了1.0版，目前已经推出了1.4.7的发布版本。 Lustre在美国能源部(U.S.Department of Energy：DOE)、Lawrence Livermore 国家实验室，Los Alamos国家实验室，Sandia 国家实验室，Pacific Northwest国家实验室的高性能计算系统中已得到了初步的...

Google File System 前言 没什么好说的，传说中的文件系统，当代网络超大容量分布式文件系统设计的典范，Google的核心竞争力所在。Google的Search、GMail、 video、blog spaces等等都是用这个技术做的。Google目前的中国区总裁李开复就认为学计算机的学生都应该看看Google File System。 很佩服Google的开放精神，将GoogleFS的详细设计写成了Paper: The Google File System, （ http://labs.google.com/papers/GoogleFS-s...