有奖讨论：寻找节省数据存储成本的有效措施！存储虚拟化、分布式文件系统、集群NAS

blackjack550

原帖由 ldw21cn 于 2009-7-9 17:59 发表


我觉得Moosefs好，比较容易配置，不像前几种配置复杂

Lustre，是开放源代码的集群文件系统, 采取 GPL 许可协议，集群计算机里，计算机与磁盘间数据交换速度的提升无法跟上微处理器和内存增长的速度，从而 ...

是前面3个画的图太火星了。 也就最后一个比较好看懂。。

blackjack550

原帖由 lasama 于 2009-7-9 21:52 发表
VMWARE虚拟机我见过的还只有用来做开发环境或者测试环境，有部署在生产系统上的么？能否透漏一下做什么应用的不？
如果能透露一下架构就更好了  

应该虚拟化不是传统方式的那种vmware虚拟吧？如果那样的话开机同时启动两套系统必然很慢啊何况网络连接也会有问题啊。怎么用于服务器啊

blackjack550

其实还有好多问题想问，只好带着疑问去 参加活动了

blackjack550

真是也就对F5有点认识，那个叫博科的都没有听说过呢还

blackjack550

原帖由 ldw21cn 于 2009-7-9 18:04 发表


文件虚拟化允许企业访问网络文件服务器上隔离的存储容量，并且在上面进行无缝的文件迁移。

总觉得如果不中断服务扩容这个事情太夸张了，就是热插拔可以办到，但是实时改变卷的容量怎么来说也是不可能的吧。现在的工程师简直太强大了

blackjack550

记得就算在一前公司存储也是一个很让人头大的问题。主要还是用什么存储方案比较可靠，稳定。测试过很多的存储方案都觉得不太理想。不过还是觉得存储一定要独立出来共享调用这样比较方便

blackjack550

还有一个问题请教，我记得在玩windows sql集群的时候 用sql的集群设置，中间他让需要共享磁盘。那个共享磁盘的意思。是不是就是这种共享类存储呢。一直很不明白，当时测试用vm所以直接可以改配置文件。但是应用到生产的话，那个共享存储应该是独立文件存储器吧？不知道哪位高人知道。

blackjack550

存储如果传输量大的话  增加mtu是不是可以增加传输效能呢？就是如果传输数据块比较大，增加网卡的mtu是不是就可以缩减时间？当然如果修改的话交换机也得修改。
还有存储网络一定要千兆么？~如果百兆会不会影响其他网络传输

sparkingcn

很有意思的一个讨论
我正好在最近2年设计、开发过存储虚拟化。它的确是一个非常酷的技术。通过gns，数据的位置对用户是透明的。这种方案的关键是如何解决NFSv2, v3的性能，nfs lock, 如何做透明化的migration, replication， 安全性等。从市场来说，类似博科的方案将来会有生存压力。这也正是我们当初研发的产品没有最终面世的原因。

对于类似lustre, hadoop, pnfs, moosefs等方案来说，我一直比较感兴趣。普遍的问题是这些系统对交互式很强的应用难以适应，比如数据库。相对来说一些静态的数据可能更合适用他们。最好不要有多个用户同时修改同一文件的同一位置。
在这一方面，lustre做得最好。宣称是完全posix兼容。目前sun收购了lustre,将来应该发展不错。但是由于他是基于内核开发的，给维护，稳定性带来些问题.而且我记得lustre最好部署在有SAN的环境。这给他的应用带来了门槛。
hadoop有点类似google fs，但是他是用java开发的。个人不是很看好他的性能。(不好意思，一直从事服务器端研发，很看重性能）
pnfs说了很久，看上去很美。但是目前利用不是很广泛。难以和cifs, nfsv3抗衡（至少目前是）。我想这也是所有这些新的分布式文件系统没有被广泛应用的原因。

对于用户的需求，我的理解是他们需要你提供工业标准的接口（比如nfsv3, cifs），这样他们不需要改他们的环境，程序。同时也要求你提供gns, 透明的migration, replication, 无限扩展功能，易管理，廉价的硬件设施等。

不知道我的理解对不对，目前正打算做一个存储系统（非软件方案），来满足上面的需求。可惜时间，人力不够。有兴趣的朋友不妨聊聊。呵呵