有关存储一些问题的开放讨论

storm the front

有没有人试过iBrix呢?

传个附件

liaoboda

原帖由 storm the front 于 2008-9-19 18:54 发表
有没有人试过iBrix呢?

传个附件

Dell香港的一个和我说过这个，他说国内没环境，叫我去印度去测。你说我怎么去呵呵

yuanyuan025

看看

nhuczp

外理小文件是目前并行文件系统的通病!!!

不知你们的集群是多少台机器??

是采用哪种架构??

nhuczp

原帖由 wolfheader 于 2008-9-5 11:53 发表


对，关键字：  命中率

另外，提高性能除了调整cache大小以外，还可以调整cache使用 write back 或者write through。

cache一定的情况下，大量读写很容易把cache利用率搞的很高，实际上还是造成了等待 ...

cache只对顺序读写有用!!!
混合读写没有意义!!!

nhuczp

原帖由 liaoboda 于 2008-9-4 18:04 发表
今天有几个计算所的学生来我们这里找课题，正好这几天我和几个朋友在讨论一些有关现在存储的问题。由于我这里资源比较好（几百台机器，而且和各个厂商关系也不错，要几台测试的机器还是没问题的），我也一直想把 ...

raid5会比单块盘慢,哪就做raid50.

你用的是软raid还是硬raid??????????

nhuczp

原帖由 klin121628 于 2008-9-6 00:15 发表
并行文件系统都是很贵很贵的.........

用这个的人一般不在乎钱!!!

nhuczp

原帖由 冬瓜头 于 2008-9-11 00:02 发表


是的，小文件对于这类FS来说都是梦魇。由于开销过大，往往不能二者兼顾。

我晕,是MDS的大小大于他本身文件的大小所以,小文件慢!!!


这里面涉及到两种不同的架构,一种是有专门的MDS管理服务器(PVFS2);一种是没有专门的服务器去管理,而是通过软件去专门同步(GFS2).

nhuczp

原帖由 liaoboda 于 2008-9-4 18:04 发表
今天有几个计算所的学生来我们这里找课题，正好这几天我和几个朋友在讨论一些有关现在存储的问题。由于我这里资源比较好（几百台机器，而且和各个厂商关系也不错，要几台测试的机器还是没问题的），我也一直想把 ...

2.大量持续的读写，软raid速度比硬raid好。

这句话我想你是测的单线程,而且CPU压力不大的时候得出来的.

你可以测一下大量并发时的结果.其次软raid是没有cach的.这个你可以看代码.

nhuczp

原帖由 liaoboda 于 2008-9-11 15:25 发表

这个能解释下吗？“据我所知linux下的cp或者dd都是单一线程的同步阻塞io”

dd 的代码很简单,就一千多行!!
看懂了强过于别人说!!