有关存储一些问题的开放讨论

abo8000

原帖由 liaoboda 于 2008-9-23 09:27 发表

我觉得会和蓝鲸差不多。

蓝鲸那东西到底咋样，一直没用过，前两年他们还没弄好，测了效果不好，不知现在如何，你用过吗。
现在在考虑GPFS，据说是个好东西，有人给我推荐了几次，不过就是太贵了，啥时候免费就好了。

storm the front

原帖由 冬瓜头 于 2008-9-23 09:05 发表

请教一下，您说的这个没有cache的软raid，是哪种软raid？linux下的么？
没有cache，能具体赐教一下么，没有数据缓存，估计这raid都开不起来吧，读出来数据放到哪里呢》待写入的数据又放到哪里呢？

对方的意思估计是指没有writeback cache吧

storm the front

原帖由 liaoboda 于 2008-9-23 09:27 发表

我觉得会和蓝鲸差不多。

索嘎

liaoboda

今天回去休假了，各位。节后见。

liaoboda

昨天台风 飞机取消了 郁闷

刘世伟

这么大的盘，　用什么文件系统？　格一遍，或者检查一遍就要很长时间吧？

或者试试zfs这种不需要检查的文件系统？

冬瓜头

不需要fsck的文件系统多了，zfs，很大程度上只是一个噱头。

liaoboda

15T 到24T 一个 xfs 大的考虑lustre

liugf

我认为不同型号、配置的存储是做不同的备份、应用使用的。像SCSI、SAS、IP、FC接口各有各数据应用。
这样不用的接口就有不同的配置，我们假想一下一个完全是SCSi接口的存储和一个完全是FC的存储，这2款的性能是没法比的。

qqeyes

先挺一下冬瓜兄，书从8月开始等，一定会买的。

最近忙，很少看帖，说说我的想法。

1：raid0比raid5快？
   这个我觉得要看raid5的大小和实现方法，较大规模的raid5和高性能的raid卡，性能一定强过2快盘的raid0.
     但是如果四块raid0和四块raid5比，肯定raid5慢了。raid5有冗余。raid0有么？安全性能平衡才好。
2：磁盘自身缓存。
    对于写：貌似一般来说存储都有内置的几十个G的cache了。如果写一个文件，要先写到存储缓存，在写到磁盘缓存，最后再写到磁盘上，效果肯定不会太好。应该是让大量的请求集中到cache里，让磁盘认为那是一个连续写的请求，性能才会好。ssd请忽略此处。
    对于读：都是电子结构，没必要设两层吧。
    所以如果某存储说禁用磁盘自身缓存，我觉得是可以理解的。
3：sas盘的速度。
    我们这里有测出近160M/s吞吐量的sas，觉得很快，后来去查型号，厂商确实有标称最大速度160M/s
4：软raid和硬raid
     这完全决定于客观条件。那个奔腾3和高档raid卡比比。。。。
   很多中高端存储号称某某功能用硬件实现，代替原来软件处理，性能提高***，必定是有道理的。否则那些做专业处理芯片的人都要下岗了。

5：关于文件大小。
   好像上m的文件都归结为小文件了。。。。
   我觉得文件大小应该接近实际。。。。。嘿嘿，老是拿些极端的测未必能得到我们想要的结果。不太喜欢物理学的原因就是放到生活中全挂--考虑问题全是理想状态。
   最常见的应该是k，十几k级别的小文件吧，而且不是大量，是海量，也不是需要几个p那么玄。如果你们能研究下几个T的k级小文件，倒是相当有用的，门户啊，什么的，都有用到的。嘿嘿。
   再有就是几十m的文件。一直觉得在线视频是个不错的东西，如果能优化，有前途。

6：ssd
     还是看环境了，没有绝对的绝对。
   ssd很多还是并发的速度标称，intel好想用的业内某家芯片的来着，性能不错。但是不要和1块硬盘比随机，真的没意义。

[ 本帖最后由 qqeyes 于 2008-10-8 16:58 编辑 ]