存储技术之前世今生--存储技术现状及未来发展趋势讨论（获奖名单已公布-2013-11-21）

huni93

进来学习   

冬瓜头

讨论个问题吧：Hadoop被设计为rack aware，尽量避免跨节点数据交互，但是随着集群规模不断扩大业务复杂度不断提升，跨节点交互数据在所难免，一旦发生，开销陡增。有什么办法缓解这一问题。俗话说动什么都不能动应用，但是动什么都不如动应用，看对谁，对底层人员来讲，如何从底层实现解决办法？比如为了避免多次内存拷贝实现了DMA，RDMA，那么HDFS是否底层可以用另一种方式来访问存储呢？

冬瓜头

再讨论个技术点的问题吧，AIX下块设备性能为什么总是那么差，不管底层用了多么高端的存储。

AlanWangGe

>您所了解的存储技术在介质、协议、设备、分布式、数据管理方面有什么特点？遇到的难题有哪些（有哪些利弊）？

主要是和所谓的统一存储打交道，绝大多数的时候当然就是NFS了。说穿了，NFS管理起来比FC要简单多了
不过又说起来， 说起来，主机端的各种OS及中间件，DB对NFSv4 的兼容性依然不理想 很多时候不得不继续用v3 而v3所用到的mountd进程又因为OS间implementation的不同而个性大为迥异

>存储系统在云计算、大数据和固态介质时代来临时，将面临何种挑战和机遇（分布式存储，SSD技术等）？

存储的版本管理，升级扩容之类的最头疼了  版本一不同， 存储间的replication备份，包括对上层文件系统的支持也常出意外。

另外，SSD的性能稳定性还有待提高

niuhai211

SSD是最近在存储领域比较有亮点的东东。对于提高IO性能确实不错，也已经有人在用了。抛开成本因素，我还是不太敢用SSD，安全性也要考虑的。
把SSD作为一个内存和磁盘之间的中转还是可以考虑的。
HDFS也挺火，大数据时候在到来，比较看好。

m1594660

进来学习

laputa73

项目对存储的需求，海量，快速，可靠，支持并行随机读取（或者快速查询）,支持并行写入
现有的什么技术合适呢？
目前是HDFS,感觉还是操作不方便。读写性能都不高。

冬瓜头

Hongqiyaodao 发表于 2013-10-23 22:49
我想问个问题
VMware ESXi software iSCSI 、HP BL680c G7、VC Flex-10、Huawei 10G、HP X5520 iSCSI（Win ...

以前碰到过ESX连iscsi target闪断的问题，原因好像是iqn冲突，不知道是否是这原因，具体得实际看一下，流量很轻的话可以抓包看一下。

冬瓜头

laputa73 发表于 2013-10-24 10:07
项目对存储的需求，海量，快速，可靠，支持并行随机读取（或者快速查询）,支持并行写入
现有的什么技术合适 ...

通用的话Gluster目前用的比较多，没元数据，hash寻址，可以看看。ceph平台比较大，多协议支持，但是据说操作不太友好。