论坛徽章:: 40

1楼 [报告]

发表于 2013-10-22 21:45 |显示全部楼层

本帖最后由 forgaoqiang 于 2013-11-05 02:56 编辑

绝对支持当时在图书馆看了将近一半内容了要是能有书看完最好啦先占个位置然后慢慢回复吧 ~~ :wink:

1、您所了解的存储技术在介质、协议、设备、分布式、数据管理方面有什么特点？遇到的难题有哪些（有哪些利弊）？
要说存储技术肯定少不了以下的三个分类：
①DAS（Direct Attached Storage）：这个意思比较明显，就是直接附加存储。介质可以包含几乎所有的存储设备，协议多采用SCSI或者SATA等，本身毫无分布式可言，数据管理方面主要靠宿主系统进行管理，因为是直接附加存储，完全可以进行块级访问。
优点是直接附加，简单且成本低，缺点比较多，受数据线长度（比如SCSI理论最大长度25M）、可连接的存储设备数（容量）限制明显，而且系统和存储不分离，容易出现系统单点故障，且无法良好共享存储。
②NAS（Network Attached Storage）：常用于中小型企业，协议采用IP网络共享，存储设备本身带有管理系统，向需要存储的设备提供共享存储。具有一定的分布式能力，能够提供多种不同的文件系统，管理需要在管理存储的主机上设置。
优点仍然是比较方便，而且作为网络文件系统，可以被多个平台使用，比较明显的缺点是无法提供块级访问，而且IP网络有效负载较低，CIFS（windows）和NFS（linux）协议都有较大的开销。
③SAN（Storage Area Network）：大名鼎鼎的存储区域网，过去依靠专有的FC协议，专有的交换机，极高的性能，良好的可扩展性和可靠性，能够屏蔽底层介质特性。即使现在来看传统的FC实现还是成本过高，现在基于IP网络的FCoIP视乎发展不错挺有前途的样子。

现在来看，存储虚拟化技术（相同或不同厂家磁盘阵列整合后再分配的虚拟化技术），这些技术都是为了让上层逻辑更加的简单，SINA（存储网络行业协会）提供了比较好的共享存储模型

可以看出现在存储都是在通过一层层抽象（特别是NAS）为上层提供更加简单的逻辑。
分享下当时从《大话数据2》中学习到一些内容：

2、存储系统在云计算、大数据和固态介质时代来临时，将面临何种挑战和机遇（分布式存储，SSD技术等）？

个人认为存储系统的I/O始终是面临挑战的主要问题，特别是针对具有很强的随机读写要求的数据，传统的机械硬盘性能对SSD闪存盘来说，性能可能相差50倍以上，因此依靠RAID以及分布式提高性能是一种方法。当前大数据问题导致对存储空间的要求越来越大。
现在大数据分析对数据系统也是有一定挑战的，目前来看Hadoop的 Map-Reduce 思想能够将数据分布式存放到各个存储中，并分别在不同的位置进行计算，与此类似的还有MongDB的自动管理分区的能力，都是新的分布式技术，为存储提供了不少新的机遇。
除了空间和I/O问题之外，另外一个重要的挑战就是存储网络本身的问题。传统的交换已经无法满足大数据快速传输的要求，而且开销也过大，于是出现了“巨帧”等技术。还有STP技术在存储网络里面却成了“累赘”，大二层是数据网络中的新的挑战。数据存储网络设备也在出现新的技术，比如思科的Nexus系列还有Juniper QFabric产品，还有新的VOQ虚拟出向队列技术，这些都是新的技术。

另外分享下拜读冬瓜头大哥的《大话数据2》的部分笔记，先为占用了大家的版面空间道个歉 {:3_188:}