存储技术探讨:数据迁移的实现原理与应用

sjqy5753

数据迁移概述- 数据迁移技术实现- 数据迁移组织相关- 数据迁移行业应用-

易混淆的理论澄清
　　数据迁移自问世以来，常常同备份混淆起来。那看过上文对于数据迁移的介绍，咱们再来看看备份。
　　备份是把在线数据保存为离线数据的一种数据保护方式，备份的对象是文件系统。当需要调到主机中时，需要运用数据恢复技术，恢复的时间极长，还需要人工干预。迁移则不同，它不仅可以把在线数据保存为离线数据，还把离线数据模拟成在线数据，也就是说，从用户角度看，数据“一直”在线，调用磁带设备上的数据只需2分钟，而且调用是全自动的。另外，迁移技术保存的是文件而不是整个文件系统，对磁盘和磁带数据的更新也是随时随地的。在投资上，也有差别，后者需要在前者基础之上购买迁移管理软件。

Lsi存储件展示
　　由此可见，数据迁移更多从降低成本、不影响数据应用效果的角度解决数据的存储问题。事实上，降低成本、提高效率已成为it厂商追逐技术进步的一个目标。近线存储就是这种进步的产物。所谓近线存储，是利用盘阵对数据的快速存储速度和成本大幅下降的优势，模拟带机、带库的海量存储空间，以满足用户对数据快速备份的需要。同是为降低用户投入成本，它与数据迁移还是有差异的。近线存储用磁盘备份数据，只有在长期不用的情况下才转到磁带设备上; 而数据迁移用磁带备份数据。

IBM新推出的高性能入门级存储
数据迁移的组织结构
　　虽然实现数据迁移的原理较为复杂，但该系统组织结构非常简单。它由2部分组成，一个是管理数据迁移过程的管理服务器，一个是存储被迁移数据的存储系统。
　　管理服务器　主要服务于存储网络的数据迁移工作，它就像存储网络中的管理员，一旦发现数据达到规则设定的标准，便将数据从一级存储设备（盘阵）向下一级存储设备（盘库和带库）复制，并且释放出一级存储设备的存储空间。此外，它还负责制定所有数据的迁移策略，并驱动和管理带库等二级存储设备。
　　管理服务器通过安装hsm软件行使服务职能。目前比较知名和流行的hsm管理软件有legato diskxtender和veritas netbackup 。像legato diskxtender，可在unix/linux平台上根据用户创建的适合企业运营所需的文件管理规则，自动将不常用的数据迁移到较廉价的存储设备上，用户不受介质和设备类型及数据存储位置的限制，能够直接、透明的访问被保存的数据，并通过灾难恢复管理器组件在异地保存、管理和访问数据。

HP存储硬件产品
　　veritas storage migrator在功能和管理形式上与legato diskxtender有相似之处，也存在些差别: legato diskxtender支持的介质比较丰富，它允许数据被迁移到带机、带库、盘库、worm介质、dvd和cd盘片等，并且在windows平台和unix平台为独立的产品线结构，对于介质的管理完全由该软件自身提供，支持hp-ux/solaris/tru64/irix/linux/windows 2000/xp等多种操作系统，而veritas storage migrator 在进行数据迁移时需要其备份产品netbackup的帮助，支持在操作系统平台支持上目前还没有diskxtender丰富，但是在其自身的文件系统vxfs的支持上结合比较紧密；在数据库迁移方面，veritas storage migrator没有提供解决方案，而legato diskxtender支持oracle数据库，未来还将支持其他数据库的迁移；特别是在邮件服务方面，legato专门设计了emailxtender，它可自动将数据从邮件服务器迁移到存储系统，索引所有收发的电子邮件。
　　除了这两家第三方存储管理软件提供商外，一些存储设备提供商也设计了相应的数据迁移解决方案。像stk公司的 asm，它将磁盘缓存仿真成虚拟的带机和磁带介质，通过将磁带数据组写入一个磁盘缓冲器，加速数据写和读的速度。当数据被写入真正的单盘物理磁带时，asm将数据组顺序存入介质中，使得单盘磁带100%的容量都被使用起来。
　　存储系统　存储系统可以是san系统，也可以是das系统等。无论哪种系统，被迁移的数据最终存放在该系统的离线存储设备上。这些设备并不需要提供实时的存储服务，只在某一时刻的应用提出要求时才涉及，这种设备所保存的数据可进行离线管理。
　　有了管理服务器和存储系统，用户可以开展数据迁移工作了。整个数据迁移方案的实现如附图所示。
数据迁移概述- 数据迁移技术实现- 数据迁移组织相关- 数据迁移行业应用-

数据迁移适用行业
　　虽说数据迁移是个挺不错的技术，从某种意义上讲，它的应用范围还是比较有限的，不是所有的应用都有必要采用这项技术。只有当企业拥有超大容量的历史数据，或者需要保存的数据远远大于在线数据量、又具有需要时能较快速调出信息的特点，才选择数据迁移技术。那么，都有哪些典型行业适合采用这种技术呢？
　　医疗行业　正如我们开篇介绍的，医疗病历的保存是数据迁移技术的一个典型应用。
　　保险行业　保险公司每个保险项目都拥有众多受保人，其个人属性、投保款项、时间和金额等都是保险公司保存备案的重要信息，一旦突发事故，这些数据要随时调出以备核算赔偿细则。所以，保险公司非常有必要将投保人的相关数据保存下来，以便即时调用、查询。数据迁移是降低投资成本又不影响数据调用速度的较好选择。
　　专利行业　在信息技术快速发展的今天，专利技术也是层出不穷，在全国范围内，每天都有若干项专利产生，算上过去的老专利，形成一个规模庞大的数据空间。如果把它们单纯备份到带库中，将不利于急需时的快速调用，而数据迁移技术正好可以解决这个问题。
　　气象行业　历史气象资料是现代气象研究中非常宝贵的气象分析资源，虽然这些数据不常用，但会不定期地涉及。气象行业的用户可利用数据迁移技术将这些数据存放到便宜的备份设备中，同时保证研究人员随时查到所需信息。
　　电视行业　人们经常能在电视节目中看到一些历史资料，这些资料连同之后产生的各种历史事件的记录都被存放在存储系统中，一旦新节目需要，就要被调出剪辑。为了节目的快速制作，最好采用数据迁移技术完成对历史资料的保存。
　　电信行业　在电信营业厅，每天都产生成千上万的话单，时间一长，都成为历史数据需要保存起来，因为用户可能会随时查询。

SGI存储柜
数据迁移前景预测
　　与其他存储技术相比，数据迁移属精密度高、复杂度大、专业性强的技术。尤其在利用带库模拟在线调用时，因为必须结合带库技术，使其具有难以克服的弱点。一方面，缺乏安全保障。与磁盘比较，磁带的安全性要差一些，当关键数据存放在其上，又遇到卷带等故障时，迁移软件将束手无策，势必影响业务运营。另一方面，查询与检索不够智能。
　　伴随单盘成本的下降，近线存储市场渐热，有业内专家预测，不久的将来，近线存储技术将取代数据迁移技术，用户将以模拟海量空间的、更为安全可靠的磁盘介质保存历史数据。而成熟完善的数据迁移软件技术将更为恰到好处的融入到近线存储设备中，为近线存储技术的发展起到推波助澜的作用。


本文来自ChinaUnix博客，如果查看原文请点：http://blog.chinaunix.net/u2/74483/showart_1093473.html