海量数据迁移归档解决方案

sjqy5753

通常用户迁移和归档的需求
用户提出在数据分级
存储
管理系统建设里，需要实现以下功能：
1、实现分级存储管理，包括：在线存储管理，近线存储管理，离线存储管理；
2、具有
迁移、归档、回迁等功能；
3、具有磁盘空间释放和磁带整和功能；
4、当文件迁移到磁带（近线存储设备）上，磁盘应保留文件识别信息，以便查询、检索、回迁文件；
5、对离线设备即脱机磁带上的数据仍能了解它存放的内容和数量，需要时随时可转为二级存储或一级存储设备上的资料；
6、迁移数据的格式应满足通用性，提供脱离本软件读取归档数据的解决方案；
7、能够满足从MB到GB大文件的归档和回迁能力；
8、能够保证迁移过程中数据直接通过
SAN
通路从磁盘迁移到磁带库上，只有命令流才通过SAN管理
服务器
--即实现“脱离服务器的迁移和回迁”；
9、支持主流的磁带机和自动磁带库；
10、灵活的归档策略，可以根据访问文件时间、文件
系统空间使用率、文件使用频率、文件名、文件类型等条件进行归档；
11、提供与
数据库
管理系统的接口；
12、提供集成化、图形化的管理工具，可方便地进行安装、配置和管理；
13、提供管理监控的
AP
I编程接口和商用监控管理软件的可管理接口。
典型方案描述:
    1．在所有主流平台上的分级的数据存储管理，从网络各个地点上传的数据将先保存在磁盘阵列中缓冲区中，再通过系统管理员指定相应的策略，数据将会自动的转移到后面的大型磁带设备中；
2．数据在迁移到了后台的磁带存储介质上以后，仍然在
硬盘
上保留有相应数据的识别信息，在用户对已经迁移走的数据进行访问的时候，系统将凭借这些信息从磁带中找回用户所需的文件；
3．只要用户在硬盘上所开辟的缓冲区足够大，那么可以保证任何容量的文件顺利的迁移至磁带库；
4．在SAN结构中，数据的迁移或访问将通过，磁盘>服务器>磁带或磁带>服务器>磁盘的数据流动方式实现，从而完全实现LAN-FREE方式，不会对用户网络造成额外的压力；
5．集中管理.用户可以通过一套完整的GUI用户界面实现对整个分级存储系统的完善管理。。

polystor.com.cn


本文来自ChinaUnix博客，如果查看原文请点：http://blog.chinaunix.net/u2/74483/showart_1095059.html