数据量大，备份时间长，现有软件不能满足需求，可有好办法？

chnod

回复  rinehart


    基本都是照片、设计文档、视频等大文件。文件目录多而且深。
莲花子 发表于 2011-01-11 09:28

    可以试下归档方式，这样可以减轻备份所带来的瓶颈以及多目录问题。

   这些文档对于备份软件来讲，是一个很大的消耗。

carry01

还是想办法减少数据，加个重删试一下。

咪咪呜

找个分级存储软件厂商咨询一下呗。EMC，ibm，Veritas，CommVault都可以。试试CV的软件，有备份和归档功能。

小的时候

不同的备份软件对备份速度影响非常大，更为关键的是恢复速度有非常大的区分，所以楼主你应该认真地分析和比较，找出最适合你们的解决方案，呵呵。

G-Apple

还可以透过删除重复数据等方式节流，这样把多余的不必要的数据删掉可以节省一些备份时间。

wolfop

回复  rinehart


    基本都是照片、设计文档、视频等大文件。文件目录多而且深。
莲花子 发表于 2011-01-11 09:28

视频是大文件，其他照片和设计文档都是小文件。小文件文件系统备份的瓶颈在于文件系统，因此尽可能要绕开它。
别的备份软件不知道，如果是WINDOWS下面的NTFS，acronis back & recover可以直接做卷级别备份，速度很快。按道理VERTAS的backup exec也应该可以。
当然，前提是你的IO带宽也的够，100M显然不行，走以太网多个GE做ehternet channel是最低要求。最好需要10GE或者直接LANFREE。
另外一个思路是这些文件用NAS存储，利用某些NAS提供的DD2T功能实现快速备份。

wolfop

回复  spook


    当前采用的是LEGATO备份软件，数据量已经超过13TB了。40多个小时只能备3-4TB。
莲花子 发表于 2011-01-11 09:19

你这个速度37MB/s，不是特别容易判断瓶颈。可能在FS，也可能是下层存储或者带库的吞吐量问题。
底层存储是什么？什么OS，什么文件系统。备份设备是什么？

莲花子

是通过网络备份还是直接连接到服务器备份，什么磁带机，什么接口？ 网络设备是什么？
rinehart 发表于 2011-01-11 09:32

SAN备份，LTO4 磁带机 2个，但是仍然备份不下来。

莲花子

老大给人家点其他的建议吧，现在瓶颈在读数据，写入不成问题。

  1小时才100G，30M/S的速度， ...
wolfheader 发表于 2011-01-11 10:39

曾经备份到SATA磁盘，仍然来不及备份，VTL和磁盘备份有啥区别吗？ 而且现在我的数据还在增长，平均1个月要增加50-80 GB左右。

莲花子

视频是大文件，其他照片和设计文档都是小文件。小文件文件系统备份的瓶颈在于文件系统，因此尽可能要绕开 ...
wolfop 发表于 2011-01-13 14:04

    我最大的一个系统就是NAS，数据量超过8TB，而且增长最快的就是它，NAS上面啥叫DD2T功能？