Chinaunix

标题: 关于大量小文件数据的备份 [打印本页]

作者: xuman6601651 时间: 2013-01-23 12:36
标题: 关于大量小文件数据的备份
   我有大概50T的小数据文件，存放在一个NAS的存储里面，存储死EMC的，
   每个文件大概3~10M，数据文件类型是那种视屏文件

   现在我在进行测试的时候只用了数据重删的功能（加速），走网络路径，速度大概是35M/S（万兆的网络带宽)

   求问我有那些方式能加速备份  或者是添加 license能增加备份的速度

作者: asmboy001 时间: 2013-01-23 13:44
链表太大了，文件数量这么多没什么好办法备份

作者: xuman6601651 时间: 2013-01-25 11:59

作者: 无牙 时间: 2013-01-25 13:44
赛门的加速优势是在增量备份上。全备份没有什么提升。

35M/S是全备份还是增量备份？

作者: xuman6601651 时间: 2013-01-25 14:02
回复 4# 无牙

首次全备，我那了4.5T做测试的第二天备份的速度变为27M，客户那是万兆的光纤

作者: daivd1211 时间: 2013-01-29 09:26
小文件备份事件时比较长，
我看你还是改一下备份策略，全备份长期保存，每日增量备份；没有把当月的增量备份一次长期保存。

作者: rand1985 时间: 2013-01-29 09:32
本帖最后由 rand1985 于 2013-01-29 09:37 编辑

我这里有个类似的：
小文件数量几十万上百万个，容量约240G。文件备份使用的standard类型，备份的是NAS上的nfs类型的文件。
在恢复的时候，bplist文件列表的时候，时间非常非常长，36万个文件约90分钟才列出。
在这里请教下高手有什么办法可以减少大量小文件的恢复时间？？

作者: myguangzhou 时间: 2013-01-31 16:46
好几M的文件，不算小文件了啊

作者: xuman6601651 时间: 2013-02-01 09:51
回复 8# myguangzhou

相对来说比较小

作者: zhangjianrencai 时间: 2013-02-22 10:39
可以加网卡呀

作者: xuman6601651 时间: 2013-02-28 09:40
回复 10# zhangjianrencai

带宽已经是万兆了...

欢迎光临 Chinaunix (http://bbs.chinaunix.net/)