rsync同步200GB2000万个文件如何实现比较好？

首天

备份需求：
1，实现增量备份；
2，备份间隔时间越短越好，如30分钟；
3，后台运行；
4，不能影响系统正常运行；

备份的文件：
1，大小约200GB；
2，文件数量约2000万个，约6000个一级目录；
3，每天更新或者添加的文件数量在10万左右；

目前的备份方法：
1，以一级目录为单位进行tgz压缩，存储到备份服务器上，如果压缩为一个tgz则耗时太长，且影响系统运行；
2，每隔4小时检测一次一级目录下面文件是否有更新或者新增，如有则更新tgz；

不足之处：
1，每次新增或者更新都需要更新整个tgz；
2，备份时对系统会有影响，目前是每次压缩完一个就暂停3秒执行下一次任务；
3，由于按一级目录进行分开压缩，恢复文件的时候不是很方便；

鉴于以上原因，一时没有找到好的备份方法，最好是实时备份，看到rsync实现增量备份很不错，就准备测试一下，谁知道第一次整理文件列表1个小时过去了还才150万，2000万那得多少时间啊，盼高手指点此类需求如何实践比较好，谢谢

turn999

这个200G太大了，帮顶一下，期待高手解答:wink:
易发国际 http://www.yifa8.org

loveradmin

sersync 试试这个！ 触发文件式的同步

首天

sersync 试试这个！ 触发文件式的同步
loveradmin 发表于 2011-09-09 15:22

谢谢，google了一下，sersync也要依靠rsync程序