免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Shell › rsync本地同步使用疑问
最近访问板块 发新帖
查看: 2472 | 回复: 5
打印 上一主题 下一主题

[文本处理] rsync本地同步使用疑问 [复制链接]

hinetworking

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2014-12-14 15:35 |只看该作者 |倒序浏览
我在用rsync命令本地同步一个文件时，速度很慢。
文件是一个10G的文件，一开始我复制了一个出来命名为old，复制过程也就20多秒。然后改动原文件，原文件名为new。
后来用rsync new old 进行本地同步，发现要2分多。试了好几次，都一样。rsync不是只传输不一样的部分吗，是时间都耗费在比较上面了吗？是不是可以这么说，rsync命令在进行本地同步时还不如cp命令。其优越性更多体现在，在传输速度差的时候，比如通过弱网络相连的两台服务器之间，这时候rsync的优越性就体现出来了，因为它每次通过网络传输的数据量会小的多。

求指教。
dn833

论坛徽章:
5
未羊 日期:2014-08-04 16:15:21天秤座 日期:2014-08-13 13:52:372015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:56:112015亚冠之浦和红钻 日期:2015-06-29 15:30:48
2楼 [报告]
发表于 2014-12-15 09:09 |只看该作者
rsync要分块校验的，这种超大文件建议LZ你还是cp完了搞下md5sum更快些
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
cryboy2001

论坛徽章:
26
CU十二周年纪念徽章 日期:2013-10-24 15:41:34技术图书徽章 日期:2014-07-11 16:27:52辰龙 日期:2014-09-04 13:40:43白羊座 日期:2014-09-09 12:51:55双子座 日期:2014-09-26 11:00:042014年中国系统架构师大会 日期:2014-10-14 15:59:00子鼠 日期:2014-10-23 16:48:23巨蟹座 日期:2014-10-27 08:21:10申猴 日期:2014-12-08 10:16:282015年辞旧岁徽章 日期:2015-03-03 16:54:15NBA常规赛纪念章 日期:2015-05-04 22:32:03IT运维版块每日发帖之星 日期:2016-01-29 06:20:00
3楼 [报告]
发表于 2014-12-15 09:09 |只看该作者
rsync是同步非常多文件时，才体现出来，你就一个文件，当然多了比对的时间。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
4楼 [报告]
发表于 2014-12-15 10:15 |只看该作者
回复 1# hinetworking


    之前复制的， rsync 无视。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
blackold

论坛徽章:
5
2015年辞旧岁徽章 日期:2015-03-03 16:54:152015年迎新春徽章 日期:2015-03-04 09:50:282015年亚洲杯之朝鲜 日期:2015-03-13 22:47:33IT运维版块每日发帖之星 日期:2016-01-09 06:20:00IT运维版块每周发帖之星 日期:2016-03-07 16:27:44
5楼 [报告]
发表于 2014-12-15 10:25 |只看该作者
本帖最后由 blackold 于 2014-12-15 10:25 编辑

回复 1# hinetworking


重了。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
刺客阿地

论坛徽章:
11
CU十二周年纪念徽章 日期:2013-10-24 15:41:342015年辞旧岁徽章 日期:2015-03-03 16:54:15丑牛 日期:2015-01-14 10:36:40技术图书徽章 日期:2015-01-12 15:46:11白羊座 日期:2014-11-14 09:35:36狮子座 日期:2014-10-30 13:18:49巳蛇 日期:2014-10-11 12:52:08子鼠 日期:2014-09-28 14:11:06双鱼座 日期:2014-04-22 13:05:48午马 日期:2014-02-11 17:58:002015年迎新春徽章 日期:2015-03-04 09:55:28
6楼 [报告]
发表于 2014-12-15 10:54 |只看该作者
rsync在同步若干小文件，校对文件，同步差异化小文件的时候，他的性能和价值就体现出来了，你同步一个大文件，比如说一个1G的文件用rsync去同步。。。当然会慢。。。。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP