免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 1075 | 回复: 0
打印 上一主题 下一主题

[MongoDB] Mongodb 复制的纽带–Oplog [复制链接]

求职 : Linux运维
论坛徽章:
203
拜羊年徽章
日期:2015-03-03 16:15:432015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:57:092015小元宵徽章
日期:2015-03-06 15:58:182015年亚洲杯之约旦
日期:2015-04-05 20:08:292015年亚洲杯之澳大利亚
日期:2015-04-09 09:25:552015年亚洲杯之约旦
日期:2015-04-10 17:34:102015年亚洲杯之巴勒斯坦
日期:2015-04-10 17:35:342015年亚洲杯之日本
日期:2015-04-16 16:28:552015年亚洲杯纪念徽章
日期:2015-04-27 23:29:17操作系统版块每日发帖之星
日期:2015-06-06 22:20:00操作系统版块每日发帖之星
日期:2015-06-09 22:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-01-23 10:07 |只看该作者 |倒序浏览
Oplog 可以说是Mongodb Replication的纽带了。

作用:

当Primary进行写操作的时候,会将这些写操作记录写入Primary的Oplog 中,而后Secondary会将Oplog 复制到本机并应用这些操作,从而实现Replication的功能。
同时由于其记录了Primary上的写操作,故还能将其用作数据恢复。
可以简单的将其视作Mysql中的binlog。

大小:

Oplog 是一个capped collection。
在64位的Linux, Solaris, FreeBSD, and Windows 系统中,Mongodb默认将其大小设置为可用disk空间的5%(默认最小为1G,最大为50G),或也可以在mongodb复制集实例初始化之前将mongo.conf中oplogSize设置为我们需要的值。
但是由于Oplog 其保证了复制的正常进行,以及数据的安全性和容灾能力。
我们可以通过如下两个图(MMS)来了解他增加的情况:
131

123
上图分别是Oplog 每小时的增量,以及现有Oplog 存储了多少小时的操作。我们可以根据这个来监控并观察oplog情况。我们需要足够的oplog大小来保证数据的安全性。
也可以通过命令来查看:
db.getReplicationInfo()

我们在生产环境中很可能会发现,可用disk的5%可能不够用,那么我们就需要进行Oplog 的扩容了。

Oplog的扩容 :
背景:一个由3个节点组成的复制集。
主节点:A 从节点:B,C
需求:Oplog扩容,尽量少的影响业务。
思路:先由从节点开始,一台一台的从复制集中剥离,修改,再回归复制集,最后操作主节点来减少业务影响时间。
流程:
先将B节点关闭,去掉–replSet启动参数,更换启动端口–port,将节点以单机模式启动。
然后备份其现有的oplog:
mongodump –db local –collection ‘oplog.rs’ –port 37017
进入mongo,将现在的oplog中最新的位置复制到tmp表(local数据库)中:
use local
db.temp.save( db.oplog.rs.find( { }, { ts: 1, h: 1 } ).sort( {$natural : -1} ).limit(1).next() )
确认tmp中的数据:
db.temp.find()
删除原有的oplog:
db.oplog.rs.drop()
建立新的oplog(capped),下例为2G大小,可根据需求修改:
db.runCommand( { create: “oplog.rs”, capped: true, size: (2 * 1024 * 1024 * 1024) } )
将tmp中的数据存储到新的oplog中,并验证:
db.oplog.rs.save( db.temp.findOne() )
db.oplog.rs.find()
关闭B节点,并恢复原有config配置,并在config中设置oplogSize为你之前设置的大小,并启动。
继续对C节点进行如上操作,C节点完成后最后对主节点A进行如上操,作即可完成。

两个命令
db.printReplicationInfo()
db.getReplicationInfo()
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP