- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章关于单台MongoDB实例开启Oplog的过程详解由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
背景 。
随着数据的积累,MongoDB中的数据量越来越大,数据分析团队从数据库中抽取变化数据(假如依据栏位createdatetime,transdatetime),越来越困难。我们知道MongoDB的副本集有一个数据结构Oplog,里面存储了Primary节点的所有写操作(此处的写操作是指查询以外的操作,包含 更新、异常等)。其实,数据的抽取完全可以从Oplog中抓取这些操作,然后去重放.
oplog是local库下的一个固定集合,Secondary就是通过查看Primary 的oplog这个集合来进行复制的。每个节点都有oplog,记录这从主节点复制过来的信息,这样每个成员都可以作为同步源给其他节点.
Oplog 可以说是Mongodb Replication的纽带了.
但是在实际的生产环境中,我们很多MongoDB 数据库是单实例的,那么我们能否在单实例数据库上开启Oplog?
答案是肯定的.
其原理就是,在单实例上配置副本集,如果配置成功了,自然就有了Oplog.
配置过程 。
其实配置的过程比较简单.
step 1 : 在配置文件中 添加副本集参数(replSet); 。
step 2 :重启服务; 。
step 3:在local数据库或admin数据库执行初始化副本集的脚本,rs.initiate().
注意事项 。
1. 在配置文件中增加副本集参数(replSet=??),MongoDB实例重启,第一次登入,执行其他命令时(例如:show dbs),会提示错误,错误信息如下, 。
1
2
3
4
5
6
|
{
"ok" : 0,
"errmsg" : "not master and slaveOk=false",
"code" : 13435,
"codeName" : "NotMasterNoSlaveOk"
}
|
此时一定要执行初始化的命令:
1
|
rs.initiate({ _id:
"副本集名称"
, members: [{_id:0,host:
"ServerIP:MongoDBPort"
}]})
|
2 . 初始化时,请指明 Server信息和端口信息,否则初始化时可能报错,报错信息如下 。
"errmsg" : "No host described in new configuration 1 for replica set replwms maps to this node".
指定IP 和 端口,副本集名称,例如执行以下命令,OK 。
3 . 副本集初始化可以在admin中执行,不仅仅可以在local数据库中执行【真正的副本集建立多是在admin库中执行】.
而不像有些文章中要求的那样 :You just need to issuers.initiate()on thelocaldatabase
4. 初始完,副本集中唯一的节点,可能短时间显示为SECONDARY或OTHER。一般而言,稍等一会,就会自然恢复为primary,无需人工干预.
或 。
如果数据库的数据量不大,并且长时间初始这种过渡状态(SECONDARY或OTHER),去看实例的日志,也显示无进展,此时可以考虑重启服务.
下面案例是我们实际遇到的一个场景,我们是通过重启服务解决此问题,角色由other重启转换为Primary 。
总结 。
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对我的支持.
原文链接:http://www.cnblogs.com/xuliuzai/p/9643128.html 。
最后此篇关于关于单台MongoDB实例开启Oplog的过程详解的文章就讲到这里了,如果你想了解更多关于关于单台MongoDB实例开启Oplog的过程详解的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
我有一个包含 3 个成员的副本集。每个人都在 Linux 上运行 mongod 2.4.8。我正在使用 MMS 代理来监视我的副本集/主机的运行状况,并且一切正常。 我正在使用 mongodump 来
我以前看过这个问题,但答案很模糊。我一直在对 oplog 进行一些研究,并试图准确了解它是如何工作的。特别是,我想对 oplog 文档中的字段以及它们存储的数据有一个很好的了解。 这些是我通过测试发现
我需要能够恢复单个数据库,甚至是备份中的单个集合。由于 mongodump --oplog 仅适用于完整实例(副本集),我进行了以下过程以仅过滤我想从 oplog.bson 由 --oplog 选项生
我正在尝试改进我的 MongoDB 服务器的 oplog,因为现在它覆盖的时间比我想要的要少(我现在不打算增加 oplog 文件的大小)。我发现oplog集合中有很多noops记录-{“op”:“n”
所以我刚刚在我的项目中添加了 redis-oplog https://github.com/cult-of-coders/redis-oplog meteor add cultofcoders:red
有一个 OpLog 游标,是否有可能在更新操作中获取除默认 _id 之外的另一个索引? 背景: 我有一个分片集群,使用复合索引作为分片键。此复合键的一部分用于确定哪一组分片用于存储数据(也称为 Tag
我正在使用 Elastich Search 和 MongoDB 开发一个应用程序。 Elasticsearch 使用 MongoDB oplog 通过称为 river 的组件对内容进行索引。 是否可以
我想使用 oplog 从单个数据库创建增量备份策略 由于 mongodump 的 --oplog 选项创建了完整版本的转储,我想知道是否有任何方法可以: 从 单个数据库 使用“x”秒前的 oplog
我正在寻找在副本集(非分片)上执行 Mongodb 备份的正确方法。 通过阅读 Mongodb 文档,我了解到“mongodump --oplog”应该足够了,即使在副本(从属)服务器上也是如此。 F
MongoDB oplog“op”字段中的不同字母是什么意思?我可以猜到一些字母的含义,但我不确定。 "n"= ? "i"= insert ,这样对吗? "u"= 更新,这对吗? "c"= count
这个问题在这里已经有了答案: How can Python Observe Changes to Mongodb's Oplog (4 个回答) 关闭6年前。 我正在尝试在 mongo 的 oplog
是否可以修改MongoDB oplog并重放它? 一个错误导致将更新应用于比预期更多的文档,从而覆盖了一些数据。数据已从备份中恢复并重新集成,因此实际上没有丢失任何内容,但我想知道是否有办法修改 op
我有 2 个节点集群(8 个 vCPU,52 GB)用于 mongodb(3.2.0)。我正在调试几个需要几秒钟的查询,我运行了 db.currentOp()查看正在运行哪些查询以及它们花费了多少时间
我知道 oplog 文件会将多个更新拆分为单个更新,但是批量插入呢?这些也被分成单独的插入吗? 如果我有一个写入密集型集合,大约每 30 秒插入一批约 20K 文档,我是否/应该考虑将 oplog 大
我们正在使用 mongo java 驱动程序 3.2.2 和 mongo oplog 集合来识别我们的 mongo 集合中的更改(Mongo 服务器版本为 3.2)。我们遇到了以下 2 个问题,并且对
是否可以使用 mongodump 并将其 mongorestore 到不同的主机,使用不同的数据库名称,并启用 oplog? From: mongodb://user:password@source-
我想查看 oplog,所以我按照 here 中的建议启动了 MongoDB。 mongod --master --port 8888 --dbpath ... 但是当我运行的时候 >db.oplog.
我的 mongodb 今天被黑了,所有数据都被删除了,黑客需要一些钱才能取回,我不会付钱给他,因为我知道他不会把我的数据库还给我。 但我打开了 oplog,我看到它包含超过 300,000 个文档,保
我最近开始使用 MongodDb,我正在尝试探索副本集和崩溃恢复。 我已经读过它,就像日志文件正在写一个头重做日志文件。oplog 文件是每个写入事件都将被写入的文件。 这两者有什么区别...?我们是
关闭。这个问题是opinion-based .它目前不接受答案。 想要改进这个问题吗? 更新问题,以便 editing this post 提供事实和引用来回答它. 关闭 8 年前。 Improve
我是一名优秀的程序员,十分优秀!