- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章MySQL binlog 远程备份方法详解由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
以前备份binlog时,都是先在本地进行备份压缩,然后发送到远程服务器中。但是这其中还是有一定风险的,因为日志的备份都是周期性的,如果在某个周期中,服务器宕机了,硬盘损坏了,就可能导致这段时间的binlog就丢失了.
而且,以前用脚本对远程服务器进行备份的方式,有个缺点:无法对MySQL服务器当前正在写的二进制日志文件进行备份。所以,只能等到MySQL服务器全部写完才能进行备份。而写完一个binlog的时间并不固定,这就导致备份周期的不确定.
从MySQL5.6开始,mysqlbinlog支持将远程服务器上的binlog实时复制到本地服务器上.
mysqlbinlog的实时二进制复制功能并非简单的将远程服务器的日志复制过来,它是通过MySQL 5.6公布的Replication API实时获取二进制事件。本质上,就相当于MySQL的从服务器。与普通服务器类似,主服务器发生事件后,一般都会在0.5~1秒内进行备份.
备份命令 。
。
。
解释如下:
--read-from-remote-server:用于备份远程服务器的binlog。如果不指定该选项,则会查找本地的binlog.
--raw:binlog日志会以二进制格式存储在磁盘中,如果不指定该选项,则会以文本形式保存.
--user:复制的MySQL用户,只需要授予REPLICATION SLAVE权限.
--stop-never:mysqlbinlog可以只从远程服务器获取指定的几个binlog,也可将不断生成的binlog保存到本地。指定此选项,代表只要远程服务器不关闭或者连接未断开,mysqlbinlog就会不断的复制远程服务器上的binlog.
mysql-bin.000001:代表从哪个binlog开始复制.
除了以上选项外,还有以下几个选项需要注意:
--stop-never-slave-server-id:在备份远程服务器的binlog时,mysqlbinlog本质上就相当于一个从服务器,该选项就是用来指定从服务器的server-id的。默认为-1.
--to-last-log:代表mysqlbinlog不仅能够获取指定的binlog,还能获取其后生成的binlog,获取完了,才终止。如果指定了--stop-never选项则会隐式打开--to-last-log选项.
--result-file:用于设置远程服务器的binlog,保存到本地的前缀。譬如对于mysql-bin.000001,如果指定--result-file=/test/backup-,则保存到本地后的文件名为/test/backup-mysql-bin.000001。注意:如果将--result-file设置为目录,则一定要带上目录分隔符“/”。譬如--result-file=/test/,而不是--result-file=/test,不然保存到本地的文件名为/testmysql-bin.000001.
不足:
这个方式有个问题,对于常规的主从复制来说,如果主从直接的连接断开了,则从会自动再次连接,而对于mysqlbinlog,如果断开了,并不会自动连接.
解决方案:
可通过脚本来弥补上述不足.
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
|
#!/bin/sh
BACKUP_BIN=/usr/bin/mysqlbinlog
LOCAL_BACKUP_DIR=/backup/binlog/
BACKUP_LOG=/backup/binlog/backuplog
REMOTE_HOST=192.168.244.145
REMOTE_PORT=3306
REMOTE_USER=repl
REMOTE_PASS=repl
FIRST_BINLOG=mysql-bin.000001
#
time
to
wait before reconnecting
after
failure
SLEEP_SECONDS=10
##
create
local_backup_dir if necessary
mkdir -p ${LOCAL_BACKUP_DIR}
cd ${LOCAL_BACKUP_DIR}
## 运行while循环,连接断开后等待指定时间,重新连接
while :
do
if [ `ls -A
"${LOCAL_BACKUP_DIR}"
|wc -l` -eq 0 ];
then
LAST_FILE=${FIRST_BINLOG}
else
LAST_FILE=`ls -l ${LOCAL_BACKUP_DIR} | grep -v backuplog |tail -n 1 |awk
'{print $9}'
`
fi
${BACKUP_BIN}
--raw --read-from-remote-server --stop-never --host=${REMOTE_HOST} --port=${REMOTE_PORT} --user=${REMOTE_USER} --password=${REMOTE_PASS} ${LAST_FILE}
echo
"`date +"
%Y/%m/%d %H:%M:%S
"` mysqlbinlog停止,返回代码:$?"
| tee -a ${BACKUP_LOG}
echo
"${SLEEP_SECONDS}秒后再次连接并继续备份"
| tee -a ${BACKUP_LOG}
sleep ${SLEEP_SECONDS}
done
|
脚本解读:
1. 实际上定义了一个死循环,如果备份失败,则10s后重新连接.
2. 第一次运行时需指定FIRST_BINLOG的值,指从哪个binlog开始复制,一般为mysql-bin.000001。后续执行的时候就直接获取备份目录下最新的binlog,从最新的binlog开始复制.
总结:
1. 如果指定了--raw,mysqlbinlog获取事件后,并不会实时落盘,而是先保存在本地服务器的内存中,每4K刷盘一次。这也就减少了频繁的日志写操作。如果此时mysqlbinlog和主服务器之间的连接断开了,则内存中的binlog会马上刷新到磁盘中.
2. 尽管mysqlbinlog类似于从服务器,但从服务器上的relaylog却是实时存盘的,即从服务器获取主服务器产生的事件后,会实时写入到relaylog中.
3. 如果不指定--raw,这个时候会以文本格式存盘,此时,--result-file=/test/不能指定为目录,必须明确写上文件名,譬如--result-file=/test/1.sql,此时,mysqlbinlog获取事件后,是实时落盘的,不会每4K刷盘一次.
以上所述是小编给大家介绍的MySQL binlog 远程备份教程详解的相关知识,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对我网站的支持! 。
最后此篇关于MySQL binlog 远程备份方法详解的文章就讲到这里了,如果你想了解更多关于MySQL binlog 远程备份方法详解的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
1、binlog简介 binlog即binary log,二进制日志文件。它记录了数据库所有执行的DDL和DML语句(除了数据查询语句select、show等),以事件形式记录并保存在二进制
如果MySQL服务器启用了二进制日志,你可以使用mysqlbinlog工具来恢复从指定的时间点开始 (例如,从你最后一次备份)直到现在或另一个指定的时间点的数据。“mysqlbinlog:用于处理二
我想编写一个服务来跟踪 mysql bin 日志以获取有关数据库更改的通知。 有没有开源的库可以读取和解析ROW格式的mysql bin log? 最佳答案 使用mysqlbinlog。 The se
canal 定位:基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了mysql。 原理: canal模拟mysql slave的交互协议,伪装自己为mysql sla
以前备份binlog时,都是先在本地进行备份压缩,然后发送到远程服务器中。但是这其中还是有一定风险的,因为日志的备份都是周期性的,如果在某个周期中,服务器宕机了,硬盘损坏了,就可能导致这段时间的bi
mysql binlog3种格式,row,mixed,statement. 解析工作 mysqlbinlog --base64-output=DECODE-ROWS -v mysql-bin.00
要禁用给定表的 bin 日志记录,我知道我可以使用以下命令: replicate-ignore-table=db_name.tbl_name 但是我不确定需要在哪里执行它? 谢谢 最佳答案 您必须将其
我正在设置复制,但我面临的问题是,当我执行插入更新的任何查询甚至创建表时,二进制日志文件没有被更新。这里是我的主人 my.cnf server-id = 1 log_bin
如果我正在读取 MySql binlog,我可以获得同一事务中发生哪些语句的指示吗? 最佳答案 有nothing built-in yet ,但也许this page会提供一些帮助。他们提供了一个 a
我不同意这个问题得到了有效的回答:decode mysqlbinlog in C# . 我有,我认为是同一个问题:我想从 C# 应用程序中读取 MySql 二进制日志,但不知道文件的格式。如何正确解析
我有许多运行 5.1.63 版的 mysql 服务器,本周早些时候在对从属服务器运行一些查询时,我注意到从属服务器上的一些数据本应使用主服务器上的更新语句删除。 我最初的想法是: 团队中的某个人正在更
在mysql中,我通过做来调试记录是如何改变的 mysqlbinlog bin-88.log | grep "record-id"--before=2 --after=2 我如何用 mongo 做类似
例如,在创建新表或更新现有表上的数据时,这些事件将存储在mysql binlog中,也就是MySQL数据库的二进制日志。 二进制日志在MySQL复制中非常有用,主服务器将数据从二进制日志发送到远
我读到过,MariaDB 的 Maxscale(BinLog Server) 可用于将 bin 日志从 MySQL 集群中继到单个 BinLog Server,但是我想知道是否可以从不同的 MySQL
抱歉,这个问题可能非常基本,但我找不到任何东西来解决这个问题。 我有一个 aws rds,当我尝试获取我的 binlog 列表时,它只向我显示 2 个最新的列表。 SHOW BINARY LOGS;
我正在尝试查看 MySQL binlog 文件以追踪特定查询的来源。我使用 SHOW BINARY LOGS 查询来获取现有日志文件的名称,但是当尝试使用 mysqlbinlog 命令访问时,我不断收
我们希望打开查询日志记录,以便我们可以找到更改数据的查询。 是否可以将事务日志写入数据库?binlog和普通查询日志有什么区别? 最佳答案 如果启用,二进制日志将包含所有修改数据的查询。但您应该注意格
我有几个实时数据库需要迁移到新服务器。这些是经常使用的大型数据库。 我想在新服务器上使用从服务器设置复制并开始跨服务器移植数据。但是,我想尝试避免对当前主数据执行 mysqldump 以获得初始 bi
我在一对服务器上设置了复制。一个是主人,第二个是奴隶。 最近在 master 上,binlog 文件被过早清除(通过文件名,所以 mysql 没有阻止过早删除文件)。 现在 SLAVE 有状态: Go
如果全过程使用的是Mysql用户,应该可以正常启动。 如果用的ROOT用户,可能不能正常启动,原因是新建的目录权限不对。 可能会这样的错误提示: /usr/loc
我是一名优秀的程序员,十分优秀!