天天看点

MySQL专题和技巧——正确清理binlog日志

作者:贺浦力特

binlog(二进制日志)主要记录 MySQL 数据库的变化. 它会记录所有更改表数据和表结构的事件。

使用binlog日志主要有两种用途

  • 主从备份. 主库上的二进制日志记录主库的所有变更, 主库会把日志包含的事件发给从库, 从库执行这些事件, 从而与主库的数据保持一致
  • 从二进制日志恢复数据库.

9de7bb31d0644e7393039222babfed10 欢迎收藏。

清理前的准备

查看主库和从库正在使用的binlog是哪个文件

show master status
show slave status\G           

方法1 手动清理binlog

删除指定日期以前的日志

purge master logs before '2023-04-18 17:20:00';           

删除指定日志文件的日志索引中binlog日志文件(不含指定的序号,000419)

purge master logs to 'binlog.000419';           

方法2 通过设置binlog过期时间,使系统自动删除binlog文件

1. 在mysql中修改

查看binlog过期时间,这个值默认是0天,也就是说不自动清理,本例修改为7天

mysql> show variables like 'expire_logs_days';
+------------------+-------+
| Variable_name    | Value |
+------------------+-------+
| expire_logs_days | 0     |
+------------------+-------+
1 row in set (0.01 sec)
mysql> set global expire_logs_days = 7;

-- 如果  binlog_expire_logs_seconds 已经设置会报错如下
3683 - The option expire_logs_days and binlog_expire_logs_seconds cannot be used together. Please use binlog_expire_logs_seconds to set the expire time (expire_logs_days is deprecated)           

设置之后不会立即清除,触发条件是以下之一:

● binlog 大小超过 max_binlog_size,max_binlog_size 默认为 1G

● 手动执行flush logs

2. 在配置文件my.cnf中修改

mysqld在每个二进制日志名后面添加一个数字扩展名. 每次启动服务器或刷新日志时该数字则增加. 如果当前日志大小达到 max_binlog_size 还会自动创建新的二进制日志. 如果你正在使用大的事务,二进制日志还会超过 max_binlog_size 事务全写入一个二进制日志中,绝对不要写入不同的二进制日志中.

expire_logs_days: 定义了mysql清除过期日志的时间. 默认值为0,表示 "没有自动删除"

max_binlog_size: 二进制日志最大大小,如果二进制日志写入的内容超出给定值,日志就会发生滚动. 变量可设置范围是 4096 字节 和 1GB 之间

在my.cnf中添加配置,设置过期时间为30天

expire_logs_days = 30
max_binlog_size使用默认值即可           

方法3 通过设置binlog过期时间,使系统自动删除binlog文件

MySQL8.0 版本中新增参数 binlog_expire_logs_seconds 可以精确到秒,而此前版本中 expire_logs_days 的单位为天,最小值为1,MySQL8.0 GA中此参数标记为 deprecated. 在 MySQL8.0 GA版本默认使用 binlog_expire_logs_seconds 时间为2592000秒(30天)

若在启动时 inlog_expire_logs_seconds 和 expire_logs_days 都没设置值,则使用默认值的 binlog_expire_logs_seconds 值,即30天

若在启动时 binlog_expire_logs_seconds 或 expire_logs_days 其中一个设置为非0值则非0值的参数作为 binlog 日志失效期

若在启动时 binlog_expire_logs_seconds 和 expire_logs_days 参数都设置为非0值则使用 binlog_expire_logs_seconds 值,expire_logs_days 值则失效并发出告警信息

若要关闭自动清除binlog文件的功能则需要显示指定 binlog_expire_logs_seconds=0 并且不设置 expire_logs_days 的值

为了兼容早期版本若显式指定了 expire_logs_days =0 而没有指定 binlog_expire_logs_seconds 的值,此时自动清理 binlog 日志则是禁用 的,并且此时 binlog_expire_logs_seconds 的默认值不适用

该参数支持动态修改,并且支持持久话到配置文件:

mysql> set global binlog_expire_logs_seconds=60*60*24;
mysql> set persist binlog_expire_logs_seconds=60*60*24;           

补充

reset master: 将删除日志索引文件中记录的所有binlog文件,创建一个新的日志文件,起始值从000001开始. 不要轻易使用该命令,这个命令通常仅仅用于第一次用于搭建主从关系的时的主库

reset slave: 清除master.info文件, relay-log.info文件,以及所有的relay log文件,并重新启用一个新的relaylog文件

使用reset slave之前必须使用stop slave 命令将复制进程停止

继续阅读