MySQL实战系列4: 主从复制、读写分离、备份恢复全解析

作者介绍

索宁擅长python开发、mysql、前端等众多技术领域曾负责众多企业安全架构解决方案涉猎行业有媒体、出版社、航空运输、医疗、军队、政府、教育等。

一、mysql主从复制

1、简介

我们为什么要用主从复制

主从复制目的

可以做数据库的实时备份保证数据的完整性

可做读写分离主服务器只管写从服务器只管读这样可以提升整体性能。

原理图

从上图可以看出同步是靠log文件同步读写完成的。

2、更改配置文件

两天机器都操作确保 server-id 要不同通常主id要小于从id。一定注意。

# 3306和3307分别代表2台机器

# 打开log-bin,并使server-id不一样

#vim /data/3306/my.cnf

log-bin = /data/3306/mysql-bin

server-id = 1

#vim /data/3307/my.cnf

log-bin = /data/3307/mysql-bin

server-id = 3

#检查

1、

[root@bogon ~]# egrep "log-bin|server-id" /data/3306/my.cnf

[root@bogon ~]# egrep "log-bin|server-id" /data/3307/my.cnf

2、

[root@localhost ~]# mysql -uroot -p -s /data/3306/mysql.sock -e "show variables like 'log_bin';"

enter password:

+--------+--------+

| variable_name | value |

| log_bin | on | # on 为开始开启成功

3、建立用于从库复制的账号rep

通常会创建一个用于主从复制的专用账户不要忘记授权。

# 主库授权允许从库来连接我取日志

[root@localhost ~]# mysql -uroot -p -s /data/3306/mysql.sock

# 允许从库192.168.200网段连接账号rep密码nick。

mysql> grant replication slave on *.* to 'rep'@'192.168.200.%' identified by 'nick';

query ok, 0 rows affected (0.00 sec)

mysql> flush privileges;

# 检查创建的rep账号

mysql> select user,host from mysql.user;

+-----+-------------+

| user | host |

+-----+--------------+

| root | 127.0.0.1 |

| rep | 192.168.200.% |

| root | localhost |

| root | localhost.localdomain |

+-----+------------------+

7 rows in set (0.00 sec)

4、备份主库及恢复到从库

把主库现有数据备份下来再恢复到从库此时两个主机的数据一致。

如果事先有数据的话这不不能忘。

1)在主库上加锁使只有只读权限。

mysql> flush table with read lock;

#5.1、5.5锁表命令略有不同。

# 5.1锁表flush tables with read lock;

# 5.5锁表flush table with read lock;

2)记住就是这个点备份的。

mysql> show master status;

+-------+------+--------+---------+

| mysql-bin.000013 | 410 | | |

1 row in set (0.00 sec)

3)克隆窗口备份数据。

[root@bogon ~]# mysqldump -uroot -p -s /data/3306/mysql.sock -a -b --events --master-data=2|gzip >/opt/rep.sql.gz

参数 -a备份所有的

#看rep.sql.gz参数

vim /opt/rep.sql.gz

-- change master to master_log_file='mysql-bin.000013', master_log_pos=410;

4)查看master status数值是否正常。

+------+------+---------+-------+

+-------+-----+---------+--------+

| mysql-bin.000013 | 410 | | |

+--------+----+---------+--------+

5)解锁库

mysql> unlock tables;

6)恢复到从库

[root@bogon ~]# gunzip < /opt/rep.sql.gz | mysql -uroot -p -s /data/3307/mysql.sock

5、配置从库及生效

更改从库和主库的连接参数配置生效。检查就成功了

1)进入从库。

[root@bogon ~]# mysql -uroot -p -s /data/3307/mysql.sock

2)更改从属服务器用于与主服务器进行连接和通讯的参数。

mysql> change master to

master_host='192.168.200.98',

master_port=3306,

master_user='rep',

master_password='nick',

master_log_file='mysql-bin.000013',

master_log_pos=410;

query ok, 0 rows affected (0.01 sec)

3)查看更改的参数。

[root@localhost ~]# cd /data/3307/data/

[root@localhost data]# cat master.info

mysql-bin.000013

410

192.168.200.98

rep

nick

3306

1800.000

4)生效

mysql> start slave;

5)检查下列参数符合则正常

mysql> show slave status\g

relay_master_log_file: mysql-bin.000013

slave_io_running: yes #取logo。

slave_sql_running: yes #读relay-bin、logo,写数据。

seconds_behind_master: 0 #落后主库的秒数。

6)查看relay-bin.logo。

[root@localhost 3307]# cd /data/3307

[root@localhost 3307]# ll

总用量 48

drwxr-xr-x. 9 mysql mysql 4096 10月 29 18:52 data

-rw-r--r--. 1 mysql mysql 1900 10月 29 11:45 my.cnf

-rwx------. 1 root root 1307 10月 20 17:06 mysql

-rw-rw----. 1 mysql mysql 6 10月 29 11:00 mysqld.pid

-rw-r-----. 1 mysql mysql 15090 10月 29 18:49 mysql_nick3307.err

srwxrwxrwx. 1 mysql mysql 0 10月 29 11:00 mysql.sock

-rw-rw----. 1 mysql mysql 150 10月 29 18:49 relay-bin.000001

-rw-rw----. 1 mysql mysql 340 10月 29 18:52 relay-bin.000002

-rw-rw----. 1 mysql mysql 56 10月 29 18:49 relay-bin.index

-rw-rw----. 1 mysql mysql 53 10月 29 18:52 relay-log.info

7)查看relay-log.info。

[root@localhost 3307]# cat relay-log.info

/data/3307/relay-bin.000002

340

497

8)查看master.info。

[root@localhost 3307]# cat data/master.info

6、读写分离

读写分离在生产环境比比皆是也是必备技能。

忽略mysql主从复制授权表同步读写分离。

[root@bogon 3306]# vim my.cnf

#添加以下四行

replicate-ignore-db = mysql

binlog-ignore-db = mysql

binlog-ignore-db = performance_schema

binlog-ignore-db = information_schema

1)通过read-only参数防止数据写入从库的方法。

#修改配置文件。

vim /data/3307/my.cnf

[mysqld]

read-only

#对用户授权事不能指定有super或all privileges权限。不然没效果。

#创建账户suoning并刷新权限。

mysql> grant select,insert,update,delete on *.* to 'suoning'@'localhost' identified by '123';

#用创建账户登录并创建库

[root@bogon 3307]# mysql -usuoning -p123 -s /data/3307/mysql.sock

mysql> create user kangkangkang@'192.%' identified by 'old123';

error 1290 (hy000): the mysql server is running with the --read-only option so it cannot execute this statement

2)主从同步故障

a. last_sql_errno: 1007

stop slave;

set global sql_slave_skip_counter = 1;

start slave;

b.忽略

skip-name-resolve #忽略名字解析

slave-skip-errors = 1032,1062,1007 #忽略故障编号

3)从库开启bin-log

vim my.cnf

log-slave-updates #表示从库记录bin-log

expire_logs_days = 7 #保留7天bin-log。

7、主宕机

我们来模拟一下如果主机宕机了那我们该如何让从快速替换让损失降到最小当然了双机热备也是一个不错的选择那下节会给大家讲解。

一主多从的环境下如果主宕机了选一台从做主继续和其它从同步。

a.查看每个从库的master.info看谁的更靠前最新更大丢的数据最少。

[root@localhost 3307]# cat /data/3307/data/master.info

mysql-bin.000015

326

b.确保所有relay log全部更新完毕。

在每个从库上执行stop slave io_thread;show processlist;

知道看到has read all relay log;表示从库更新都执行完毕。

c.登陆mysql -uroot -p -s /data/3307/mysql.sock

reset master;

quit

d.进入到数据库目录删除master.info relay-log.info

cd /data/3307/data/

rm -f master.info relay-log.info

e. 3307提升为主库

开启log-bin = /data/3307/mysql-bin

如存在log-slave-updatesread-only等一定要注释。

/data/3307/mysql restart

f.其它从库操作

change master to master_host ='192.168.200.98';

show slave status\g

8、双主

使用主主前提表的主键自增。

双主情况下id会是这样情况通过程序指定id写库m11,3,5m22,4,6。

[root@localhost 3307]# vim my.cnf

auto_increment_increment = 2

auto_increment_offset = 2

[root@localhost 3307]# ./mysql restart

[root@localhost 3306]# vim my.cnf

auto_increment_offset = 1

log-slave-updates

[root@localhost 3306]# ./mysql restart

[root@localhost 3306]# mysqldump -uroot -pnick -s /data/3307/mysql.sock -a -b --master-data=1 -x --events > /opt/3307bak.sql

[root@localhost 3306]# mysql -uroot -pnick -s /data/3306/mysql.sock < /opt/3307bak.sql

master_port=3307,

master_user='rep',

master_password='nick';

mysql> show slave status \g

二、mysql备份及恢复

1、备份单个数据库

最基础的备份单个数据库。

1>语法mysqldump –u 用户名 –p 数据库名> 备份的数据库名

2>备份nick_defailt数据库查看内容。

[root@localhost ~]# mysqldump -uroot -p -b nick_defailt >/opt/mysql_nick_defailt.bak

[root@localhost ~]# egrep -v "#|\*|--|^$" /opt/mysql_nick_defailt.bak

drop table if exists `oldsuo`;

create table `oldsuo` (

`id` int(4) not null,

`name` char(20) not null,

`age` tinyint(2) not null default '0',

`dept` varchar(16) default null

) engine=myisam default charset=latin1;

lock tables `oldsuo` write;

insert into `oldsuo` values (2,'ç´¢å®',0,null),(3,'ç´¢å°¼',0,null),(4,'åº•åº•',0,null);

unlock tables;

drop table if exists `student`;

create table `student` (

`qq` varchar(15) default null,

`id` int(4) not null auto_increment,

`suo` int(4) default null,

`dept` varchar(16) default null,

`sex` char(4) default null,

primary key (`id`),

key `index_name` (`name`)

) engine=myisam auto_increment=8 default charset=latin1;

lock tables `student` write;

insert into `student` values (null,2,'oldsuo',null,0,null,null),(null,3,'kangknag',null,0,null,null),(null,4,'kangkang',null,0,null,null),(null,5,'oldsuo',null,0,null,null),(null,6,'kangknag',null,0,null,null),(null,7,'kangkang',null,0,null,null);

3>启用压缩备份数据库

[root@localhost~]#mysqldump -uroot -p -b nick_defailt|gzip>/opt/mysql_nick_defailt.bak.gz

[root@localhost ~]# ll /opt/

总用量 28

-rw-r--r--. 1 root root 2109 10月 24 16:36 data_bak.sq2

-rw-r--r--. 1 root root 2109 10月 24 16:36 data_bak.sql

-rw-r--r--. 1 root root 1002 10月 27 11:55 mysql_nick_defailt.bak

-rw-r--r--. 1 root root 1002 10月 27 11:56 mysql_nick_defailt.bak.gz

-rw-r--r--. 1 root root 3201 10月 27 11:46 mysql_nick_defailt_b.bak

drwxr-xr-x. 2 root root 4096 11月 22 2013 rh

-rw-r--r--. 1 root root 1396 10月 24 16:11 student_bak.sql

4>恢复nick_defailt数据库

[root@localhost ~]# mysql -uroot -p nick_defailt </opt/mysql_nick_defailt.bak

#加-b恢复方法

[root@localhost ~]# mysql -uroot -p </opt/mysql_nick_defailt_b.bak

5>总结

1、备份用-b参数。增加use db,和create database的信息。

2、用gzip对备份的数据压缩。

2、备份多个数据库

备份多个数据库的情况呢

#多个数据库名中间加空格

[root@localhost ~]# mysqldump -uroot -p -b nick_defailt oldsuo oldsuo_1|gzip>/opt/mul.sql.gz

3、备份单个及多个表

那如果备份单个和多个表怎么办

1>语法mysqldump -u 用户名 -p 数据库名表名 > 备份的文件名

[root@localhost ~]# mysqldump -uroot -p nick_defailt student >/opt/mysql_nick_defailt_student.bak

2>语法mysqldump -u 用户名 -p 数据库名表名1 表名2 > 备份的文件名

[root@localhost ~]# mysqldump -uroot -p nick_defailt student oldsuo >/opt/mysql_nick_defailt.bak

4、mysqldump 的参数

mysqldump 的关键参数

-b指定多个库增加建库语句和use语句。

--compact去掉注释适合调试输出生产不用。

-a 备份所有库。

-f刷新binlog日志。

--master-data 增加binlog日志文件名及对应的位置点。

-x--lock-all-tables

-l,--locktables

-d 只备份表结构

-t 只备份数据

--single-transaction 适合innodb事务数据库备份。

5、增量恢复

重要的来了生产环境一般是增量备份与恢复所谓增量就是在原数据的基础上继续添加数据不必每次都重新添加省时省力。

a增量恢复必备条件

1.开启mysql数据库log-bin参数记录binlog日志。

[root@localhost 3306]# grep log-bin /data/3306/my.cnf

2.存在数据库全备。

b生产环境 mysqldump备份命令

# 进行数据库全备生产环境还通过定时任务每日凌晨执行

mysqldump -uroot -pnick -s /data/3306/mysql.sock --default-character-set=gbk --single-transaction -f -b nick |gzip >/server/backup/mysql_$(date +%f).sql.gz

# innodb引擎备份

mysqldump -u$myuser -p$mypass -s $mysock -f --single-transaction -a -b |gzip >$data_file

# myisam引擎备份

mysqldump -u$myuser -p$mypass -s $mysock -f -a -b --lock-all-tables |gzip >$data_file

c恢复

# 通过防火墙禁止web等应用向主库写数据或者锁表。让主库暂时停止更新然后再进行恢复。

# 误操作删除nick库

1.检查全备及binlog日志

[root@localhost 3306]# cd /server/backup/

[root@localhost backup]# gzip -d mysql_2015-10-31.sql.gz

[root@localhost backup]# vim mysql_2015-10-31.sql

[root@localhost backup]# grep -i "change" mysql_2015-10-31.sql

2.立即刷新并备份出binlog

[root@localhost 3306]# mysqladmin -uroot -pnick -s /data/3306/mysql.sock flush-logs

[root@localhost 3306]# cp /data/3306/mysql-bin.000030 /server/backup/

#误操作log-bin,倒数第二

[root@localhost backup]# mysqlbinlog -d nick mysql-bin.000030 >bin.sql #导出为.sql格式。

[root@localhost backup]# vim bin.sql

找到语句drop database nick删除误操作语句

3.恢复

[root@localhost backup]# mysql -uroot -pnick -s /data/3306/mysql.sock <mysql_2015-10-31.sql #恢复之前的数据库全备

[root@localhost backup]# mysql -uroot -pnick -s /data/3306/mysql.sock nick < bin.sql

#恢复删除误操作语言的bin-log。

# 搞定

原文发布时间为2016-12-05

本文来自云栖社区合作伙伴dbaplus

MySQL实战系列4: 主从复制、读写分离、备份恢复全解析

继续阅读

Linxu常用命令技巧汇总

ERROR 1 (HY000): Can't create/write to file '/tmp/#sql_4188_1.MYI' (Errcode: 28)

艰难安装LDAP,SSL认证

《Linux命令行与Shell脚本编程大全第2版.布卢姆》pdf

MySQL的4种隔离级别？出现问题

XX系统实施过程问题总结

无组件上传图片到数据库中，最完整解决方案

【MySQL数据库】数据库索引事务1.索引2.事务

27 Best Free Eclipse Plug-ins for Java Developer to be ProductiveCode Quality PluginsText Editor PluginsDependency ManagementVersion Control Integration PluginsFramework Development Continuous Integration Related PluginsOther Utility Plugins

neo4j之cypher使用文档

NOSQL安全攻击

mybatis_入门程序Mybatis入门

mysql使用source命令导入.sql文件

登录plsql 报错 the account is locked --用户被锁

sqlServer根据经纬查距离

SequoiaDB巨杉数据库C++驱动概述