MySQL主从介绍
- MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，另外一台B也会跟着写数据，两者数据实时同步的
- MySQL主从是基于binlog的，主上须开启binlog才能进行主从。
- binlog，其实就是一个文件，文件里记录了一些日志，文件是 二进制文件，无法cat
- 主从过程大致有3个步骤
- 主将更改操作记录到binlog里
- 从将主的binlog事件(sql语句)同步到从本机上并记录在relaylog里
- relaylog，中文叫做 中继日志
- 从根据relaylog里面的sql语句按顺序执行
- mysql主从共有三个线程
- 主上有一个log dump线程，用来和从的I/O线程传递binlog
- 从上有两个线程，其中I/O线程用来同步主的binlog并生成relaylog，另外一个SQL线程用来把relaylog里面的sql语句落地
MySQL主从原理图
mysql主从使用场景：
- 数据备份，主机器宕机，从机器还能随时对web提供服务
- 作为一个从库，读的库，减轻主库的压力，数据备份且可以分担主机器被调用数据时的压力，mysql主从，是有方向性的，写数据，必须从主机器开始；如果不依照原理会导致数据紊乱
17.2 准备工作
mysql安装总结
- mysql主从准备工作：
- 准备两台机器，每台机器安装msyql服务，并启动mysql服务
- 首先下载二进制免编译的包，下载到/usr/local/src/目录下
- 解压压缩包
- 解压完之后，把解压出来的目录放到 /usr/local/mysql/ 目录下
- 注意点：
- 首先检查 /usr/local/mysql/ 目录是否存在
- 若是这个目录存在，首先把这个目录改个名字，或者把目录下的内容删除
- 然后把解压出来的目录放到 /usr/local/mysql/ 目录下面
- 然后切换到 /usr/local/mysql/ 目录下，进行初始化 命令
- 初始化命令 ./scripts/mysql_install_db --user=mysql --datadir=/data/mysql
- 注意点：
- 其中的--user=mysql 需要提前创建
- 注意点：
- 初始化成功的标志就是两个OK，或者用 echo $? 检查是否初始化成功
- 编辑 /etc/my.cnf 文件——>默认是自带 my.cnf 文件的
在 /etc/my.cnf 文件中定义 datadir=/data/mysql 定义 socket=/tmp/mysql.sock
- 拷贝启动脚本
- 命令 cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld
- 编辑启动脚本
vim /etc/init.d/mysqld //对以下两行进行指定路径指定basedir的路径 /usr/local/mysql 指定datadir的路径 /data/mysql
- 之后就可以启动mysql了
- 命令 /etc/init.d/mysql start
- 如果启动失败，可以去查看错误日志
- 建议 ：查看 /data/mysql 目录下的文件，默认属主、属组，如果不是mysql的，启动时会因无法写入数据而不能启动mysql
- 改变属主和属组，命令 chomd mysql:mysql /data/mysql
- 然后就可以尝试启动，命令 /etc/init.d/mysql start
- 若想开机启动，只需要输入命令
- 命令 chkconfig mysqld on
主从配置 - 主上操作
- 安装mysql
- 修改my.cnf，增加server-id=130和log_bin=aminglinux1
- 修改完配置文件后，启动或者重启mysqld服务
- 把mysql库备份并恢复成aming库，作为测试数据
- mysqldump -uroot mysql > /tmp/mysql.sql
- mysql -uroot -e “create database aming”
- mysql -uroot aming < /tmp/mysql.sql
- 创建用作同步数据的用户
- grant replication slave on . to 'repl'@slave_ip identified by 'password';
- flush tables with read lock;
- show master status;
主从配置 - 主上操作
- 在两台机器安装并启动mysql服务后，首先在主上进行操作
- 修改/etc/my.cnf配置文件
- 在配置文件下[mysqld]下添加
- server-id=134 这个id可以自定义，这里根据ip来定义
- log_bin=yueyong123 打开binlog，名字自定义为log_bin=yueyong123 最终如下
- 更改完配置文件后，需要重启mysql
- /etc/init.d/mysqld restart
[root@yong-01 mysql]# /etc/init.d/mysqld restartShutting down MySQL.. SUCCESS! Starting MySQL.. SUCCESS!
- 这时候来/data/mysql/目录下，会生成一些文件
- ls -lt /data/mysql/
[root@yong-01 mysql]# ll总用量 110712-rw-rw---- 1 mysql mysql 56 6月 6 20:29 auto.cnfdrwx------ 2 mysql mysql 48 6月 20 22:19 db1-rw-rw---- 1 mysql mysql 12582912 6月 28 22:48 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月 28 22:48 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月 6 20:19 ib_logfile1drwx------ 2 mysql mysql 4096 6月 20 23:00 mysqldrwx------ 2 mysql mysql 68 6月 20 23:04 mysql2drwx------ 2 mysql mysql 4096 6月 6 20:19 performance_schemadrwx------ 2 mysql mysql 6 6月 6 20:19 test-rw-rw---- 1 mysql mysql 97137 6月 28 22:48 yong-01.err-rw-rw---- 1 mysql mysql 5 6月 28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql 120 6月 28 22:48 yueyong123.000001-rw-rw---- 1 mysql mysql 20 6月 28 22:48 yueyong123.indexdrwx------ 2 mysql mysql 324 6月 28 00:14 zrlog
- 其中 .index 索引页，这个文件是必须要有的
- 其中 .000001 这个是二进制日志文件，会持续生成2、3、4等等（这个文件是实现主从配置的根本，没有这个文件根本没有办法完成主从）
- 测试，准备一个数据做演示用的
- 首先做一个备份 mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sql
[root@yong-01 mysql]# mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sqlWarning: Using a password on the command line interface can be insecure.
- 然后创建一个新的库 mysql -uroot -p111111 -e "create database yong"
[root@yong-01 mysql]# mysql -uroot -p111111 -e "create database yong"Warning: Using a password on the command line interface can be insecure.
- 创建好库后，还需要把数据恢复一下，那也就是说做的主从，参考的对象就是yong 这个库
- mysql -uroot -p111111 han < /tmp/zrlog.sql
[root@yong-01 mysql]# mysql -uroot -p111111 yong < /tmp/zrlog.sql Warning: Using a password on the command line interface can be insecure.
- 再来查看/data/mysql/目录下的文件 ll /data/mysql/
[root@yong-01 mysql]# ll /data/mysql/总用量 110720-rw-rw---- 1 mysql mysql 56 6月 6 20:29 auto.cnfdrwx------ 2 mysql mysql 48 6月 20 22:19 db1-rw-rw---- 1 mysql mysql 12582912 6月 28 22:54 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月 28 22:55 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月 6 20:19 ib_logfile1drwx------ 2 mysql mysql 4096 6月 20 23:00 mysqldrwx------ 2 mysql mysql 68 6月 20 23:04 mysql2drwx------ 2 mysql mysql 4096 6月 6 20:19 performance_schemadrwx------ 2 mysql mysql 6 6月 6 20:19 testdrwx------ 2 mysql mysql 324 6月 28 22:54 yong-rw-rw---- 1 mysql mysql 97137 6月 28 22:48 yong-01.err-rw-rw---- 1 mysql mysql 5 6月 28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql 10258 6月 28 22:54 yueyong123.000001-rw-rw---- 1 mysql mysql 20 6月 28 22:48 yueyong123.indexdrwx------ 2 mysql mysql 324 6月 28 00:14 zrlog
- 能看到yueyong123.000001二进制文件是有增加的，yueyong123.000001增长的大小是和zrlog这个库的保持一致的，yueyong123.000001文件里完整的记录了数据库的创建的库，创建的表，以及表里的内容全都有
- 下面创建用于主从相互同步数据的用户
- 先进入到mysql里面去
- mysql -uroot -p111111
[root@yong-01 mysql]# mysql -uroot -p111111
- 创建用户 grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456'; 指定权限，replication slave权限 针对repl这个用户 针对 从 的那个IP，指定来源（若是写所有的IP会很危险）
mysql> grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456';Query OK, 0 rows affected (0.00 sec)
- 锁定表，目的是不让表继续写，因为一会需要做 从 机器配置，需要进行一个同步，让两台机器同步，保证两台机器的数据一致，同步才不会出错
- flush tables with read lock;
mysql> flush tables with read lock;Query OK, 0 rows affected (0.00 sec)
- 查看一下binlog的文件和大小，并记住binlog的filename
- show master status;
mysql> show master status;+-------------------+----------+--------------+------------------+-------------------+| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |+-------------------+----------+--------------+------------------+-------------------+| yueyong123.000001 | 10470 | | | |+-------------------+----------+--------------+------------------+-------------------+1 row in set (0.00 sec)
- 然后退出数据库，做一个数据同步
- 查看/data/mysql/下有哪些库，主上有哪些库，一会从上也得有哪些库，同步这些库，就意味着这些数据都得备份过去
[root@yong-01 ~]# ls /data/mysql/auto.cnf ib_logfile0 mysql2 yong yueyong123.000001 yueyong123.000004 zrlogdb1 ib_logfile1 performance_schema yong-01.err yueyong123.000002 yueyong123.000005ibdata1 mysql test yong-01.pid yueyong123.000003 yueyong123.index
- 备份数据库，除了mysql库，因为mysql库里面有账号密码，从上的时候不可能把所有权限复制过去，所以mysql不需要备份
- 备份其他的库
[root@yong-01 mysql]# mysqldump -uroot -p111111 test > /tmp/test.sqlWarning: Using a password on the command line interface can be insecure.
- 等会把/tmp/目录下 .sql文件都拷贝到 从上 去
[root@yong-01 mysql]# ls /tmp/*sql/tmp/test.sql /tmp/zrlog.sql
- 主上操作完成，接下来从上操作
主从配置 - 从上操作
- 安装mysql
- 查看my.cnf，配置server-id=132，要求和主不一样
- 修改完配置文件后，启动或者重启mysqld服务
- 把主上aming库同步到从上
- 可以先创建aming库，然后把主上的/tmp/mysql.sql拷贝到从上，然后导入aming库
- mysql -uroot
- stop slave；
- change master to master_host='', master_user='repl', master_password='', master_log_file='', master_log_pos=xx,
- start slave;
- 还要到主上执行 unlock tables
主从配置 - 从上操作
- 在从上机器配置
- 首先在从上安装并启动mysql，然后查看my.cnf，配置server-id=131，要求和主不一样，在配置文件的 log_bin参数 就不需要配置的，因为只有 主上 才需要二进制日志文件
- 重启mysql服务
[root@yong-02 ~]# /etc/init.d/mysqld restartShutting down MySQL.. SUCCESS! Starting MySQL.. SUCCESS!
- 在增加 server-id 后，对于mysql 是没有任何变化的
[root@yong-02 ~]# ls /data/mysqlauto.cnf ib_logfile0 mysql test yong-02.pidibdata1 ib_logfile1 performance_schema yong-02.err
- 把主机器上备份的 .sql 数据，拷贝到从机器上，然后做一个数据恢复
- scp 192.168.180.134:/tmp/*.sql /tmp/
- 拷贝数据失败
- 原因：
- 在拷贝的数据的时候，一直拷贝数据失败，因为在主上的机器里有开机启动脚本，所以导致拷贝数据失败
- - 解决方法：将主机器的里的开机启动脚本关闭vi .bashrc配置文件文件中注释掉脚本，再来拷贝数据到从机器上，会发现成功
- 原因：
[root@yong-02 ~]# scp 192.168.180.134:/tmp/*.sql /tmp/root@192.168.180.134's password: test.sql 100% 1258 695.6KB/s 00:00 zrlog.sql
- 进入到从数据库中
[root@yong-02 ~]# mysql -uroot -p123456
- 创建库create database zrlog ; create database test1;
mysql> create database zrlog;Query OK, 1 row affected (0.00 sec)mysql> create database test1;Query OK, 1 row affected (0.00 sec)
- 然后将数据库做一个恢复
- mysql -uroot test < /tmp/test.sql
[root@yong-02 ~]# mysql -uroot -p123456 test
- 保证两边数据一致
- 然后查看/data/mysql/目录下的数据是否和主机器上的/data/mysql/目录是否一致
- 开始实现主从
- 在从机器登录到mysql
[root@yong-02 ~]# mysql -uroot -p123456
- 然后在数据库里面执行命令，停止slave
- stop slave;
mysql> stop slave;Query OK, 0 rows affected, 1 warning (0.00 sec)
- 配置主机器相关配置
- change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
- master_host='192.168.180.134'，指定主机器host
- master_user='repl'，指定主机器用户
- master_password='123456'，指定主机器密码
- master_log_file='yueyong1.000001'，指定binlog文件名
- master_log_pos=10470，指定binlog文件大小
- 也可以指定主机器的port，因为在生产环境中，也会有人更改mysql的默认端口 master_port=3306
mysql> change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;Query OK, 0 rows affected, 2 warnings (0.01 sec)
- 开始slave start slave;
mysql> start slave;Query OK, 0 rows affected (0.01 sec)
- 这时候通过 show slave status\G 判断主从是否配置成功
查看slave配置
- show slave status\G
- 在G后面不需要加分号，\G本身就是一种结束符
- 看 Slave_IO_Running: Yes 是否为yes
- 看 Slave_SQL_Running: Yes 是否为yes
mysql> show slave status\G*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.180.134 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: yueyong123.000001 Read_Master_Log_Pos: 10470 Relay_Log_File: yong-02-relay-bin.000002 Relay_Log_Pos: 284 Relay_Master_Log_File: yueyong123.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table: Replicate_Wild_Ignore_Table: Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 10470 Relay_Log_Space: 459 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0Master_SSL_Verify_Server_Cert: No Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error: Replicate_Ignore_Server_Ids: Master_Server_Id: 134 Master_UUID: 3e50127a-6985-11e8-8d9b-000c29292b60 Master_Info_File: /data/mysql/master.info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count: 86400 Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 01 row in set (0.00 sec)
- 解锁“主”上的表（在主上机器操作）unlock tables;
[root@yong-01 mysql]# mysql -uroot -p111111mysql> unlock table;Query OK, 0 rows affected (0.00 sec)
- 到这里主从搭建就算完成了
查看主从同步是否正常
- 从上执行mysql -uroot
- show slave stauts\G
- 看是否有
- Slave_IO_Running: Yes
- Slave_SQL_Running: Yes
- 还需关注
- Seconds_Behind_Master: 0 //为主从延迟的时间
- Last_IO_Errno: 0
- Last_IO_Error:
- Last_SQL_Errno: 0
- Last_SQL_Error:
主服务器上
binlog-do-db= //仅同步指定的库（多个库，可以用“ , ”逗号分隔）——>英文的逗号 ， binlog-ignore-db= //忽略指定库
从服务器上
replicate_do_db= //仅同步指定的库replicate_ignore_db= //忽略指定库replicate_do_table= //仅同步指定的表replicate_ignore_table= //忽略指定表， - 例如：有一个临时表，写的数据非常快，数据也大，每天都需要删除这时就可以更新删除这个，那么就不需要每天去做同步 replicate_wild_do_table= //如aming.%, 支持通配符% 指定同步靠谱的匹配 同步表 replicate_wild_ignore_table= //如aming.%, 支持通配符% 指定同步靠谱的匹配 忽略表
- 进行从服务器的配置时尽量使用参数“replicate_wild_”，使匹配更精确，提升使用性能。
测试主从
- 主上 mysql -uroot aming
- select count(*) from db;
- truncate table db;
- 到从上 mysql -uroot aming
- select count(*) from db;
- 主上继续drop table db;
- 从上查看db表
在主上机器，进入到mysql
[root@yong-01 mysql]# mysql -uroot -p111111
- 进入到zrlog库里面 use zrlog;
- 查看表，有几个表
- show tables;
mysql> show tables;+-----------------+| Tables_in_zrlog |+-----------------+| comment || link || log || lognav || plugin || tag || type || user || website |+-----------------+9 rows in set (0.00 sec)
- 查看表有多少行，会看到website里面有9行数据
- select count(*) from website;
mysql> select count(*) from website;+----------+| count(*) |+----------+| 9 |+----------+1 row in set (0.00 sec)
- 这时候再来查看 从上 的zrlog表上的数据，会看到是一样的
mysql> select count(*) from website;+----------+| count(*) |+----------+| 9 |+----------+1 row in set (0.00 sec)
- 将主机器上的 表做一个删除操作
- truncate table website;
- truncate 表示 清空
mysql> truncate table website;Query OK, 0 rows affected (0.00 sec)
- 再来查看 主机器 的表和 从机器 上表都会被删除了
mysql> select count(*) from website;+----------+| count(*) |+----------+| 0 |+----------+1 row in set (0.00 sec)
- 若是误操作了，比如在从机器误删除了，再去主上删除相同的数据，就会有可能导致主从失败
- 这时在从机器上 start slave;
- 然后在start slave;
- 再来查看show slave status\G
- 若是还是失败，则只能 重新做主从了
- 重新主从
- 在主机器的数据库上 show mater status; 查看文件大小
- 然后在从机器上先stop slave;
- 然后直接change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
- 因为基本还没做什么操作的，数据还是一致的，直接改下数据大小就行
- 然后直接change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
- 然后在从机器上 start slave;
- 再来查看 show slave status\G 看是否为两个Yes
- 若实在只能从头做主从的