mysql 主从复制原理
1、为什么须要主从复制?
1、在业务简单的零碎中,有这么一个情景,有一句 sql 语句须要锁表,导致临时不能应用读的服务,那么就很影响运行中的业务,应用主从复制,让主库负责写,从库负责读,这样,即便主库呈现了锁表的情景,通过读从库也能够保障业务的失常运作。
2、做数据的热备
3、架构的扩大。业务量越来越大,I/ O 拜访频率过高,单机无奈满足,此时做多库的存储,升高磁盘 I / O 拜访的频率,进步单个机器的 I / O 性能。
2、什么是 mysql 的主从复制?
MySQL 主从复制是指数据能够从一个 MySQL 数据库服务器主节点复制到一个或多个从节点。MySQL 默认采纳异步复制形式,这样从节点不必始终拜访主服务器来更新本人的数据,数据的更新能够在近程连贯上进行,从节点能够复制主数据库中的所有数据库或者特定的数据库,或者特定的表。
3、mysql 复制原理
原理:
(1)master 服务器将数据的扭转记录二进制 binlog 日志,当 master 上的数据产生扭转时,则将其扭转写入二进制日志中;
(2)slave 服务器会在肯定工夫距离内对 master 二进制日志进行探测其是否产生扭转,如果产生扭转,则开始一个 I /OThread 申请 master 二进制事件
(3)同时主节点为每个 I / O 线程启动一个 dump 线程,用于向其发送二进制事件,并保留至从节点本地的中继日志中,从节点将启动 SQL 线程从中继日志中读取二进制日志,在本地重放,使得其数据和主节点的保持一致,最初 I /OThread 和 SQLThread 将进入睡眠状态,期待下一次被唤醒。
也就是说:
- 从库会生成两个线程, 一个 I / O 线程, 一个 SQL 线程;
- I/ O 线程会去申请主库的 binlog, 并将失去的 binlog 写到本地的 relay-log(中继日志) 文件中;
- 主库会生成一个 log dump 线程, 用来给从库 I / O 线程传 binlog;
- SQL 线程, 会读取 relay log 文件中的日志, 并解析成 sql 语句逐个执行;
留神:
1–master 将操作语句记录到 binlog 日志中,而后授予 slave 近程连贯的权限(master 肯定要开启 binlog 二进制日志性能;通常为了数据安全思考,slave 也开启 binlog 性能)。2–slave 开启两个线程:IO 线程和 SQL 线程。其中:IO 线程负责读取 master 的 binlog 内容到中继日志 relay log 里;SQL 线程负责从 relay log 日志里读出 binlog 内容,并更新到 slave 的数据库里,这样就能保障 slave 数据和 master 数据保持一致了。3–Mysql 复制至多须要两个 Mysql 的服务,当然 Mysql 服务能够散布在不同的服务器上,也能够在一台服务器上启动多个服务。4–Mysql 复制最好确保 master 和 slave 服务器上的 Mysql 版本雷同(如果不能满足版本统一,那么要保障 master 主节点的版本低于 slave 从节点的版本)5–master 和 slave 两节点间工夫需同步
具体步骤:
1、从库通过手工执行 change master to 语句连贯主库,提供了连贯的用户所有条件(user、password、port、ip),并且让从库晓得,二进制日志的终点地位(file 名 position 号);start slave
2、从库的 IO 线程和主库的 dump 线程建设连贯。
3、从库依据 change master to 语句提供的 file 名和 position 号,IO 线程向主库发动 binlog 的申请。
4、主库 dump 线程依据从库的申请,将本地 binlog 以 events 的形式发给从库 IO 线程。
5、从库 IO 线程接管 binlog events,并存放到本地 relay-log 中,传送过去的信息,会记录到 master.info 中
6、从库 SQL 线程利用 relay-log,并且把利用过的记录到 relay-log.info 中,默认状况下,曾经利用过的 relay 会主动被清理 purge
4、mysql 主从模式
(一)一主一从
(二)主主复制
(三)一主多从
(四)多主一从
![上传中 …]()
(五)联级复制
4、mysql 主从同步延时剖析
mysql 的主从复制都是单线程的操作,主库对所有 DDL 和 DML 产生的日志写进 binlog,因为 binlog 是程序写,所以效率很高,slave 的 sql thread 线程将主库的 DDL 和 DML 操作事件在 slave 中重放。DML 和 DDL 的 IO 操作是随机的,不是程序,所以老本要高很多,另一方面,因为 sql thread 也是单线程的,当主库的并发较高时,产生的 DML 数量超过 slave 的 SQL thread 所能解决的速度,或者当 slave 中有大型 query 语句产生了锁期待,那么延时就产生了。
解决方案:
1. 业务的长久化层的实现采纳分库架构,mysql 服务可平行扩大,扩散压力。
2. 单个库读写拆散,一主多从,主写从读,扩散压力。这样从库压力比主库高,爱护主库。
3. 服务的基础架构在业务和 mysql 之间退出 memcache 或者 redis 的 cache 层。升高 mysql 的读压力。
4. 不同业务的 mysql 物理上放在不同机器,扩散压力。
5. 应用比主库更好的硬件设施作为 slave,mysql 压力小,提早天然会变小。
6. 应用更加强劲的硬件设施
mysql5.7 之后应用 MTS 并行复制技术,永恒解决复制延时问题
mysql 主从复制装置配置
1、根底设置筹备
操作系统:
centos6.5
mysql 版本:
5.7
两台虚拟机:
node1:192.168.85.111(主)
node2:192.168.85.112(从)
2、在两台数据库中别离创立数据库
– 留神两台必须全副执行
create database demo;
3、在主(node1)服务器进行如下配置:
批改配置文件,执行以下命令关上 mysql 配置文件
vi /etc/my.cnf
在 mysqld 模块中增加如下配置信息
log-bin=master-bin #二进制文件名称
binlog-format=ROW #二进制日志格局,有 row、statement、mixed 三种格局,row 指的是把扭转的内容复制过来,而不是把命令在从服务器上执行一遍,statement 指的是在主服务器上执行的 SQL 语句,在从服务器上执行同样的语句。MySQL 默认采纳基于语句的复制,效率比拟高。mixed 指的是默认采纳基于语句的复制,一旦发现基于语句的无奈准确的复制时,就会采纳基于行的复制。
server-id=1 #要求各个服务器的 id 必须不一样
binlog-do-db=msb #同步的数据库名称
4、配置从服务器登录主服务器的账号受权
– 受权操作
set global validate_password_policy=0;
set global validate_password_length=1;
grant replication slave on . to ‘root’@’%’ identified by ‘123456’;
– 刷新权限
flush privileges;
5、从服务器的配置
批改配置文件,执行以下命令关上 mysql 配置文件
vi /etc/my.cnf
在 mysqld 模块中增加如下配置信息
log-bin=master-bin #二进制文件的名称
binlog-format=ROW #二进制文件的格局
server-id=2 #服务器的 id
6、重启主服务器的 mysqld 服务
重启 mysql 服务
service mysqld restart
登录 mysql 数据库
mysql -uroot -p
查看 master 的状态
show master status;
7、重启从服务器并进行相干配置
重启 mysql 服务
service mysqld restart
登录 mysql
mysql -uroot -p
连贯主服务器
change master to master_host=’192.168.85.11′,master_user=’root’,master_password=’123456′,master_port=3306,master_log_file=’master-bin.000001′,master_log_pos=154;
启动 slave
start slave
查看 slave 的状态
show slave statusG(留神没有分号)