我的编程空间,编程开发者的网络收藏夹
学习永远不晚

一文详解MySQL主从同步原理

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

一文详解MySQL主从同步原理

1. MySQL主从同步实现方式

MySQL主从同步是基于Bin Log实现的,而Bin Log记录的是原始SQL语句。

Bin Log共有三种日志格式,可以binlog_format配置参数指定。

参数值含义
Statement记录原始SQL语句,会导致更新时间与原库不一致。
比如 update_time=now()
Row记录每行数据的变化,保证了数据与原库一致,缺点是数据量较大。
MixedStatement和Row的混合模式,默认采用Statement模式,涉及日期、函数相关的时候采用Row模式,既减少了数据量,又保证了数据一致性。

常见的主从同步架构有一主多从、双主多从

一文详解MySQL主从同步原理

2. MySQL主从同步的作用

  • 读写分离,提升数据库性能
  • 容灾恢复,主服务器不可用时,从服务器提供服务,提高可用性
  • 冗余备份,主服务器数据损坏丢失,从服务器保留备份

一主多从架构

一般是主库负责所有读写请求,而从库只负责容灾恢复和冗余备份。

如果做了读写分离的话,主库负责写请求,从库负责读请求,可以提升数据库性能。

双主多从架构

一般是主库1负责所有读写请求,主库2不对外提供服务,只用来容灾恢复。

相比一主多从架构,双主多从架构可以减少宕机时间,更快恢复数据库可用状态。

3. 主动同步的原理

一文详解MySQL主从同步原理

  • 当主库数据发生变更时,写入本地Bin Log文件
  • 从库IO线程发起dump主库Bin Log文件的请求
  • 主库IO线程推送Bin Log文件到从库中
  • 从库IO线程把Bin Log内容写入本地的Relay Log文件中
  • 从库SQL线程读取Relay Log文件内容
  • 从库SQL线程重新执行一遍SQL语句

4. 主从同步延迟问题

主从同步最常遇到的问题就是主从同步延迟,可以通过在从库上执行show slave status命令查看延迟时间,Seconds_Behind_Master表示延迟的秒数。

一文详解MySQL主从同步原理

主从同步延迟的原因有哪些?

从库机器性能较差:

主库负责所有读写请求,从库只用来备份,会用性能较差的机器,执行时间自然较慢。

从库压力更大:

  • 读写分离后,主库负责写请求,从库负责读请求。
  • 互联网应用一般读请求更多,所以从库读压力更大,占用更多CPU资源。

网络延迟:

当主库的Bin Log文件往从库上发送时,可能产生网络延迟,也会导致从库数据跟不上。

主库有大事务:

当主库上有个大事务需要执行5分钟,把Bin Log文件发送到从库,从库至少也需要执行5分钟,所以这时候从库就出现了5分钟的延迟。

主从同步延迟的解决方案?

从库机器性能较差:

把从库换成跟主库同等规格的机器。

从库压力更大:

多搞几台从库,分担读请求压力。

网络延迟:

联系运维或者云服务提供商解决。

主库有大事务:

把大事务分割成小事务执行,大事务不但会产生从库延迟,还可能产生死锁,降低数据库并发性能,所以尽量少用大事务。

5. 如何提升主从同步性能

从库开启多线程复制

就是在主从同步的最后两步使用多线程,修改配置 slave_parallel_workers=4,代表开启4个复制线程。

一文详解MySQL主从同步原理

修改同步模式,改为异步

主从同步共有三种复制方式:

全同步复制:

当主库执行完一个事务,并且所有从库都执行完该事务后,才给客户端返回成功。

半同步复制:

至少有一个从库执行完成后,就给客户端返回成功。

异步复制:

主库执行完后,立即返回成功,不关心从库是否执行完成。

如果对数据安全性要求没那么高,可以把同步模式改成半同步复制或者异步复制。

修改从库Bin Log配置

修改sync_binlog配置:

sync_binlog=0 ,表示写binlog不立即刷新磁盘,由系统决定什么时候刷新磁盘。

sync_binlog=1,每次写binlog都刷新磁盘,安全性高,性能差。

sync_binlog=N,写N次binlog才刷新磁盘。

从库对数据安全性要求没那么高,可以设置sync_binlog=0。

修改innodb_flush_log_at_trx_commit配置:

innodb_flush_log_at_trx_commit=0,每隔一秒钟,把事务日志刷新到磁盘。

innodb_flush_log_at_trx_commit=1,每次事务都刷新到磁盘。

innodb_flush_log_at_trx_commit=2,每次事务都不主动刷新磁盘,由系统决定什么时候刷新磁盘。

从库对数据安全性要求没那么高,可以设置innodb_flush_log_at_trx_commit=2。

知识点总结

一文详解MySQL主从同步原理

到此这篇关于一文详解MySQL主从同步原理的文章就介绍到这了,更多相关MySQL主从同步原理内容请搜索我们以前的文章或继续浏览下面的相关文章希望大家以后多多支持我们!

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

一文详解MySQL主从同步原理

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

一文详解MySQL主从同步原理

目录1. mysql主从同步实现方式2. MySQL主从同步的作用一主多从架构双主多从架构3. 主动同步的原理4. 主从同步延迟问题主从同步延迟的原因有哪些?主从同步延迟的解决方案?5. 如何提升主从同步性能从库开启多线程复制修改同步模式,
2022-08-16

mysql主从同步的原理

mysql 主从同步是一种数据复制技术,通过将主服务器数据同步到从服务器以实现一致性。同步过程涉及:1. 从服务器连接主服务器并请求二进制日志副本;2. 主服务器 i/o 线程将二进制日志更改发送到从服务器;3. 从服务器 sql 线程执行
mysql主从同步的原理
2024-08-01

Mysql 主从同步原理简析

在开始讲述原理的情况下,我们先来做个知识汇总,究竟什么是主从,为什么要搞主从,可以怎么实现主从,mysql主从同步的原理1、什么是主从其实主从这个概念非常简单主机就是我们平常主要用来读写的服务,我们称之为master(主人、主宰)从机就是主机进行的一个扩展,他
Mysql 主从同步原理简析
2016-01-10

mysql主从同步原理及应用场景示例详解

这篇文章主要为大家介绍了mysql主从同步原理及应用场景示例详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
2022-11-13

kafka主从同步原理是什么

Kafka主从同步原理是指在Kafka集群中,一个或多个Kafka broker(主节点)将数据复制到其他Kafka broker(从节点)的过程。Kafka主从同步原理如下:1. 主节点接收到生产者发送的消息,并将其写入本地的日志文件(称
2023-10-12

MySQL 主从同步,事务回滚的实现原理

BinLogBinLog是记录所有数据库表结构变更(例如create、alter table)以及表数据修改(insert、update、delete)的二进制日志,主从数据库同步用到的都是BinLog文件。BinLog日志文件有三种模式。
2022-05-27

【MySQL】MySQL主从同步延迟原因与解决方案

文章目录 一、MySQL数据库主从同步延迟产生的原因二、关于DDL和DML三、主从延时排查方法四、解决方案3.1 解决从库复制延迟的问题:3.2 MySql数据库从库同步其他问题及解决方案 一、MySQL数据库主从同步延迟产
2023-08-19

MYSQL主从不同步延迟原理分析及解决方案

这篇文章介绍了MYSQL主从不同步延迟原理分析及解决方案,有需要的朋友可以参考一下
2022-11-15

Mysql主从同步的实现原理与配置实战

1、什么是mysql主从同步?当master(主)库的数据发生变化的时候,变化会实时的同步到slave(从)库。2、主从同步有什么好处?水平扩展数据库的负载能力。容错,高可用。Failover(失败切换)/High Availability数据备份。3、主从同
Mysql主从同步的实现原理与配置实战
2020-03-11

编程热搜

目录