当前位置:网站首页>高级程序员必知必会,一文详解MySQL主从同步原理,推荐收藏
高级程序员必知必会,一文详解MySQL主从同步原理,推荐收藏
2022-07-07 21:50:00 【u012804784】
优质资源分享
| 学习路线指引(点击解锁) | 知识定位 | 人群定位 |
|---|---|---|
| 🧡 Python实战微信订餐小程序 🧡 | 进阶级 | 本课程是python flask+微信小程序的完美结合,从项目搭建到腾讯云部署上线,打造一个全栈订餐系统。 |
| Python量化交易实战 | 入门级 | 手把手带你打造一个易扩展、更安全、效率更高的量化交易系统 |
1. MySQL主从同步实现方式
MySQL主从同步是基于Bin Log实现的,而Bin Log记录的是原始SQL语句。
Bin Log共有三种日志格式,可以binlog_format配置参数指定。
| 参数值 | 含义 |
|---|---|
| Statement | 记录原始SQL语句,会导致更新时间与原库不一致。比如 update_time=now() |
| Row | 记录每行数据的变化,保证了数据与原库一致,缺点是数据量较大。 |
| Mixed | Statement和Row的混合模式,默认采用Statement模式,涉及日期、函数相关的时候采用Row模式,既减少了数据量,又保证了数据一致性。 |
常见的主从同步架构有一主多从、双主多从。


2. MySQL主从同步的作用
- 读写分离,提升数据库性能
- 容灾恢复,主服务器不可用时,从服务器提供服务,提高可用性
- 冗余备份,主服务器数据损坏丢失,从服务器保留备份
一主多从架构:
一般是主库负责所有读写请求,而从库只负责容灾恢复和冗余备份。
如果做了读写分离的话,主库负责写请求,从库负责读请求,可以提升数据库性能。
双主多从架构:
一般是主库1负责所有读写请求,主库2不对外提供服务,只用来容灾恢复。
相比一主多从架构,双主多从架构可以减少宕机时间,更快恢复数据库可用状态。
3. 主动同步的原理

- 当主库数据发生变更时,写入本地Bin Log文件
- 从库IO线程发起dump主库Bin Log文件的请求
- 主库IO线程推送Bin Log文件到从库中
- 从库IO线程把Bin Log内容写入本地的Relay Log文件中
- 从库SQL线程读取Relay Log文件内容
- 从库SQL线程重新执行一遍SQL语句
4. 主从同步延迟问题
主从同步最常遇到的问题就是主从同步延迟,可以通过在从库上执行show slave status命令查看延迟时间,Seconds_Behind_Master表示延迟的秒数。

主从同步延迟的原因有哪些?
- 从库机器性能较差
主库负责所有读写请求,从库只用来备份,会用性能较差的机器,执行时间自然较慢。
2. 从库压力更大
读写分离后,主库负责写请求,从库负责读请求。
互联网应用一般读请求更多,所以从库读压力更大,占用更多CPU资源。
3. 网络延迟
当主库的Bin Log文件往从库上发送时,可能产生网络延迟,也会导致从库数据跟不上。
4. 主库有大事务
当主库上有个大事务需要执行5分钟,把Bin Log文件发送到从库,从库至少也需要执行5分钟,所以这时候从库就出现了5分钟的延迟。
主从同步延迟的解决方案?
- 从库机器性能较差
把从库换成跟主库同等规格的机器。
2. 从库压力更大
多搞几台从库,分担读请求压力。
3. 网络延迟
联系运维或者云服务提供商解决。
4. 主库有大事务
把大事务分割成小事务执行,大事务不但会产生从库延迟,还可能产生死锁,降低数据库并发性能,所以尽量少用大事务。
5. 如何提升主从同步性能
1. 从库开启多线程复制
就是在主从同步的最后两步使用多线程,修改配置 slave_parallel_workers=4,代表开启4个复制线程。

2. 修改同步模式,改为异步
主从同步共有三种复制方式:
- 全同步复制
当主库执行完一个事务,并且所有从库都执行完该事务后,才给客户端返回成功。
2. 半同步复制
至少有一个从库执行完成后,就给客户端返回成功。
3. 异步复制
主库执行完后,立即返回成功,不关心从库是否执行完成。
如果对数据安全性要求没那么高,可以把同步模式改成半同步复制或者异步复制。
3. 修改从库Bin Log配置
修改sync_binlog配置:
sync_binlog=0 ,表示写binlog不立即刷新磁盘,由系统决定什么时候刷新磁盘。
sync_binlog=1,每次写binlog都刷新磁盘,安全性高,性能差。
sync_binlog=N,写N次binlog才刷新磁盘。
从库对数据安全性要求没那么高,可以设置sync_binlog=0。
修改innodb_flush_log_at_trx_commit配置:
innodb_flush_log_at_trx_commit=0,每隔一秒钟,把事务日志刷新到磁盘。
innodb_flush_log_at_trx_commit=1,每次事务都刷新到磁盘。
innodb_flush_log_at_trx_commit=2,每次事务都不主动刷新磁盘,由系统决定什么时候刷新磁盘。
从库对数据安全性要求没那么高,可以设置innodb_flush_log_at_trx_commit=2。
知识点总结:

文章持续更新,可以微信搜一搜「 一灯架构 」第一时间阅读更多技术干货。
边栏推荐
- Some parameters of Haikang IPC
- About idea cannot find or load the main class
- Statistical method for anomaly detection
- 【微服务|SCG】gateway整合sentinel
- Circumvention Technology: Registry
- 网络安全-永恒之蓝
- It's no exaggeration to say that this is the most user-friendly basic tutorial of pytest I've ever seen
- 消息队列与快递柜之间妙不可言的关系
- Brush question 6
- 2021-01-12
猜你喜欢

Introduction to redis and jedis and redis things

Microbial health network, how to restore microbial communities

Specific method example of V20 frequency converter manual automatic switching (local remote switching)

leetcode-520. 检测大写字母-js

面试百问:如何测试App性能?

JMeter interface automated test read case, execute and write back result

【测试面试题】页面很卡的原因分析及解决方案

iNFTnews | Web5 vs Web3:未来是一个过程,而不是目的地

知识点滴 - PCB制造工艺流程

Line measurement - graphic reasoning -9- line problem class
随机推荐
2022 words for yourself
opencv scalar传入三个参数只能显示黑白灰问题解决
Network security -burpsuit
Network security - information query of operating system
网络安全-联合查询注入
定位到最底部[通俗易懂]
iNFTnews | NFT技术的广泛应用及其存在的问题
Binary tree
14、 Two methods of database export and import
30讲 线性代数 第五讲 特征值与特征向量
Understand the session, cookie and token at one time, and the interview questions are all finalized
Cascade-LSTM: A Tree-Structured Neural Classifier for Detecting Misinformation Cascades-KDD2020
Line measurement - graphic reasoning -9- line problem class
安踏DTC | 安踏转型,构建不只有FILA的增长飞轮
Gbu1510-asemi power supply special 15A rectifier bridge gbu1510
Cases of agile innovation and transformation of consumer goods enterprises
微信论坛交流小程序系统毕业设计毕设(1)开发概要
Network security - Eternal Blue
Lecture 30 linear algebra Lecture 5 eigenvalues and eigenvectors
Sword finger offer 28 Symmetric binary tree