阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

MySQL 5.7下主从复制延迟解决方案

181次阅读
没有评论

共计 3259 个字符,预计需要花费 9 分钟才能阅读完成。

  在 MySQL 下主从复制的延迟问题一直是在业界内比较大的困扰,主从的延迟会因为受到网络磁盘等等相关的因素影响,但其中最主要的影响是就是在 master 太过繁忙的写入导致 slave 无法有效的从 relay_log 中读取到最新的相关记录,这样对于数据实时性很高的业务来说 slave 的数据并不是最新的有一定的延时,此时使用主从的读写分离就有点显的鸡肋了,不能做到 slave 上能查到最新的实时数据,大多在 slave 上都是做一些对实时数据要求并不是很高的一些数据查询。

  而到了 MySQL 的 5.6 版本开始引入多线程的主从复制的机制,众所周知 MySQL 的工作方式是单进程多线程的方式,那么线程的多寡则会极大的影响到 MySQL 的效率,而在早期 MySQL 的主从都是由单线程进行的,使得主从复制除了相关的客观因素外还受到自身的影响。但是在 MySQL 5.6 下多线程主从复制并不是做的相当完善的,因为在 MySQL 5.6 中主从复制的多线程是一个线程处理一个主从复制,而在绝大多数的生产环境中大多都是在一个数据库中做大量的操作的,那么这样 MySQL 的多线程主从复制就又和以前的版本一样都是单线程的主从复制,没有太大的实际意义。为此在 MySQL 的 5.7 版本中对多线程主从复制来进一步的改善,在 MySQL 5.7 中是按照逻辑时钟(类似 CPU 的处理机制)来处理多线程,甚至在半同步复制 semisync 中还是使用 Performance Schema 表来监控复制线程,所以在 MySQL 5.7 中主从复制直接因为 MySQL 自身导致的延时被极大的降低了, 配置也很简单,如下在 salve 中配置:

mysql> show global variables like 'slave_parallel_workers';# 默认是 0,即单线程
+------------------------+-------+
| Variable_name          | Value |
+------------------------+-------+
| slave_parallel_workers | 0     |
+------------------------+-------+
1 row in set (0.01 sec)
mysql> set global slave_parallel_workers = 4;# 根据实际情况决定开启多少个线程用于主从复制
1 row in set (0.01 sec)
mysql> show global variables like '%slave_parallel_type%';# 默认是多线程机制是一个线程处理一个库
+---------------------+----------+
| Variable_name       | Value    |
+---------------------+----------+
| slave_parallel_type | DATABASE |
+---------------------+----------+
1 row in set (0.01 sec)
mysql> stop slave;# 修改多线程机制工作类型需要停止 slave
Query OK, 0 rows affected (0.21 sec)
mysql> set global slave_parallel_type='logical_clock';
1 row in set (0.01 sec)
mysql> start slave;   
Query OK, 0 rows affected (0.08 sec)

此时再根据实际情况决定开启多少个线程用于主从复制,此时在看下 slave 上的线程列表:

mysql> show full processlist;
+----+-------------+-----------+------+---------+------+--------------------------------------------------------+-----------------------+
| Id | User        | Host      | db   | Command | Time | State                                                  | Info                  |
+----+-------------+-----------+------+---------+------+--------------------------------------------------------+-----------------------+
| 16 | root        | localhost | NULL | Query   |    0 | starting                                               | show full processlist |
| 29 | system user |           | NULL Connect |    3 | Waiting for master to send event                       | NULL                  |
| 30 | system user |           | NULL Connect |    3 | Slave has read all relay log; waiting for more updates | NULL                  |
| 31 | system user |           | NULL Connect |    3 | Waiting for an event from Coordinator                  | NULL                  |
| 32 | system user |           | NULL Connect |    3 | Waiting for an event from Coordinator                  | NULL                  |
| 33 | system user |           | NULL Connect |    3 | Waiting for an event from Coordinator                  | NULL                  |
| 34 | system user |           | NULL Connect |    3 | Waiting for an event from Coordinator                  | NULL                  |
+----+-------------+-----------+------+---------+------+--------------------------------------------------------+-----------------------+
rows in set (0.00 sec)

这样就成功的开启 MySQL 的 5.7 版本多线程主从复制,在配置好后在 slave 的 datadir 目录下会有根据 slave_parallel_workers 设置的线程数个数相同的线程文件:

MySQL 5.7 下主从复制延迟解决方案

最后再把配置好的变量参数写入 my.cnf,使得下一次重启生效:

slave_parallel_workers = 4
slave_parallel_type= logical_clock

Ubuntu 16.04 下实现 MySQL 主从复制  http://www.linuxidc.com/Linux/2017-08/146624.htm

MySQL 5.6.26 主从复制报错 1050  http://www.linuxidc.com/Linux/2017-08/146203.htm

本文永久更新链接地址 :http://www.linuxidc.com/Linux/2017-09/146663.htm

正文完
星哥说事-微信公众号
post-qrcode
 
星锅
版权声明:本站原创文章,由 星锅 2022-01-22发表,共计3259字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中