阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

MySQL主从同步校验与重新同步

333次阅读
没有评论

共计 3549 个字符,预计需要花费 9 分钟才能阅读完成。

主从复制环境中,可能有种种原因导致主、从库数据不一致的情况,主从一致性也一直是 DBA 需要关注的问题,校验 MySQL 的主从一致性一般有多种工具,诸如 MySQL 自带的 checksum、mysqldiff、pt-table-checksum 等,每种工具各有优缺,本文就 pt-table-checksum 工具进行介绍和记录实验环节。
 
下载二进制版本的 percona-toolkit 工具箱
https://www.percona.com/downloads/percona-toolkit

本文用的是 2.2.18 版本
[root@HE3 ~]# tar xvf percona-toolkit-2.2.18.tar.gz
[root@HE3 ~]# cd percona-toolkit-2.2.18
[root@HE3 percona-toolkit-2.2.18]# perl Makefile.PL
[root@HE3 percona-toolkit-2.2.18]# make && make install

主库创建 checksums 用户用于校验主从是否一致
mysql>GRANT SELECT, PROCESS, SUPER, REPLICATION SLAVE ON *.* TO ‘checksums’@’%’ IDENTIFIED BY ‘MANAGER’;

开始执行校验,在校验结束后,会在 test 库下创建表名为 checksums 的表用于存储主从一致性信息
[root@HE3 ~]#/usr/local/bin/pt-table-checksum h=’192.168.1.250′,u=’checksums’,p=’MANAGER’,P=3306 -d www –nocheck-replication-filters –replicate=test.checksums –no-check-binlog-format

从库可以执行本条 SQL 来查看哪些表有主从不一致的情况,此时主从是一致的所以没有结果
mysql> SELECT db,tbl, SUM(this_cnt) AS total_rows, COUNT(*) AS chunks FROM test.checksums WHERE (master_cnt <> this_cnt OR master_crc <> this_crc OR ISNULL(master_crc) <> ISNULL(this_crc)) GROUP BY db, tbl;
Empty set (0.03 sec)

我们先删除 www 库下的某张表的某一行

[SQL]delete from decorate_order where id=10;
受影响的行: 1
时间: 0.003s

再次运行同步校验
[root@HE3 ~]#/usr/local/bin/pt-table-checksum h=’192.168.1.250′,u=’checksums’,p=’MANAGER’,P=3306 -d www –nocheck-replication-filters –replicate=test.checksums –no-check-binlog-format

可以发现在从库上执行本条 SQL 可以看到主从不一致的表名
mysql> SELECT db,tbl, SUM(this_cnt) AS total_rows, COUNT(*) AS chunks FROM test.checksums WHERE(master_cnt <> this_cnt OR master_crc <> this_crc OR ISNULL(master_crc) <> ISNULL(this_crc)) GROUP BY db, tbl;
+—–+—————-+————+——–+
| db  | tbl            | total_rows | chunks |
+—–+—————-+————+——–+
| www |
decorate_order |      25356 |      1 |
+—–+—————-+————+——–+
1 row in set (0.00sec)

同理我们删掉 erp 库下的某张表的某一行
[SQL]delete from erp_mard id=104;
受影响的行: 1
时间: 0.002s

再次运行同步校验
[root@HE3 ~]#/usr/local/bin/pt-table-checksum h=’192.168.1.250′,u=’checksums’,p=’MANAGER’,P=3306 -d www –nocheck-replication-filters –replicate=test.checksums –no-check-binlog-format

可以发现刚刚删除的 erp_mard 表已经进入到了我们的主从不一致记录表里
mysql> SELECT db,tbl, SUM(this_cnt) AS total_rows, COUNT(*) AS chunks FROM test.checksums WHERE (master_cnt <> this_cnt OR master_crc <> this_crc OR ISNULL(master_crc) <> ISNULL(this_crc)) GROUP BY db, tbl;
+—–+—————-+————+——–+
| db  | tbl            | total_rows | chunks |
+—–+—————-+————+——–+
| erp |
erp_mard      |      11183 |      1 |
| www |
decorate_order |      25356 |      1 |
+—–+—————-+————+——–+
2 rows in set (0.02sec)

我们在主库执行 pt-table-sync 命令来进行重新同步(请做好备份,重要的话说三遍,备份备份备份)

我们先利用 print 命令,打印出修改的语句但不执行,这里本人推荐用 print 命令,筛选出需要在不同从库执行的语句,最好不要直接 excute 执行
[root@HE3 ~]#/usr/local/bin/pt-table-sync –print –replicate  test.checksums  h=’192.168.1.250′,u=’sys_admin’,p=’MANAGER’
 
 
本条命令会对主库下所有的从库进行同步
[root@HE3 ~]#/usr/local/bin/pt-table-sync –execute –replicate  test.checksums  h=’192.168.1.250′,u=’sys_admin’,p=’MANAGER’

同步完后重新验证
[root@HE3 ~]#/usr/local/bin/pt-table-checksum h=’192.168.1.250′,u=’checksums’,p=’MANAGER’,P=3306 -d www –nocheck-replication-filters –replicate=test.checksums –no-check-binlog-format
[root@HE3 ~]# /usr/local/bin/pt-table-checksum h=’192.168.1.250′,u=’checksums’,p=’MANAGER’,P=3306 -d erp –nocheck-replication-filters –replicate=test.checksums –no-check-binlog-format

可以发现 checksums 表已经没有不同步的表了
mysql> SELECT db,tbl, SUM(this_cnt) AS total_rows, COUNT(*) AS chunks FROM test.checksums WHERE (master_cnt <> this_cnt OR master_crc <> this_crc OR ISNULL(master_crc) <> ISNULL(this_crc)) GROUP BY db, tbl;
Empty set (0.03 sec)
 
至此主从校验、同步完成

pt-table-checksum,pt-table-sync 这两个工具还有很多重要的特性和参数,这里仅做实验用,具体的生产还需要哪些参数,比如只同步某张表等以后会继续深入研究。

本文永久更新链接地址:http://www.linuxidc.com/Linux/2016-09/134814.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计3549字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19348
评论数
4
阅读量
7803105
文章搜索
热门文章
开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板 1Panel:小白轻松构建 Web 服务与面板加固指南 哈喽,我是星哥,经常有人问我不...
我把用了20年的360安全卫士卸载了

我把用了20年的360安全卫士卸载了

我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
安装并使用谷歌AI编程工具Antigravity(亲测有效)

安装并使用谷歌AI编程工具Antigravity(亲测有效)

  安装并使用谷歌 AI 编程工具 Antigravity(亲测有效) 引言 Antigravity...
星哥带你玩飞牛NAS-7:手把手教你免费内网穿透-Cloudflare tunnel

星哥带你玩飞牛NAS-7:手把手教你免费内网穿透-Cloudflare tunnel

星哥带你玩飞牛 NAS-7:手把手教你免费内网穿透 -Cloudflare tunnel 前言 大家好,我是星...
一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸 前言 作为天天跟架构图、拓扑图死磕的...
小白也能看懂:什么是云服务器?腾讯云 vs 阿里云对比

小白也能看懂:什么是云服务器?腾讯云 vs 阿里云对比

小白也能看懂:什么是云服务器?腾讯云 vs 阿里云对比 星哥玩云,带你从小白到上云高手。今天咱们就来聊聊——什...
在Windows系统中通过VMware安装苹果macOS15

在Windows系统中通过VMware安装苹果macOS15

在 Windows 系统中通过 VMware 安装苹果 macOS15 许多开发者和爱好者希望在 Window...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
如何免费使用强大的Nano Banana Pro?附赠邪修的用法

如何免费使用强大的Nano Banana Pro?附赠邪修的用法

如何免费使用强大的 Nano Banana Pro?附赠邪修的用法 前言 大家好,我是星哥,今天来介绍谷歌的 ...
安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

安装Black群晖DSM7.2系统安装教程(在Vmware虚拟机中、实体机均可)!

安装 Black 群晖 DSM7.2 系统安装教程(在 Vmware 虚拟机中、实体机均可)! 前言 大家好,...
告别Notion焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁”

告别Notion焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁”

  告别 Notion 焦虑!这款全平台开源加密笔记神器,让你的隐私真正“上锁” 引言 在数字笔记工...
星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛 NAS 硬件 02:某鱼 6 张左右就可拿下 5 盘位的飞牛圣体 NAS 前言 大家好,我是星...
星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛 NAS-12:开源笔记的进化之路,效率玩家的新选择 前言 如何高效管理知识与笔记,已经成为技术...