阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

MySQL之select和LVM快照实现数据备份

143次阅读
没有评论

共计 4267 个字符,预计需要花费 11 分钟才能阅读完成。

逻辑备份:

  • 可能让浮点数丢失精度
  • 因为逻辑备份会保存至纯文本文件中,而这些纯文本文件一般比原数据还大(32888 本来只需两个字节,纯文本要四个字节保存)
  • 速度慢,不适合做数据量大的备份

MySQLdump 和 select 命令都是逻辑备份工具:即将数据导出至文本文件中,再导入其他地方,其备份速度相对较慢,且可能会丢失浮点精度,但是可以方便的使用备份工具直接对其出路,可移植能力强

mysqldump 对 Innodb 来说是热备份:

–single-transaction 自动启用一个长事务,直到你完成备份,但要借助 MVCC 功能,最好将隔离几倍设置为 repetable-read(可重读)

–flush-logs 进行日志刷新

–master-data=0|1|2

–events  备份事件调度器

–routines 备份处处过程和存储函数

–triggers 备份触发器

注:对 innodb 进行热备不能用 –lock-all-tables 参数

对 Innodb 来说即使执行了 >lock tables with read lock; 因为写操作的优先级要比读操作的优先级高,当别人启动了一个很大的事务时,可能要等待很久才能加上 read 锁;且就算锁上,也不一定没有写入操作,以为 innodb 支持事务日志,后台的 MySQL 线程会没隔一段时间以自我调度的方式将事务日志中数据同步到 MySQL 数据库中(将缓存区写入磁盘),所以你要等待事务日志完成

select 命令进行单表备份,且备份为纯文本格式(.txt), 而不是 sql 语句或者.sql 文件;但 select 备份的数据在还原之前必须要先创建表,且还支持 where 字句进行条件式还原;其特点是速度快,备份单表,节省空间

例:

mysql> select * into outfile ‘/tmp/a.txt’ from test1 ; 进行表备份为纯文本格式

mysql> create table TEST1 like test1; 还原前先仿照原表创建一个格式一样的新表

mysql> drop table test1; 删除原表

mysql> load data infile < ‘/tmp/a.txt’ into table TEST1; 进行表数据还原

如果在进行数据恢复时,开启了二进制日志记录,会产生大量的 I / O 操作;所以恢复数据时一定要关闭二进制日志;相关参数为:

sql_log_bin=0|1 0 表示关闭;1 表示开启

例:

mysql> flush logs;

Query OK, 0 rows affected (0.15 sec)

mysql> show master status; 事件位置 120

+——————-+———-+————–+——————+——————-+

| File        | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+——————-+———-+————–+——————+——————-+

| master-bin.000014 |    120 |              |                  |                  |

+——————-+———-+————–+——————+——————-+

mysql> drop database my; 进行数据改变的操作

Query OK, 0 rows affected (0.27 sec)

 

mysql> show master status; 事件位置还是 120

+——————-+———-+————–+——————+——————-+

| File        | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+——————-+———-+————–+——————+——————-+

| master-bin.000014 |    120 |      |                                |

+——————-+———-+————–+——————+——————-+

1 row in set (0.00 sec)

 

mysql> set sql_log_bin=1; 开启二进制日志记录

Query OK, 0 rows affected (0.00 sec)

 

mysql> create database my; 进行数据改变的操作

Query OK, 1 row affected (0.01 sec)

 

mysql> show master status; 事件位置变成了 208

+——————-+———-+————–+——————+——————-+

| File          | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+——————-+———-+————–+——————+——————-+

| master-bin.000014 |    208 |              |                  |                 

+——————-+———-+————–+——————+——-

 

 

mysql> show binlog events in ‘master-bin.000014’; 可以看到已近记录了位置和操作

+——————-+—–+————-+———–+————-+————————

| Log_name      | Pos | Event_type  | Server_id | End_log_pos | Info                                 

+——————-+—–+————-+———–+————-+————————

| master-bin.000014 |  4| Format_desc |      1 |    120 | Server ver: 5.6.34-lo

| master-bin.000014 | 120 | Query    |      1 |    208 | create database my                   

+——————-+—–+————-+———–+————-+————————

2 rows in set (0.00 sec)

 

 

LVM+ 快照:实现几乎热备份

前提:

数据文件必须在逻辑卷上保存

此逻辑卷所在的空间必须有足够大的空间保存快照

事务日志一定要和数据文件在同一个逻辑卷上,来保证事务日志的快照与数据文件的快照在一个时间点上,从而保证数据的 ACID 和时间上的一致

 

#mysql

>flush tables with read lock; 刷新表并加共享锁

>flush logs;

>show master status;

mysql> show master status;

+——————-+———-+————–+——————+——————-+

| File        |  Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+——————-+———-+————–+——————+——————-+

| master-bin.000014 |    208 |        |            |                 

+——————-+———-+————–+——————+——————-+

1 row in set (0.04 sec)

 

一定不要退出,可以重开一个会话

#mysql -e ‘show master status\G’ > /root/backup-master-‘data+%F’.info

将当前二进制日志的日期备份下来

 

创建一个 50M 的快照(快照大小要根据你平时的经验判断在备份时间内数据的变化大小来决定快照的大小,一般取二倍便可)

#lvcreate -L 50M -s -p -r -n mydata-snap /dev/myvg/mydata

-r  创建只读的快照

mydata-snap 为快照名称

/dev/myvg/mydata 为数据文件所在的逻辑卷

 

>unlock tables; 回到原来的会话释放锁

#mount  -o ro /dev/myvg/mydata-snap /mnt

以只读的方式将快照挂载到 /mnt 目录下

 

#cd /mnt/data

#cp -a ./* /root/backup-full-‘date+%F’  进行数据的完全备份 (-a 在 cp 时保存文件所有属性)

#umount /mnt 卸载快照卷

 

#lvremove –force /dev/myvg/mydata-snap 移除快照

#cd /root/backup-full-2017-2-15

#rm -rf master-bin.*  删除没用的二进制文件

总结:

  • 打开会话,施加读锁,锁定所有表
  • 通过另一个终端,保存二进制日志及相关位置
  • 创建快照卷
  • 释放锁
  • 挂载快照卷
  • 进行数据备份(cp -a)
  • 卸载快照卷,并移除快照
  • 增量备份二进制日志

本文永久更新链接地址 :http://www.linuxidc.com/Linux/2017-02/140677.htm

正文完
星哥说事-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计4267字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中