MySQL之日志和mysqlbinlog工具的使用

152次阅读

没有评论

共计 4222 个字符，预计需要花费 11 分钟才能阅读完成。

查看日志相关的全局变量：
MySQL>SHOW GLOBAL VARIABLES LIKE ‘%log%’

修改相关变量：
1. 对于开关某个功能，使用 SET GLOBAL xxx=xxx 即可。
2. 涉及到文件的操作，只能修改配置文件，添加内容到配置文件并重启服务后生效。

错误日志：
记录内容：
服务器的启动和关闭产生的信息
服务器运行过程中的错误信息
时间调度器上运行一个事件时产生的信息
在从服务器上启动和关闭从服务器进程时产生的信息

文件位置：
默认是存放在数据目录，文件名为 SERVERHOSTNAME.err 的文件。

相关变量：
log_error 指定错误日志文件
log_warning 是否记录警告信息，1 表示记录。默认为 1。

一般查询日志：
记录内容：
查询的操作

文件位置：
默认是存放在数据目录，文件名为 SERVERHOSTNAME.log 的文件

相关变量：
general_log 是否启用一般查询日志，默认是 OFF。避免记录大量的 io。
general_log_file 指定一般查询日志文件的位置
log 是否记录所有语句到日志，默认为 OFF。mysql5.6 已废弃。

log_output 指定一般查询日志和慢查询日志的输出位置，默认是使用 TABLE。在编译时会变为 FILE。可以使用 TABLE 表示记录到表中或者 NONE 表示不记录。TABLE 和 FILE 可以一起使用，用逗号隔开即可。注意此变量优先级高。一旦设定为 NONE，即时 general_log 设定为 ON，也不记录。

sql_log_off 控制是否禁止将一般查询日志信息记录进日志文件，默认为 OFF。

慢查询日志：
记录内容：
查询时间较长的操作

文件位置：
默认在数据目录名为 SERVERHOSTNAME-slow.log。

相关变量：
long_query_time 指定查询时长阈值，超过此时间都定义为慢查询。注意此长为实际操作执行的时长而不是 cpu 执行时长。最小值为 0，默认为 10，单位为秒，支持毫秒级解析度。

slow_query_log 是否启用慢查询日志，日志的输出位置也取决于 log_output 的设定。

slow_query_log_file 指定慢查询日志文件位置。
max_long_data_size
performance_schema_events_waits_history_long_size 收集事件等待历史的长度

二进制日志：
记录内容：
记录任何可能引起数据库变化的操作，包括 DDL，DML，授权语句等等。使用 mysql 独有的二进制格式，为复制和即时点恢复提供支持。

二进制日志的格式：
基于语句：statment
基于行：row
混合方式：mixed

文件头 + 事件 …

事件的组成：
position：上个事件的结束位置和下个事件的开始位置。
starttime：事件的起始时间
action：事件的动作。

文件位置：
使用工具 mysqlbinlog 查看，一般的文本编辑文件是无法产看的。

二进制日志文件：默认在数据目录以 mysql-bin 或 SERVERHOSTNAME 开头，末尾为.bin.00000NUM 的文件。每次重启服务器后日志将进行滚动。保留旧文件，新创建文件。使用 SHOW MASTER STATUS 可以查看当前正在使用的文件。使用 SHOW BINLOG EVENTS in‘mysql-bin.00000NUM’[FROM POSITION] 查看具体内容。日志文件的大小会大于数据的大小，因为里边还记录了其他的额外信息。

索引文件：记录了二进制日志文件的相关信息。默认在数据目录，名字为 mysql-bin.index。

建议将二进制日志文件和数据分开存放在不同磁盘，这样既能保证安全性，又能保证日志文件之间不出现竞争 io 的情况。

也可以执行 FLUSH LOGS 来手动滚动日志。注意只有二进制和中继日志才是真的滚动，其他日志都是关闭后打开。

使用 SHOW BINARY LOGS 查看日志

使用 PURGE BINARY LOGS TO‘BINLOGFILE’可以删除指定文件之前的日志文件

相关变量：
binlog_format STATMENT|ROW|MIXED 指定二进制日志文件的格式

log_bin ON|OFF [FILE] 指定二进制日志文件的位置，没有指定 FILE 默认写在数据文件下，是否启用二进制日志文件功能。在 mysql 启动时使用 –log-bin=mysql-bin 或者是修改配置文件，在 [mysqld] 中添加 log-bin=mysql-bin 和 binlog_format=mixed。

sql_log_bin ON|OFF 控制是否将日志写入二进制日志文件

binlog_cache_size 缓存大小，跟随 binlog_stmt_cache_size 大小变化

binlog_stmt_cache_size 语句缓存大小

sync_binlog NUM 设定对二进制日志文件写入 NUM 次后就同步到磁盘。0 表示不同步，1 表示事务提交后才写入二进制日志中。其他正数都表示二进制日志在 NUM 次写入后就同步到磁盘。注意若 autocommit=1，则每条语句的执行都将直接提交。否则事务只有执行 COMMIT 操作，明确提交后才写入二进制日志中。

max_binlong_cache_size 上限值

max_binlog_size

max_binlog_stmt_cache_size 上限值

expire_logs_days DAY 设定日志过期时间为 DAY 天，过期会被自动删除。默认为 0。

中继日志：
记录内容：
从主服务器的二进制日志文件中复制而来的事件，本质上也是二进制日志文件。
文件位置：
位于从服务器上。
相关变量：

事务日志：
记录内容：
支持事务的引擎上特有，是为了保证事务的 ACID 特性，将随机 io 转换为顺序 io，提高效率，保证事务不会丢失。

事务 ID 号 + 原始数据 + 新数据
TID<OLD_VLAUE><NEW_VALUE>

事务只能对表中的内容进行 ROLLBACK，对于像 DROP TABLE 这样的操作是无法回滚的。

文件位置：
默认为数据目录内，名称为 ib_logfileNUM。建议日志文件和数据文件分开存放，并为日志做镜像

相关变量：
innodb_flush_log_at_trx_commit 0|1|2 设定启用事务提交后将内存中的日志事件同步到日志文件中,1 表示每当有事务提交或磁盘刷新写入，默认值。2 表示每当有事务提交就同步。0 表示每 1 秒同步一次，不在内核中缓存，直接写入磁盘。

innodb_log_buffer_size 内存缓存大小
innodb_log_size 日志文件大小
innodb_log_files_in_group 日志组中的日志文件个数
innodb_log_group_home_dir 日志存放位置，默认为数据目录
innodb_mirrored_log_groups 是否对日志文件组做镜像

innodb_support_xa=TURE|FLASE 是否启用分布式事务，默认是启用的。若在仅有一个线程修改数据的环境下，关闭后此以提高 InnoDB 的效率。

#mysqlbinlog [OPTION] BINLOGFILE 二进制日至文件查看工具
[OPTION]
–start-datetime
–stop-datetime
–start-position
–stop-position

例如：
#mysqlbinlog /mydata/mdata/mysql-bin.00005

#mysqlbinlog –start-position=177 –stop-position=358 /mydata/mdata/mysql-bin.00005

#mysqlbinlog –start-datetime=’2015-07-21 19:22:31′ /mydata/mdata/mysql-bin.00005

#mysqlbinlog /mydata/mdata/mysql-bin.00005 > a.sql 从二进制文件读取内容导出成 sql 脚本文件。

实例：
0. 开启二进制日志记录功能：
#vim /etc/my.cnf
[mysqld]
log_bin=mysql-bin
binlog_format=MIXED

或在服务启动时指定
#mysqld_safe –log_bin=mysql-bin –binlog_format=’MIXED’ –user=root &

1. 查看所有二进制日志文件：
mysql>SHOW BINARY LOGS;

2. 显示当前正在使用的二进制日志文件：
mysql>SHOW MASTER STATUS；

3. 查看指定二进制日至文件的具体内容：
mysql>SHOW BINLOG EVENTS in‘mysql-bin.000005’FROM POSITION=177;
或
#mysqlbinlog /mydata/mdata/mysql-bin.000005

4. 手工滚动二进制文件：
mysql>FLUSH LOGS;

5. 删除指定二进制日志文件之前的日志文件
mysql>PURGE BINARY LOGS TO‘mysql-bin.00005’;