mysq数据库日志知识及应用实践【错误日志和慢查询日志】

    xiaoxiao2022-07-03  127

    错误日志的介绍与配置

    1.错误日志的介绍

    MySQL的错误日志用于记录MySQL服务进程mysqld在启动/关闭或运行过程中遇到的错误信息。

    2.错误日志的记录配置

    MySQL的错误日志通常由mysqld或mysqld_safe程序产生,前文已经讲解过MySQL的启动原理,因此,可利用如下方法配置记录MySQL错误日志。

    方法1:在my.cnf配置文件中调整,注意,是在[mysqld_safe]或[mysqld]模块的下面进行配置。命令如下:

    [mysqld] log-error = /data/mysql/error.err /data/mysql/error.err

    都是自己手动创建的,记得修改所属的用户与所属的组为mysql ,或者修改操作权限

    chown -R mysql:mysql /data/mysql chmod -R 755 /data/mysql

    方法2:在启动MySQL服务的命令里加入记录错误日志的参数。 示例如下:

    log-error=/data/mysql/error/error.err

    查看到的最终结果为:

    show variables like 'log_error%';

    修改文件夹的权限

    3.错误日志轮询

    管理员可以使用命令轮询错误日志,例如可以按天轮询,具体方法如下:

    [root@songls~]# cd /data/mysql/error/ #<==切换到日志目录下。 [root@songls mysql]# mv error.err error_$(date +%F).err #<==将错误日志按天 移动改名。 [root@songls data]# mysqladmin flush-logs #<==执行刷新日志命令。 [root@songls data]# ls -l error.err -rw-rw----. 1 mysql mysql 0 Mar 19 19:34 error.err #<==新的错误日志诞生了。

    4.数据库故障排查案例分析 新手安装数据库时,遇到数据库无法启动时的排查方法具体如下。 1)先清空错误日志文件,然后重新启动MySQL服务,再查看日志文件报什么错误,并根据错误日志进行处理。 2)如果无法解决,则删除数据文件,重新初始化数据库。 假设在排查故障时,得到的错误日志提示为:

    180321 17:36:26 InnoDB: Completed initialization of buffer pool 180321 17:36:26 InnoDB: Operating system error number 13 in a file operation. InnoDB: The error means mysqld does not have the access rights to InnoDB: the directory. InnoDB: File name ./ibdata1

    根据提示可知,该错误是权限问题导致的问题,可对数据目录递归执行权限,然后再重启数据库。命令如下:

    [root@songls data]# chown -R mysql:mysql /data/mysql/error

    (2)慢查询日志

    1.慢查询日志介绍

    简单地理解,慢查询日志(slow query log)就是记录执行时间超出指定值(long_query_time)或其他指定条件(例如,没有使用到索引,结果集大于1000行)的SQL语句。

    2.慢查询日志相关参数说明

    慢查询的参数,对于数据库SQL的优化非常重要,是SQL优化的前提,因此,这里以表的形式进行说明,具体见表

    3.慢查询日志重要参数配置

    企业中常见的配置慢查询的参数为:

    slow-query-log = ON #<==慢查询开启开关 long_query_time = 2 #<==记录大于2秒的SQL语句。 log_queries_not_using_indexes #<==没有使用到索引的SQL语句。 slow-query-log-file = /data/mysql/slow/slow.log #<==记录SQL语句的文件。 min_examined_row_limit = 800 #<==记录结果集大于800行的SQL语句。

    可将上述参数配置到my.cnf里,配置完毕重启MySQL服务,并进行检查:

    mysql> show variables like 'slow_query%'; +---------------------+-----------------------------+ | Variable_name | Value | +---------------------+-----------------------------+ | slow_query_log | ON | #<==开关已打开。 | slow_query_log_file | /data/mysql/slow.log | #<==文件路径已生效。 +---------------------+-----------------------------+ 2 rows in set (0.00 sec) mysql> show variables like '%long_query%'; +-----------------+----------+ | Variable_name | Value | +-----------------+----------+ | long_query_time | 2.000000 | #<==记录大于2秒的查询已生效。 +-----------------+----------+ 1 row in set (0.01 sec) mysql> show variables like '%log_queries_not%'; +-------------------------------+-------+ | Variable_name | Value | +-------------------------------+-------+ | log_queries_not_using_indexes | ON | #<==记录没有使用索引的查询已生效。 +-------------------------------+-------+ 1 row in set (0.00 sec) mysql> show variables like '%min_examined_row_limit%'; +------------------------+-------+ | Variable_name | Value | +------------------------+-------+ | min_examined_row_limit | 800 | #<==记录查询结果集大于800行的SQL已生效。 +------------------------+-------+ 1 row in set (0.00 sec)

    到此,就已经设定好记录慢查询SQL语句的条件了,那么,对于每天所产生的大量慢查询,又该如何处理和分析呢?

    4.慢查询日志的刷新方法

    在工作中,可以利用定时任务按天对慢查询日志进行切割,然后再分析。 示例切割脚本如下:

    [root@oldboy data]# mkdir /server/scripts/ -p [root@oldboy data]# cat /server/scripts/cut_slow_log.sh export PATH=/application/mysql/bin:/sbin:/bin:/usr/sbin:/usr/bin cd /data/mysql/slow mv slow.log slow.log.$(date +%F) mysqladmin flush -log

    将上述脚本放入定时任务,每天0点执行切割任务,配置结果如下:

    [root@oldboy data]# tail -2 /var/spool/cron/root #cut mysql slow log by oldboy at 20180324 00 00 * * * /bin/sh /server/scripts/cut_slow_log.sh >/dev/null 2>&1

    5.使用工具分析慢查询日志

    实际工作中,慢查询的日志可能非常多,给运维人员的优化工作带来了一定的困难,MySQL官方提供了慢查询的分析工具mysqldumpslow,有兴趣的读者可以参考官方手册。 下面为大家介绍一款很不错的第三方分析工具mysqlsla(需要单独安装该工具)。

    (1)安装mysqlsla

    请提前下载好mysqlsla-2.03.tar.gz到指定目录下,然后执行如下命令安装:

    yum install perl-devel perl-DBI -y rpm -qa perl-devel perl-DBI tar -xf mysqlsla-2.03.tar.gz cd mysqlsla-2.03 perl Makefile.PL make make install

    (2)利用mysqlsla工具分析慢查询

    mysqlsla命令的默认路径为:/usr/local/bin/mysqlsla。

    简单语法如下:

    mysqlsla -lt slow [SlowLogFilePath] > [ResultFilePath]

    在实际工作中,通常使用脚本调用mysqlsla工具进行分析,然后每天早晨8点,把分析结果发给企业的核心人员(DBA、运维总监、CTO、研发总监、核心开发),最后由DBA配合核心开发共同优化这些棘手的SQL慢查询。

    最新回复(0)