<转>Mysql 慢查询和慢查询日志分析
- - 数据库 - ITeye博客原链接：http://www.cnblogs.com/wrmfw/archive/2011/09/05/2166929.html. 众所周知，大访问量的情况下，可添加节点或改变架构可有效的缓解数据库压力，不过一切的原点，都是从单台mysql开始的. 下面总结一些使用过或者研究过的经验，从配置以及调节索引的方面入手，对mysql进行一些优化.
<转>Mysql 慢查询和慢查询日志分析
标签：
mysql
日志
分析
| 发表时间：2014-08-30 15:09 | 作者：yingbin920
出处：http://www.iteye.com
原链接：http://www.cnblogs.com/wrmfw/archive/2011/09/05/2166929.html
众所周知，大访问量的情况下，可添加节点或改变架构可有效的缓解数据库压力，不过一切的原点，都是从单台mysql开始的。下面总结一些使用过或者研究过的经验，从配置以及调节索引的方面入手，对mysql进行一些优化。
第一步应该做的就是排查问题，找出瓶颈，所以，先从日志入手
开启慢查询日志
mysql>show variables like “%slow%”; 查看慢查询配置，没有则在my.cnf中添加，如下
log-slow-queries = /data/mysqldata/slowquery.log #日志目录
long_query_time = 1 #记录下查询时间查过1秒
log-queries-not-using-indexes #表示记录下没有使用索引的查询
分析日志 – mysqldumpslow
分析日志，可用mysql提供的mysqldumpslow，使用很简单，参数可–help查看
# -s：排序方式。c , t , l , r 表示记录次数、时间、查询时间的多少、返回的记录数排序；
# ac , at , al , ar 表示相应的倒叙；
# -t：返回前面多少条的数据；
# -g：包含什么，大小写不敏感的；
mysqldumpslow -s r -t 10 /slowquery.log #slow记录最多的10个语句
mysqldumpslow -s t -t 10 -g "left join" /slowquery.log #按照时间排序前10中含有"left join"的
推荐用分析日志工具 – mysqlsla
wget http://hackmysql.com/scripts/mysqlsla-2.03.tar.gz
tar zvxf mysqlsla-2.03.tar.gz
cd mysqlsla-2.03
perl Makefile.PL
make
make install
mysqlsla /data/mysqldata/slow.log
# mysqlsla会自动判断日志类型，为了方便可以建立一个配置文件“~/.mysqlsla”
# 在文件里写上：top=100，这样会打印出前100条结果。
【说明】
queries total: 总查询次数 unique:去重后的sql数量
sorted by : 输出报表的内容排序
最重大的慢sql统计信息, 包括 平均执行时间, 等待锁时间, 结果行的总数, 扫描的行总数.
Count, sql的执行次数及占总的slow log数量的百分比.
Time, 执行时间, 包括总时间, 平均时间, 最小, 最大时间, 时间占到总慢sql时间的百分比.
95% of Time, 去除最快和最慢的sql, 覆盖率占95%的sql的执行时间.
Lock Time, 等待锁的时间.
95% of Lock , 95%的慢sql等待锁时间.
Rows sent, 结果行统计数量, 包括平均, 最小, 最大数量.
Rows examined, 扫描的行数量.
Database, 属于哪个数据库
Users, 哪个用户,IP, 占到所有用户执行的sql百分比
Query abstract, 抽象后的sql语句
Query sample, sql语句
已有 0 人发表留言，猛击->> 这里<<-参与讨论
ITeye推荐
众所周知，大访问量的情况下，可添加节点或改变架构可有效的缓解数据库压力，不过一切的原点，都是从单台mysql开始的。下面总结一些使用过或者研究过的经验，从配置以及调节索引的方面入手，对mysql进行一些优化。
第一步应该做的就是排查问题，找出瓶颈，所以，先从日志入手
开启慢查询日志
mysql>show variables like “%slow%”; 查看慢查询配置，没有则在my.cnf中添加，如下
log-slow-queries = /data/mysqldata/slowquery.log #日志目录
long_query_time = 1 #记录下查询时间查过1秒
log-queries-not-using-indexes #表示记录下没有使用索引的查询
分析日志 – mysqldumpslow
分析日志，可用mysql提供的mysqldumpslow，使用很简单，参数可–help查看
# -s：排序方式。c , t , l , r 表示记录次数、时间、查询时间的多少、返回的记录数排序；
# ac , at , al , ar 表示相应的倒叙；
# -t：返回前面多少条的数据；
# -g：包含什么，大小写不敏感的；
mysqldumpslow -s r -t 10 /slowquery.log #slow记录最多的10个语句
mysqldumpslow -s t -t 10 -g "left join" /slowquery.log #按照时间排序前10中含有"left join"的
推荐用分析日志工具 – mysqlsla
wget http://hackmysql.com/scripts/mysqlsla-2.03.tar.gz
tar zvxf mysqlsla-2.03.tar.gz
cd mysqlsla-2.03
perl Makefile.PL
make
make install
mysqlsla /data/mysqldata/slow.log
# mysqlsla会自动判断日志类型，为了方便可以建立一个配置文件“~/.mysqlsla”
# 在文件里写上：top=100，这样会打印出前100条结果。
【说明】
queries total: 总查询次数 unique:去重后的sql数量
sorted by : 输出报表的内容排序
最重大的慢sql统计信息, 包括 平均执行时间, 等待锁时间, 结果行的总数, 扫描的行总数.
Count, sql的执行次数及占总的slow log数量的百分比.
Time, 执行时间, 包括总时间, 平均时间, 最小, 最大时间, 时间占到总慢sql时间的百分比.
95% of Time, 去除最快和最慢的sql, 覆盖率占95%的sql的执行时间.
Lock Time, 等待锁的时间.
95% of Lock , 95%的慢sql等待锁时间.
Rows sent, 结果行统计数量, 包括平均, 最小, 最大数量.
Rows examined, 扫描的行数量.
Database, 属于哪个数据库
Users, 哪个用户,IP, 占到所有用户执行的sql百分比
Query abstract, 抽象后的sql语句
Query sample, sql语句
已有 0 人发表留言，猛击->> 这里<<-参与讨论
ITeye推荐
相关 [mysql 日志 分析] 推荐：
监听mysql的binlog日志工具分析：canal、Maxwell、Databus、DTS - 程序员大本营
- -阿里云的数据传输服务DTS. 定位：基于数据库增量日志解析，提供增量数据订阅&消费，目前主要支持了mysql. canal模拟mysql slave的交互协议，伪装自己为mysql slave，向mysql master发送dump协议. mysql master收到dump请求，开始推送binary log给slave(也就是canal).
Clickhouse 在日志存储与分析方面作为 ElasticSearch 和 MySQL 的替代方案
- -2021年，Clickhouse 在日志存储与分析方面作为 ElasticSearch 和 MySQL 的替代方案. 原文作者：Anton Sidashin. 关于Clickhouse的文章，这段内容在互联网上仍然很流行，甚至被多次翻译. 现在已经过去两年多，同时 Clickhouse 的开发节奏.
MySQL锁表机制分析
- - 小彰为了给高并发情况下的mysql进行更好的优化，有必要了解一下mysql查询更新时的锁表机制. MySQL有三种锁的级别：页级、表级、行级. MyISAM和MEMORY存储引擎采用的是表级锁（table-level locking）；BDB存储引擎采用的是页面锁（page-level. locking），但也支持表级锁；InnoDB存储引擎既支持行级锁（row-level locking），也支持表级锁，但默认情况下是采用行级锁.
MySQL锁阻塞分析
- - CSDN博客数据库推荐文章日常维护中，经常会碰到线程被阻塞，导致数据库响应非常慢，下面就看看如何获取是哪个线程导致了阻塞的. blog地址： http://blog.csdn.net/hw_libo/article/details/39080809. 3.1 使用show processlist查看. |
| 3 | root | localhost | test | Query | 70 | Sending data | select count(*) from t3 a,t3 b.
MySQL执行状态分析
- - CSDN博客推荐文章当感觉mysql性能出现问题时，通常会先看下当前mysql的执行状态，使用 show processlist 来查看，例如：. 其中state状态列信息非常重要，先看下各列含义，然后看下state常用状态. 一个标识，你要kill一个语句的时候使用，例如 mysql> kill 207;. 显示当前用户，如果不是root，这个命令就只显示你权限范围内的sql语句.
GC 日志分析
- - 码蜂笔记不同的JVM及其选项会输出不同的日志. 生成下面日志使用的选项： -XX:+PrintGCTimeStamps -XX:+PrintGCDetails -Xloggc:d:/GClogs/tomcat6-gc.log. 最前面的数字 4.231 和 4.445 代表虚拟机启动以来的秒数.
【体系结构】MySQL 日志文件--慢查询日志
- - CSDN博客数据库推荐文章 顾名思义，慢查询日志中记录的是执行时间较长的 query. 可以设一个阀值、将运行时间超过该值的所有SQL语句都记录到慢查询日志文件中. 该阀值可以通过参数long_query_time来设置、默认是10秒. 这里需要一点、对于运行时间正好等于long_query_time的情况、并不会被记录.
【体系结构】MySQL 日志文件--错误日志
- - CSDN博客数据库推荐文章 记录MySQL Server 启动和关闭的详细信息、以及运行过程中较为严重的警告和错误信息. 为了维护方便需要、有时候会希望将错误日志中的内容做备份并重新开始记录、那么可以：. MySQL DBA 在遇到问题时应该首先查看该文件. 当出现 MySQL Server 不能正常启动时、第一个拷问的重点对象应该就是此人.
apache日志分析简介
- - 编程语言 - ITeye博客如果apache的安装时采用默认的配置,那么在/logs目录下就会生成两个文件,分别是access_log和error_log. access_log为访问日志,记录所有对apache服务器进行请求的访问,它的位置和内容由CustomLog指令控制,LogFormat指令可以用来简化该日志的内容和格式.