1. 程式人生 > >MySQL慢查詢日誌分析

MySQL慢查詢日誌分析

一:查詢slow log的狀態,如示例程式碼所示,則slow log已經開啟。

複製程式碼
mysql> show variables like '%slow%';
+---------------------+------------------------------------------+
| Variable_name       | Value                                    |
+---------------------+------------------------------------------+
| log_slow_queries    |
ON | | slow_launch_time | 2 | | slow_query_log | ON | | slow_query_log_file | /mysqllog/slow_log/slow_queries_3306.log | +---------------------+------------------------------------------+
4 rows in set (0.00 sec)
複製程式碼

   如果沒有開啟慢查詢日誌有以下兩種方法:

  1.    在配置檔案[mysqld]中新增slow_query_log = ON和long_query_time = 1,然後重啟MySQL即可生效。
  2.   set global slow_query_log=1; 線上開啟。如果MySQL發生重啟,就會失效,如果要永久生效,就必選修改配置檔案。

二:slow log的日誌相關引數詳解

slow_query_log :是否開啟慢查詢日誌,1表示開啟,0表示關閉。

log-slow-queries :舊版(5.6以下版本)MySQL資料庫慢查詢日誌儲存路徑。可以不設定該引數,系統則會預設給一個預設的檔案host_name-slow.log

slow-query-log-file:新版(5.6及以上版本)MySQL資料庫慢查詢日誌儲存路徑。可以不設定該引數,系統則會預設給一個預設的檔案host_name-slow.log

long_query_time :慢查詢閾值,當查詢時間多於設定的閾值時,記錄日誌。

log_queries_not_using_indexes:未使用索引的查詢也被記錄到慢查詢日誌中(可選項)。

log_output:日誌儲存方式。log_output='FILE'表示將日誌存入檔案,預設值是'FILE'。log_output='TABLE'表示將日誌存入資料庫,這樣日誌資訊就會被寫入到mysql.slow_log表中。MySQL資料庫支援同時兩種日誌儲存方式,配置的時候以逗號隔開即可,如:log_output='FILE,TABLE'。日誌記錄到系統的專用日誌表中,要比記錄到檔案耗費更多的系統資源,因此對於需要啟用慢查詢日誌,又需要能夠獲得更高的系統性能,那麼建議優先記錄到檔案。

三:如何線上安全的清空慢查詢日誌

  • 停止slow log
mysql> set global slow_query_log=0;
Query OK, 0 rows affected (0.27 sec)
複製程式碼
mysql> show variables like '%slow%';
+---------------------+------------------------------------------+
| Variable_name       | Value                                    |
+---------------------+------------------------------------------+
| log_slow_queries    | OFF                                      |
| slow_launch_time    | 2                                        |
| slow_query_log      | OFF                                      |
| slow_query_log_file | /mysqllog/slow_log/slow_queries_3306.log |
+---------------------+------------------------------------------+
4 rows in set (0.00 sec)
#檢查慢查詢日誌的狀態
複製程式碼
  • 為慢查詢日誌重新設定path路徑
mysql> set global slow_query_log_file='/mysqllog/slow_log/slow_queries_3306_new.log';
Query OK, 0 rows affected (0.03 sec)
  • 開啟慢查詢日誌,並設定long_query_time。
mysql> set global slow_query_log=1;
Query OK, 0 rows affected (0.01 sec)
mysql>set global long_query_time=1;
複製程式碼
#檢查狀態是否成功開啟
mysql> show variables like '%slow%'; +---------------------+----------------------------------------------+ | Variable_name | Value | +---------------------+----------------------------------------------+ | log_slow_queries | ON | | slow_launch_time | 2 | | slow_query_log | ON | | slow_query_log_file | /mysqllog/slow_log/slow_queries_3306_new.log | +---------------------+----------------------------------------------+ 4 rows in set (0.00 sec)
複製程式碼
  • 檢查slow sql 在新的日誌檔案中
複製程式碼
mysql> select sleep(10) as a, 1 as b;
+---+---+
| a | b |
+---+---+
| 0 | 1 |
+---+---+
1 row in set (10.00 sec)


mysql> 
[[email protected] ~]$ more /mysqllog/slow_log/slow_queries_3306_new.log
......
Time                 Id Command    Argument
# Time: 140213  6:44:24
# User@Host: root[root] @ localhost []
# Query_time: 10.000365  Lock_time: 0.000000 Rows_sent: 1  Rows_examined: 0
SET timestamp=1392273864;
select sleep(10) as a, 1 as b;
複製程式碼
  • 備份之前的慢查詢日誌
mv /mysqllog/slow_log/slow_queries_3306.log /mysqlbackup/slow_log/slow_queries_3306.log.bak.20140213

四:分析工具mysqlsla的安裝以及使用,mysqlsla是hackmysql.com推出的一款MySQL的日誌分析工具,功能非常強大. 資料報表,非常有利於分析慢查詢的原因, 包括執行頻率, 資料量, 查詢消耗等。

  • 在Centos下安裝mysqlsla
複製程式碼
yum install perl-DBI perl-DBD-MySQL perl-devel -y #安裝依賴包
wget  ftp://ftp.tw.freebsd.org/pub/distfiles/mysqlsla-2.03.tar.gz
#下載
perl Makefile.PL #預編譯
make #編譯
make install 安裝
PS:最好把此工具安裝在本地的測試伺服器上,然後將你的慢查詢日誌拷貝至本地進行分析,以免影響生產環境資料庫。
複製程式碼
  • 引數詳解
lt:表示日誌型別,有slow, general, binary, msl, udl。
sf:[+-][TYPE],[TYPE]有SELECT, CREATE, DROP, UPDATE, INSERT,例如”+SELECT,INSERT”,不出現的預設是-,即不包括。
db:要處理哪個庫的日誌。
top:表示取按規則排序的前多少條。
sort:按某種規則排序,t_sum按總時間排序, c_sum按總次數排序。
  • 示例使用
複製程式碼
mysqlsla -lt slow mysql-slow.log
或者
mysqlsla -lt slow mysql-slow.log -sf “+SELECT” -db dbName -top 10 -sort t_sum
也可以將結果輸入到檔案中,在windows下用Sublime Text 3檢視。
mysqlsla -lt slow /root/slow_queries_1013.log > /tmp/fx.log

複製程式碼
  • 分析結果
複製程式碼
總查詢次數 (queries total), 去重後的sql數量 (unique)
輸出報表的內容排序(sorted by)
最重大的慢sql統計資訊, 包括 平均執行時間, 等待鎖時間, 結果行的總數, 掃描的行總數.
Count, sql的執行次數及佔總的slow log數量的百分比.
Time, 執行時間, 包括總時間, 平均時間, 最小, 最大時間, 時間佔到總慢sql時間的百分比.
95% of Time, 去除最快和最慢的sql, 覆蓋率佔95%的sql的執行時間.
Lock Time, 等待鎖的時間.
95% of Lock , 95%的慢sql等待鎖時間.
Rows sent, 結果行統計數量, 包括平均, 最小, 最大數量.
Rows examined, 掃描的行數量.
Database, 屬於哪個資料庫
Users, 哪個使用者,IP, 佔到所有使用者執行的sql百分比
Query abstract, 抽象後的sql語句
Query sample, sql語句

相關推薦

Mysql查詢日誌分析工具Mysqlsla安裝

yum install perl-DBI perl-DBD-MySQL perl-devel -y yum -y  install perl-Time-HiRes cd /data/software wget  ftp://ftp.tw.freebsd.org/pub/

Mysql查詢日誌分析工具

Anemometer工具將慢查詢日誌中語句儲存到資料庫中,並生成報告。 安裝PHP相關服務及perl語言相關模組(http://blog.csdn.net/u010587433/article/details/50339377),並開啟http服務。 同時需要安裝Perco

MySQL查詢日誌分析

一:查詢slow log的狀態,如示例程式碼所示,則slow log已經開啟。 mysql> show variables like '%slow%'; +---------------------+-------------------------------

mysqldumpslow mysql查詢日誌分析工具

mysqldumpslow mysql官方提供的慢查詢日誌 分析工具 -s,是order的順序,說明寫的不夠詳細,俺用下來,包括看了程式碼,主要有 c,t,l,r和ac,at,al,ar,分別是按照query次數,時間,lock的時間和返回的記錄數來排序,前面加了a的時倒敘

Mysql 查詢日誌分析方法說明

Mysql 慢查詢日誌分析方法說明                     一、分析sql慢查詢的意義 在運營網站的過程中,可能會遇到網站突然變慢的問題,一般情況下和 MySQL 慢有關係,可以通過開啟慢查詢來記錄超過指定時間的SQL語句(目前慢查詢時間為2秒),找到影響效率的SQL語句,然後採取相應的措施

ELK分析MySQL查詢日誌並生成影象

一、背景 1.MySQL慢查詢日誌格式: # Time: 181109 15:04:08 # [email protected]: tvpayrcdev[tvpayrcdev] @ [172.16.14.51] Id: 8960747 # Query_time: 35.918265 Loc

ELK分析MySQL查詢日誌並生成圖像

-o output 數量 count posit 數據 iou 配置 etc 一、背景 1.MySQL慢查詢日誌格式: # Time: 181109 15:04:08 # User@Host: tvpayrcdev[tvpayrcdev] @ [172.16.14.51]

關於MySQL 通用查詢日誌查詢日誌分析

MySQL中的日誌包括:錯誤日誌、二進位制日誌、通用查詢日誌、慢查詢日誌等等。這裡主要介紹下比較常用的兩個功能:通用查詢日誌和慢查詢日誌。 1)通用查詢日誌:記錄建立的客戶端連線和執行的語句。 2)慢查詢日誌:記錄所有執行時間超過longquerytime秒的所有查詢或者不使用索引的查詢 (1)通用查詢

MySQL查詢日誌記錄和分析

一、引言 在日常的開發中,有時候會收到使用者或者產品經理反饋說網站的響應速度有點慢,即使是管理系統頁面也會出現這種情況。導致網頁響應速度慢的原因有很多,比如:資料表的某些欄位沒有建立索引,或者說是建立了索引,但索引失效,又或者說肯能因為最近來了一個新人同事,把某一條的SQL語句寫的執

Elasticsearch查詢日誌分析

elasticsearch slowlog 慢日誌目前架構:n臺filebeat客戶端來將每臺應用上的日誌傳到kafka,3臺kafka做集群用於日誌隊列,四臺ES做集群,前兩臺存放近兩天熱數據日誌,後兩臺存放兩天前的歷史日誌,數據保存一個月,目前總數據量6T。logstash與kibana與ES在一臺

MySQL查詢日誌相關的配置和使用。

其他 進制 數據 mps 執行 不存在 時間 tex http MySQL慢查詢日誌提供了超過指定時間閾值的查詢信息,為性能優化提供了主要的參考依據,是一個非常實用的功能,MySQL慢查詢日誌的開啟和配置非常簡單,可以指定記錄的文件(或者表),超過的時間閾值等就可以記

使用Mysql查詢日誌對有效率問題的SQL進行監控

問題 使用 寫入 glob 成了 show 單位 命令 lob 輸入命令:show variables like ‘slow%‘ 可以發現 slow_query_log 為 OFF(默認),表示未開啟慢查詢日誌 slow_query_lo

查詢日誌分析工具之pt-query-digest

lan git bash pre 日誌分析 windows images git 所有 curl 簡介 pt-query-digest 是用於分析mysql慢查詢的一個工具,與mysqldumpshow工具相比,py-query_digest 工具的分析結果更

mysql查詢日誌

微秒 min rip uos pre shel file 缺省 -o mysql慢查詢日誌是mysql提供的一種日誌記錄,它用來記錄sql執行超過long_query_time秒的SQL語句。long_query_time的最小值和默認值分別為0和10。 意思是運行超過10

Mysql 查詢日誌

nbsp 分析 鎖定 永久 工具 多少 set 通過 時間 查看狀態 SHOW VARIABLES LIKE ‘%slow_query_log%‘ 開啟 set global show_query_log=1 (重啟後失效) 永久生效 修改my.cnf 加

Anemometer+Percona Toolki實現MySQL查詢日誌可視化功能

follow mysql服務器 httpd php ade aio water pac 管理 centos 最近發現了一個挺好用的MySQL慢查詢日誌可視化的工具,網上也能找到很多資料,在這裏結合自己的實際情況重新整理一下。 1. 實驗環境 1.1 系統環境: 操作系統:C

設置啟用mysql查詢日誌

mysq mys long file glob 執行時間 mysql slow_log lob --設置log文件位置 set global slow_query_log_file = /sql_log/slow_log.log; --設置是否啟用記錄沒有使用索引的sql

開啟mysql查詢日誌並使用mysqldumpslow命令查看

開啟 mysqld dumps not style 現在 left join 介紹 time Mysql服務器有一項功能,可以檢測到哪條sql語句查詢得比較慢,就是慢查詢slowlog,現在介紹如何開啟。 在[mysqld]下面增加如下代碼: long_query_tim

開啟MYSQL查詢日誌,監控有效率問題的SQL

操作步驟 首先使用使用者登入linux客戶端,執行命令 mysql -u mjb -p, mjb是資料庫使用者名稱,系統會提示輸入密碼,輸入密碼回車,登入成功 輸入命令show variables like 'slow_query_log', 頁面會顯示是

mysql查詢日誌 (李作強)

mysql慢查詢日誌預設情況下統統寫入到一個檔案中,檔案會變的越來越大,非常不方便檢視分析。可以利用logrotate來對mysql慢查詢日誌、錯誤日誌進行切割,便於DBA分析每日慢查詢,優化資料庫。 logrotate工具介紹參見《logrotate日誌管理工具》。 1. 定義日誌輪滾