MySQL通用查詢日誌和慢查詢的日誌分析

MySQL中的日誌包括:錯誤日誌、二進制日誌、通用查詢日誌、慢查詢日誌等等。這裡主要介紹下比較常用的兩個功能:通用查詢日誌和慢查詢日誌。

1)通用查詢日誌:記錄建立的客戶端連接和執行的語句。

2)慢查詢日誌:記錄所有執行時間超過longquerytime秒的所有查詢或者不使用索引的查詢

(1)通用查詢日誌

在學習通用日誌查詢時,需要知道兩個數據庫中的常用命令:

1) show variables like ‘%general%’;

可以查看,當前的通用日誌查詢是否開啟,如果general_log的值為ON則為開啟,為OFF則為關閉(默認情況下是關閉的)。

1) show variables like ‘%log_output%’;

查看當前慢查詢日誌輸出的格式,可以是FILE(存儲在數數據庫的數據文件中的hostname.log),也可以是TABLE(存儲在數據庫中的mysql.general_log)

問題:如何開啟MySQL通用查詢日誌,以及如何設置要輸出的通用日誌輸出格式呢?

開啟通用日誌查詢: set global general_log=on;

關閉通用日誌查詢: set global general_log=off;

設置通用日誌輸出為表方式: set global log_output=’TABLE’;

設置通用日誌輸出為文件方式: set global log_output=’FILE’;

設置通用日誌輸出為表和文件方式:set global log_output=’FILE,TABLE’;

(注意:上述命令只對當前生效,當MySQL重啟失效,如果要永久生效,需要配置 my.cnf)

my.cnf文件的配置如下:

general_log=1 #為1表示開啟通用日誌查詢,值為0表示關閉通用日誌查詢

log_output=FILE,TABLE#設置通用日誌的輸出格式為文件和表

(2)慢查詢日誌

MySQL的慢查詢日誌是MySQL提供的一種日誌記錄,用來記錄在MySQL中響應時間超過閾值的語句,具體指運行時間超過long_query_time值的SQL,則會被記錄到慢查詢日誌中(日誌可以寫入文件或者數據庫表,如果對性能要求高的話,建議寫文件)。默認情況下,MySQL數據庫是不開啟慢查詢日誌的,long_query_time的默認值為10(即10秒,通常設置為1秒),即運行10秒以上的語句是慢查詢語句。

一般來說,慢查詢發生在大表(比如:一個表的數據量有幾百萬),且查詢條件的字段沒有建立索引,此時,要匹配查詢條件的字段會進行全表掃描,耗時查過long_query_time,

則為慢查詢語句。

問題:如何查看當前慢查詢日誌的開啟情況?

在MySQL中輸入命令:

show variables like ‘%quer%’;

主要掌握以下的幾個參數:

(1)slow_query_log的值為ON為開啟慢查詢日誌,OFF則為關閉慢查詢日誌。

(2)slow_query_log_file 的值是記錄的慢查詢日誌到文件中(注意:默認名為主機名.log,慢查詢日誌是否寫入指定文件中,需要指定慢查詢的輸出日誌格式為文件,相關命令為:show variables like ‘%log_output%’;去查看輸出的格式)。

(3)long_query_time 指定了慢查詢的閾值,即如果執行語句的時間超過該閾值則為慢查詢語句,默認值為10秒。

(4)log_queries_not_using_indexes

如果值設置為ON,則會記錄所有沒有利用索引的查詢(注意:如果只是將log_queries_not_using_indexes設置為ON,而將slow_query_log設置為OFF,此時該設置也不會生效,即該設置生效的前提是slow_query_log的值設置為ON),一般在性能調優的時候會暫時開啟。

問題:設置MySQL慢查詢的輸出日誌格式為文件還是表,或者兩者都有?

通過命令:show variables like ‘%log_output%’;

通過log_output的值可以查看到輸出的格式,上面的值為TABLE。當然,我們也可以設置輸出的格式為文本,或者同時記錄文本和數據庫表中,設置的命令如下:

#慢查詢日誌輸出到表中(即mysql.slow_log)

set globallog_output=’TABLE’;

#慢查詢日誌僅輸出到文本中(即:slow_query_log_file指定的文件)

setglobal log_output=’FILE’;

#慢查詢日誌同時輸出到文本和表中

setglobal log_output=’FILE,TABLE’;

關於慢查詢日誌的表中的數據個文本中的數據格式分析:

慢查詢的日誌記錄myql.slow_log表中,格式如下:

MySQL通用查詢日誌和慢查詢的日誌分析

慢查詢的日誌記錄到hostname.log文件中,格式如下:

MySQL通用查詢日誌和慢查詢的日誌分析

可以看到,不管是表還是文件,都具體記錄了:是那條語句導致慢查詢(sql_text),該慢查詢語句的查詢時間(query_time),鎖表時間(Lock_time),以及掃描過的行數(rows_examined)等信息。

問題:如何查詢當前慢查詢的語句的個數?

在MySQL中有一個變量專門記錄當前慢查詢語句的個數:

輸入命令:show global status like ‘%slow%’;

MySQL通用查詢日誌和慢查詢的日誌分析

注意:上述所有命令,如果都是通過MySQL的shell將參數設置進去,如果重啟MySQL,所有設置好的參數將失效,如果想要永久的生效,需要將配置參數寫入my.cnf文件中)。

補充知識點:如何利用MySQL自帶的慢查詢日誌分析工具mysqldumpslow分析日誌?

perlmysqldumpslow –s c –t 10 slow-query.log

具體參數設置如下:

-s 表示按何種方式排序,c、t、l、r分別是按照記錄次數、時間、查詢時間、返回的記錄數來排序,ac、at、al、ar,表示相應的倒敘;

-t 表示top的意思,後面跟著的數據表示返回前面多少條;

-g 後面可以寫正則表達式匹配,大小寫不敏感。

MySQL通用查詢日誌和慢查詢的日誌分析

上述中的參數含義如下:

Count:414 語句出現了414次;

Time=3.51s(1454) 執行最長時間為3.51s,累計總耗費時間1454s;

Lock=0.0s(0) 等待鎖最長時間為0s,累計等待鎖耗費時間為0s;

Rows=2194.9(9097604) 發送給客戶端最多的行數為2194.9,累計發送給客戶端的函數為90976404

注意:mysqldumpslow腳本是用perl語言寫的,具體mysqldumpslow的用法後期再講)

問題:實際在學習過程中,如何得知設置的慢查詢是有效的?

很簡單,我們可以手動產生一條慢查詢語句,比如,如果我們的慢查詢log_query_time的值設置為1,則我們可以執行如下語句:

selectsleep(1);

該條語句即是慢查詢語句,之後,便可以在相應的日誌輸出文件或表中去查看是否有該條語句。

那如何學習才能快速入門並精通呢?

當真正開始學習的時候難免不知道從哪入手,導致效率低下影響繼續學習的信心。

為了讓學習變得輕鬆、高效,今天給大家免費分享一套阿里架構師傳授的一套教學資源。幫助大家在成為架構師的道路上披荊斬棘。

這套視頻課程詳細講解了(Spring,MyBatis,Netty源碼分析,高併發、高性能、分佈式、微服務架構的原理,JVM性能優化、分佈式架構)等這些成為架構師必備的內容!

後臺私信回覆“架構” 就可以馬上免費獲得這套內部教材!

最後,做一個愛思考,懂思考,會思考的程序員。


分享到:


相關文章: