MySQL 通用查詢日誌(General Query Log)
同大多數關系型數據庫一樣,日誌文件是MySQL數據庫的重要組成部分。MySQL有幾種不同的日誌文件,通常包括錯誤日誌文件,二進制日誌,通用日誌,慢查詢日誌,等等。這些日誌可以幫助我們定位mysqld內部發生的事件,數據庫性能故障,記錄數據的變更歷史,用戶恢復數據庫等等。本文主要描述通用查詢日誌。
1、MySQL日誌文件系統的組成
a、錯誤日誌:記錄啟動、運行或停止mysqld時出現的問題。
b、通用日誌:記錄建立的客戶端連接和執行的語句。
c、更新日誌:記錄更改數據的語句。該日誌在MySQL 5.1中已不再使用。
d、二進制日誌:記錄所有更改數據的語句。還用於復制。
e、慢查詢日誌:記錄所有執行時間超過long_query_time秒的所有查詢或不使用索引的查詢。
f、Innodb日誌:innodb redo log
缺省情況下,所有日誌創建於mysqld數據目錄中。
可以通過刷新日誌,來強制mysqld來關閉和重新打開日誌文件(或者在某些情況下切換到一個新的日誌)。
當你執行一個FLUSH LOGS語句或執行mysqladmin flush-logs或mysqladmin refresh時,則日誌被老化。
對於存在MySQL復制的情形下,從復制服務器將維護更多日誌文件,被稱為接替日誌。
2、通用查詢日誌
通用查詢日誌可以存放到一個文本文件或者表中,所有連接和語句被記錄到該日誌文件或表,缺省未開啟該日誌。
通過--log[=file_name]或-l [file_name]選項啟動它。如果沒有給定file_name的值, 默認名是host_name.log。
mysqld按照它接收的順序記錄語句到查詢日誌。這可能與執行的順序不同。
不同於更新日誌和二進制日誌,它們在查詢執行後,但是任何一個鎖釋放之前記錄日誌。
查詢日誌包含所有語句,而二進制日誌不包含只查詢數據的語句。
服務器重新啟動和日誌刷新不會產生新的一般查詢日誌文件。
3、通用查詢日誌的系統變量
log_output=[none|file|table|file,table] #通用查詢日誌輸出格式
general_log=[on|off] #是否啟用通用查詢日誌
general_log_file[=filename] #通用查詢日誌位置及名字
4、通用查詢日誌的備份
在Linux或Unix中,你可以通過下面的命令重新命名文件
並創建一個新文件:
shell> mv hostname.log hostname-old.log
shell> mysqladmin flush-logs
shell> cp hostname-old.log to-backup-directory
shell> rm hostname-old.log
在Windows中,服務器打開日誌文件期間不能重新命名日誌文件。必須先停止服務器然後重新命名日誌文件。然後重啟服務器來創建新日誌文件。
5、演示通用查詢日誌的使用
- a、啟用通用查詢日誌
- --演示環境
- root@localhost[(none)]> show variables like ‘%version%‘;
- +-------------------------+------------------------------+
- | Variable_name | Value |
- +-------------------------+------------------------------+
- | innodb_version | 5.5.39 |
- | protocol_version | 10 |
- | slave_type_conversions | |
- | version | 5.5.39-log |
- | version_comment | MySQL Community Server (GPL) |
- | version_compile_machine | x86_64 |
- | version_compile_os | Linux |
- +-------------------------+------------------------------+
- --查看系統變量
- root@localhost[(none)]> show variables like ‘%general%‘;
- +------------------+----------------------------+
- | Variable_name | Value |
- +------------------+----------------------------+
- | general_log | OFF |
- | general_log_file | /var/lib/mysql/suse11b.log |
- +------------------+----------------------------+
- --查看當前的通用日誌,顯示無日誌文件
- root@localhost[(none)]> system ls /var/lib/mysql/suse11b.log
- ls: cannot access /var/lib/mysql/suse11b.log: No such file or directory
- --設置變量general_log以開啟通用查詢日誌
- root@localhost[(none)]> set @@global.general_log=1;
- Query OK, 0 rows affected (0.00 sec)
- --再次查看通用日誌文件已存在
- root@localhost[(none)]> system ls /var/lib/mysql/suse11b.log
- /var/lib/mysql/suse11b.log
- root@localhost[(none)]> select * from tempdb.tb1; --執行查詢
- +------+------+
- | id | val |
- +------+------+
- | 1 | jack |
- +------+------+
- --查看通用日誌文件內容
- root@localhost[(none)]> system more /var/lib/mysql/suse11b.log
- /usr/sbin/mysqld, Version: 5.5.39-log (MySQL Community Server (GPL)). started with:
- Tcp port: 3306 Unix socket: /var/lib/mysql/mysql.sock
- Time Id Command Argument
- 141003 16:18:12 4 Query show variables like ‘%general%‘
- 141003 16:18:55 4 Query select * from tempdb.tb1
- b、更改通用查詢日誌位置
- root@localhost[(none)]> exit
- Bye
- suse11b:~ # service mysql stop
- Shutting down MySQL... done
- suse11b:~ # mysqld --general_log_file=/tmp/suse11b.log --user=mysql &
- [1] 47009
- suse11b:~ # ps -ef|grep mysql|grep -v grep
- mysql 47009 44514 1 16:22 pts/0 00:00:00 mysqld --general_log_file=/tmp/suse11b.log --user=mysql
- root 47053 44514 0 16:22 pts/0 00:00:00 grep mysql
- suse11b:~ # mysql
- root@localhost[(none)]> system ls /tmp/suse11b.log
- ls: cannot access /tmp/suse11b.log: No such file or directory
- root@localhost[(none)]> show variables like ‘%gener%‘;
- +------------------+------------------+
- | Variable_name | Value |
- +------------------+------------------+
- | general_log | OFF |
- | general_log_file | /tmp/suse11b.log |
- +------------------+------------------+
- root@localhost[(none)]> set global general_log=on;
- Query OK, 0 rows affected (0.01 sec)
- --此時從系統變量看出,通用日誌已經到/tmp目錄下
- root@localhost[(none)]> show variables like ‘%gener%‘;
- +------------------+------------------+
- | Variable_name | Value |
- +------------------+------------------+
- | general_log | ON |
- | general_log_file | /tmp/suse11b.log |
- +------------------+------------------+
- --發布查詢
- root@localhost[(none)]> select count(*) from tempdb.tb1;
- +----------+
- | count(*) |
- +----------+
- | 1 |
- +----------+
- --查看通用日誌文件內容
- root@localhost[(none)]> system more /tmp/suse11b.log
- mysqld, Version: 5.5.39-log (MySQL Community Server (GPL)). started with:
- Tcp port: 3306 Unix socket: /var/lib/mysql/mysql.sock
- Time Id Command Argument
- 141003 16:30:03 1 Query show variables like ‘%gener%‘
- 141003 16:30:09 1 Query select count(*) from tempdb.tb1
- c、通用查詢日誌輸出方式
- --可以輸出為文件,表以及不輸出,即TABLE,FILE,NONE
- --系統變量log_output
- root@localhost[(none)]> show variables like ‘log_output‘;
- +---------------+-------+
- | Variable_name | Value |
- +---------------+-------+
- | log_output | FILE |
- +---------------+-------+
- --下面修改為輸出為表方式
- root@localhost[(none)]> set global log_output=‘TABLE‘;
- Query OK, 0 rows affected (0.00 sec)
- root@localhost[(none)]> show variables like ‘log_output‘;
- +---------------+-------+
- | Variable_name | Value |
- +---------------+-------+
- | log_output | TABLE |
- +---------------+-------+
- --發布查詢
- root@localhost[(none)]> select * from tempdb.tb1;
- +------+------+
- | id | val |
- +------+------+
- | 1 | jack |
- +------+------+
- --Author: Leshami
- --Blog : http://blog.csdn.net/leshami
- root@localhost[(none)]> system more /tmp/suse11b.log
- mysqld, Version: 5.5.39-log (MySQL Community Server (GPL)). started with:
- Tcp port: 3306 Unix socket: /var/lib/mysql/mysql.sock
- Time Id Command Argument
- 141003 16:30:03 1 Query show variables like ‘%gener%‘
- 141003 16:30:09 1 Query select count(*) from tempdb.tb1
- 141003 16:31:00 1 Query show variables like ‘log_output‘
- 141003 17:00:48 1 Query set global log_output=‘TABLE‘ #通用查詢日誌輸出到文件僅僅記錄到全局變量的修改
- --mysql.general_log記錄了通用查詢日誌的信息
- root@localhost[(none)]> desc mysql.general_log;
- +--------------+------------------+------+-----+-------------------+-----------------------------+
- | Field | Type | Null | Key | Default | Extra |
- +--------------+------------------+------+-----+-------------------+-----------------------------+
- | event_time | timestamp | NO | | CURRENT_TIMESTAMP | on update CURRENT_TIMESTAMP |
- | user_host | mediumtext | NO | | NULL | |
- | thread_id | int(11) | NO | | NULL | |
- | server_id | int(10) unsigned | NO | | NULL | |
- | command_type | varchar(64) | NO | | NULL | |
- | argument | mediumtext | NO | | NULL | |
- +--------------+------------------+------+-----+-------------------+-----------------------------+
- --從通用查詢日誌表裏查看通用查詢日誌的內容
- root@localhost[(none)]> select thread_id,command_type,argument from mysql.general_log;
- +-----------+--------------+---------------------------------------------------------------+
- | thread_id | command_type | argument |
- +-----------+--------------+---------------------------------------------------------------+
- | 1 | Query | show variables like ‘log_output‘ |
- | 1 | Query | select * from tempdb.tb1 |
- | 1 | Query | desc mysql.general_log |
- | 1 | Query | select thread_id,command_type,argument from mysql.general_log |
- +-----------+--------------+---------------------------------------------------------------+
- root@localhost[(none)]> show variables like ‘log_output‘;
- +---------------+-------+
- | Variable_name | Value |
- +---------------+-------+
- | log_output | TABLE |
- +---------------+-------+
- --使用FILE,TABLE 2者混合輸出通用日誌
- root@localhost[(none)]> set global log_output=‘file,table‘;
- Query OK, 0 rows affected (0.00 sec)
- root@localhost[(none)]> select @@global.log_output;
- +---------------------+
- | @@global.log_output |
- +---------------------+
- | FILE,TABLE |
- +---------------------+
- root@localhost[(none)]> insert into tempdb.tb1 values(2,‘robinson‘);
- Query OK, 1 row affected (0.06 sec)
- root@localhost[(none)]> commit;
- Query OK, 0 rows affected (0.01 sec)
- --驗證結果,表和文件裏邊存在通用的日誌記錄
- root@localhost[(none)]> system tail /tmp/suse11b.log|grep robinson
- 141003 17:41:54 2 Query insert into tempdb.tb1 values(2,‘robinson‘)
- root@localhost[(none)]> select thread_id,command_type,argument from mysql.general_log
- -> where argument like ‘%robinson%‘;
- +-----------+--------------+------------------------------------------------------------------------+
- | thread_id | command_type | argument |
- +-----------+--------------+------------------------------------------------------------------------+
- | 2 | Query | insert into tempdb.tb1 values(2,‘robinson‘) |
- | 2 | Query | select thread_id,command_type,argument from mysql.general_log |
- | | | where argument like ‘‘robinson‘‘ |
- +-----------+--------------+------------------------------------------------------------------------+
- d、關閉通用查詢日誌
- --可以通過設置系統變量general_log來關閉通用查詢日誌,此時日誌輸出設置為FILE,TABLE
- root@localhost[(none)]> show variables like ‘log_output‘;
- +---------------+------------+
- | Variable_name | Value |
- +---------------+------------+
- | log_output | FILE,TABLE |
- +---------------+------------+
- root@localhost[(none)]> set global general_log=off;
- Query OK, 0 rows affected (0.01 sec)
- root@localhost[(none)]> show variables like ‘%gener%‘;
- +------------------+------------------+
- | Variable_name | Value |
- +------------------+------------------+
- | general_log | OFF |
- | general_log_file | /tmp/suse11b.log |
- +------------------+------------------+
- root@localhost[(none)]> delete from tempdb.tb1 where id=2;
- Query OK, 1 row affected (0.12 sec)
- root@localhost[(none)]> commit;
- Query OK, 0 rows affected (0.00 sec)
- root@localhost[(none)]> system tail -n 1 /tmp/suse11b.log
- 141003 17:45:13 2 Query set global general_log=off
- root@localhost[(none)]> select thread_id,command_type,argument from mysql.general_log
- -> where argument like ‘%delete%‘;
- Empty set (0.00 sec)
- --從上面的演示可知,盡管我們設置了log_output為FILE,TABLE,但general_log為OFF,通用日誌無任何記錄產生
- root@localhost[(none)]> set global log_output=none;
- Query OK, 0 rows affected (0.00 sec)
- root@localhost[(none)]> set global general_log=1;
- Query OK, 0 rows affected (0.00 sec)
- root@localhost[(none)]> truncate table tempdb.tb1;
- Query OK, 0 rows affected (0.01 sec)
- root@localhost[(none)]> system tail -n 1 /tmp/suse11b.log
- Time Id Command Argument
- --通過上面的演示,在log_output=none,general_log=on的清下下無任何通用日誌輸出。
MySQL 通用查詢日誌(General Query Log)