MySQL SQL慢查詢優(yōu)化經(jīng)歷與處理方案
當(dāng)MySQL服務(wù)器出現(xiàn)異常(慢)，首先要考慮是否因，SQL語(yǔ)句引起數(shù)據(jù)庫(kù)慢，如果情況比較緊急，我們就要立刻 SHOW FULL PROCESSLIST; 去查看，但我建議大家使用-e參數(shù)，采用非交互的方式，因?yàn)檫@樣可以使用grep等命令，對(duì)結(jié)果進(jìn)行過(guò)濾，更方便直觀的看到結(jié)果。
一、抓SQL慢查詢語(yǔ)句的方法，有2種：
1，臨時(shí)緊急抓取
SHOW FULL PROCESSLIST; #查看MySQL 在運(yùn)行的線程;多執(zhí)行幾次，有相同語(yǔ)句，就可能是SQL慢查詢語(yǔ)句;
這個(gè)命令中最關(guān)鍵的就是state列，mysql列出的狀態(tài)主要有以下幾種：
Checking table #正在檢查數(shù)據(jù)表(這是自動(dòng)的)。
Closing tables #正在將表中修改的數(shù)據(jù)刷新到磁盤中，同時(shí)正在關(guān)閉已經(jīng)用完的表。這是一個(gè)很快的操作，如果不是這樣的話，就應(yīng)該確認(rèn)磁盤空間是否已經(jīng)滿了或者磁盤是否正處于重負(fù)中。
Connect Out #復(fù)制從服務(wù)器正在連接主服務(wù)器。
Copying to tmp table on disk #由于臨時(shí)結(jié)果集大于 tmp_table_size，正在將臨時(shí)表從內(nèi)存存儲(chǔ)轉(zhuǎn)為磁盤存儲(chǔ)以此節(jié)省內(nèi)存。
Creating tmp table #正在創(chuàng)建臨時(shí)表以存放部分查詢結(jié)果。
deleting from main table #服務(wù)器正在執(zhí)行多表刪除中的***部分，剛刪除***個(gè)表。
deleting from reference tables #服務(wù)器正在執(zhí)行多表刪除中的第二部分，正在刪除其他表的記錄。
Flushing tables #正在執(zhí)行 FLUSH TABLES，等待其他線程關(guān)閉數(shù)據(jù)表。
Killed #發(fā)送了一個(gè)kill請(qǐng)求給某線程，那么這個(gè)線程將會(huì)檢查kill標(biāo)志位，同時(shí)會(huì)放棄下一個(gè)kill請(qǐng)求。MySQL會(huì)在每次的主循環(huán)中檢查kill標(biāo)志
位，不過(guò)有些情況下該線程可能會(huì)過(guò)一小段才能死掉。如果該線程程被其他線程鎖住了，那么kill請(qǐng)求會(huì)在鎖釋放時(shí)馬上生效。
Locked #被其他查詢鎖住了。
Sending data #正在處理 SELECT 查詢的記錄，同時(shí)正在把結(jié)果發(fā)送給客戶端。
Sorting for group #正在為 GROUP BY 做排序。
Sorting for order #正在為 ORDER BY 做排序。
Opening tables #這個(gè)過(guò)程應(yīng)該會(huì)很快，除非受到其他因素的干擾。例如，在執(zhí) ALTER TABLE 或 LOCK TABLE 語(yǔ)句行完以前，數(shù)據(jù)表無(wú)法被其他線程打開。 正嘗試打開一個(gè)表。
Removing duplicates #正在執(zhí)行一個(gè) SELECT DISTINCT 方式的查詢，但是MySQL無(wú)法在前一個(gè)階段優(yōu)化掉那些重復(fù)的記錄。因此，MySQL需要再次去掉重復(fù)的記錄，然后再把結(jié)果發(fā)送給客戶端。
Reopen table #獲得了對(duì)一個(gè)表的鎖，但是必須在表結(jié)構(gòu)修改之后才能獲得這個(gè)鎖。已經(jīng)釋放鎖，關(guān)閉數(shù)據(jù)表，正嘗試重新打開數(shù)據(jù)表。
Repair by sorting #修復(fù)指令正在排序以創(chuàng)建索引。
Repair with keycache #修復(fù)指令正在利用索引緩存一個(gè)一個(gè)地創(chuàng)建新索引。它會(huì)比 Repair by sorting 慢些。
Searching rows for update #正在講符合條件的記錄找出來(lái)以備更新。它必須在 UPDATE 要修改相關(guān)的記錄之前就完成了。
Sleeping #正在等待客戶端發(fā)送新請(qǐng)求.
System lock #正在等待取得一個(gè)外部的系統(tǒng)鎖。如果當(dāng)前沒(méi)有運(yùn)行多個(gè)mysqld服務(wù)器同時(shí)請(qǐng)求同一個(gè)表，那么可以通過(guò)增加 --skip-external-locking參數(shù)來(lái)禁止外部系統(tǒng)鎖。
Upgrading lock
INSERT DELAYED #正在嘗試取得一個(gè)鎖表以插入新記錄。
Updating #正在搜索匹配的記錄，并且修改它們。
INSERT DELAYED #已經(jīng)處理完了所有待處理的插入操作，正在等待新的請(qǐng)求。
總結(jié)：
一般簡(jiǎn)單查詢都應(yīng)該2秒內(nèi)完成，如果超時(shí)可能就存在異常
另外，上面的狀態(tài) 大多數(shù)都是出現(xiàn)問(wèn)題后，為排錯(cuò)提供，類似錯(cuò)誤碼;
2，定期分析-記錄慢查詢?nèi)罩镜姆绞?/strong>
我工作中，一般會(huì)在配置文件里，設(shè)置3個(gè)參數(shù)
log-slow-queries = /data/3306/slow.log #慢查詢?nèi)罩韭窂剑?log文件在my.cnf定義
long_query_time = 2 #記錄SQL查詢超過(guò)2s的語(yǔ)句
log-queries-not-using-indexes = 1 #記錄沒(méi)有使用索引的sql
通過(guò)上述3個(gè)參數(shù)，收集慢查詢?nèi)罩?，通過(guò)寫腳本 ，mysqladmin 進(jìn)行日志切割，在使用msyqlsla工具進(jìn)行分析，然后每天8點(diǎn) 通過(guò)定時(shí)任務(wù)去執(zhí)行，定期將結(jié)果以郵件方式，發(fā)送給公司的DBA，或自己，核心開發(fā)，抄送CTO
二、我們抓到慢查詢了，如何進(jìn)行優(yōu)化?
創(chuàng)建索引
explian命令 # 查看sql語(yǔ)句使用索引情況
SQL-no-cache \G， #看看SQL語(yǔ)句 是不是走索引
注意其中有個(gè)key，真正顯示是否走索引的，如果沒(méi)有走索引的話，就要進(jìn)行設(shè)置，那如何設(shè)置呢???
例如，我們查詢當(dāng)前系統(tǒng)所有用戶，這個(gè)查詢語(yǔ)句啟用的是PRIMARY 主鍵索引(看key)
- mysql> explain select user,host from mysql.user \G
- *************************** 1. row ***************************
- id: 1
- select_type: SIMPLE
- table: user
- type: index
- possible_keys: NULL
- key: PRIMARY
- key_len: 228
- ref: NULL
- rows: 6
- Extra: Using index
- 1 row in set (0.00 sec)
查看表結(jié)構(gòu)(RPI主鍵索引)
- mysql> desc mysql.user;
- +------------------------+-----------------------------------+------+-----+-----------------------+-------+
- | Field | Type | Null | Key | Default | Extra |
- +------------------------+-----------------------------------+------+-----+-----------------------+-------+
- | Host | char(60) | NO | PRI | | |
- | User | char(16) | NO | PRI | | |
三、如何創(chuàng)建索引?
我們可以針對(duì) where 后 的條件 這種列做索引，盡量選唯一值多的大表上的列做索引，(例如男女性別列唯一值少，不是適合建立索引)，如果條件列有好幾列，唯一值有很少，我們可以建立聯(lián)合索引來(lái)達(dá)到優(yōu)化目的， 聯(lián)合索引有前綴特性，查詢頻繁的列要放在前面，細(xì)節(jié)就不在說(shuō)了，確認(rèn)如何建立索引后，我們就開始創(chuàng)建索引
1，創(chuàng)建索引有2 種方法：
alter table student change id id int primary key auto_increment; #增加自增主鍵索引
alter table student add index index_name(name) #增加普通索引
create index index_dept on student(dept(8)); #創(chuàng)建指定字符數(shù)索引
數(shù)據(jù)量特別大的情況下，我們盡量選擇數(shù)據(jù)庫(kù)處于低谷或 選擇晚上進(jìn)行，以免影響站點(diǎn)訪問(wèn)，緊急情況除外;
四、更高級(jí)的優(yōu)化
還可以使用select profile功能 ，對(duì)SQL語(yǔ)句的每一個(gè)細(xì)節(jié)，查看進(jìn)行優(yōu)化，這里我使用也不是很多，一般是公司專業(yè)DBA來(lái)進(jìn)行處理。
當(dāng)然也會(huì)遇到特別的長(zhǎng)的sql語(yǔ)句，優(yōu)化的余力也不大，我會(huì)sql語(yǔ)句發(fā)給核心開發(fā)，進(jìn)行處理，比如1條語(yǔ)句很慢，我可以變?yōu)?條，分別走索引，有可能有會(huì)很高，也可以用過(guò)改善產(chǎn)品，改善架構(gòu)的方式，例如這條語(yǔ)句沒(méi)有優(yōu)化的余地，我們可以放到內(nèi)部的從庫(kù)上進(jìn)行查詢;
