自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

后端程序員必備:索引失效的十大雜癥

數(shù)據(jù)庫 MySQL
最近生產(chǎn)爆出一條慢sql,原因是用了or和!=,導致索引失效。于是,總結(jié)了索引失效的十大雜癥,希望對大家有幫助,加油。

背景

最近生產(chǎn)爆出一條慢sql,原因是用了or和!=,導致索引失效。于是,總結(jié)了索引失效的十大雜癥,希望對大家有幫助,加油。

一、查詢條件包含or,可能導致索引失效

新建一個user表,它有一個普通索引userId,結(jié)構(gòu)如下:   

  1. CREATE TABLE `user` (  
  2.       `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.       `userId` int(11) NOT NULL,  
  4.       `age` int(11) NOT NULL,  
  5.       `name` varchar(255) NOT NULL,  
  6.       PRIMARY KEY (`id`),  
  7.       KEY `idx_userId` (`userId`)  
  8.     ) ENGINE=InnoDB DEFAULT CHARSET=utf8

   

分析&結(jié)論:

  •  對于or+沒有索引的age這種情況,假設它走了userId的索引,但是走到age查詢條件時,它還得全表掃描,也就是需要三步過程:全表掃描+索引掃描+合并
  •  如果它一開始就走全表掃描,直接一遍掃描就完事。
  •  mysql是有優(yōu)化器的,處于效率與成本考慮,遇到or條件,讓索引失效,看起來也合情合理嘛。

注意: 如果or條件的列都加了索引,索引可能會走的,大家可以自己試一試。

二、如何字段類型是字符串,where時一定用引號括起來,否則索引失效

假設demo表結(jié)構(gòu)如下: 

  1. CREATE TABLE `user` (  
  2.    `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.    `userId` varchar(32) NOT NULL,  
  4.    `name` varchar(255) NOT NULL,  
  5.    PRIMARY KEY (`id`),  
  6.    KEY `idx_userId` (`userId`) USING BTREE  
  7.  ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

userId為字符串類型,是B+樹的普通索引,如果查詢條件傳了一個數(shù)字過去,它是不走索引的,如圖所示:

如果給數(shù)字加上'',也就是傳一個字符串呢,當然是走索引,如下圖:

分析與結(jié)論:

為什么第一條語句未加單引號就不走索引了呢?這是因為不加單引號時,是字符串跟數(shù)字的比較,它們類型不匹配,MySQL會做隱式的類型轉(zhuǎn)換,把它們轉(zhuǎn)換為浮點數(shù)再做比較。

三、like通配符可能導致索引失效。

并不是用了like通配符,索引一定失效,而是like查詢是以%開頭,才會導致索引失效。

表結(jié)構(gòu):   

  1. CREATE TABLE `user` (  
  2.       `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.       `userId` varchar(32) NOT NULL,  
  4.       `name` varchar(255) NOT NULL,  
  5.       PRIMARY KEY (`id`),  
  6.       KEY `idx_userId` (`userId`) USING BTREE  
  7.     ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

like查詢以%開頭,索引失效,如圖:

把%放后面,發(fā)現(xiàn)索引還是正常走的,如下:

把%加回來,改為只查索引的字段(覆蓋索引),發(fā)現(xiàn)還是走索引,驚不驚喜,意不意外

結(jié)論:

like查詢以%開頭,會導致索引失效??梢杂袃煞N方式優(yōu)化:

  •  使用覆蓋索引
  •  把%放后面

附: 索引包含所有滿足查詢需要的數(shù)據(jù)的索引,稱為覆蓋索引(Covering Index)。

四、聯(lián)合索引,查詢時的條件列不是聯(lián)合索引中的第一個列,索引失效。

表結(jié)構(gòu):(有一個聯(lián)合索引 idx_userid_age, userId在前, age在后)   

  1. CREATE TABLE `user` (  
  2.      `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.      `userId` int(11) NOT NULL,  
  4.      `age` int(11) DEFAULT NULL,  
  5.      `name` varchar(255) NOT NULL,  
  6.      PRIMARY KEY (`id`),  
  7.      KEY `idx_userid_age` (`userId`,`age`) USING BTREE  
  8.    ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

在聯(lián)合索引中,查詢條件滿足最左匹配原則時,索引是正常生效的。請看demo:

如果條件列不是聯(lián)合索引中的第一個列,索引失效,如下:

分析與結(jié)論:

  •  當我們創(chuàng)建一個聯(lián)合索引的時候,如(k1,k2,k3),相當于創(chuàng)建了(k1)、(k1,k2)和(k1,k2,k3)三個索引,這就是最左匹配原則。
  •  聯(lián)合索引不滿足最左原則,索引一般會失效,但是這個還跟Mysql優(yōu)化器有關(guān)的。

五、在索引列上使用mysql的內(nèi)置函數(shù),索引失效。

表結(jié)構(gòu):   

  1. CREATE TABLE `user` (  
  2.       `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.       `userId` varchar(32) NOT NULL,  
  4.       `loginTime` datetime NOT NULL,  
  5.       PRIMARY KEY (`id`), 
  6.       KEY `idx_userId` (`userId`) USING BTREE,  
  7.       KEY `idx_login_time` (`loginTime`) USING BTREE  
  8.     ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

雖然loginTime加了索引,但是因為使用了mysql的內(nèi)置函數(shù)Date_ADD(),索引直接GG,如圖:

六、對索引列運算(如,+、-、*、/),索引失效。

表結(jié)構(gòu):   

  1. CREATE TABLE `user` (  
  2.      `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.      `userId` varchar(32) NOT NULL,  
  4.      `age` int(11) DEFAULT NULL,  
  5.      PRIMARY KEY (`id`),  
  6.      KEY `idx_age` (`age`) USING BTREE  
  7.    ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

雖然age加了索引,但是因為它進行運算,索引直接迷路了。。。山重水復疑無路,算著算著腦瓜疼,索引就真的不認識路了。如圖:

七、索引字段上使用(!= 或者 < >,not in)時,可能會導致索引失效。

表結(jié)構(gòu):   

  1. CREATE TABLE `user` (  
  2.       `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.       `userId` int(11) NOT NULL,  
  4.       `age` int(11) DEFAULT NULL,  
  5.       `name` varchar(255) NOT NULL,  
  6.       PRIMARY KEY (`id`),  
  7.       KEY `idx_age` (`age`) USING BTREE  
  8.     ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

雖然age加了索引,但是使用了!= 或者 < >,not in這些時,索引如同虛設。如下:

八、索引字段上使用is null, is not null,可能導致索引失效。

表結(jié)構(gòu):   

  1. CREATE TABLE `user` (  
  2.       `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.       `card` varchar(255) DEFAULT NULL,  
  4.       `name` varchar(255) DEFAULT NULL,  
  5.       PRIMARY KEY (`id`),  
  6.       KEY `idx_name` (`name`) USING BTREE,  
  7.       KEY `idx_card` (`card`) USING BTREE  
  8.     ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8

單個name字段加上索引,并查詢name為非空的語句,其實會走索引的,如下:

單個card字段加上索引,并查詢name為非空的語句,其實也會走索引的,如下:

但是它們用or連接起來,索引就失效了,如下:

九、左連接查詢或者右連接查詢查詢關(guān)聯(lián)的字段編碼格式不一樣,可能導致索引失效。

新建兩個表,一個user,一個user_job 

  1. CREATE TABLE `user` (  
  2.   `id` int(11) NOT NULL AUTO_INCREMENT,  
  3.   `name` varchar(255) CHARACTER SET utf8mb4 DEFAULT NULL,  
  4.   `age` int(11) NOT NULL,  
  5.   PRIMARY KEY (`id`),  
  6.   KEY `idx_name` (`name`) USING BTREE  
  7. ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 
  8. CREATE TABLE `user_job` (  
  9.   `id` int(11) NOT NULL,  
  10.   `userId` int(11) NOT NULL,  
  11.   `job` varchar(255) DEFAULT NULL,  
  12.   `name` varchar(255) DEFAULT NULL,  
  13.   PRIMARY KEY (`id`),  
  14.   KEY `idx_name` (`name`) USING BTREE  
  15. ENGINE=InnoDB DEFAULT CHARSET=utf8

user 表的name字段編碼是utf8mb4,而user_job表的name字段編碼為utf8。

執(zhí)行左外連接查詢,user_job表還是走全表掃描,如下:

如果把它們改為name字段編碼一致,還是會一路高歌,雄赳赳,氣昂昂,走向索引。

十、mysql估計使用全表掃描要比使用索引快,則不使用索引。

  •  當表的索引被查詢,會使用最好的索引,除非優(yōu)化器使用全表掃描更有效。優(yōu)化器優(yōu)化成全表掃描取決與使用最好索引查出來的數(shù)據(jù)是否超過表的30%的數(shù)據(jù)。
  •  不要給'性別'等增加索引。如果某個數(shù)據(jù)列里包含了均是"0/1"或“Y/N”等值,即包含著許多重復的值,就算為它建立了索引,索引效果不會太好,還可能導致全表掃描。

Mysql出于效率與成本考慮,估算全表掃描與使用索引,哪個執(zhí)行快。這跟它的優(yōu)化器有關(guān),來看一下它的邏輯架構(gòu)圖吧(圖片來源網(wǎng)上)

總結(jié)

總結(jié)了索引失效的十大雜癥,在這里來個首尾呼應吧,分析一下我們生產(chǎn)的那條慢sql。模擬的表結(jié)構(gòu)與肇事sql如下: 

  1. CREATE TABLE `user_session` (  
  2.       `user_id` varchar(32) CHARACTER SET utf8mb4 NOT NULL,  
  3.       `device_id` varchar(64) NOT NULL,  
  4.       `status` varchar(2) NOT NULL,  
  5.       `create_time` datetime NOT NULL,  
  6.       `update_time` datetime DEFAULT NULL ON UPDATE CURRENT_TIMESTAMP,  
  7.       PRIMARY KEY (`user_id`,`device_id`) USING BTREE  
  8.     ) ENGINE=InnoDB DEFAULT CHARSET=utf8 
  9.     explain  
  10.     update user_session set status =1  
  11.     where  (`user_id` = '1' and `device_id`!='2')  
  12.     or (`user_id` != '1' and `device_id`='2') 

分析:

  •  執(zhí)行的sql,使用了 or條件,因為組合主鍵( user_id, device_id),看起來像是每一列都加了索引,索引會生效。
  •  但是出現(xiàn) !=,可能導致索引失效。也就是 or+ !=兩大綜合癥,導致了慢更新sql。

解決方案:

那么,怎么解決呢?我們是把 or條件拆掉,分成兩條執(zhí)行。同時給 device_id加一個普通索引。

最后,總結(jié)了索引失效的十大雜癥,希望大家在工作學習中,參考這十大雜癥,多點結(jié)合執(zhí)行計劃 expain和場景,具體分析,而不是按部就班,墨守成規(guī),認定哪個情景一定索引失效等等。 

 

責任編輯:龐桂玉 來源: Hollis
相關(guān)推薦

2012-09-28 10:09:35

程序員碼農(nóng)謊言

2014-09-19 09:27:46

程序員

2010-05-31 09:18:42

程序員文檔注釋

2017-04-17 20:00:38

程序員開發(fā)算法

2015-04-30 09:07:15

2013-12-09 10:38:08

程序員任務

2018-05-18 15:46:28

程序員面試技巧

2015-02-11 09:38:19

2020-11-25 10:40:58

程序員技能開發(fā)者

2016-01-11 11:32:41

Java程序員錯誤

2009-11-27 13:49:54

2018-08-17 16:20:23

Linux程序員程序

2021-03-02 09:34:15

GitHub倉庫代碼

2022-01-05 08:00:00

框架Golang開源

2014-08-28 13:40:33

編程算法程序高手

2022-07-19 08:41:09

UbuntuLinux

2022-11-21 16:07:58

2015-03-19 10:24:21

程序員提高職場價值提高職場價值技巧

2019-08-01 11:32:40

程序員技能開發(fā)者

2019-06-23 17:37:58

Linux后端函數(shù)棧
點贊
收藏

51CTO技術(shù)棧公眾號