自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

不看后悔的騰訊面試題:SQL語句為什么執(zhí)行的很慢?

新聞
說實(shí)話,這個(gè)問題可以涉及到 MySQL 的很多核心知識(shí),可以扯出一大堆,就像要考你計(jì)算機(jī)網(wǎng)絡(luò)的知識(shí)時(shí),問你“輸入U(xiǎn)RL回車之后,究竟發(fā)生了什么”一樣,看看你能說出多少了。

說實(shí)話,這個(gè)問題可以涉及到 MySQL 的很多核心知識(shí),可以扯出一大堆,就像要考你計(jì)算機(jī)網(wǎng)絡(luò)的知識(shí)時(shí),問你“輸入U(xiǎn)RL回車之后,究竟發(fā)生了什么”一樣,看看你能說出多少了。

之前騰訊面試的實(shí)話,也問到這個(gè)問題了,不過答的很不好,之前沒去想過相關(guān)原因,導(dǎo)致一時(shí)之間扯不出來。所以今天,我?guī)Т蠹襾碓敿?xì)扯一下有哪些原因,相信你看完之后一定會(huì)有所收獲,不然你打我。

[[266519]]

分類討論:

一條 SQL 語句執(zhí)行的很慢,那是每次執(zhí)行都很慢呢?還是大多數(shù)情況下是正常的,偶爾出現(xiàn)很慢呢?所以我覺得,我們還得分以下兩種情況來討論。

  • 大多數(shù)情況是正常的,只是偶爾會(huì)出現(xiàn)很慢的情況。
  • 在數(shù)據(jù)量不變的情況下,這條SQL語句一直以來都執(zhí)行的很慢。

針對(duì)這兩種情況,我們來分析下可能是哪些原因?qū)е碌摹?/p>

一、針對(duì)偶爾很慢的情況

一條 SQL 大多數(shù)情況正常,偶爾才能出現(xiàn)很慢的情況,針對(duì)這種情況,我覺得這條SQL語句的書寫本身是沒什么問題的,而是其他原因?qū)е碌?,那?huì)是什么原因呢?

1、數(shù)據(jù)庫(kù)在刷新臟頁(yè)

當(dāng)我們要往數(shù)據(jù)庫(kù)插入一條數(shù)據(jù)、或者要更新一條數(shù)據(jù)的時(shí)候,我們知道數(shù)據(jù)庫(kù)會(huì)在內(nèi)存中把對(duì)應(yīng)字段的數(shù)據(jù)更新了,但是更新之后,這些更新的字段并不會(huì)馬上同步持久化到磁盤中去,而是把這些更新的記錄寫入到 redo log 日記中去,等到空閑的時(shí)候,在通過 redo log 里的日記把***的數(shù)據(jù)同步到磁盤中去。

不過,redo log 里的容量是有限的,如果數(shù)據(jù)庫(kù)一直很忙,更新又很頻繁,這個(gè)時(shí)候 redo log 很快就會(huì)被寫滿了,這個(gè)時(shí)候就沒辦法等到空閑的時(shí)候再把數(shù)據(jù)同步到磁盤的,只能暫停其他操作,全身心來把數(shù)據(jù)同步到磁盤中去的,而這個(gè)時(shí)候,就會(huì)導(dǎo)致我們平時(shí)正常的SQL語句突然執(zhí)行的很慢,所以說,數(shù)據(jù)庫(kù)在在同步數(shù)據(jù)到磁盤的時(shí)候,就有可能導(dǎo)致我們的SQL語句執(zhí)行的很慢了。

2、拿不到鎖

這個(gè)就比較容易想到了,我們要執(zhí)行的這條語句,剛好這條語句涉及到的表,別人在用,并且加鎖了,我們拿不到鎖,只能慢慢等待別人釋放鎖了?;蛘撸頉]有加鎖,但要使用到的某個(gè)一行被加鎖了,這個(gè)時(shí)候,我也沒辦法啊。

如果要判斷是否真的在等待鎖,我們可以用 show processlist這個(gè)命令來查看當(dāng)前的狀態(tài)哦,這里我要提醒一下,有些命令***記錄一下,反正,我被問了好幾個(gè)命令,都不知道怎么寫,呵呵。

下來我們來訪分析下第二種情況,我覺得第二種情況的分析才是最重要的。

二、針對(duì)一直都這么慢的情況

如果在數(shù)據(jù)量一樣大的情況下,這條 SQL 語句每次都執(zhí)行的這么慢,那就就要好好考慮下你的 SQL 書寫了,下面我們來分析下哪些原因會(huì)導(dǎo)致我們的 SQL 語句執(zhí)行的很不理想。

我們先來假設(shè)我們有一個(gè)表,表里有下面兩個(gè)字段,分別是主鍵 id,和兩個(gè)普通字段 c 和 d。 

  1. mysql> CREATE TABLE `t` ( 
  2.   `id` int(11) NOT NULL
  3.   `c` int(11) DEFAULT NULL
  4.   `d` int(11) DEFAULT NULL
  5.   PRIMARY KEY (`id`) 
  6. ) ENGINE=InnoDB; 

1、沒用到索引

沒有用上索引,我覺得這個(gè)原因是很多人都能想到的,例如你要查詢這條語句:

  1. select * from t where 100 <c and c < 100000; 

1)字段沒有索引

剛好你的 c 字段上沒有索引,那么抱歉,只能走全表掃描了,你就體驗(yàn)不會(huì)索引帶來的樂趣了,所以,這回導(dǎo)致這條查詢語句很慢。

2)字段有索引,但卻沒有用索引

好吧,這個(gè)時(shí)候你給 c 這個(gè)字段加上了索引,然后又查詢了一條語句:

  1. select * from t where c - 1 = 1000; 

我想問大家一個(gè)問題,這樣子在查詢的時(shí)候會(huì)用索引查詢嗎?

答是不會(huì),如果我們?cè)谧侄蔚淖筮呑隽诉\(yùn)算,那么很抱歉,在查詢的時(shí)候,就不會(huì)用上索引了,所以呢,大家要注意這種字段上有索引,但由于自己的疏忽,導(dǎo)致系統(tǒng)沒有使用索引的情況了。

正確的查詢應(yīng)該如下:

  1. select * from t where c = 1000 + 1; 

有人可能會(huì)說,右邊有運(yùn)算就能用上索引?難道數(shù)據(jù)庫(kù)就不會(huì)自動(dòng)幫我們優(yōu)化一下,自動(dòng)把 c - 1=1000 自動(dòng)轉(zhuǎn)換為 c = 1000+1。

不好意思,確實(shí)不會(huì)幫你,所以,你要注意了。

3)函數(shù)操作導(dǎo)致沒有用上索引

如果我們?cè)诓樵兊臅r(shí)候,對(duì)字段進(jìn)行了函數(shù)操作,也是會(huì)導(dǎo)致沒有用上索引的,例如:

  1. select * from t where pow(c,2) = 1000; 

這里我只是做一個(gè)例子,假設(shè)函數(shù) pow 是求 c 的 n 次方,實(shí)際上可能并沒有 pow(c,2)這個(gè)函數(shù)。其實(shí)這個(gè)和上面在左邊做運(yùn)算也是很類似的。

所以呢,一條語句執(zhí)行都很慢的時(shí)候,可能是該語句沒有用上索引了,不過具體是啥原因?qū)е聸]有用上索引的呢,你就要會(huì)分析了,我上面列舉的三個(gè)原因,應(yīng)該是出現(xiàn)的比較多的吧。

2、數(shù)據(jù)庫(kù)自己選錯(cuò)索引

我們?cè)谶M(jìn)行查詢操作的時(shí)候,例如:

  1. select * from t where 100 < c and c < 100000; 

我們知道,主鍵索引和非主鍵索引是有區(qū)別的,主鍵索引存放的值是整行字段的數(shù)據(jù),而非主鍵索引上存放的值不是整行字段的數(shù)據(jù),而且存放主鍵字段的值。不大懂的可以看我這篇文章:《面試小知識(shí):MySQL索引相關(guān)》,里面有說到主鍵索引和非主鍵索引的區(qū)別。

也就是說,我們?nèi)绻?c 這個(gè)字段的索引的話,***會(huì)查詢到對(duì)應(yīng)主鍵的值,然后,再根據(jù)主鍵的值走主鍵索引,查詢到整行數(shù)據(jù)返回。

好吧扯了這么多,其實(shí)我就是想告訴你,就算你在 c 字段上有索引,系統(tǒng)也并不一定會(huì)走 c 這個(gè)字段上的索引,而是有可能會(huì)直接掃描掃描全表,找出所有符合 100 < c and c < 100000 的數(shù)據(jù)。

為什么會(huì)這樣呢?

其實(shí)是這樣的,系統(tǒng)在執(zhí)行這條語句的時(shí)候,會(huì)進(jìn)行預(yù)測(cè):究竟是走 c 索引掃描的行數(shù)少,還是直接掃描全表掃描的行數(shù)少呢?顯然,掃描行數(shù)越少當(dāng)然越好了,因?yàn)閽呙栊袛?shù)越少,意味著I/O操作的次數(shù)越少。

如果是掃描全表的話,那么掃描的次數(shù)就是這個(gè)表的總行數(shù)了,假設(shè)為 n;而如果走索引 c 的話,我們通過索引 c 找到主鍵之后,還得再通過主鍵索引來找我們整行的數(shù)據(jù),也就是說,需要走兩次索引。而且,我們也不知道符合 100 c < and c < 10000 這個(gè)條件的數(shù)據(jù)有多少行,萬一這個(gè)表是全部數(shù)據(jù)都符合呢?這個(gè)時(shí)候意味著,走 c 索引不僅掃描的行數(shù)是 n,同時(shí)還得每行數(shù)據(jù)走兩次索引。

所以呢,系統(tǒng)是有可能走全表掃描而不走索引的。

那系統(tǒng)是怎么判斷呢?

判斷來源于系統(tǒng)的預(yù)測(cè),也就是說,如果要走 c 字段索引的話,系統(tǒng)會(huì)預(yù)測(cè)走 c 字段索引大概需要掃描多少行。如果預(yù)測(cè)到要掃描的行數(shù)很多,它可能就不走索引而直接掃描全表了。

那么問題來了,系統(tǒng)是怎么預(yù)測(cè)判斷的呢?這里我給你講下系統(tǒng)是怎么判斷的吧,雖然這個(gè)時(shí)候我已經(jīng)寫到脖子有點(diǎn)酸了。

系統(tǒng)是通過索引的區(qū)分度來判斷的,一個(gè)索引上不同的值越多,意味著出現(xiàn)相同數(shù)值的索引越少,意味著索引的區(qū)分度越高。我們也把區(qū)分度稱之為基數(shù),即區(qū)分度越高,基數(shù)越大。所以呢,基數(shù)越大,意味著符合 100 < c and c < 10000 這個(gè)條件的行數(shù)越少。

所以呢,一個(gè)索引的基數(shù)越大,意味著走索引查詢?cè)接袃?yōu)勢(shì)。

那么問題來了,怎么知道這個(gè)索引的基數(shù)呢?

系統(tǒng)當(dāng)然是不會(huì)遍歷全部來獲得一個(gè)索引的基數(shù)的,代價(jià)太大了,索引系統(tǒng)是通過遍歷部分?jǐn)?shù)據(jù),也就是通過采樣的方式,來預(yù)測(cè)索引的基數(shù)的。

扯了這么多,重點(diǎn)的來了:

既然是采樣,那就有可能出現(xiàn)失誤的情況,也就是說,c 這個(gè)索引的基數(shù)實(shí)際上是很大的,但是采樣的時(shí)候,卻很不幸,把這個(gè)索引的基數(shù)預(yù)測(cè)成很小。例如你采樣的那一部分?jǐn)?shù)據(jù)剛好基數(shù)很小,然后就誤以為索引的基數(shù)很小。然后就呵呵,系統(tǒng)就不走 c 索引了,直接走全部掃描了。

所以呢,說了這么多,得出結(jié)論:由于統(tǒng)計(jì)的失誤,導(dǎo)致系統(tǒng)沒有走索引,而是走了全表掃描,而這,也是導(dǎo)致我們 SQL 語句執(zhí)行的很慢的原因。

這里我聲明一下,系統(tǒng)判斷是否走索引,掃描行數(shù)的預(yù)測(cè)其實(shí)只是原因之一,這條查詢語句是否需要使用使用臨時(shí)表、是否需要排序等也是會(huì)影響系統(tǒng)的選擇的。

不過呢,我們有時(shí)候也可以通過強(qiáng)制走索引的方式來查詢,例如:

  1. select * from t force index(a) where c < 100 and c < 100000; 

我們也可以通過:

  1. show index from t; 

來查詢索引的基數(shù)和實(shí)際是否符合,如果和實(shí)際很不符合的話,我們可以重新來統(tǒng)計(jì)索引的基數(shù),可以用這條命令:

  1. analyze table t; 

來重新統(tǒng)計(jì)分析。

既然會(huì)預(yù)測(cè)錯(cuò)索引的基數(shù),這也意味著,當(dāng)我們的查詢語句有多個(gè)索引的時(shí)候,系統(tǒng)有可能也會(huì)選錯(cuò)索引哦,這也可能是 SQL 執(zhí)行的很慢的一個(gè)原因。

好吧,就先扯這么多了,你到時(shí)候能扯出這么多,我覺得已經(jīng)很棒了,下面做一個(gè)總結(jié)。

三、總結(jié)

以上是我的總結(jié)與理解,***一個(gè)部分,我怕很多人不大懂?dāng)?shù)據(jù)庫(kù)居然會(huì)選錯(cuò)索引,所以我詳細(xì)解釋了一下,下面我對(duì)以上做一個(gè)總結(jié)。

一個(gè) SQL 執(zhí)行的很慢,我們要分兩種情況討論:

大多數(shù)情況下很正常,偶爾很慢,則有如下原因:

  • 數(shù)據(jù)庫(kù)在刷新臟頁(yè),例如 redo log 寫滿了需要同步到磁盤。
  • 執(zhí)行的時(shí)候,遇到鎖,如表鎖、行鎖。

這條 SQL 語句一直執(zhí)行的很慢,則有如下原因:

  • 沒有用上索引:例如該字段沒有索引;由于對(duì)字段進(jìn)行運(yùn)算、函數(shù)操作導(dǎo)致無法用索引。
  • 數(shù)據(jù)庫(kù)選錯(cuò)了索引。

作者介紹

帥地,訂閱號(hào)「苦逼的碼農(nóng)」作者,專注于計(jì)算機(jī)基礎(chǔ)、數(shù)據(jù)結(jié)構(gòu)與算法、Java等領(lǐng)域。

責(zé)任編輯:未麗燕 來源: 苦逼的碼農(nóng)訂閱號(hào)
相關(guān)推薦

2014-09-02 10:55:25

iOS開發(fā)視圖切換

2017-10-11 13:06:16

云計(jì)算云成本服務(wù)器

2017-08-15 10:53:34

網(wǎng)站設(shè)計(jì)UIUE

2020-04-20 09:01:50

程序員創(chuàng)業(yè) 互聯(lián)網(wǎng)

2010-10-09 09:18:59

Shell腳本

2021-06-28 07:13:35

SQL語句索引

2010-05-10 13:01:03

OracleDBA面試

2011-03-24 13:27:37

SQL

2020-12-16 07:42:03

JS基礎(chǔ)代碼

2012-08-22 09:32:54

面試面試題

2024-07-24 08:38:07

2021-06-27 22:48:28

Redis數(shù)據(jù)庫(kù)內(nèi)存

2019-02-18 15:15:41

人工智能AI開發(fā)者

2014-09-19 11:17:48

面試題

2014-12-26 10:01:04

架構(gòu)

2019-08-16 10:10:07

hashcodeequalsJava

2021-10-27 11:00:30

C++語言面試

2019-06-11 09:20:43

Nginx負(fù)載均衡算法

2024-09-24 13:49:13

SQL數(shù)據(jù)庫(kù)

2020-06-04 14:40:40

面試題Vue前端
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)