覆蓋索引、最左前綴原則、索引下推

mysql> create table T (
ID int primary key,
k int NOT NULL DEFAULT 0, 
s varchar(16) NOT NULL DEFAULT '',
index k(k))
engine=InnoDB;

insert into T values(100,1, 'aa'),(200,2,'bb'),(300,3,'cc'),(500,5,'ee'),(600,6,'ff'),(700,7,'gg');

執行 select * from T where k between 3 and 5,需要執行幾次樹的搜索操作,會掃描多少行?


image.png

這條SQL查詢語句的執行流程:

  • 1.在k索引樹上找到k=3的記錄,取得 ID = 300;
  • 2.再到ID索引樹查到ID=300對應的R3;
  • 3.在k索引樹取下一個值k=5,取得ID=500;
  • 4.再回到ID索引樹查到ID=500對應的R4;
  • 5.在k索引樹取下一個值k=6,不滿足條件,循環結束。

在這個過程中,回到主鍵索引樹搜索的過程,我們稱為回表。可以看到,這個查詢過程讀了k索引樹的3條記錄(步驟1、3和5),回表了兩次(步驟2和4)。

在這個例子中,由于查詢結果所需要的數據只在主鍵索引上有,所以不得不回表。那么,有沒有可能經過索引優化,避免回表過程呢?

覆蓋索引

如果執行的語句是select ID from T where k between 3 and 5,這時只需要查ID的值,而ID的值已經在k索引樹上了,因此可以直接提供查詢結果,不需要回表。也就是說,在這個查詢里面,索引k已經“覆蓋了”我們的查詢需求,我們稱為覆蓋索引。
由于覆蓋索引可以減少樹的搜索次數,顯著提升查詢性能,所以使用覆蓋索引是一個常用的性能優化手段。

需要注意的是,在引擎內部使用覆蓋索引在索引k上其實讀了三個記錄,R3~R5(對應的索引k上的記錄項),但是對于MySQL的Server層來說,它就是找引擎拿到了兩條記錄,因此MySQL認為掃描行數是2。

基于上面覆蓋索引的說明,我們來討論一個問題:在一個市民信息表上,是否有必要將身份證號和名字建立聯合索引?

假設這個市民表的定義是這樣的:

CREATE TABLE `tuser` (
  `id` int(11) NOT NULL,
  `id_card` varchar(32) DEFAULT NULL,
  `name` varchar(32) DEFAULT NULL,
  `age` int(11) DEFAULT NULL,
  `ismale` tinyint(1) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `id_card` (`id_card`),
  KEY `name_age` (`name`,`age`)
) ENGINE=InnoDB

我們知道,身份證號是市民的唯一標識。也就是說,如果有根據身份證號查詢市民信息的需求,我們只要在身份證號字段上建立索引就夠了。而再建立一個(身份證號、姓名)的聯合索引,是不是浪費空間?

如果現在有一個高頻請求,要根據市民的身份證號查詢他的姓名,這個聯合索引就有意義了。它可以在這個高頻請求上用到覆蓋索引,不再需要回表查整行記錄,減少語句的執行時間。

當然,索引字段的維護總是有代價的。因此,在建立冗余索引來支持覆蓋索引時就需要權衡考慮了。這正是業務DBA,或者稱為業務數據架構師的工作。

最左前綴原則

看到這里你一定有一個疑問,如果為每一種查詢都設計一個索引,索引是不是太多了。如果我現在要按照市民的身份證號去查他的家庭地址呢?雖然這個查詢需求在業務中出現的概率不高,但總不能讓它走全表掃描吧?反過來說,單獨為一個不頻繁的請求創建一個(身份證號,地址)的索引又感覺有點浪費。應該怎么做呢?

B+樹這種索引結構,可以利用索引的“最左前綴”,來定位記錄。

為了直觀地說明這個概念,我們用(name,age)這個聯合索引來分析。


image.png

可以看到,索引項是按照索引定義里面出現的字段順序排序的。

當你的邏輯需求是查到所有名字是“張三”的人時,可以快速定位到ID4,然后向后遍歷得到所有需要的結果。

如果你要查的是所有名字第一個字是“張”的人,你的SQL語句的條件是"where name like ‘張%’"。這時,你也能夠用上這個索引,查找到第一個符合條件的記錄是ID3,然后向后遍歷,直到不滿足條件為止。

可以看到,不只是索引的全部定義,只要滿足最左前綴,就可以利用索引來加速檢索。這個最左前綴可以是聯合索引的最左N個字段,也可以是字符串索引的最左M個字符。

基于上面對最左前綴索引的說明,我們來討論一個問題:在建立聯合索引的時候,如何安排索引內的字段順序。

這里的評估標準是,索引的復用能力。因為可以支持最左前綴,所以當已經有了(a,b)這個聯合索引后,一般就不需要單獨在a上建立索引了。因此,第一原則是,如果通過調整順序,可以少維護一個索引,那么這個順序往往就是需要優先考慮采用的。

所以現在你知道了,這段開頭的問題里,我們要為高頻請求創建(身份證號,姓名)這個聯合索引,并用這個索引支持“根據身份證號查詢地址”的需求。

那么,如果既有聯合查詢,又有基于a、b各自的查詢呢?查詢條件里面只有b的語句,是無法使用(a,b)這個聯合索引的,這時候你不得不維護另外一個索引,也就是說你需要同時維護(a,b)、(b) 這兩個索引。

這時候,我們要考慮的原則就是空間了。比如上面這個市民表的情況,name字段是比age字段大的 ,那我就建議你創建一個(name,age)的聯合索引和一個(age)的單字段索引。

索引下推

以市民表的聯合索引(name, age)為例。如果現在有一個需求:檢索出表中“名字第一個字是張,而且年齡是10歲的所有男孩”。那么,SQL語句是這么寫的:

mysql> select * from tuser where name like '張%' and age=10 and ismale=1;

你已經知道了前綴索引規則,所以這個語句在搜索索引樹的時候,只能用 “張”,找到第一個滿足條件的記錄ID3。當然,這還不錯,總比全表掃描要好。

然后呢?

當然是判斷其他條件是否滿足。

在MySQL 5.6之前,只能從ID3開始一個個回表。到主鍵索引上找出數據行,再對比字段值。

而MySQL 5.6 引入的索引下推優化(index condition pushdown), 可以在索引遍歷過程中,對索引中包含的字段先做判斷,直接過濾掉不滿足條件的記錄,減少回表次數。

  • 無索引下推執行流程圖


    image.png
  • 索引下推執行流程


    image.png

這兩個圖里面,每一個虛線箭頭表示回表一次。

第一個圖中,在(name,age)索引里面我特意去掉了age的值,這個過程InnoDB并不會去看age的值,只是按順序把“name第一個字是’張’”的記錄一條條取出來回表。因此,需要回表4次。

他們的區別是,InnoDB在(name,age)索引內部就判斷了age是否等于10,對于不等于10的記錄,直接判斷并跳過。在這個例子中,只需要對ID4、ID5這兩條記錄回表取數據判斷,就只需要回表2次。

——學自極客時間

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,825評論 6 546
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,814評論 3 429
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 178,980評論 0 384
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 64,064評論 1 319
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,779評論 6 414
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 56,109評論 1 330
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 44,099評論 3 450
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 43,287評論 0 291
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,799評論 1 338
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,515評論 3 361
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,750評論 1 375
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,221評論 5 365
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,933評論 3 351
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,327評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,667評論 1 296
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,492評論 3 400
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,703評論 2 380

推薦閱讀更多精彩內容

  • 04 MySQL-初識MySQL-索引-上 篇中介紹了InnoDB索引的數據結構模型以及索引維護。本篇繼續針對My...
    花神子閱讀 392評論 0 1
  • 文章是學習了林曉斌老師在極客時間的《mysql實戰45講》后,根據自己的理解整理而成的。 覆蓋索引 在之前《mys...
    BestAIHub閱讀 25,217評論 7 38
  • 索引 數據庫中的查詢操作非常普遍,索引就是提升查找速度的一種手段 索引的類型 從數據結構角度分 1.B+索引:傳統...
    一凡呀閱讀 3,009評論 0 8
  • 一、MySQL優化 MySQL優化從哪些方面入手: (1)存儲層(數據) 構建良好的數據結構。可以大大的提升我們S...
    寵辱不驚丶歲月靜好閱讀 2,463評論 1 8
  • 為何要有索引? 說白了,就是加速查詢。什么是索引? 索引在MySQL中也叫做“鍵”,是存儲引擎用于快速找到記錄的一...
    whenitsallover閱讀 640評論 0 0