天天看點

圖解 MySQL 索引,清晰易懂,寫得太好了…

什麼是索引?

索引是輔助存儲引擎高效擷取資料的一種資料結構。

圖解 MySQL 索引,清晰易懂,寫得太好了…

很多人形象的說索引就是資料的目錄,便于存儲引擎快速的定位資料。

索引的分類

我們經常從以下幾個方面對索引進行分類

從 「資料結構的角度」 對索引進行分類

B+tree

Hash

Full-texts 索引

從 「實體存儲的角度」 對索引進行分類

聚簇索引

二級索引(輔助索引)

從 「索引字段特性角度」 分類

主鍵索引

唯一索引

普通索引

字首索引

從 「組成索引的字段個數角度」 分類

單列索引

聯合索引(複合索引)

資料結構角度看索引

下表是 MySQL 常見的存儲引擎 InnoDB,MyISAM 和 Memory 分别支援的索引類型

圖解 MySQL 索引,清晰易懂,寫得太好了…

在實際使用中,InnoDB 作為 MySQL 建表時預設的存儲引擎

對上表進行橫向檢視可以了解到,B+tree 是 MySQL 中被存儲引擎采用最多的索引類型。

這裡淺嘗辄止的談一下 B+tree 與 Hash 和紅黑樹的差別。另外,MySQL 系列面試題和答案全部整理好了,微信搜尋Java技術棧,在背景發送:面試,可以線上閱讀。

B+tree 和 B-tree

1970 年,R.Bayer 和 E.Mccreight 提出了一種适用于外查找的平衡多叉樹——B-樹,磁盤管理系統中的目錄管理,以及資料庫系統中的索引組織多數采用 B-Tree 這種資料結構。 --資料結構 C 語言版第二版 嚴蔚敏

B+tree 是 B-Tree 的一個變種。(哦,對了,B-tree 念 B 樹,它不叫 B 減樹。。。)

圖解 MySQL 索引,清晰易懂,寫得太好了…

B+tree 隻在葉子節點存儲資料,而 B-tree 非葉子節點也存儲資料,對此處有疑問的可以到下面的連接配接自己插入資料測試一番。

B-tree :

https://www.cs.usfca.edu/~galles/visualization/BTree.html B+tree : https://www.cs.usfca.edu/~galles/visualization/BPlusTree.html

是以,B+tree 單個節點的數量更小,在相同的磁盤 IO 下能查詢更多的節點。

另外 B+tree 葉子節點采用單連結清單連結适合 MySQL 中常見的基于範圍的順序檢索場景,而 B-tree 無法做到這一點。

B+tree 和紅黑樹

圖解 MySQL 索引,清晰易懂,寫得太好了…
對于有 N 個葉子節點的 B+tree,搜尋複雜度為 「O(logdN) ,d 是指 degree 是指 B+tree 的度」,表示節點允許的最大子節點個數為 d 個,在實際的運用中 d 值是大于 100 的,即使資料達到千萬級别時候 B+tree 的高度依然維持在 3-4 左右,保證了 3-4 次磁盤 I/O 就能查到目标資料。
圖解 MySQL 索引,清晰易懂,寫得太好了…

從上圖中可以看出紅黑樹是二叉樹,節點的子節點個數最多為 2 個,意味着其搜尋複雜度為 「O(logN)」,比 B+ 樹高出不少,是以紅黑樹檢索到目标資料所需經理的磁盤 I/O 次數更多。

B+tree 索引與 Hash 表

範圍查詢是 MySQL 資料庫中常見的場景,而 Hash 表不适合做範圍查詢,Hash 表更适合做等值查詢,另外 Hash 表還存在 Hash 函數選擇和 Hash 值沖突等問題。

因為這些原因,B+tree 索引要比 Hash 表索引有更廣的适用場景。

實體存儲角度看索引

MySQL 中的兩種常用存儲引擎對索引的處理方式差别較大。

InnoDB 的索引

首先看一下 InnoDB 存儲引擎中的索引,InnoDB 表的索引按照葉子節點存儲的是否為完整表資料分為聚簇索引和二級索引。

圖解 MySQL 索引,清晰易懂,寫得太好了…
全表資料就是存儲在聚簇索引中的。
圖解 MySQL 索引,清晰易懂,寫得太好了…

聚簇索引以外的其它索引叫做二級索引。

下面結合實際的例子介紹下這兩類索引。

create table workers
 (
     id    int(11)     not null auto_increment comment '員工工号',
     name  varchar(16) not null comment '員工名字',
     sales int(11) default null comment '員工銷售業績',
     primary key (id)
 ) engine InnoDB
   AUTO_INCREMENT = 10
   default charset = utf8;

 insert into workers(id, name, sales)
 values (1, '江南', 12744);
 insert into workers(id, name, sales)
 values (3, '今何在', 14082);
 insert into workers(id, name, sales)
 values (7, '路明非', 14738);
 insert into workers(id, name, sales)
 values (8, '呂歸塵', 7087);
 insert into workers(id, name, sales)
 values (11, '姬野', 8565);
 insert into workers(id, name, sales)
 values (15, '凱撒', 8501);
 insert into workers(id, name, sales)
 values (20, '繪梨衣', 7890);      

我們現在自己的測試資料庫中建立一個包含銷售員資訊的測試表 workers

包含 id(主鍵),name,sales 三個字段,指定表的存儲引擎為 InnoDB。

圖解 MySQL 索引,清晰易懂,寫得太好了…

然後插入 8 條資料

這個例子當中,workers 表的聚簇索引建立在字段 id 上

為了準确模拟,我們先把主鍵 id 插入 b+tree 得到下圖

圖解 MySQL 索引,清晰易懂,寫得太好了…

然後在此圖基礎上,我畫出了高清版。

圖解 MySQL 索引,清晰易懂,寫得太好了…

從圖中可以看到,聚簇索引的每個葉子節點存儲了一行完整的表資料,葉子節點間采用單向連結清單按 id 列遞增連接配接,可以友善的進行順序檢索。

InnoDB 表要求必須有聚簇索引,預設在主鍵字段上建立聚簇索引,在沒有主鍵字段的情況下,表的第一個 NOT NULL 的唯一索引将被建立為聚簇索引,在前兩者都沒有的情況下,InnoDB 将自動生成一個隐式自增 id 列并在此列上建立聚簇索引。

接着來看二級索引。

還以剛才的 workers 表為例

我們在 name 字段上添加二級索引 index_name

圖解 MySQL 索引,清晰易懂,寫得太好了…
alter table workers add index index_name(name);      

同樣我們畫出了二級索引 index_name 的 B+tree 示意圖

圖解 MySQL 索引,清晰易懂,寫得太好了…

圖中可以看出二級索引的葉子節點并不存儲一行完整的表資料,而是存儲了聚簇索引所在列的值,也就是workers 表中的 id 列的值。

圖解 MySQL 索引,清晰易懂,寫得太好了…

這兩張示意圖中 B+tree 的度設定為了 3 ,這也主要是為了友善示範。

實際的 B+tree 索引中,樹的度通常會大于 100。

說了聚簇索引和二級索引 肯定要提到「回表查詢」。

由于二級索引的葉子節點不存儲完整的表資料,是以當通過二級索引查詢到聚簇索引的列值後,還需要回到局促索引也就是表資料本身進一步擷取資料。

比如說我們要在 workers 表中查詢 名叫呂歸塵的人

select * from workers where name='呂歸塵';

這條 SQL 通過 name='呂歸塵'的條件

圖解 MySQL 索引,清晰易懂,寫得太好了…

在二級索引 index_name 中查詢到主鍵 id=8 ,接着帶着 id=8 這個條件

進一步回到聚簇索引查詢以後才能擷取到完整的資料,很顯然回表需要額外的 B+tree 搜尋過程,必然增大查詢耗時。

需要注意的是通過二級索引查詢時,回表不是必須的過程,當 Query 的所有字段在二級索引中就能找到時,就不需要回表,MySQL 稱此時的二級索引為覆寫索引或稱觸發了 「索引覆寫」。

select id,name from workers where name='呂歸塵';      

這句 SQL 隻查詢了 id,和 name,二級索引就已經包含了 Query 是以需要的所有字段,就無需回表查詢。

explain select id,name from workers where name='呂歸塵';      

使用 explain 檢視此條 SQL 的執行計劃執行計劃的 Extra 字段中出現了 Using where;Using index 表明查詢觸發了索引 index_name 的索引覆寫,且對索引做了 where 篩選,這裡不需要回表。

圖解 MySQL 索引,清晰易懂,寫得太好了…

下面做對比,查詢一下沒有索引的

explain select id,name,sales from workers where name='呂歸塵';

圖解 MySQL 索引,清晰易懂,寫得太好了…

Extra 為 Using Index Condition 表示會先條件過濾索引,過濾完索引後找到所有符合索引條件的資料行,随後用 WHERE 子句中的其他條件去過濾這些資料行。Index Condition Pushdown (ICP)是 MySQL 5.6 以上版本中的新特性,是一種在存儲引擎層使用索引過濾資料的一種優化方式。ICP 開啟時的執行計劃含有 Using index condition 标示 ,表示優化器使用了 ICP 對資料通路進行優化。

如果你對此感興趣去查閱對應的官方文檔和技術部落格。

這次我們簡化來了解,不考慮 ICP 對資料通路的優化,當關閉 ICP 時,Index 僅僅是 data access 的一種通路方式,存儲引擎通過索引回表擷取的資料會傳遞到 MySQL Server 層進行 WHERE 條件過濾。

圖解 MySQL 索引,清晰易懂,寫得太好了…

Extra 為 Using where 隻是提醒我們 MySQL 将用 where 子句來過濾結果集。這個一般發生在 MySQL 伺服器,而不是存儲引擎層。一般發生在不能走索引掃描的情況下或者走索引掃描,但是有些查詢條件不在索引當中的情況下。

這裡表明沒有觸發索引覆寫,進行回表查詢。

MyISAM 的索引

說完了 InnoDB 的索引,接下來我們來看 MyISAM 的索引

以 MyISAM 存儲引擎存儲的表不存在聚簇索引。

圖解 MySQL 索引,清晰易懂,寫得太好了…

MyISAM 表中的主鍵索引和非主鍵索引的結構是一樣的,從上圖中我們可以看到

他們的葉子節點是不存儲表資料的,節點中存放的是表資料的位址,是以 MyISAM 表可以沒有主鍵。

MyISAM 表的資料和索引是分開的,是單獨存放的。

MyISAM 表中的主鍵索引和非主鍵索引的差別僅在于主鍵索引 B+tree 上的 key 必須符合主鍵的限制,

非主鍵索引 B+tree 上的 key 隻要符合相應字段的特性就可以了。

索引字段特性角度看索引

「主鍵索引」

建立在主鍵字段上的索引

一張表最多隻有一個主鍵索引

索引列值不允許為 null

通常在建立表的時候一起建立

「唯一索引」

建立在 UNIQUE 字段上的索引就是唯一索引

一張表可以有多個唯一索引,索引列值允許為 null

我們示範建立索引

create table persons
 (
     id   int(11) not null auto_increment comment '主鍵id',
     eno  int(11) comment '工号',
     eid  int(11) comment '身份證号',
     veid int(11) comment '虛拟身份證号',
     name varchar(16) comment '名字',
     primary key (id) comment '主鍵索引',
     UNIQUE key (eno) comment 'eno唯一索引',
     UNIQUE key (eid) comment 'eid唯一索引'
 ) engine = InnoDB
   auto_increment = 1000
   default charset = utf8;
 alter table persons
     add unique index index_veid (veid) comment 'veid唯一索引';      

通過 show index from persons;指令我們看到已經成功建立了三個唯一索引。

圖解 MySQL 索引,清晰易懂,寫得太好了…

主鍵索引和唯一索引對字段的要求是要求字段為主鍵或 unique 字段,

而那些建立在普通字段上的索引叫做普通索引,既不要求字段為主鍵也不要求字段為 unique。

字首索引是指對字元類型字段的前幾個字元或對二進制類型字段的前幾個 bytes 建立的索引,而不是在整個字段上建索引。

例如,可以對 persons 表中的 name(varchar(16))字段 中 name 的前 5 個字元建立索引。

create index index_name on persons (name(5)) comment '字首索引';
show index from persons;      
圖解 MySQL 索引,清晰易懂,寫得太好了…

字首索引可以建立在類型為

char

varchar

binary

varbinary

的列上,可以大大減少索引占用的存儲空間,也能提升索引的查詢效率。

索引列的個數角度看索引

建立在單個列上的索引為單列索引

上文示範的都是單列索引

建立在多列上的稱為聯合索引(複合索引)

示範一下聯合索引create index index_id_name on workers(id,name) comment '組合索引';這條語句在我們示範表 workers 中建立 id,name 這兩個字段的聯合索引。借助 show index 指令檢視索引的詳細資訊 操作後結果如下:

圖解 MySQL 索引,清晰易懂,寫得太好了…

雖然詳細資訊當中列出了兩條關于聯合索引的條目,但并不表示聯合索引是建立了多個索引,聯合索引是一個索引結構,這兩個條目表示的是組合索引中字段的具體資訊,按建立索引時的書寫順序排序。

同樣我們來看下聯合索引的 B+tree 示意圖

圖解 MySQL 索引,清晰易懂,寫得太好了…

從圖中看到組合索引的非葉子節點儲存了兩個字段的值作為 B+tree 的 key 值,當 B+tree 上插入資料時,先按字段 id 比較,在 id 相同的情況下按 name 字段比較。