第28節 從庫Seconds_Behind_Master延遲總結

從庫Seconds_Behind_Master延遲總結

到這裡本系列已經接近尾聲了，是時候對常見引起主從延遲的情形進行一個總結了。我想如果我一開始就把這些情形拿出來也許大家對具體的原因不是那麼清楚，但是經過本系列的學習，我相信當我說起這些情形的時候大家都很清楚它的原因了。當然如果還有其他造成延遲的情形也歡迎大家一起讨論。

歡迎關注我的《深入了解MySQL主從原理 32講 》，如下：

一、總結

有了前面的知識我們就能夠從本質上了解造成延遲的可能有哪些，我先來總結一下這些可能，我将其分為兩類：

（1）第一類：

這一類延遲情況可能造成伺服器有較高的負載，可能是CPU/IO的負載。因為從庫在實際執行Event，如果我們伺服器的負載比較高應該考慮這幾種情況，關于如何檢視線程的負載可以參考29節。

• 大事務造成的延遲，其延遲會不會從0開始增加，而是直接從主庫執行了多久開始。比如主庫執行這個事務花費的20秒，要麼延遲就會從20開始，可以自己細心觀察一下很容易看到。這是因為Query Event中沒有準确的執行時間，這個在上一節的計算公式中較長的描述過了 ，可以參考第8節和第27節。
• 大表DDL造成的延遲，其延遲會從0開始增加，因為Query Event記錄了準确的執行時間。這個在上一節的計算公式中也較長的描述過了，可以參考第8節和第27節。
• 表沒有合理的使用主鍵或者唯一鍵造成的延遲。這種情況不要以為設定slave_rows_search_algorithms參數為 INDEX_SCAN,HASH_SCAN就可以完全解決問題，原因我們在第24節進行了描述。
• 由于參數sync_relay_log，sync_master_info，sync_relay_log_info不合理導緻，特别是sync_relay_log會極大的影響從庫的性能。原因我們在第26節進行過描述，因為sync_relay_log設定為1會導緻大量relay log刷盤操作。
• 是否從庫開啟了記錄binary log功能即log_slave_updates參數開啟，如果不是必要可以關閉掉。這種情況我遇到很多次了。

（2）第二類：

這一類延遲情況往往不會造成伺服器有較高的負載。它們要麼沒有實際的執行Event，要麼就是做了特殊的操作造成的。

• 長期未送出的事務可能造成延遲瞬間增加，因為GTID_EVENT和XID_EVENT是送出時間其他Event是指令發起的時間。這個我們在第27節中舉例描述過了。
• Innodb層的行鎖造成的延遲，這種是在從庫有修改操作并且和SQL線程修改的資料有沖突的情況下造成的，因為我們前面23節說過SQL線程執行Event也會開啟事務和擷取行鎖，下面我們進行測試。
• MySQL層的MDL LOCK造成的延遲，這種情況可能是由于SQL線程執行某些DDL操作但是從庫上做了鎖表操作造成，原因我們已經在23節描述過了，下面我們進行測試。
• MTS中不合理的設定參數slave_checkpoint_period參數導緻，這個在第27節已經測試過了。
• 在從庫運作期間手動改大了從庫伺服器時間，這個也在第27節已經測試過了。

二、相關測試

因為上面的延遲情形很多我們都已經測試和講述過了。下面我們測試鎖造成的延遲情形。

（1）Innodb層的行鎖造成的延遲

這個很容測試，我隻要先在從庫做一個事務和SQL線程修改的資料相同即可以出現，大概測試如下：

從庫：

mysql> begin;
Query OK, 0 rows affected (0.00 sec)

mysql> delete from tmpk;
Query OK, 4 rows affected (0.00 sec)
不要送出

主庫執行同樣的語句
mysql> delete from tmpk;
Query OK, 4 rows affected (0.30 sec)           

這個時候你會觀察到延遲如下：

如果檢視sys.innodb_lock_waits能看到如下的結果：

當然如果檢視INNODB_TRX也可以觀察到事務的存在，這裡就不截圖了，大家可以自己試試。

（2）MySQL層的MDL LOCK造成的延遲

這種情況也非常容易測試，我們隻需要開啟一個事務做一個select，然後主庫對同樣的表做DDL就可以出現如下：

從庫：
mysql> begin;
Query OK, 0 rows affected (0.00 sec)

mysql> 
mysql> 
mysql> select * from tkkk limit 1;
+------+------+------+
| a    | b    | c    |
+------+------+------+
|    3 |    3 |  100 |
+------+------+------+
1 row in set (0.00 sec)

不要送出，表上MDL LOCK就不會釋放

主庫執行語句：

mysql> alter table tmpk add testc int ;
Query OK, 0 rows affected (1.14 sec)
Records: 0  Duplicates: 0  Warnings: 0
           

這個時候你将會看到如下的資訊：

我們可以通過state看到這是等待MDL lock擷取而導緻的延遲，關于MDL lock的詳情可以參考我的文章：

http://blog.itpub.net/7728585/viewspace-2143093/

三、總結

通過整個系列，我們應該清楚了Seconds_Behind_Master計算的方法，同時如果出現了延遲，我們首先檢視從庫是否有負載，根據是否有負載進行差別對待，注意這裡的負載一定要使用top -H檢視io/sql/worker線程的負載。我曾不止一次的遇到朋友問我延遲問題，當我問他負載如何的時候他告訴我負載不高啊整體負載也就不到2，這裡我們應該注意的是對于一個線程隻能使用到一個CPU核，雖然整體負載不到2但是可能io/sql/worker線程已經跑滿了，實際上負載已經很高了，我們來看下面的這個截圖就是sql線程負載高的截圖如下：

這個截圖我們發現雖然整體負載不高在1多一點，但是Lwp号20092的線程已經跑滿了，這個線程就是我們的sql線程，這個時候出現延遲是很可能的，這個截圖正是來自一個沒有合理使用主鍵或者唯一鍵造成的延遲的案例，案例如下：

https://www.jianshu.com/p/56e8ca2223a0

我們檢視CPU負載應該使用top -H去檢視，檢視io負載可以使用iotop，iostat等工具。我需要強調一下看MySQL負載的時候我們必須用線程的眼光去看，第29節将讓你獲得這種能力。

到這裡整個系列接近尾聲，大家會發現主從的原理的還是比較複雜的，這可能颠覆了以前我們的認知，以前我們認為主從無非就是搭建起來能跑同時知道有io/sql線程就可以了（這确實很簡單）。整個系列結論很簡單，我們無非就是想配置出安全高效的從庫同時知道延遲是怎麼導緻的，出現延遲後我們如何處理，我自認為本系列還是将這些問題講解得很清楚了。當然如果本系列的原理部分都能夠了解得很好，那麼工作中解決主從問題一定會更加得心應手。

第28節結束