天天看點

mysql優化 加緩存_【性能優化】MySQL緩沖和緩存設定詳解

mysql優化 加緩存_【性能優化】MySQL緩沖和緩存設定詳解

MySQL可調節設定可以應用于整個 mysqld程序,也可以應用于單個客戶機會話。

伺服器端的設定

每個表都可以表示為磁盤上的一個檔案,必須先打開,後讀取。為了加快從檔案中讀取資料的過程,mysqld對這些打開檔案進行了緩存,其最大數目由 /etc/mysqld.conf 中的table_cache 指定。清單 4給出了顯示與打開表有關的活動的方式。

清單 4. 顯示打開表的活動mysql> SHOW STATUS LIKE 'open%tables';

+---------------+-------+

| Variable_name | Value |

+---------------+-------+

| Open_tables  | 5000 |

| Opened_tables | 195  |

+---------------+-------+

2 rows in set (0.00 sec)

清單 4 說明目前有 5,000 個表是打開的,有 195個表需要打開,因為現在緩存中已經沒有可用檔案描述符了(由于統計資訊在前面已經清除了,是以可能會存在 5,000 個打開表中隻有 195個打開記錄的情況)。如果 Opened_tables 随着重新運作SHOW STATUS 指令快速增加,就說明緩存命中率不夠。如果Open_tables 比table_cache設定小很多,就說明該值太大了(不過有空間可以增長總不是什麼壞事)。例如,使用 table_cache =5000 可以調整表的緩存。

與表的緩存類似,對于線程來說也有一個緩存。 mysqld在接收連接配接時會根據需要生成線程。在一個連接配接變化很快的繁忙伺服器上,對線程進行緩存便于以後使用可以加快最初的連接配接。清單 5 顯示如何确定是否緩存了足夠的線程。

清單 5. 顯示線程使用統計資訊mysql> SHOW STATUS LIKE 'threads%';

+-------------------+--------+

| Variable_name   | Value |

+-------------------+--------+

| Threads_cached  | 27   |

| Threads_connected | 15   |

| Threads_created  | 838610 |

| Threads_running  | 3   |

+-------------------+--------+

4 rows in set (0.00 sec)

此處重要的值是 Threads_created,每次mysqld 需要建立一個新線程時,這個值都會增加。如果這個數字在連續執行SHOW STATUS 指令時快速增加,就應該嘗試增大線程緩存。例如,可以在my.cnf 中使用 thread_cache = 40 來實作此目的。

關鍵字緩沖區儲存了 MyISAM 表的索引塊。理想情況下,對于這些塊的請求應該來自于記憶體,而不是來自于磁盤。清單 6顯示了如何确定有多少塊是從磁盤中讀取的,以及有多少塊是從記憶體中讀取的。

清單 6. 确定關鍵字效率mysql> show status like '%key_read%';

+-------------------+-----------+

| Variable_name   | Value   |

+-------------------+-----------+

| Key_read_requests | 163554268 |

| Key_reads     | 98247   |

+-------------------+-----------+

2 rows in set (0.00 sec)

Key_reads代表命中磁盤的請求個數,Key_read_requests是總數。命中磁盤的讀請求數除以讀請求總數就是不中比率 —— 在本例中每 1,000 個請求,大約有 0.6 個沒有命中記憶體。如果每1,000 個請求中命中磁盤的數目超過 1 個,就應該考慮增大關鍵字緩沖區了。例如,key_buffer =384M 會将緩沖區設定為 384MB。

臨時表可以在更進階的查詢中使用,其中資料在進一步進行處理(例如 GROUPBY字句)之前,都必須先儲存到臨時表中;理想情況下,在記憶體中建立臨時表。但是如果臨時表變得太大,就需要寫入磁盤中。清單 7給出了與臨時表建立有關的統計資訊。

清單 7. 确定臨時表的使用mysql> SHOW STATUS LIKE 'created_tmp%';

+-------------------------+-------+

| Variable_name      | Value |

+-------------------------+-------+

| Created_tmp_disk_tables | 30660 |

| Created_tmp_files    | 2   |

| Created_tmp_tables   | 32912 |

+-------------------------+-------+

3 rows in set (0.00 sec)

每次使用臨時表都會增大 Created_tmp_tables;基于磁盤的表也會增大 Created_tmp_disk_tables。對于這個比率,并沒有什麼嚴格的規則,因為這依賴于所涉及的查詢。長時間觀察Created_tmp_disk_tables會顯示所建立的磁盤表的比率,您可以确定設定的效率。 tmp_table_size和 max_heap_table_size都可以控制臨時表的最大大小,是以請確定在 my.cnf 中對這兩個值都進行了設定。

每個會話 的設定

下面這些設定針對于每個會話。在設定這些數字時要十分謹慎,因為它們在乘以可能存在的連接配接數時候,這些選項表示大量的記憶體!您可以通過代碼修改會話中的這些數字,或者在 my.cnf 中為所有會話修改這些設定。

當 MySQL必須要進行排序時,就會在從磁盤上讀取資料時配置設定一個排序緩沖區來存放這些資料行。如果要排序的資料太大,那麼資料就必須儲存到磁盤上的臨時檔案中,并再次進行排序。如果 sort_merge_passes狀态變量很大,這就訓示了磁盤的活動情況。清單 8 給出了一些與排序相關的狀态計數器資訊。

清單 8. 顯示排序統計資訊mysql> SHOW STATUS LIKE "sort%";

+-------------------+---------+

| Variable_name   | Value  |

+-------------------+---------+

| Sort_merge_passes | 1    |

| Sort_range    | 79192  |

| Sort_rows     | 2066532 |

| Sort_scan     | 44006  |

+-------------------+---------+

4 rows in set (0.00 sec)

如果 sort_merge_passes 很大,就表示需要注意sort_buffer_size。例如,sort_buffer_size = 4M 将排序緩沖區設定為 4MB。

MySQL也會配置設定一些記憶體來讀取表。理想情況下,索引提供了足夠多的資訊,可以隻讀入所需要的行,但是有時候查詢(設計不佳或資料本性使然)需要讀取表中大量資料。要了解這種行為,需要知道運作了多少個 SELECT語句,以及需要讀取表中的下一行資料的次數(而不是通過索引直接通路)。實作這種功能的指令如清單 9 所示。

清單 9. 确定表掃描比率mysql> SHOW STATUS LIKE "com_select";

+---------------+--------+

| Variable_name | Value |

+---------------+--------+

| Com_select  | 318243 |

+---------------+--------+

1 row in set (0.00 sec)

mysql> SHOW STATUS LIKE "handler_read_rnd_next";

+-----------------------+-----------+

| Variable_name     | Value   |

+-----------------------+-----------+

| Handler_read_rnd_next | 165959471 |

+-----------------------+-----------+

1 row in set (0.00 sec)

Handler_read_rnd_next /Com_select得出了表掃描比率 —— 在本例中是 521:1。如果該值超過4000,就應該檢視 read_buffer_size,例如read_buffer_size = 4M。如果這個數字超過了8M,就應該與開發人員讨論一下對這些查詢進行調優了!

檢視資料庫緩存配置情況mysql> SHOW VARIABLES LIKE ‘%query_cache%';

+——————————+———+

| Variable_name      |Value |

+——————————+———+

| have_query_cache   | YES | –查詢緩存是否可用

| query_cache_limit | 1048576 | –可緩存具體查詢結果的最大值

| query_cache_min_res_unit | 4096 |

| query_cache_size | 599040 | –查詢緩存的大小

| query_cache_type | ON | –阻止或是支援查詢緩存

| query_cache_wlock_invalidate | OFF |

+——————————+———+

配置方法:

在MYSQL的配置檔案my.ini或my.cnf中找到如下内容:# Query cache is used to cache SELECT results and later returnthem

# without actual executing the same query once again. Having thequery

# cache enabled may result in significant speed improvements, ifyour

# have a lot of identical queries and rarely changing tables.See the

# "Qcache_lowmem_prunes" status variable to check if the currentvalue

# is high enough for your load.

# Note: In case your tables change very often or if your queriesare

# textually different every time, the query cache may result ina

# slowdown instead of a performance improvement.

query_cache_size=0

以上資訊是預設配置,其注釋意思是說,MYSQL的查詢緩存用于緩存select查詢結果,并在下次接收到同樣的查詢請求時,不再執行實際查詢處理而直接傳回結果,有這樣的查詢緩存能提高查詢的速度,使查詢性能得到優化,前提條件是你有大量的相同或相似的查詢,而很少改變表裡的資料,否則沒有必要使用此功能。可以通過Qcache_lowmem_prunes變量的值來檢查是否目前的值滿足你目前系統的負載。注意:如果你查詢的表更新比較頻繁,而且很少有相同的查詢,最好不要使用查詢緩存。

具體配置方法:

1. 将query_cache_size設定為具體的大小,具體大小是多少取決于查詢的實際情況,但最好設定為1024的倍數,參考值32M。

2. 增加一行:query_cache_type=1

query_cache_type參數用于控制緩存的類型,注意這個值不能随便設定,必須設定為數字,可選項目以及說明如下:

如果設定為0,那麼可以說,你的緩存根本就沒有用,相當于禁用了。但是這種情況下query_cache_size設定的大小系統是否要為其配置設定呢,這個問題有待于測試?

如果設定為1,将會緩存所有的結果,除非你的select語句使用SQL_NO_CACHE禁用了查詢緩存。

如果設定為2,則隻緩存在select語句中通過SQL_CACHE指定需要緩存的查詢。

OK,配置完後的部分檔案如下:query_cache_size=128M

query_cache_type=1

儲存檔案,重新啟動MYSQL服務,然後通過如下查詢來驗證是否真正開啟了:mysql> show variables like '%query_cache%';

+——————————+———–+

| Variable_name      |Value  |

+——————————+———–+

| have_query_cache     |YES   |

| query_cache_limit     |1048576  |

| query_cache_min_res_unit  |4096   |

| query_cache_size     | 134217728|

| query_cache_type     |ON    |

| query_cache_wlock_invalidate | OFF   |

+——————————+———–+

6 rows in set (0.00 sec)

主要看query_cache_size和query_cache_type的值是否跟我們設的一緻:

這裡query_cache_size的值是134217728,我們設定的是128M,實際是一樣的,隻是機關不同,可以自己換算下:134217728 = 128*1024*1024。

query_cache_type設定為1,顯示為ON,這個前面已經說過了。

總之,看到上邊的顯示表示設定正确,但是在實際的查詢中是否能夠緩存查詢,還需要手動測試下,我們可以通過show statuslike '%Qcache%';語句來測試,現在我們開啟了查詢緩存功能,在執行查詢前,我們先看看相關參數的值:mysql> show status like '%Qcache%';

+————————-+———–+

| Variable_name    |Value  |

+————————-+———–+

| Qcache_free_blocks   |1    |

| Qcache_free_memory   | 134208800|

| Qcache_hits     |0    |

所屬版塊:MySQL